Bài giảng Xử lý ngôn ngữ tự nhiên: Chương 4 - Hoàng Anh Việt

Tài liệu này trình bày về bài toán phân tích cú pháp tiếng Việt, một vấn đề quan trọng trong xử lý ngôn ngữ tự nhiên. Giới thiệu mô hình khử nhập nhằng PCFG (Probabilistic Context-Free Grammar) và trình bày kết quả kiểm thử mô hình này.

Nghiên cứu sinh, sinh viên chuyên ngành ngôn ngữ học tính toán, và các nhà nghiên cứu quan tâm đến xử lý ngôn ngữ tự nhiên tiếng Việt.

Tài liệu này tập trung vào việc giải quyết bài toán phân tích cú pháp tiếng Việt, đặc biệt là vấn đề nhập nhằng.

1. **Bài toán phân tích cú pháp**: Trình bày định nghĩa và vai trò quan trọng của phân tích cú pháp trong xử lý ngôn ngữ tự nhiên, đồng thời nêu ra những khó khăn như số lượng mẫu lớn, luật văn phạm phức tạp, và vấn đề nhập nhằng.
2. **Quy trình phân tích cú pháp cơ bản**: Mô tả quy trình phân tích cú pháp, nhấn mạnh sự phức tạp và tốn kém thời gian, công sức khi xây dựng văn phạm thủ công.
3. **Mô hình PCFG**: Giới thiệu mô hình PCFG như một giải pháp để giải quyết nhập nhằng mức luật. Định nghĩa PCFG, các giả định liên quan, và cách tính xác suất của một cây phân tích.
4. **Xây dựng PCFG**: Trình bày phương pháp xây dựng PCFG từ TreeBank, bao gồm việc đếm số lần xuất hiện của mỗi luật và tính xác suất.
5. **Thử nghiệm và đánh giá**: Mô tả quá trình thử nghiệm mô hình trên tập mẫu câu chuẩn và so sánh hiệu năng với các phương pháp khác, đồng thời đánh giá bộ luật PCFG thu được.