HƯỚNG DẪN AI về ngôn ngữ

Độ phân giải tham chiếu

Giải pháp đồng tham chiếu là nhiệm vụ tìm ra thời điểm các từ khác nhau trong văn bản đề cập đến cùng một điều, chẳng hạn như liên kết "cô ấy" hoặc "CEO" lại với "Maria". Làm đúng điều này là điều cần thiết để máy móc thực sự hiểu được đoạn văn đang nói về ai và nội dung gì.

Đọc trong 2 phútCập nhật lần cuối

Lặn sâu

Ngôn ngữ của con người có đầy đủ các phím tắt. Chúng ta giới thiệu ai đó bằng tên, sau đó gọi họ là “anh ấy”, “cô ấy”, “họ”, “bác sĩ” hoặc “người phụ nữ đó” trong suốt cuộc trò chuyện. Độ phân giải tham chiếu là nhiệm vụ NLP nhóm tất cả các đề cập này trỏ đến cùng một thực thể trong thế giới thực thành các cụm. Nó bao gồm các đại từ phân giải (được gọi là anaphora), cũng như liên kết các cụm danh từ khác nhau mô tả một thực thể. Điều này quan trọng vì các hệ thống hạ nguồn, như trả lời câu hỏi, tóm tắt và dịch thuật, sẽ đưa ra kết quả sai nếu chúng không thể biết rằng "nó" đề cập đến công ty chứ không phải sản phẩm. Trường hợp khó khăn cổ điển là lược đồ Winograd, trong đó một từ duy nhất có nghĩa: trong "Chiếc cúp không vừa trong vali vì nó quá lớn", việc quyết định xem "nó" là chiếc cúp hay chiếc vali đòi hỏi phải có lý luận thực tế chứ không chỉ ngữ pháp.

Hiểu biết kỹ thuật

Hệ thống đồng tham chiếu trước tiên phát hiện những đề cập của ứng viên (tên, cụm danh từ, đại từ), sau đó quyết định những đề cập nào được đồng giới thiệu. Các mô hình thần kinh có ảnh hưởng, chẳng hạn như các phương pháp xếp hạng theo khoảng từ đầu đến cuối, tính điểm các cặp khoảng văn bản và liên kết từng đề cập với đề cập trước đó có nhiều khả năng xảy ra nhất, tạo thành các cụm. Các tính năng bao gồm khoảng cách giữa các đề cập, sự thống nhất về giới tính và số lượng cũng như các phần nhúng theo ngữ cảnh từ các mô hình biến áp để nắm bắt ý nghĩa. Thử thách lược đồ Winograd nêu bật lý do tại sao riêng ngữ pháp lại thất bại: một số liên kết đòi hỏi kiến thức thế giới, chẳng hạn như biết những điều lớn lao không vừa với những thùng chứa nhỏ hơn.

Tác động chiến lược

Tốc độ và tỷ lệ

Quy trình công việc ngôn ngữ có thể di chuyển nhanh hơn mà không làm mất tính nhất quán.

Truy cập và tiếp cận

Nó mở rộng quyền truy cập vào các ngôn ngữ và phong cách giao tiếp.

Quyết định rõ ràng hơn

Các nhóm có thể dành nhiều thời gian hơn để đánh giá trong khi quá trình tự động hóa xử lý sự lặp lại.

Tương lai của độ phân giải Coreference

Các mô hình ngôn ngữ lớn hiện nay xử lý ngầm nhiều quy chiếu tham chiếu, phân giải các đại từ như một sản phẩm phụ của ngữ cảnh đọc, điều này đã làm mờ ranh giới giữa quy chiếu tham chiếu như một nhiệm vụ độc lập và là một phần của sự hiểu biết chung. Nghiên cứu đang hướng tới các trường hợp khó hơn: tài liệu dài, đối thoại kéo dài nhiều lượt, tham chiếu tài liệu chéo (cùng một người trong nhiều bài viết) và cài đặt đa ngôn ngữ trong đó các quy tắc đại từ khác nhau. Mong đợi tham chiếu cốt lõi vẫn là một chẩn đoán hữu ích về khả năng hiểu và lý luận thực sự, đồng thời là một thành phần thầm lặng nhưng quan trọng trong việc tóm tắt, tìm kiếm và xây dựng biểu đồ tri thức một cách chính xác.

Triển khai trong thế giới thực

Một người tóm tắt theo dõi chính xác rằng "thượng nghị sĩ", "bà" và "Ms. Lee" là cùng một người nên bản tóm tắt vẫn chính xác

Một hệ thống dịch máy chọn đúng đại từ giới tính bằng cách quyết định 'họ' đề cập đến ai ở đầu câu

Một hệ thống trả lời câu hỏi liên kết "công ty" và "nó" trở lại đúng công ty để trả lời chính xác truy vấn

Xây dựng biểu đồ tri thức từ các bài báo bằng cách hợp nhất các đề cập như “Apple”, “gã khổng lồ công nghệ” và “nhà sản xuất iPhone” thành một thực thể

Rủi ro & lan can

Sự thật ảo giác có thể lặng lẽ đi vào báo cáo, luồng hỗ trợ hoặc kết quả nghiên cứu.

Sự nhạy cảm kịp thời có thể tạo ra kết quả không nhất quán đối với các yêu cầu tương tự.

Dữ liệu văn bản nhạy cảm có thể bị lộ nếu khả năng kiểm soát quyền truy cập yếu.

Lộ trình thực hiện

1

Xác định định dạng đầu ra, âm thanh và tiêu chuẩn chất lượng trước khi triển khai.

2

Phản hồi mặt đất với các nguồn đáng tin cậy bất cứ khi nào độ chính xác quan trọng.

3

Duy trì điểm kiểm tra đánh giá của con người đối với các kết quả đầu ra có mức độ rủi ro cao.

4

Theo dõi các kiểu lỗi và đào tạo lại các lời nhắc hoặc quy trình làm việc thường xuyên.

Tiếp tục khám phá

Free newsletter

Get the daily AI briefing

Three verified AI stories every weekday morning, written in plain English. Free forever, no ads.

One email each weekday. Unsubscribe in one click. We never sell or share your address.

Test yourself

Take the Coreference Resolution quiz

Instant feedback on every answer, and a shareable certificate with a verifiable ID once you pass a course.

Bắt đầu bài kiểm tra

Support free AI education. AI Understanding is a 501(c)(3) nonprofit — no ads, no paywall, ever. Make a donation

Hướng dẫn tiếp theo

Độ phân giải LaMa-Inpainting mạnh mẽ

Câu hỏi thường gặp

Giải quyết Tham chiếu là gì?

Giải pháp đồng tham chiếu là nhiệm vụ tìm ra thời điểm các từ khác nhau trong văn bản đề cập đến cùng một điều, chẳng hạn như liên kết "cô ấy" hoặc "CEO" lại với "Maria". Làm đúng điều này là điều cần thiết để máy móc thực sự hiểu được đoạn văn đang nói về ai và nội dung gì.

Độ phân giải coreference là gì?

Các nhóm phân giải tham chiếu đề cập đến, chẳng hạn như tên, mô tả và đại từ, tất cả đều trỏ đến cùng một thực thể trong thế giới thực trong một cụm.

Trong câu “Maria gọi điện cho chị gái vì nhớ chị ấy”, việc giải quyết đại từ “she” là ví dụ về điều gì?

Liên kết một đại từ trở lại danh từ mà nó đề cập đến được gọi là độ phân giải anaphora, một phần cốt lõi của độ phân giải coreference.

Tại sao câu “Chiếc cúp không vừa trong vali vì nó quá lớn” lại là một chiếc hộp cứng cổ điển (lược đồ Winograd)?

Cả 'cúp' và 'vali' đều là tiền thân có giá trị về mặt ngữ pháp cho 'nó'; Lựa chọn đúng đòi hỏi phải biết rằng một thứ quá lớn sẽ không vừa, đó là kiến ​​thức thế giới.

Tại sao độ phân giải tham chiếu lại quan trọng đối với các nhiệm vụ như tóm tắt và trả lời câu hỏi?

Nếu một hệ thống không thể nói rằng 'nó' có nghĩa là công ty chứ không phải sản phẩm, thì các câu trả lời và tóm tắt tiếp theo có thể sai về mặt thực tế.

Các mô hình lõi quy chiếu thần kinh hiện đại thường hoạt động như thế nào ở mức cao?

Các mô hình thần kinh xếp hạng theo phạm vi xác định các đề cập ứng cử viên và sau đó liên kết từng đề cập với đề cập có khả năng xảy ra trước đó nhất, xây dựng các cụm đề cập đồng giới thiệu.