Bài báo “Integrating Semantic Information into Sketchy Reading Module of Retro-Reader for Vietnamese Machine Reading Comprehension” được chấp nhận đăng tại Hội nghị NICS 2022. Bài báo do sinh viên Lê Thị Thu Hằng – 18520274 và Hồ Việt Đức – 18520610 thực hiện dưới sự hướng dẫn của ThS. Nguyễn Đức Vũ và TS. Nguyễn Lưu Thùy Ngân
Tóm tắt bài báo:
Trong những năm gần đây, Đọc hiểu tự động (Machine Reading Comprehension) là một trong những chủ đề nghiên cứu tiên tiến và phổ biến nhất trong xử lý ngôn ngữ tự nhiên. Việc phân loại khả năng trả lời của câu hỏi là một nhiệm phụ tương đối quan trọng trong Đọc hiểu tự động, tuy nhiên chưa có nhiều nghiên cứu tập trung vào điều này. Trong nghiên cứu này, chúng tôi tập trung vào cải thiện việc phân loại khả năng trả lời của câu hỏi trong Đọc hiểu tự động tiếng Việt. Chúng tôi nhận thấy rằng mô hình Trình đọc hồi tưởng (Retro-Reader) là một trong những nghiên cứu đã giải quyết tốt nhiệm vụ phân loại khả năng trả lời, tuy nhiên bộ mã hóa của các mô hình Đọc hiểu tự động truyền thống nói chung và Trình đọc hồi tưởng chưa thể khai thác hết các thông tin câu văn đem lại. Lấy ý tưởng từ mô hình SemBERT (BERT tích hợp thông tin ngữ nghĩa), chúng tôi đã sử dụng các nhãn vai nghĩa từ nhiệm vụ SRL để bổ sung ngữ nghĩa cho các mô hình ngôn ngữ đào tạo trước như mBERT, XLM-R, ... với hy vọng có thể cải thiện bộ mã hóa cho mô đun phân loại (Sketchy Reading Module) trong mô hình Trình đọc hồi tưởng. Mô hình cải tiến Trình đọc hồi tưởng với ngữ nghĩa của chúng tôi đã lần đầu tiên được áp dụng cho nhiệm vụ Đọc hiểu tự động tiếng Việt và thu được kết quả khả quan so với mô hình gốc và các mô hình học sâu hiện tại.
Lời cuối, chúng tôi xin gửi lời cảm ơn đến Thầy Nguyễn Đức Vũ và cô Nguyễn Lưu Thùy Ngân đã đồng hành và giúp đỡ chúng tôi trong nghiên cứu lần này.
Được biết sinh viên Lê Thị Thu Hằng là cựu học sinh trường THPT Lê Quý Đôn, Tam Kỳ, Quảng Nam , sinh viên Hồ Việt Đức là cựu học sinh Trường THPT Trường Chinh
NAFOSTED Conference on Information and Computer Science (NICS) là Hội nghị Quốc tế lĩnh vực Điện tử, Thông tin, Khoa học Máy tính và các lĩnh vực liên quan được bảo trợ bởi IEEE, IEEE Vietnam và được tổ chức hằng năm bởi Quỹ Phát triển Khoa học và Công nghệ Quốc gia (NAFOSTED) của Việt Nam. Hội nghị được tổ chức nhằm mục đích xây dựng một diễn đàn quốc tế bền vững, sáng tạo và thuận lợi dành cho các nhà nghiên cứu trình bày và thảo luận về những ý tưởng sáng tạo, tiến bộ trong những năm gần đây và định hướng tương lai trong việc giải quyết các thách thức trong lĩnh vực Điện tử, Thông tin, Khoa học Máy tính và các lĩnh vực liên quan.
Thông tin chi tiết: https://www.facebook.com/UIT.Fanpage/posts/pfbid0u2QVf6o5L8PzLjNZ7qG577ayX9Xy4Y1Jyc6puKA6EPuk8M1mVvhXgHfnSKMhjPdTl
Hải Băng - Cộng tác viên Truyền thông trường Đại học Công nghệ Thông tin
