Bài báo:
When Events Speak: MLLM-Guided Video Retrieval with Temporal Reranking
Nhóm tác giả:
• Nguyễn Minh Chính – TTNT 2024 – Tác giả chính
• Trần Ngọc Long – KHMT 2024 – Đồng tác giả
• Lê Hoàng Hiển Long – TTNT 2024 – Đồng tác giả
• Trần Mẫn Khôi – TTNT 2024 – Đồng tác giả
Giảng viên hướng dẫn:
• Trần Doãn Thuyên
Tóm tắt:
We present WESp (When Events Speak), an event-aware multimodal video retrieval system that goes beyond frame-based search by understanding what happens, when it happens, and how events unfold over time. By combining MLLM-based event capturing, multimodal signals (visual, audio, OCR, ASR, and object cues), and a temporal reranking mechanism, WESp retrieves coherent event sequences instead of isolated frames, effectively capturing short-lived and dynamic actions.
Evaluated at the Ho Chi Minh City AI Challenge 2025, our system (team LunchRetrieval) achieved 85 out of 88 correct answers with over 95% accuracy, demonstrating strong robustness and effectiveness in complex, real-world video retrieval tasks.
"Chúng em xin gửi lời cảm ơn chân thành đến anh Trần Gia Bảo, anh Trần Doãn Thuyên, cùng các thầy và các anh trong Câu lạc bộ AI – Khoa Khoa học Máy tính đã tận tình hỗ trợ, góp ý chuyên môn và đồng hành cùng chúng em trong suốt quá trình nghiên cứu, chỉnh sửa và hoàn thiện bài báo. Những chia sẻ quý báu về học thuật, kinh nghiệm nghiên cứu cũng như sự động viên kịp thời của các anh và các thầy là nguồn động lực to lớn, giúp chúng em nâng cao chất lượng nội dung và hoàn thiện công trình một cách tốt nhất."
SOICT 2025 là hội nghị khoa học quốc tế uy tín, bao phủ các lĩnh vực AI Foundations và Big Data, Networking and Communication Technologies, Multimedia Processing, AI Applications, Generative AI, Applied Operations Research and Optimization và Recent Advances in Cyber Security.
Hội nghị lần thứ 14 sẽ được tổ chức tại TP. Nha Trang từ ngày 12–14/12/2025. Kỷ yếu SOICT 2025 được xuất bản trong Springer CCIS và được lập chỉ mục bởi DBLP, Google Scholar, EI-Compendex, Mathematical Reviews, SCImago, Scopus và gửi xét duyệt vào ISI Proceedings.
Thông tin xem tại: https://www.facebook.com/share/p/1AJdvs47Lo/
