DISHMERGE: XÁC ĐỊNH ẨM THỰC VIỆT VỚI ĐA PHƯƠNG THỨC VÀ TRỘN NIỀM TIN

Abstract

Nghiên cứu đề xuất hệ thống xác định món ăn đặc sản Việt Nam dựa trên các thành phần nguyên liệu, có khả năng nhận dạng với đa phương thức (hình ảnh và văn bản) và lý thuyết trộn niềm tin. Các mô hình phát hiện đối tượng được huấn luyện để nhận diện các thành phần nguyên liệu có trong hình ảnh món ăn. Tập hợp nguyên liệu được phát hiện cung cấp đầu vào cho thuật toán D2D – một công thức tính khoảng cách do chúng tôi đề xuất để xác định món ăn. Kết quả tính khoảng cách từ các mô hình phát hiện đối tượng được kết hợp dựa trên lý thuyết ra quyết định là trộn niềm tin, nhằm nâng cao độ chính xác của hệ thống. Ngoài ra, hệ thống còn hỗ trợ nhận dạng món ăn từ văn bản, sử dụng đo lường độ tương đồng về ngữ nghĩa với công thức cosine để xác định món ăn đặc sản. Chúng tôi đã triển khai hệ thống thành một website, giúp khám phá ẩm thực Việt Nam và nhận dạng món ăn đặc sản thông qua hai phương thức: hình ảnh và văn bản. Hệ thống góp phần bảo tồn giá trị văn hóa ẩm thực và thúc đẩy quảng bá ẩm thực Việt Nam đến với cộng đồng quốc tế.