tailieunhanh - Một tiếp cận tìm kiếm ảnh theo ngữ nghĩa dựa trên mạng nơ ron tích chập và Ontology

Trích xuất ngữ nghĩa cho hình ảnh là một bài toán mang tính thời sự và được ứng dụng trong nhiều hệ thống tra cứu ngữ nghĩa khác nhau. Trong bài viết này, một tiếp cận tra cứu ngữ nghĩa hình ảnh được đề xuất dựa trên tập ảnh tương tự với ảnh đầu vào; từ đó, ngữ nghĩa của hình ảnh được tra cứu trên ontology qua tập từ vựng thị giác. Các đối tượng trên mỗi hình ảnh được trích xuất và phân lớp dựa trên mạng nơ-ron tích chập nhằm trích xuất ngữ nghĩa cho hình ảnh. | TẠP CHÍ KHOA HỌC HO CHI MINH CITY UNIVERSITY OF EDUCATION TRƯỜNG ĐẠI HỌC SƯ PHẠM TP HỒ CHÍ MINH JOURNAL OF SCIENCE Tập 19 Số 3 2022 411-422 Vol. 19 No. 3 2022 411-422 ISSN Website http https 2022 2734-9918 Bài báo nghiên cứu MỘT TIẾP CẬN TÌM KIẾM ẢNH THEO NGỮ NGHĨA DỰA TRÊN MẠNG NƠ-RON TÍCH CHẬP VÀ ONTOLOGY Nguyễn Minh Hải1 Trần Văn Lăng2 Văn Thế Thành2 Trường Đại học Sư phạm Thành phố Hồ Chí Minh Việt Nam 1 Trường Đại học Ngoại Ngữ - Tin học Thành phố Hồ Chí Minh Việt Nam 2 Tác giả liên hệ Nguyễn Minh Hải Email hainm@ Ngày nhận bài 13-9-2021 ngày nhận bài sửa 14-01-2022 ngày duyệt đăng 13-3-2022 TÓM TẮT Trích xuất ngữ nghĩa cho hình ảnh là một bài toán mang tính thời sự và được ứng dụng trong nhiều hệ thống tra cứu ngữ nghĩa khác nhau. Trong bài báo này một tiếp cận tra cứu ngữ nghĩa hình ảnh được đề xuất dựa trên tập ảnh tương tự với ảnh đầu vào từ đó ngữ nghĩa của hình ảnh được tra cứu trên ontology qua tập từ vựng thị giác. Các đối tượng trên mỗi hình ảnh được trích xuất và phân lớp dựa trên mạng nơ-ron tích chập nhằm trích xuất ngữ nghĩa cho hình ảnh. Sau đó câu lệnh SPARQL được tự động tạo ra từ các phân lớp ảnh và thực hiện truy vấn trên ontology đã được xây dựng nhằm truy xuất tập ảnh tương tự và ngữ nghĩa tương ứng. Trên cơ sở phương pháp đã đề xuất một thực nghiệm được xây dựng và đánh giá trên các bộ ảnh Caltech-256. Kết quả thực nghiệm được so sánh với các công trình công bố gần đây trên cùng một bộ dữ liệu nhằm minh chứng tính hiệu quả của phương pháp đề xuất. Theo kết quả thực nghiệm phương pháp tra cứu ngữ nghĩa hình ảnh trong bài báo này đã nâng độ chính xác lên 88 7 đối với bộ dữ liệu ảnh Caltech-256. Từ khóa phân lớp ảnh mạng nơ-ron tích chập truy vấn ảnh dựa trên ngữ nghĩa ontology 1. Giới thiệu Ngày nay với sự phát triển vượt bậc trong việc sử dụng Internet và các thiết bị mobile số lượng hình ảnh kĩ thuật số đã tăng lên rất nhiều. Do đó để quản lí và tìm kiếm chính xác hình .