Chú thích ảnh dựa vào việc khai thác mối quan hệ giữa các đối tượng trong ảnh
Tạp chí Khoa học HUFLIT · 27.10.2025 · 9 (3) · 25
DOI: 10.71091/2354-113x/273 ↗Kurz gefasst
Fachartikel in der Zeitschrift Tạp chí Khoa học HUFLIT, online erschienen am 27.10.2025. Verfasst von Thịnh Nguyễn Văn und 5 weiteren Autor:innen.
Abstract (Originalsprache)
Bài toán chú thích ảnh tự động đóng vai trò quan trọng trong việc kết nối thông tin thị giác với ngôn ngữ tự nhiên. Tuy nhiên, nhiều mô hình hiện nay vẫn còn hạn chế trong việc biểu diễn đầy đủ ngữ nghĩa do chưa khai thác hiệu quả các mối quan hệ giữa đối tượng trong ảnh. Bài báo này đề xuất một mô hình mới kết hợp đặc trưng vùng đối tượng với thông tin quan hệ được biểu diễn thông qua đồ thị cảnh. Cụ thể, chúng tôi sử dụng RelTR để phát hiện bộ ba quan hệ và Graph Transformer để ánh xạ đồ thị thành véc-tơ ngữ nghĩa. Biểu diễn tích hợp sau đó được đưa vào bộ giải mã LSTM nhằm sinh ra chuỗi mô tả ảnh chính xác và giàu thông tin. Kết quả thực nghiệm trên MS COCO và Flickr30K cho thấy phương pháp đề xuất đạt hiệu suất vượt trội so với nhiều nghiên cứu gần đây, qua các độ đo BLEU, METEOR và CIDEr. Nghiên cứu này góp phần khẳng định tiềm năng của việc tích hợp thông tin quan hệ vào mô hình chú thích ảnh, hướng đến nâng cao độ chính xác và khả năng diễn đạt trong mô tả sinh ra.
Zitieren
APA
Văn, T. N., Khánh, Đ. Đ. H., Quỳnh, N. B. N., Quốc, L. T., Văn, K. L., & Tú, Q. T. (2025). Chú thích ảnh dựa vào việc khai thác mối quan hệ giữa các đối tượng trong ảnh. Tạp chí Khoa học HUFLIT, 9(3), 25. https://doi.org/10.71091/2354-113x/273
Vancouver
Văn TN, Khánh ĐĐH, Quỳnh NBN, Quốc LT, Văn KL, Tú QT. Chú thích ảnh dựa vào việc khai thác mối quan hệ giữa các đối tượng trong ảnh. Tạp chí Khoa học HUFLIT. 2025;9(3):25. doi:10.71091/2354-113x/273
BibTeX
@article{Vn2025,
author = {Văn, Thịnh Nguyễn and Khánh, Đoan Đàng Huỳnh and Quỳnh, Như Bùi Nguyễn and Quốc, Long Trần and Văn, Khánh Lê and Tú, Quyên Trần},
title = {Chú thích ảnh dựa vào việc khai thác mối quan hệ giữa các đối tượng trong ảnh},
journal = {Tạp chí Khoa học HUFLIT},
year = {2025},
volume = {9},
number = {3},
pages = {25},
doi = {10.71091/2354-113x/273}
}
EUVIMED