[Paper Review] Relational Distant Supervision for Image Captioning without Image-Text Pairs

Описание к видео [Paper Review] Relational Distant Supervision for Image Captioning without Image-Text Pairs

발표자: 석사과정 마민정([email protected])

1. 논문 제목
Relational Distant Supervision for Image Captioning without Image-Text Pairs

2. 링크
https://ojs.aaai.org/index.php/AAAI/a...

3. Overview
대규모의 이미지-문장 데이터에 대한 의존성을 완화하는 Unsupervised Image Captioning을 위한 Relational Distant Supervision 제시
외부 Sentence Corpus에서 추출한 지식을 이미지에 전달함으로써 Semantic Gap이 적은 Pseudo 이미지-문장 쌍 구축
방법론은 세 가지 모듈로 구성
1. Relationship Learning Module: 이미지와 객체 레이블을 입력으로 받아 객체 관계 추론
2. Relationship-to-Sentence Module: 객체 관계를 입력으로 받아 문장으로 변환
3. Image Captioning Module: 이미지를 입력으로 받아 캡션 생성

4. Keyword : #UnsupervisedImageCaptioning #VisionLanguage #DistantSupervision

5. 발표자료: https://drive.google.com/file/d/1UEcs...

Комментарии

Информация по комментариям в разработке

Похожие видео