Full metadata record
DC Field | Value | Language |
---|---|---|
dc.contributor.author | 최용석 | - |
dc.date.accessioned | 2022-03-23T06:54:32Z | - |
dc.date.available | 2022-03-23T06:54:32Z | - |
dc.date.issued | 2020-07 | - |
dc.identifier.citation | 2020년 한국컴퓨터종합학술대회 논문집, page. 515-517 | en_US |
dc.identifier.issn | 2466-0825 | - |
dc.identifier.uri | https://www.dbpia.co.kr/journal/articleDetail?nodeId=NODE09874489 | - |
dc.identifier.uri | https://repository.hanyang.ac.kr/handle/20.500.11754/169358 | - |
dc.description.abstract | 피사체의 시선 추적(Gaze Following)은 단일 이미지에서 피사체의 시선이 응시하는 지점을 탐지한다. 딥러닝 기반의 기존 연구는 단순히 시선의 각도를 추정하거나, 스마 트폰과 같은 기기 스크린 내부의 응시점을 추정하므로 어떤 물체를 보는지에 대한 정보를 얻을 수 없다는 한계가 있다. 본 논문에서는 최초로 딥러닝 모 델을 활용하여 피사체의 시선을 추적하고 ‘J가 넥타이를 본다.'와 같이 자동으로 캡션을 생성하는 시스템을 제안한다. 시스템은 전처리 모 듈, 시선 추적 모 듈, 후처리 모 듈로 구성되며 , 전처리 모 듈에서 인물을 인식하고 딥러닝 모 델의 입력을 생성한다. 시선 추적 모 듈에서는 약 12만 장의 GazeFollow 데이터 세트로 학습한 모 델을 활용해서 시선의 응시 지점이 표시된 히트맵 (heatmap)을 생성한다. 후처리 모듈에서는 우리 가 제안하는 객체 선택 알고리 즘에 의해 응시 지점에 있는 물체를 판별하고 캡션을 생성한다.제안된 시스템은 리 테일링 및 학술 목 적의 대규모 메 타데이터를 효율적으로 생성하는 데 활용될 수 있다. | en_US |
dc.description.sponsorship | 본 연구는 과학기술정보통신부 및 정보통신기획평가원의 대 학ICT연구센터지원사업의 연구결과로 수행되었으며 (IITP-20 17-0-01642), 정부(과학기술정보통신부)의 재원으로 한국연 구재단의 지원을 받아 수행된 연구임 (No.2020R1A2C1014037). | en_US |
dc.language.iso | ko_KR | en_US |
dc.publisher | 한국정보과학회 | en_US |
dc.title | 딥러닝 기반 피사체 시선 추적을 통한 캡션 생성 시스템 | en_US |
dc.title.alternative | Caption Generation System with Gaze Following | en_US |
dc.type | Article | en_US |
dc.relation.page | 515-517 | - |
dc.contributor.googleauthor | 정지은 | - |
dc.contributor.googleauthor | 최용석 | - |
dc.contributor.googleauthor | Jeong, Ji-Eun | - |
dc.contributor.googleauthor | Choi, Yong-Suk | - |
dc.sector.campus | S | - |
dc.sector.daehak | COLLEGE OF ENGINEERING[S] | - |
dc.sector.department | SCHOOL OF COMPUTER SCIENCE | - |
dc.identifier.pid | cys | - |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.