Multomodal deep learning - ETRI 업무
in Deep Learning on Multimodal
멀티모달 딥러닝에 대한 조사 및 공부.
Multimodal Machine Learning: A Survey and Taxonomy 논문 세미나 발표
CMU(Carnegie Mellon University) Louis-Philippe Morency 교수님의 강의 듣기 https://cmu-multicomp-lab.github.io/mmml-course/fall2020/
업무
- 멀티모달 논문 읽기/정리
- 세미나 준비
- 연구제안서 작성
- 기술/특허 동향 조사
1주차
- 멀티모달 논문 읽기
- 세미나 준비
궁금한거 정리
1) 멀티모달과 멀티뷰의 차이
- 멀티 모달은 다양한 감각 기관을 통해 관찰되는 특징으로, 본 연구에서는 멀티 뷰의 하위 개념으로 사용하였다 (Lahat 등, 2015).
- 출처 = Multi-view learning review: understanding methods and their application
2) 멀티 모달 검색??
3) intermediate semantic space? unimodal? Joint? coordinated? coordinated space? cross-modal hashing ?
2주차
- 기술/특허 동향 조사
- 연구제안서 작성