열화상 감정 인식 데이터 부족

→감정 인식 only/열화상 데이터 only로 방향 변경

근데 열화상 데이터가 너무 적어서 그냥 감정 인식 only가 나을듯

IRIS 사람 32명 표정 3종류(놀람/웃음/화남) 7천장 너무 적다

대안 1. RGB 데이터와 열화상 데이터를 gradcam에 넣어서, 모델이 중요시 여기는 feature를 분석해본다. 이 분석 결과에 따라 향후 모델을 고안해본다. (두 데이터의 baseline은 통일.) (RGB 데이터를 gray-scale화 하여 얻은 데이터의 결과와 비교해본다.)

대안 2. RGB 데이터로 제시된 감정 맞추기 application.

대안 3. 이미지+음성 감정 인식

드라마 감정 인식

대안 4. RGB에서 THEMAL로 transfer

style만 바꿔도 (온도 정보 없이) 성능이 좋아질까?

탈락