제9세부 (심성현): 아동생활안전을 위한 XAI 기반의 스마트 안전 탐지 기술 개발 

세부 과제별 연구내용

• 영상 및 음성 데이터 통합 학습을 위한 Interpretable Multimodal Attention Layer 개발
• 아동생활 모니터링 데이터와 설명 가능한 초거대AI 와 연계를 위한 Contrastive Language -Image-Voice Pre-traning (CLIVP) 임베딩 방법론 개발
• 아동생활 모니터링 데이터와 설명가능한 초거대AI를 이용한 아동생활환경 특화 초거대행동 모형 및 연계 시스템 개발

단계별 연구계획

• 2단계(’24~’25) 
  • 영유아 및 아동 음성 데이터 처리 방법론 연구
  • 성인 음성과 영유아/아동 음성간의 패턴 차이 학습을 위한 방법론 연구
  • 이상신호 처리를 위한 데이터 처리 방법론 연구
  • 영유아 및 유아 음성 데이터에 학습에 최적화된 인공신경망 구조 연구
  • Temporal Relation-Effect Layer 기반의 Autoencoder 모형 구현을 통한 전이 학습 모형 구축
  • 영유아 및 유아 음성 기반 안전 상태를 분석할 수 있는 XAI 기법을 연구
  • 예측 정보를 활용하여 선제적으로 스마트 안전/시티에 적용할 수 있는 기법 연구

• 3단계(’26~’27) 
  • 타 분야로의 적용을 위한 문제 정의
  • 예측 모형을 기반으로 한 전이학습 모형 구현
  • 예측 모형을 기반으로 한 XAI 방법론 구현
  • 예측 모형의 타분야 적용 가능성 검증 및 보완