COM-US는 농인 부모와 청인 자녀(CODA) 간 정서적 유대 강화를 위한 AI 기반 양방향 소통 플랫폼입니다.
이 서비스는 농인 부모와 자녀가 일상에서 자연스럽게 소통하고 정서적으로 연결될 수 있도록 돕는 통합 솔루션을 제공합니다.
1️⃣ 질문하기 & 받기
"오늘 기분 어땠어?" 등 일상적인 질문을 통해 부모가 자녀의 정서를 이해하고 관심을 표현할 수 있도록 지원합니다.
연령과 관심사에 맞춘 다양한 질문을 제공하여 부모가 아이와 나누고 싶은 대화 주제를 선택해 자연스럽게 대화를 유도할 수 있습니다.
2️⃣ 답변하기
질문에 대해 직접 답변하며, 선택형 또는 대화형 방식으로 진행할 수 있습니다.
3️⃣ 수어 변환
답변은 AI가 수어 문법에 맞게 변환 후, 즉시 수어 영상으로 제공됩니다.
(예: "나는 행복합니다" → "나, 행복")
4️⃣ 따라하기
변환된 수어 답변과 영상이 화면에 나타나면, 사용자는 카메라를 통해 이를 따라합니다.
시스템은 실시간으로 사용자의 동작을 인식하고 정확도 정도에 따른 피드백을 제공합니다.
5️⃣ 대화 블럭 쌓기
더불어 COM-US는 지속가능한 대화가 가능하도록, 부모와 자녀가 함께 '대화 블록 쌓기' 방식을 통해 대화를 시각적으로 기록하고, 감정과 생각을 공유하는 경험을 함께 받아볼 수 있습니다.
(1) 모바일 어플리케이션
- 프레임워크 : Android
- 개발 언어: Kotlin
- 활용 기술: Jetpack Compose, Retrofit
(2) 서버
- 프레임워크: Spring Boot 3
- 개발 언어: Java 17
- 빌드 도구: Gradle
- 활용 기술 : Spring Security, JPA
(3) AI
- 프레임워크: Flask
- 개발 언어: Python
- 활용 기술: OpenAI API