전체 질문 리스트
전체 질문 리스트
오늘 하루 기분은 어땠어?
오늘 하루 기분은 어땠어?
일상
일상
대화 3회 완료
대화 3회 완료
선택형
선택형
대화형
대화형
아침에 어떤 기분으로 하루를 시작했어요?
아침에 어떤 기분으로 하루를 시작했어요?
일상
일상
대화 1회 완료
대화 1회 완료
선택형
선택형
대화형
대화형
오늘 가장 즐거웠던 순간은 언제였어?
오늘 가장 즐거웠던 순간은 언제였어?
일상
일상
대화 0회 완료
대화 0회 완료
선택형
선택형
주말에 가장 하고 싶은 일은?
주말에 가장 하고 싶은 일은?
일상
일상
대화 1회 완료
대화 1회 완료
선택형
선택형
오늘 하루를 색으로 표현한다면?
오늘 하루를 색으로 표현한다면?
일상
일상
대화 1회 완료
대화 1회 완료
선택형
선택형
오늘 하루는 어땠어요?
오늘 하루는 어땠어요?
일상
일상
대화 1회 완료
대화 1회 완료
선택형
선택형
오늘 학교 생활은 어땠어?
오늘 학교 생활은 어땠어?
학교
학교
대화 12회 완료
대화 12회 완료
선택형
선택형
엄마, 아빠한테 속상했던 거 있어?
엄마, 아빠한테 속상했던 거 있어?
가족
가족
대화 861회 완료
대화 861회 완료
선택형
선택형
대화형
대화형
질문
질문
51개
51개
전체
전체
전체
전체
일상
일상
학교
학교
가족
가족
친구
친구
관심사
관심사
홈
홈
블럭
블럭
질문
질문
마이
마이
02
02
Easily manage conversations between parents and children
Easily manage conversations between parents and children
On the main page, you can view past conversations, choose from various topics, or start with a recommended question.
On the main page, you can view past conversations, choose from various topics, or start with a recommended question.
Answer converted into
sign language grammar
Answer converted into
sign language grammar
Practice signing yourself
Practice signing yourself
Multiple-Choice Example
Multiple-Choice Example
01
01
Easily manage conversations between parents and children
Easily manage conversations between parents and children
On the main page, you can view past conversations, choose from various topics, or start with a recommended question.
On the main page, you can view past conversations, choose from various topics, or start with a recommended question.
일상
일상
1/10
1/10
50%
50%
학교
학교
1/10
1/10
30%
30%
친구
친구
5/10
5/10
50%
50%
가족
가족
8/10
8/10
50%
50%
Prototype
Prototype
나, 보내다, 즐겁다, 하루, 이유, 친구, 놀다
나, 보내다, 즐겁다, 하루, 이유, 친구, 놀다
나는 오늘 하루 내 친구 서현이랑 놀아서 즐거운 하루를 보냈어
나는 오늘 하루 내 친구 서현이랑 놀아서 즐거운 하루를 보냈어
따라할 답변
따라할 답변
나 보내다 즐겁다 하루 이유 친구 놀다
나 보내다 즐겁다 하루 이유 친구 놀다
수형 설명
수형 설명
손끝이 밖으로 향하게 모로 세운 왼 손바닥에 오른 주먹의 1·5지를 벌려 펴서 5지 끝을 대고 1지를 밖으로 돌린다.
손끝이 밖으로 향하게 모로 세운 왼 손바닥에 오른 주먹의 1·5지를 벌려 펴서 5지 끝을 대고 1지를 밖으로 돌린다.
1
1
손바닥이 위로 향하게 편 오른손을 왼쪽에서 오른쪽으로 조금씩 흔들며 이동시킨다.
손바닥이 위로 향하게 편 오른손을 왼쪽에서 오른쪽으로 조금씩 흔들며 이동시킨다.
2
2
Typed Answer
Typed Answer
Answer Directly in Sign Language
Answer Directly in Sign Language
Answer Converted into SL Grammar
Answer Converted into SL Grammar
Open-Ended Question Example
Open-Ended Question Example
03
03
Let’s build our conversations together
Let’s build our conversations together
Fill the board with blocks earned through conversation Goal-based gamification helps families stay engaged in ongoing conversations
Fill the board with blocks earned through conversation Goal-based gamification helps families stay engaged in ongoing conversations
질문
질문
답변
답변
오늘 하루 기분은 어땠어?
오늘 하루 기분은 어땠어?
선택:
선택:
기쁘다
기쁘다
일상
일상
대화형
대화형
24.08.05
24.08.05
수형설명
수형설명
두 주먹의 1·5지를 펴고 손등이 밖으로 향하게 하여 1지 끝을 양쪽 가슴 앞에 대고 상하로 두 번 엇갈리게 움직인다.
두 주먹의 1·5지를 펴고 손등이 밖으로 향하게 하여 1지 끝을 양쪽 가슴 앞에 대고 상하로 두 번 엇갈리게 움직인다.
내가 참고한 수화 자료
내가 참고한 수화 자료
답변 결과 보기
답변 결과 보기
완료하기
완료하기
아직 나눈 대화가 없어요!
아직 나눈 대화가 없어요!
우리의 대화 블럭
우리의 대화 블럭
1단계
1단계
대화 진행률 확인하기
대화 진행률 확인하기
일상
일상
1/10
1/10
50%
50%
학교
학교
4/10
4/10
50%
50%
친구
친구
5/10
5/10
50%
50%
가족
가족
5/10
5/10
50%
50%
관심사
관심사
5/10
5/10
50%
50%
랜덤 질문
랜덤 질문
주제가 떠오르지 않을 때
사용해요
주제가 떠오르지 않을 때
사용해요
대화 주머니
대화 주머니
8개
8개
12개
12개
0개
0개
32개
32개
27개
27개
홈
홈
블럭
블럭
질문
질문
마이
마이
블럭 판 채우기
블럭 판 채우기
Conversation Pouch
Conversation Pouch
대화 진행률 확인하기
대화 진행률 확인하기
일상
일상
1/10
1/10
50%
50%
학교
학교
4/10
4/10
50%
50%
친구
친구
5/10
5/10
50%
50%
가족
가족
5/10
5/10
50%
50%
관심사
관심사
5/10
5/10
50%
50%
랜덤 질문
랜덤 질문
주제가 떠오르지 않을 때
사용해요
주제가 떠오르지 않을 때
사용해요
대화 주머니
대화 주머니
원하는 블럭을 누르고 자유롭게 배치해요!
원하는 블럭을 누르고 자유롭게 배치해요!
8개
8개
12개
12개
0개
0개
32개
32개
27개
27개
취소하기
취소하기
완료하기
완료하기
Adjust Blocks
Adjust Blocks
대화 진행률 확인하기
대화 진행률 확인하기
일상
일상
1/10
1/10
50%
50%
학교
학교
4/10
4/10
50%
50%
친구
친구
5/10
5/10
50%
50%
가족
가족
5/10
5/10
50%
50%
관심사
관심사
5/10
5/10
50%
50%
랜덤 질문
랜덤 질문
주제가 떠오르지 않을 때
사용해요
주제가 떠오르지 않을 때
사용해요
대화 주머니
대화 주머니
원하는 블럭을 누르고 자유롭게 배치해요!
원하는 블럭을 누르고 자유롭게 배치해요!
8개
8개
12개
12개
0개
0개
32개
32개
27개
27개
취소하기
취소하기
완료하기
완료하기
Place Blocks
Place Blocks
대화 진행률 확인하기
대화 진행률 확인하기
일상
일상
1/10
1/10
50%
50%
학교
학교
4/10
4/10
50%
50%
친구
친구
5/10
5/10
50%
50%
가족
가족
5/10
5/10
50%
50%
관심사
관심사
5/10
5/10
50%
50%
랜덤 질문
랜덤 질문
주제가 떠오르지 않을 때
사용해요
주제가 떠오르지 않을 때
사용해요
대화 주머니
대화 주머니
원하는 블럭을 누르고 자유롭게 배치해요!
원하는 블럭을 누르고 자유롭게 배치해요!
8개
8개
12개
12개
0개
0개
32개
32개
27개
27개
블럭 판 채우기
블럭 판 채우기
홈
홈
블럭
블럭
질문
질문
마이
마이
Completed Block Board
Completed Block Board
Conversation
from August 5!
Conversation
from August 5!
04
04
View Conversation History
View Conversation History
Children’s responses are saved so parents can check their current state and use this to guide future conversations based on their interests.
Children’s responses are saved so parents can check their current state and use this to guide future conversations based on their interests.
1
1
Calendar View
Calendar View
2
2
View Answer Details
View Answer Details
Share Your Signs, Shine Your CODA
Share Your Signs, Shine Your CODA
Service
Service
Concept
Concept
Click!
Click!
To ensure children could express themselves while parents fully understand, we built a flow where text or voice responses are converted into sign language using proper grammar. The result is shown as a video the child can follow, helping them engage with sign language naturally.
To ensure children could express themselves while parents fully understand, we built a flow where text or voice responses are converted into sign language using proper grammar. The result is shown as a video the child can follow, helping them engage with sign language naturally.
Approach 2
Approach 2
Converted children’s responses into sign language to support natural learning.
Converted children’s responses into sign language to support natural learning.
How was your day today?
How was your day today?
Ask a question
Ask a question
1
1
I felt happy today!
I felt happy today!
Answer
Answer
2
2
Me, happy
Me, happy
Converted to Korean
Sign Language grammar
Converted to Korean
Sign Language grammar
3
3
Sign language video
Sign language video
Try signing it!
Try signing it!
4
4
Deaf parents
Deaf parents
CODA
CODA
Questions provided in
sign language and text
Questions provided in
sign language and text
Answer by
voice or text
Answer by
voice or text
Select
a topic or question
Select
a topic or question
Translated into
text or sign language
Translated into
text or sign language
Enables CODA children to focus on their emotions and relationship with parents
Enables CODA children to focus on their emotions and relationship with parents
Ongoing questions and conversations to show care and provide emotional security
Ongoing questions and conversations to show care and provide emotional security
Following a natural conversation flow, the parent asks and the child responds. We integrated a sign language transformation system to support communication in both languages. This enabled mutual understanding and helped children naturally learn their parents’ primary language sign language.
Following a natural conversation flow, the parent asks and the child responds. We integrated a sign language transformation system to support communication in both languages. This enabled mutual understanding and helped children naturally learn their parents’ primary language sign language.
Designed a simple structure that connects parents and children.
Designed a simple structure that connects parents and children.
Approach 1
Approach 1
1
1
While children want to express themselves, their parents use sign language as their first language. With limited access to sign language education, many children struggle to understand its structure, leading to communication gaps.
While children want to express themselves, their parents use sign language as their first language. With limited access to sign language education, many children struggle to understand its structure, leading to communication gaps.
2
2
Most existing translators are word-for-word and fail to convey emotion. We needed a system that generates natural, meaning based sign language to support emotionally resonant communication.
Most existing translators are word-for-word and fail to convey emotion. We needed a system that generates natural, meaning based sign language to support emotionally resonant communication.
Two Key Challenges
Two Key Challenges
Background
Background
CODA grow up in bilingual environments sign language at home and spoken language in society.
CODA grow up in bilingual environments sign language at home and spoken language in society.
Navigating between two different languages and cultures, they often struggle to have deep conversations with their parents.
Navigating between two different languages and cultures, they often struggle to have deep conversations with their parents.
COM-US was designed to address this communication gap and the emotional challenges that come with it.
COM-US was designed to address this communication gap and the emotional challenges that come with it.
Period
Type
role
May 2024 – present
AI-Based Sign Language Education & Communication App
Led service planning, overall project coordination, Designed user flows and UI/UX prototypes
Team member
Seonghyeon Heo
-
Frontend Developer
Hayeon Song
-
Backend Developer
Soomi Jeong
-
AI Developer
Jaeryeong Hong
-
AI Developer
Gyeongmin Kim
-
Marketing
Eunnarae Song
-
UX ∙ Product Designer /PM