제스처
언어장애
의사소통
장애인을 위한 기술
대화의 벽이 없는 세상을 만들고자 이 프로젝트를 시작하게 되었습니다. 수어 기반의 중증 장애인 대상의 보완 대책 의사소통 수단인 한국형 몸짓 상징 제스쳐 데이터셋으로, 장애인과 비장애인의 소통을 가능케 해줄 수 있는 소중하고 따뜻한 기술입니다.
셀렉트스타는 더욱 스마트한 인공지능을 위한 고품질 학습 데이터를 제공합니다. 본 데이터셋은 셀렉트스타가 주최한 인공지능 데이터셋 지원사업의 일환으로, 광주과학기술원과 협업하여 무료로 구축하였습니다.
광주과학기술원 융합기술원에서 HCI 분야에 AI 기술을 접목한 문화기술을 연구하는 SCI연구실로써, AI 기술을 기반 공예품 검색, 창작지원 등의 기술개발, 청각, 발달 장애인들의 문화기술 향유를 돕는 시스템 개발 등 문화와 기술을 융합하여 다양한 분야에 적용하는 연구를 수행하고 있습니다.
광주과학기술원 Soft Computing & Interaction 연구실(이하 GIST SCI랩)은 비대면 (크라우드소싱) 방식 제스처 데이터 수집에 효과적인 가이딩 방법 관련 연구를 위해 셀렉트스타 인공지능 데이터셋 지원사업에 지원했습니다.
“연구실 차원에서 쉽게 접하기 어려운 규모의 데이터셋 구축 프로젝트에 참여할 수 있게 되어 새롭고 값진 경험이 된 것 같습니다. 지원사업 선정 후 약 5개월 간의 프로젝트 수행에서 다소간의 어려움이 있기도 했지만 프로젝트 진행 전반에 거쳐 항상 빠르고 친절히 응해주시고 세세한 부분들까지 함께 신경써주시려 했던 셀렉트스타 분들 덕분에 프로젝트가 잘 마무리될 수 있었던 것 같습니다. 좋은 분들과 좋은 취지의 프로젝트를 함께 진행할 수 있어 감사했습니다. 또한, 이번 프로젝트를 통해 구축된 데이터셋이 AI를 기반의 중증 장애인들의 의사소통 지원 응용 서비스 개발에 두루 이용될 수 있기를 희망합니다.”
205개의 카테고리에 대한 영상 데이터셋 4,204개 영상 구축
크라우드 유저는 한 영상에서 다섯 번의 동작을 진행해, 동작 기반 영상 총 21,020 개 구축 완료
손담 204개 카테고리에 대해 크라우드 유저들에게 '영상 가이드'를 제공하여 영상 데이터 수집
- 주요 작업 방법: 셀렉트스타 크라우드 소싱 플랫폼 '캐시미션(앱)' 활용
- 고객사로부터 받은 가이드를 바탕으로 데이터 수집 기준 및 가이드 방식 협의
- 크라우드 유저를 위한 미션 설계, 작업 가이드(손담 영상 가이드 활용) 및 튜토리얼 설정
- 본 미션 진행 이전 고객사를 위한 pilot test 진행
- 크라우드 유저를 통해 손담 영상 데이터셋 수집 작업 진행
- 데이터 수집 프로젝트에 참여한 크라우드 유저들의 메타데이터 테깅
- 인하우스 작업자를 통한 최종 데이터 편집, 검수 및 납품 수행
셀렉트스타의 크라우드소싱 플랫폼 '캐시미션(앱)'을 활용해 크라우드 유저들이 직접 참여한 영상 데이터셋 수집 및 가공을 진행했습니다.
Sample Data
'캐시미션(웹)'에서 전문 가이드 팀이 작성한 크라우드 유저들의 미션 이해를 돕기 위한 가이드_손담명 '괜찮다' 통과 예시
'캐시미션(웹)'에서 전문 가이드 팀이 작성한 크라우드 유저들의 미션 이해를 돕기 위한 가이드_손담명 '오빠' 통과 예시
'캐시미션(웹)'에서 전문 가이드 팀이 작성한 크라우드 유저들의 미션 이해를 돕기 위한 가이드_손담명 '산' 통과 예시
- 몸짓 제스처 및 사람 동작 분석 및 연구 등
- 장애인 보완대체 의사소통 수단 서비스를 원하는 기업, 기관 및 개인
CC BY-SA
복사, 배포 및 재가공 또는 2차 저작물을 만들 수 있으며, 반드시 저작자 및 출처를 표기하고 동일한 라이센스를 적용해야합니다.
https://creativecommons.org/licenses/by-sa/3.0/deed.en