본문 바로가기 대메뉴 바로가기
open
Close

한국문화기술연구소

CT R&D 개발

청각장애인을 위한 지능형 전시해설 문자/한국수어 변환기술 개발

전시 공간에서 대중들이 다양한 전시 체험이 가능하도록 AI 기반 전시 ART DB 및 데이터를 생성 후
인터랙션이 가능한 실감형 스마트 미디어월 플랫폼 시스템 개발 및 비대면
XR 메타버스 전시공간 시스템 개발.

연구개요

청각장애인들은 자신을 듣지 못하는 사람이 아니라 보는 사람으로 자각하고 있으며(Bahan, 1989), 현재 한국수화언어법(시행 2016.3.4.)이 시행되어 수어의 사용은 청각장애인의 기본 인권이며 언어권과 학습권을 보장받아야 한다. 장애인복지법 제8조에는 누구든지 장애를 이유로 정치·경제·사회·문화생활의 모든 영역에서 차별을 받지 아니하고, 누구든지 장애를 이유로 정치·경제·사회·문화생활의 모든 영역에서 장애인을 차별하여서는 아니 된다고 명시되어 있다. 따라서 청각장애인의 풍요로운 문화생활 영위를 위해 박물관, 미술관, 전시시설 등 주요 문화기반시설의 방문 시 전시해설사, 오디오 안내, 시설물 안내, 안내방송 등 각종 음성자료를 실시간 문자(자막)’ 한국수어 변환 서비스제공이 필요하다는 것을 알 수 있고, 이를 제공하여 청각장애인들에게 다채로운 문화 향유권을 제공하는 것을 목표로 한다.

연구개요도

sub02010206_img02

한국수어를 제 1언어로 사용하는 청각장애인의 문화생활 영위를 위하여 박물관, 미술관, 전시시설 등 주요 문화기반시설의 전시해설(오디오가이드), 시설소개 및 안내방송을 문자(자막)’ 한국수어 애니메이션제공을 목표로 하는 AI 기반 문화기반시설 전시해설의 문자한국수어 애니메이션 서비스 플랫폼 기술개발을 최종 연구 목표로 한다.

전시해설 및 안내방송을 위한 한국수어 및 전시콘텐츠 DB 구축

한국수어 해설 가상 캐릭터 개발

청각장애인의 전시해설/콘텐츠 접근성 개선을 위한 지능형 사용자 인터랙션 UI/UX 개발

실시간 전시해설을 위한 음성인식 기술개발

전시해설 및 안내방송의 실시간 문자 및 한국수어 실시간 서비스 개발 및 실증


연구내용

전시해설 및 안내방송을 위한 한국수어 및 전시콘텐츠 DB 구축

- 전시시설 및 안내방송 DB 구축

- 문화기반시설 영역의 한국수어 단어 DB 구축

- 한국수어 센서 데이터 수집 플랫폼 구축

한국수어 해설 가상 캐릭터 개발

- 모바일 디바이스 적용 한국어 수어 애니메이션 플랫폼 개발

- 한국어 수어 표현 캐릭터 디자인 및 구동 모듈개발

- 한국어 문장-수어 변환 번역기술개발

- 한국어 수어 생성을 위한 애니메이션 데이터베이스 구축

청각장애인의 전시해설/콘텐츠 접근성 개선을 위한 지능형 사용자 인터랙션 UI/UX 개발

- 청각장애인을 위한 사용자 인터페이스 기술 동향 및 현장 수요 분석

- 전시해설/콘텐츠 접근성 개선을 위한 탐색/향유 UI/UX설계

- 문자/한국수어 안내서비스 내 청각장애인 의도 인식을 위한 지능형 UI 개발 및 연동

실시간 전시해설을 위한 음성인식 기술개발

- 전시해설 콘텐츠 도메인에 최적화된 음성인식 기술 연구개발

- 실시간 전시해설을 위한 음성인식 시스템 연구개발

전시해설 및 안내방송의 실시간 문자 및 한국수어 실시간 서비스 개발 및 실증

- 청각장애인의 접근성을 반영한 모바일 기반 실시간 문자/한국수어 안내서비스 개발

- 모바일 기반 실시간 문자/한국수어 변환 기술 시범서비스를 위한 스마트가이드 어플리케이션 서비스 구축

활용방안


한국수어 해설 가상 캐릭터는 국내의 부족한 수어 통역사 인력의 역할을 수행할 수 있을 뿐만 아니라 시간과 장소에 구애받지 않으며 청각장애인을 위한 해설 서비스를 지원할 수 있다. 특히 콘텐츠에 맞는 친근한 디자인으로 개발하여 청각장애인에게 거부감 없는 의사소통을 수행할 수 있다.

시각적인 화면에 의존해야 하는 특성을 고려한 사용자 맞춤형 인터페이스 및 GUI 개발을 통해 청각장애인의 의사소통 도구로서 다양한 활용이 가능하다.

문화기반시설 전시해설 문자/한국수어 서비스 플랫폼 기술을 통해 가상현실, 증강현실 등을 이용한 실감형 콘텐츠 체험관으로 조성 사물인터넷, 인공지능을 활용한 스마트 전시안내 서비스로 확장하여 스마트 박물관·미술관 조성 및 지역 문화 관광의 거점 기능을 강화할 수 있다.

지능형 한국수어·문자 변환 기술 개발을 통해 기술적 측면으로는 청각장애인 수어 단어 DB 구축과 음성인식·분석을 통해 기술적·산업적 경쟁우위 선점할 수 있으며, 문자/한국수어 변환 서비스 기술이전을 통해 동종 박물관 및 미술관 서비스 확대에 도움이 될 수 있다. 문화적 측면으로는 청각장애인의 의사 표현 증진에 도움이 되며, 청각장애인을 위한 전시해설 문자/한국수어 변환 서비스 플랫폼을 기반으로 문화, 예술 프로그램의 양적 확대와 함께 청각장애인의 눈높이와 요구수준에 맞는 콘텐츠 방향 제시할 수 있게 된다. 또한, 경제적 측면으로는 청각장애인의 소통을 돕는 사업모델 발굴 및 새로운 방향 제시할 수 있고, 향후 박물관·미술관을 넘어 다양한 형태의 전시콘텐츠에 적용 가능한 확장성 제공한다. 이를 바탕으로 청각장애인에게 보다나은 문화 향유권을 제공할 수 있는 기회를 제공할 수 있다.

QUICK
MENU
GISTGIST GIST PortalGIST Portal 한국문화기술연구소 유튜브 채널한국문화기술연구소 유튜브 채널