광주과학기술원(GIST)은 융합기술학제학부 소속 연구팀 ‘팀 지스트’가 25~26일 이틀간 부산시청자미디어센터에서 열리는 국내 최대 배리어프리 음악축제 ‘페스티벌 나다 2023’에 참가해 청각장애인도 즐길 수 있는 음악과 공연 기술을 선보일 예정이라고 22일 밝혔다.
배리어프리(Barrier free)는 장애가 있는 사람이 생활하는 데 물리·제도적 장애(배리어)를 제거하는 것을 의미한다. 2012년 시작된 ‘페스티벌 나다’는 장애를 가진 관객을 위한 전시·체험을 지원하며 인공지능(AI), 미디어아트 등 첨단 기술을 접목해 청각장애인도 즐길 수 있는 라이브 공연으로 진행한다.
팀 지스트는 청각장애인을 위한 ‘음악·댄스 실감가시화 기술’을 개발하는 연구팀으로, 융합기술학제학부 홍진혁 교수가 김경중·이지현·송은성 교수와 함께 지도를 맡고 있다.
크라잉넛, 배희관 밴드의 라이브 공연에는 팀 지스트가 개발한 AI 수어 댄서 ‘소리토끼’가 출연해 흥을 더할 예정이다. 청각장애인이 노래를 시각적으로 즐길 수 있도록 노래 가사를 토대로 수어 댄스를 생성하는 AI 기술을 적용했다.
5개 부스를 마련해 청각장애인을 위한 실감가시화 기술을 흥미로운 콘텐츠로 선보일 예정이다. △AI 수어 댄서 소리토끼 △소리를 보고 만지고 느끼고 만들어 보는 도구인 비즈햅 신디사이저 △다양한 소리 캐릭터가 등장하는 음악 교육 및 악기 연주 프로그램인 Viz-stage(소리 토끼와 음 캐릭터가 함께하는 음악 교육과 악기 연주 프로그램) 음악 교육 도구 △시각과 촉각으로 즐기는 댄스 게임인 댄스 with 저스트댄스 △치아를 통해 음악을 듣는 구강형 골전도 마우스피스를 전시한다.
홍진혁 교수는 “이번 축제에 참여하게 돼 청각장애인 관객의 생생한 피드백을 들을 수 있는 좋은 기회가 될 것”이라며 “팀지스트는 기술을 개발하는 데만 그치지 않고 연구실 밖에서 다양한 실증을 지속하겠다”고 말했다.
이번 연구성과는 GIST가 주관기관을 담당하고 씨케이머티리얼즈랩, 한국과학기술원, 세종대학교, 핸드스피크가 공동연구기관으로 참여했다. 한국콘텐츠진흥원의 청각장애인 음악 향유를 위한 음악·댄스 실감가시화 기술 개발 사업에서 지원을 받았다.
광주=김한식 기자 hskim@etnews.com
