ETRI, '생성형 AI'로 2D 영상 3D화...영화 기원 다룬 단편영화 제작

Photo Image
AI 기반 '시네마 제네시스' 인물 생성 예시

한국전자통신연구원(ETRI)은 생성형 인공지능(AI) 기술을 활용해, 영화 탄생 과정을 3D 재구성한 실험적 단편영화 '시네마 제네시스'를 제작했다고 10일 밝혔다.

이번 작품은 제43회 부산국제단편영화제에서 공식 상영될 예정이다. 프랑스 파리에서 열리는 'BISFF in Paris'에서도 선보인다.

시네마 제네시스는 영화 발전에 기여한 인물들의 발명·창작 과정을 AI 기술로 재해석한 약 4분 분량 입체영상 콘텐츠다.

생성적 적대 신경망(GAN) 기술을 활용해 손상되거나 해상도가 낮은 이미지를 고화질로 복원한 후 색상을 복원하고 턴테이블 기반 다면 형체 구축 기술로 이미지에서 인물의 입체적인 형태와 깊이 정보를 추출했다. 마지막으로 애니메이션 처리를 통해 좌우 시차를 구현해 3D 입체영상으로 변환함으로써 실제처럼 보이는 실감형 콘텐츠를 완성했다.

자체 개발한 'AI 기반 2D-to-3D 입체영상 변환 기술'과 '깊이(Depth) 추정 기술'을 적용했다. 이를 통해 기존 2D 영상을 3D로 자연스럽게 변환했다. 또 계층적 부호화 기술을 적용해 UHD 4K 및 스마트폰 환경에서의 2D·3D 호환형 실감영상 구현 및 다양한 디바이스 환경에서의 스트리밍 서비스가 가능하도록 구현했다.

특히 하나의 영상 스트림으로 2D와 3D 콘텐츠를 동시에 제공할 수 있어 스마트폰, TV, 차량 디스플레이 등 다양한 디바이스 환경에서 사용자가 원하는 방식으로 콘텐츠를 선택해 즐길 수 있다. 기존 영상 서비스 인프라와의 호환성을 유지하면서도 실감형 콘텐츠 제공이 가능하다는 점에서 상용화 가능성이 높다.

ETRI는 이번 AI 입체영상 기술을 바탕으로 글로벌 스트리밍 시장 진출에도 도전할 계획이다. 연구진은 이번 기술이 향후 실감형 미디어 콘텐츠 시대를 여는 핵심 기술이 될 것으로 보고 있다.

김성훈 ETRI 동남권지능화융합연구실 책임연구원은 “이번 프로젝트는 AI 영상 생성과 입체영상 변환 기술을 실제 콘텐츠 제작에 적용한 사례로, 기존 영상 콘텐츠를 실감형 콘텐츠로 확장할 수 있는 가능성을 입증했다”라며 “향후 영화, 드라마, 공연 등 다양한 분야에서 활용되어 국내 콘텐츠 산업 경쟁력 강화와 글로벌 한류 콘텐츠 확산에 기여할 것으로 기대된다”고 밝혔다.


김영준 기자 kyj85@etnews.com

브랜드 뉴스룸