유럽 축구 경기·이벤트 광시야각 실감 영상으로 즐길 수 있어
국내 연구진이 네덜란드에서 펼쳐진 축구 경기와 벨기에서 진행된 TV 토론을 360도 시야각과 초고화질로 중계하는 기술 시험에 성공했다.
한국전자통신연구원(ETRI)은 8K급 360도 가상현실(VR), 울트라와이드비전(UWV) 등 초고화질 실감영상 실황중계 기술을 개발, 네덜란드 암스테르담과 대한민국 대전을 잇는 실시간 중계 시험에 성공했다고 4일 밝혔다.
대화면 파노라마 영상인 UWV(Ultra Wide Vision)은 기존 디지털 영상에서 제공하는 제한된 시야각(HDTV 16:9, 디지털 시네마 2.35:1)을 넘어 인간의 시야각을 채울 수 있는 광시야각(6:1) 영상을 제공하여 현장감을 극대화하는 고화질 대화면 영상 기술이다.
이를 통해 TV에서만 보던 운동경기나 음악회 등을 실제 현장에서 보는 듯한 몰입감과 현장감을 느낄 수 있게 됐다.
연구원이 개발한 기술은 차별화된 미디어 경험을 제공하는 것을 목표로 인간이 인지 가능한 시야각 범위인 100~110도 각도에 최적화된 영상을 만드는 기술이다.
이 기술은 초고선명(UHD) 초고화질을 유지하면서 최대 시야각과 비슷한 UWV 영상, 180~360도 까지 볼 수 있는 VR영상 콘텐츠를 만들 수 있다.
체험자는 HMD와 같은 단말을 사용하거나 대화면 스크린을 통해 현장감과 몰입감이 극대화된 체감이 가능하다.
연구진의 핵심 기술은‘실시간 모니터링 및 생성기술’이다. 이 기술을 활용하면 여러 대의 초고화질 카메라로 찍은 영상을 하나로 붙여 마치 한 대의 카메라로 촬영한 것처럼 자연스럽고도 시야각이 넓은 초실감 영상을 만들어 낸다.
연구진의 기술을 적용해 촬영한 영상은 세로 폭은 변환 없이 가로 폭 변환 기준으로 UHD 선명도(4Kx2K)의 3배인 12Kx2K UWV 영상과 UHD 선명도의 4배인 8Kx4K급 영상으로 구성된다.
기존에는 대용량 영상정보를 하나로 합치면 부자연스럽게 나타나거나 전송에 문제가 나타났다.
연구진은 실시간 기하 정보 처리를 통해 문제를 해결하며 초실감 영상 통신의 길을 열었다고 설명했다.
이 기술은 지난해 9월 네덜란드에서 펼쳐진 네덜란드-페루 국가대표팀 친선 축구 경기에서 실증을 거쳤다. 연구진 기술로 현지 경기를 촬영하고 국제 연구망(KREONET)을 통해 우리나라로 전달하는 실시간 중계하는 시험에 성공한 것이다.
또 올해 4월에는 벨기에 브뤼셀에서 진행된 방송 토론 프로그램 현장에 360도 VR 서비스를 적용했다. 시청자는 360도 전 방향에서 토론에 참여한 패널의 모습을 선택해 볼 수 있다.
연구진은 여기에 더해 인공지능(AI)을 이용해 자동으로 대화 내용을 자막으로 만들고 패널의 감정을 분석해 이모티콘으로 표현해주는 융합기술을 선보여 큰 관심을 불러모았다.
연구진은 “콘텐츠 생성부터 음성, 감정인식 등 새로운 콘텐츠를 만들고 네덜란드, 벨기에 등과 국제공동연구를 통해 우리의 방송 및 네트워크 기술에 신뢰를 주는 성과를 내 큰 의미가 있다”고 말했다.
또 현재 방송국, 서비스 제공자들과 기술 이전을 협의 중이라고 덧붙였다. 이를 통해 스포츠 이벤트 실황 중계 뿐 아니라 음악 콘서트 등 다양한 콘텐츠 분야로 기술이 활용될 전망이다.
연구진의 기술은 내년 네덜란드에서 펼쳐지는 유럽 최대 음악 경연대회인 `유로비전 송 콘테스트(Eurovision Song Contest)'에도 적용될 예정이다.
네덜란드 로테르담에서 펼쳐지는 경연을 연구진의 기술로 촬영하고 이를 암스테르담, 헤이그 등 유럽 주요 도시에 위치한 전용 극장으로 보내 초실감 광시야각 영상을 통해 로테르담의 현장감을 느끼게 한다는 계획이다.
이현우 ETRI 미디어연구본부장은“세계 최초로 초고화질 UWV 영상 실황을 중계하는데 성공했다”며 “향후에도 차세대 미디어 서비스를 개척할 기술을 개발하기 위해 끊임없이 노력하겠다”고 밝혔다.
연구진은 앞으로 5G 및 클라우드 인프라를 이용해 AR, VR 등 초실감 영상을 스트리밍을 통해 이용할 수 있는 서비스를 구현하기 위한 후속 연구를 진행하는 동시에 MPEG 국제표준화 노력을 병행할 예정이다.
한편 이 기술은 산업통상자원부의 '실시간 모니터링 및 생성 기술' 사업의 하나로 개발됐다. 연구원은 이 기술을 와이드 영상 제작업체 등에 이전할 계획이다.