02본문

Similar documents
1 : MPEG-DASH MMT (MinKyu Park et al.: MMT-based Broadcasting Services Combined with MPEG-DASH) (Regular Paper) 20 2, (JBE Vol. 20, No. 2, Marc

MPEG-4 Visual & 응용 장의선 삼성종합기술원멀티미디어랩

그림 2. 최근 출시된 스마트폰의 최대 확장 가능한 내장 및 외장 메모리 용량 원한다. 예전의 피쳐폰에 비해 대용량 메모리를 채택하고 있지 만, 아직 데스크톱 컴퓨터 에 비하면 턱없이 부족한 용량이다. 또한, 대용량 외장 메모리는 그 비용이 비싼 편이다. 그러므로 기존

01박기준.hwp

(JBE Vol. 22, No. 6, November 2017) (Special Paper) 22 6, (JBE Vol. 22, No. 6, November 2017) ISSN 2

600 방송공학회논문지제 22 권제 5 호, 2017 년 9 월 (JBE Vol. 22, No. 5, September 2017) 특집논문 (Special Paper) 방송공학회논문지제 22 권제 5 호, 2017 년 9 월 (JBE Vol. 22, No. 5, Sep

À±½Â¿í Ãâ·Â

2 : (JEM) QTBT (Yong-Uk Yoon et al.: A Fast Decision Method of Quadtree plus Binary Tree (QTBT) Depth in JEM) (Special Paper) 22 5, (JBE Vol. 2

Editorial MPEG 표준화관련최근동향소개 ETRI 차지훈그룹장 MPEG 표준화관련최근동향소개 많은 ICT 기술들이그러하듯미디어기술도하루가다르게진화하고있다. 10년전만해도모바일단말에서동영상을자유롭게소비하는것이쉽지않았으나, 이제는누구나일상에서즐기는보편화된서비스가되었

슬라이드 제목 없음

02본문

02손예진_ok.hwp

3 : 360 (Dongmin Jang et al.: Implementing Renderer for Viewport Dependent 360 Video) (Special Paper) 23 6, (JBE Vol. 23, No. 6, November 2018

(JBE Vol. 24, No. 1, January 2019) (Regular Paper) 24 1, (JBE Vol. 24, No. 1, January 2019) ISSN 2287

2 : UHD MMT/ROUTE (Doohwan Kim et al.: Broadband Content Insertion Technology based on Terrestrial UHD Broadcasting MMT/ROUTE) (Regular Paper) 24 2, 2

(JBE Vol. 23, No. 5, September 2018) (Regular Paper) 23 5, (JBE Vol. 23, No. 5, September 2018) ISSN

02본문

OMA Bcast Service Guide ATSC 3.0 (S33-2) T-UHDTV 송수신정합 Part.1 Mobile Broadcast (Open Mobile Alliance) 기반 Data Model ATSC 3.0 을위한확장 - icon, Channel No.

MPEG-I 표준과 360 도비디오콘텐츠생성 표준화로드맵을제시하고논의를진행하고있다 [3] 년부터표준화작업을시작하여 2021년까지표준화작업을완료하는것을목표로하고있으며, 내부적으로 5개의서브파트가존재하며, 각파트별표준화작업은 < 그림 1> 에나타나있듯이연도별로세

실감미디어 제작 전문인 과정 1기 결과보고서

(JBE Vol. 22, No. 5, September 2017) (Special Paper) 22 5, (JBE Vol. 22, No. 5, September 2017) ISSN


1 : MMT MPEG-2 TS (MinKyu Park et al.: An Overhead Comparison of MMT and MPEG-2 TS in Broadcast Services). MPEG-2 TS(Transport Stream) MPEG-2 (Part) [

02본문

1 : MV-HEVC (Jae-Yung Lee et al.: Fast Disparity Motion Vector Searching Method for the MV-HEVC) High Efficiency Video Coding (HEVC) [1][2]. VCEG MPEG

01이국세_ok.hwp

Ⅰ. 서 론 2016년 초에 열린 ICT 관련 행사의 주요 테마는 가상현실(VR: Virtual Reality)이 었다. 2016년 1월 5~8일 미국 라스베이거스에서 열린 세계 최대 가전 전시회인 CES 에서는 오큘러스, 삼성전자, HTC, 소니 등이 가상현실 관련

SS Term #3.doc

02본문

1 : MMT MPEG-2 TS (MinKyu Park et al.: An Overhead Comparison of MMT and MPEG-2 TS in Broadcast Services). MPEG-2 TS(Transport Stream) MPEG-2 (Part) [

TTA Journal No.157_서체변경.indd

03홍성욱.hwp

(JBE Vol. 24, No. 2, March 2019) (Regular Paper) 24 2, (JBE Vol. 24, No. 2, March 2019) ISSN

<353420B1C7B9CCB6F52DC1F5B0ADC7F6BDC7C0BB20C0CCBFEBC7D120BEC6B5BFB1B3C0B0C7C1B7CEB1D7B7A52E687770>

1. Motivation 2014년베를린에서열린 IFA2014에서는삼성전자가오큘러스와합작하여개발한기어 VR을발표하며 VR시장에진출하였고, 구글은누구나손쉽게 VR 및 360 파노라마뷰컨텐츠를즐길수있도록제작된 HMD (Head-mounted Display) 인카드보드를출시


(JBE Vol. 23, No. 2, March 201).,,, 360 Video, VR,. UWV [1]. UWV, [2]. UWV Stitching, [3]. UWV. UWV, MMT. (Spatial Adjacency Matrix) [4][5],. MMT CI L

2 : MMT QoS (Bokyun Jo et al. : Adaptive QoS Study for Video Streaming Service In MMT Protocol). MPEG-2 TS (Moving Picture Experts Group-2 Transport S

2 : MMT DASH MMTP DASH segment (Hyomin An et al.: Method of Delivering DASH Segments based on MMTP for Re-use of DASH Contents under MMT Broadcasting

T T A S t a n d a r d

0. 들어가기 전

AVN2100Kor_Ç¥Áö110818F

master.hwp

이도경, 최덕재 Dokyeong Lee, Deokjai Choi 1. 서론

<4D F736F F D204954B1E2C8B9BDC3B8AEC1EE2DB1E8C5C2C1A42D7231>

슬라이드 제목 없음

HLS(HTTP Live Streaming) 이용가이드 1. HLS 소개 Apple iphone, ipad, ipod의운영체제인 ios에서사용하는표준 HTTP 기반스트리밍프로토콜입니다. 2. HLS 지원대상 - 디바이스 : iphone/ipad/ipod - 운영체제 :

(JBE Vol. 23, No. 6, November 2018) (Special Paper) 23 6, (JBE Vol. 23, No. 6, November 2018) ISSN 2

1217 WebTrafMon II

Macaron Cooker Manual 1.0.key

(JBE Vol. 23, No. 1, January 2018) (Regular Paper) 23 1, (JBE Vol. 23, No. 1, January 2018) ISSN 2287


백서2011표지

歯이시홍).PDF

Bitcoin_3.indd

15_3oracle

<붙임2> IT분야 국제표준 채택현황 일련 제안규격명 규격번호 국제문자코드-한글음절문자표 (Hangul syllables) 단방향멀티케스트전송규격 (ECTP-1: Enhanced Communication Transport Protocol-S


디지털TV솔루션 브로셔

02본문

ICT EXPERT INTERVIEW ITS/ ICT? 차량과 인프라 간 통신(V2I) Nomadic 단말 통신(V2P) 차량 간 통신(V2V) IVN IVN [ 1] ITS/ ICT TTA Journal Vol.160 l 9

Structure and Interpretation of Computer Programs: Assignment 3 Seung-Hoon Na October 4, George (아래 3개의 문제에 대한 구현이 모두 포함된 george.rkt파일을 제출하시오.

FMX M JPG 15MB 320x240 30fps, 160Kbps 11MB View operation,, seek seek Random Access Average Read Sequential Read 12 FMX () 2

?

Microsoft Word - 김정훈

03이승호_ok.hwp

방송공학회논문지 제18권 제2호

µðÇÃÇ¥Áö±¤°í´Ü¸é

4 : (Hyoungyill Park et al.: The Design and Implementation of Multiple Digital Signage Video Sync Technology for Ultra-high Resolution) (Special Paper

2016_Company Brief

ISO/IEC 의온톨로지와메타데이터 표준화동향 한국과학기술정보연구원 김장원

30이지은.hwp


APOGEE Insight_KR_Base_3P11

2014_트렌드씨_웹용_1월_s

untitled

[Brochure] KOR_TunA

Building Mobile AR Web Applications in HTML5 - Google IO 2012

184최종

07Á¤Ã¥¸®Æ÷Æ®-pdf¿ë

200707Á¤Ã¥¸®Æ÷Æ®_³»Áö

PowerPoint 프레젠테이션

2/21

untitled

PowerPoint 프레젠테이션

LCD Display

02본문

자연언어처리


<31372E D DBDC7B0A8B9E6BCDBB9CCB5F0BEEE2D E687770>

歯기구학

슬라이드 1

특허청구의 범위 청구항 1 휴대폰 스트랩 어댑터 결합용 액세서리에 있어서, 휴대폰의 액세서리 연결고리에 줄로 연결된 어댑터 캡과; 상기 어댑터 캡과 착탈식으로 결합 및 분리하는 어댑터; 및 상기 어댑터 캡과 상기 어댑터 사이에 착탈식으로 결합 및 분리하는 적어도 1개

서현수

02본문

초안검토미래미디어분과위원회위원회기술보고서안심의위원회운영위원회 성명소속직위위원회및직위기술보고서번호 미래미디어기술보고서 ( 과제 ) 제안김휘용 ETRI 그룹장분과장윤국진 ETRI 책임미래미디어분과간사이용주 ETRI 책임미래미디어분과위원방건 ETRI 책임미래미디어분과위원정준

ecorp-프로젝트제안서작성실무(양식3)

슬라이드 1

Microsoft Word - src.doc

Transcription:

31 특집 360VR 및몰입형미디어 몰입형미디어포맷표준화동향 이장원 / LG 전자 요약 VR(Virtual Reality), AR(Augmented Reality) 컨텐츠의획득과소비가가능한사용자디바이스들이널리보급되고있는가운데, MPEG(Moving Picture Experts Group) 에서는몰입형 (immersive) 미디어의압축과포맷, 전송에대한표준제정작업이활발히진행중이다. 본논문에서는몰입형미디어표준프로젝트인 MPEG I와그부속표준의하나이며전방향미디어포맷에대한표준인 OMAF 표준의기술전반과표준동향에대해소개하고자한다. I. 서론 최근 HMD(Head Mount Display) 와 360도카메라등몰입형미디어를처리하는디바이스의사용이보편화되면서, 몰입형미디어서비스기술에대한관심이높아지고있다. CG(Computer Graphics) 기반의컴퓨터게임등에서주로사용되던 VR 컨텐 츠처리기술들이실제촬영, 획득가능한실사영상에까지확대되어사용되기시작하면서, 사용자들은 360도 VR 비디오를비롯한몰입형컨텐츠를손쉽게획득, 소비할수있게되었다. 이러한미디어시장과기술의움직임속에 MPEG 은다양한디바이스와플랫폼간에몰입형미디어의압축, 공유, 유통을원활히하기위해, 몰입형미디어표준프로젝트인 MPEG I(Coded Representation of Immersive Media)[1] 와 360도미디어저장포맷기술인 OMAF(Omnidirectional MediA Format)[2] 표준화작업을진행하고있다. 본고에서는 MPEG I 와그부속표준인 OMAF 의기술전반과표준화동향에대해소개하고자한다. 먼저 II장에서는 MPEG I 의표준화현황과기술개요에대해소개하고, III장에서는 OMAF 의표준화동향및요소기술들에대해설명하며, 마지막 IV장에서향후전망과함께결론을맺는다. 2018 년 10 월 31

344 특집 : 360VR 및몰입형미디어 II. MPEG I 표준화현황및기술개요 2016년 10월중국청두회의에서 MPEG은몰입형미디어를위한차세대 MPEG 프로젝트인 MPEG I(Corded Representation of Immersive Media) 표준화를위한공식활동을시작하였다. 본표준화에서는새로운미디어서비스로대두되고있는 VR과 AR 서비스에활용될수있는몰입형오디오, 비디오, 그래픽스및시스템기술에대한표준화를주요목표로삼고있다. MPEG I 는비디오, 오디오에서시스템요소에이르기까지전체컨텐츠에코시스템을대상으로하는표준기술로구성되며, 360 VR 비디오와 MR(Mixture Reality) 및 6 DoF(6 Degrees of Freedom) 관련컨텐츠를포함한몰입형미디어전체를고려대상으로한다. MPEG I 는총 2단계의 Phase 와 8개의파트로정의되어있고, 각파트마다서로다른표준으로구성되어있다. Phase1 에서는 360도 VR 영상시청시나리오를목표로진행하며 Phase2 는 6축자유도를가질수있는 6 DoF VR 영상도포함을한다. 이를위해각파트별로표준화를착수중에있거나일부는이미진행하고있다. MPEG I 파트 1(Immersive Media Architectures) 은 MPEG I 요구사항이요약된몰입형미디어의주요사용시나리오및아키텍처를정의하며 MPEG I 의전체아키텍처를포함하는기술보고서로구성된다. 기술보고서에는또한 MPEG I 의파트들에서사용되는몰입형미디어와관련된주요용어의정의가포함되어있다. MPEG I 파트 2 표준인 OMAF(Omnidirectional MediA Format) 는 MPEG I 의시스템표준규격이 며몰입형미디어를위한 ISO Base Media File Format(ISOBMFF) 의확장미디어파일포맷규격이다. OMAF 버전 1은전방향 360도비디오의저장및전송을목표로하였으며, 현재표준화가진행중인버전 2에는 3 DoF+ 미디어지원및복수시점 360 비디오, 오버레이, 서브픽처트랙등버전 1 기능의확장이진행중이다. OMAF 의표준화현황및기술개요에대해서는본논문의 III장에서자세히소개한다. MPEG I 파트 3은 MPEG I 몰입형미디어서비스에중요한비디오규격을정의한다. 이를위해 HEVC(High Efficiency Video Coding) 표준이후로 Joint Video Exploration Team(JVET) 을구성하여차기영상압축기술을위한차기코덱표준화작업을시작하고있다. 차기코덱표준은 VVC (Versatile Video Coding) 로명명되어표준화가진행중이다. MPEG 1 파트 4는몰입형오디오를위한규격을정의한다. 이부분에는특히 6 DoF 컨텐츠표현을위해필요한특정오디오압축및재생관련표준이포함된다. 차기오디오압축표준의공식명칭은향후결정될예정이다. MPEG I 파트 5(Point Cloud Coding) 는향후몰입형컨텐츠를구현하기위한핵심기술로예상되는포인트클라우드의압축관련표준을정의한다. 포인트클라우드는영상의색을담는정보와공간상의좌표를담는정보를가진 3차원영상표현방법으로서차기 6 DoF 및 Mixture VR를가능하게하기위한기술로알려져있다. MPEG I 파트 6(Immersive Media Metrics) 에는몰입형미디어생태계전반에걸친사용자경험의품질을정량화하고평가할수있는미디어메트릭목록이포함되어있다. 32 방송과미디어제 23 권 4 호

몰입형미디어포맷표준화동향 345 MPEG I 파트 7(Immersive Media Metadata) 은 MPEG I 의다른파트에서새롭게정의된메타데이터를총괄하는규격파트이다. 특히비디오, 오디오및시스템등여러분야의기술에걸쳐각기다른표준에서공통으로사용될수있는메타데이터의정의를주요한목표로하고있다. MPEG I 파트 8(Network Based Media Processing) 에서는몰입형미디어의네트워크연동을위한인터페이스를정의한다. 특히 6 DoF 컨텐츠의높은데이터량을필요로하는몰입형미디어서비스를위해클라우드와모바일단말간에복잡한계산을나눠처리할수있도록네트워크인터페이스를정의하여전송데이터감소및단말의배터리런타임향상을가능하게한다. MPEG I 타임라인은 3 단계로진행된다. Phase 1a 요구사항은 360도전방향비디오를가능하게하는기술을지원하는반면 Phase 1b 및 Phase 2 요구사항은각각 3DoF+ 및 6 DoF 미디어컨텐츠를지원하는기술을목표로한다. Phase 1a의표준화는지난 2017 년말완료되었고, Phase 1b 시스템및비디오분야에서기술표준화가진행중이며, Phase 2는사용시나리오및요구사항논의중에있고 PCC 등일부시나리오및기술분야에있어서는기술표준화가진행중에있다. 이미시장에 360도미디어서비스및디바이스가보급되어있었기때문에이들을위한공통의어플리케이션포맷제정을위한 MPEG A(Media Application Format) 의부속표준으로 OMAF를표준화하는것으로참여사들의의견이모아졌다. 이후 3 DoF 기반의 360도미디어저장및전송규격에대한요구사항과기술규격설계를위한논의들이본격적으로이어졌고, 2016 년 10월중국청두에서개최된 116차 MPEG 회의에서는 3 DoF 기반의저장, 전송규격표준뿐만이아니라, 6 DoF 를몰입형미디어를위한비디오, 오디오, 그래픽스및시스템기술들을포괄하는 MPEG I 표준제정의장기적계획이수립되었다. OMAF 는이후 MPEG I 의부속표준으로이동하게되었고, 2017 년말까지 3 DoF 표준화완료라는 MPEG I 의계획에따라표준화작업의속도를높여, 2017 년 1월에 Committee Draft(CD), 4월에 DIS(Draft International Standard), 7월에는 Study of DIS를발간하였으며, 10월마카오에서개최된 120차 MPEG 회의에서 FDIS(Final Draft International Standard) 를발간함으로써버전 1 표준화를마무리하였다. 현재 3DoF+ 미디어지원및복수시점 360 비디오, 오버레이, 서브픽처트랙등확장기능을포함하는버전 2 표준화를 2020 년초완료를목표로진행하고있다. III. OMAF 표준화현황및기술개요 2. OMAF 표준기술개요 1. OMAF 표준화현황 OMAF 표준화는모바일과 PC 기반의 HMD가대중화되기시작했던 2015 년 10월, 스위스제네바에서열린 115차 MPEG 회의에서시작되었다. 당시 OMAF 는 360도미디어서비스를위한저장포맷표준으로, 기존의 2D(2 dimensional) 미디어처리를위한획득, 압축, 저장, 전송을위한요소기술들을기반으로설계되고있다. 또한, 360도이미지, 비디오처리를위한새로운프로세싱단계들과여 2018 년 10 월 33

346 특집 : 360VR 및 몰입형 미디어 <그림 1> OMAF 컨텐츠 동작 흐름도 [2] <그림 2> Equi Rectangular Projection (ERP) [3] 기에 필요한 메타데이터들을 기술 범주로 포함한 다양한 프로젝션 포맷들이 연구/개발되고 있으며, 다. <그림 1>은 OMAF 컨텐츠의 동작흐름을 end OMAF는 현재 시장에서 보편적으로 사용되는 to end 관점에서 도시하여 보여주고 있다. Equi Rectangular Projection(ERP), Cube Map 360도 미디어는 오디오 센서와 카메라들로부터 Projection (CMP)을 지원하고 있다. <그림 2>, 획득된다. 일반적으로 360도 비디오, 이미지는 여 <그림 3>은 각각 ERP, CMP에서의 프로젝션 방법 러 대의 카메라로부터 획득되며, 획득된 이미지를 을 도시하여 보여주고 있다. 하나로 연결하는 스티칭(stitching), 3D 공간상의 <그림 4>에서와 같이 프로젝션의 결과물인 프로 전 방향 이미지를 정해진 포맷의 사각형 픽처에 투 젝티드 픽처(projected picture)는 선택적으로 리전 영하는 프로젝션(projection)과정을 거치게 된다. 와이즈 패킹(region wise packing) 과정을 거칠 34 방송과 미디어 제23권 4호

몰입형미디어포맷표준화동향 347 < 그림 3> Cube Map Projection (CMP) [3] < 그림 4> 리전와이즈패킹 (region wise packing) [2] < 그림 5> 팩트픽쳐생성을위한프로세싱단계 [2] 수있다. 이과정에서프로젝티드픽처를구성하는영역들의위치, 크기및방향을변형시킬수있으며, 전체적인압축효율을높이거나, 특정뷰포트 (viewport) 에해당하는영역의해상도를다른영역에비해높게처리함으로써사용자시점기반프로세싱에사용될수있도록픽처의구성을가공하여팩트픽처 (packed picture) 를생성한다. 이외에도 OMAF 는 < 그림 5> 와같이스티칭, 프로 젝션, 리전와이즈패킹에걸친팩트픽처생성과정에있어서, 3차원공간의회전 (rotation) 정도와 360 도컨텐츠의시야범위 (coverage) 를시그널링할수있는메타데이터를제공한다. 이러한메타데이터를이용하여, 중심점 (center point) 위치이동을통한압축효율향상, 360 도이하의비디오컨텐츠지원등다양한컨텐츠형태와목적을갖는몰입형미디어어플리케이션서비스가가능하도록하고있다. 2018 년 10 월 35

348 특집 : 360VR 및몰입형미디어 OMAF 는미디어데이터의프로세싱과관련된메타데이터뿐만아니라, 몰입형어플리케이션서비스에서의사용자경험향상을위한타임드메타데이터 (timed metadata) 를제공하고있다. 초기시점 (initial viewpoint), 추천뷰포트 (recommend viewport) 와같이 360도미디어의재생시간흐름에따라변화하는시점, 뷰포트관련데이터들을제공하고있다. 360도미디어는 HEVC, MPEG H Audio 등의규격으로부호화되며, 앞서설명한메타데이터들과함께 ISO base media file format[4] 기반의파일포맷에저장된다. 저장된파일은파일기반서비스, 본장의후반부에설명될 DASH(Dynamic Adaptive Streaming over HTTP), MMT(MPEG Media Transport) 기반의 360도미디어전송및스트리밍을통해사용자에게전달된다. 사용자디바이스에서는전달된파일을파싱 (parsing) 하여미디어데이터와메타데이터를추출하고, 미디어데이터를복호화한다. HMD 등의출 력장치를통해복호화된미디어데이터와메타데이터를통해 360도미디어를 3D 공간에복원하고, head/eye tracking 을통해사용자시점에해당되는 360도미디어의부분을몰입감있는형태로사용자에게제공하게된다. 360도비디오의압축과전송에있어서많은관심을받고있는또하나의기술요소는사용자시점기반프로세싱 (viewport dependent processing) 이다. 360도비디오의특성상사용자는항상전체비디오의일부에해당하는뷰포트만을시청하고있으므로, 뷰포트에해당하는일부분에해상도, 대역폭등의자원을집중하여사용한다면, 프로세싱효율을향상시킬수있을것이다. < 그림 6> 은두비트스트림과 MCTS(Motion Constrained Tile Set) 를이용한사용자시점기반프로세싱의예를보여준다. 저화질로전체비디오를부호화하여하나의비트스트림을구성하고, 고화질의비디오는 MCTS로분할하여부호화한다. 고화질의비디오는사용자의뷰포트에따라해당 < 그림 6> 두비트스트림과 MCTS 를이용한사용자시점기반프로세싱의예 [2] 36 방송과미디어제 23 권 4 호

몰입형미디어포맷표준화동향 349 MCTS 만전송, 복호화된다. 사용자시점에상관없이항상제공되는저화질의비디오는사용자시점이동과실제뷰포트이미지가사용자에게보여지기까지의지연시간 (Motion to photon latency) 에사용자에게제공될수있어, 사용자경험악화를최소화할수있다. 저장포맷인 OMAF 표준과연계하여, 몰입형미디어의전송및스트리밍을지원하기위한기존전송기술과 OMAF의접목방안또한논의되어 OMAF 표준의일부로포함되었다. DASH 를통한 OMAF 의전송기술은 IP/TCP 환경에서사용자시점기반화질 / 대역폭적응적 360 도미디어서비스를제공하기위한방안들을표준화하였다. < 그림 7> 에도시된바와같이, DASH 를통한 OMAF 전송을위해 360도미디어전송 < 그림 7> DASH 를통한 OMAF 컨텐츠전송 [2] 관련메타데이터지원을위한 DASH MPD(Media Presentation Description) 확장방안과, head/ eye tracking을통해사용자시점에해당하는 DASH segment 의선택적송수신방안이고려되어있다. MMT를통한 OMAF 전송기술은 IP/UDP 환경에서 360도미디어를사용자시점, 제작자시점기반으로효율적으로전송하기위한방안들을표준화하였다. < 그림 8> 에도시된바와같이, MMT를통한 OMAF 전송을위해 360도미디어전송관련메타데이터생성과, head/eye tracking 을통해사용자시점에해당하는 MMTP Flow 의효율적송수신방안이고려되어있다. 현재까지소개한 360도전방향미디어지원을 OMAF 버전 1의기술요소들을기반으로, 기능확장을위한 OMAF 버전 2 표준화가현재진행중에있다. OMAF 버전 2는 3 DoF+ 미디어지원을기본목표로하며, 복수시점 360도미디어, 오버레이, 360 비디오의서브픽처 (sub picture) 등다양한기능을제공하고있다. < 그림 9> 는복수시점 360 비디오서비스의형상을보여주고있다. 하나의 360도비디오시청중사용자의상호작용을통해동일한컨텐츠의다른시점에서획득된 360도비디오로이동할수있다. 경기장의트랙을따라이동하는카메라의예와같이복수시점의 360도비디오지원은고정된카메라시점에서뿐만아니라가변적위치의카메라시점또한지원한다. < 그림 10> 은오버레이가포함된 360도비디오서비스의형상을보여주고있다. 360 비디오에 2D 또는 3D 비디오, 이미지가올려진형태의영상을사용자에게제공할수있으며, 광고, 위치기반서비스등다양한 VR 어플리케이션에서활용이가능하 2018 년 10 월 37

350 특집 : 360VR 및몰입형미디어 F MMT Sending Entity ADC Generator MPEG CI/PI Generator Timed/Non-Timed VR media in MMTP Flow Presentation Information/ Signalling MMTP/UDP MMTP/WebSockets Viewport Feedback Application Signalling Fi MMT Receiving Entity HMD Current Viewport/HMD Information < 그림 8> MMT 를통한 OMAF 컨텐츠전송 [2] < 그림 9> 복수시점 360 비디오지원 [5][6] 38 방송과미디어제 23 권 4 호

몰입형미디어포맷표준화동향 351 < 그림 10> 오버레이가포함되는 360 비디오 [7] 다. IV. 결론 지금까지몰입형미디어표준인 MPEG I 와그부속표준으로서몰입형미디어포맷에대한시스템표준인 OMAF 의표준화동향및기술전반에대 해소개하였다. MPEG I 에서정의하는사용시나리오는 < 그림 11> 과같이다양한몰입환경을포함한다. 표준화가완료된 3 DoF 의 360도전방향비디오와현재표준화가진행중인 3 DoF+ 전방향비디오에서나아가, 앞으로의네이게이션이가능한컨텐츠, Social < 그림 11> MPEG-I 의몰입감단계정의 [2] 2018 년 10 월 39

352 특집 : 360VR 및몰입형미디어 VR 및 6 DoF 서비스를위하여표준화가진행될것이며 MPEG I 는차세대물입형미디어에대한산업계표준이될전망이다. 2015 년시작된 OMAF 표준화작업은 3 DoF 지원을위한버전 1 표준화작업을마무리하고, 3 DoF+ 및다양한사용자경험지원을위한버전 2 표준화작업을활발히진행하고있다. 현재까지 MPEG I 와 OMAF 는시장의요구에따라현존하는몰입형미디어서비스기술을표준에담아내고, 다양한어플리케이션서비스시나리오지원, 전방향미디어프로세싱효율성증대등향후몰입형미디어서비스기술의방향에대한전망도제시하고있다. MPEG I 와 OMAF 는표준화계획에발맞춰 6 DoF 기반몰입형미디어서비스기술제공에이르기까지지속적으로표준화가진행될것으로전망되며, 앞으로도관련시장의요구와최신의몰입형미디어기술동향을충실히반영하는표준기술이될것을기대한다. 참고문헌 참고문헌 [1] ISO/IEC JTC1/SC29/WG11/N17685, Technical Report on Architectures for Immersive Media, MPEG 122, Apr. 2018 [2] ISO/IEC JTC1/SC29/WG11/N17827, WD 2 of ISO/IEC 23090-2 OMAF 2nd edition, MPEG 123, July 2018. [3] Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11, 360Lib Software Manual, MPEG 117, Jan. 2017 [4] ISO/IEC JTC1/SC29/WG11/N15177, Text of ISO/IEC 14496-12 5th edition, MPEG 111, Feb. 2015. [5] ISO/IEC JTC1/SC29/WG11/M42483, Support of switching between content from different viewpoints, MPEG 122, Apr. 2018 [6] ISO/IEC JTC1/SC29/WG11/M42457, Support of multiple viewpoints, MPEG 122, Apr. 2018 [7] ISO/IEC JTC1/SC29/WG11/M42466, Spatial alignment of OMAF visual content, MPEG 122, Apr. 2018 필자소개 이장원 - 2007 년 : 경희대학교전자공학과학사 - 2013 년 : 경희대학교전자전파공학과박사 - 2013 년 ~ 현재 : LG 전자 CTO 부문선임연구원 - 주관심분야 : image processing, media streaming, broadcasting 40 방송과미디어제 23 권 4 호