Copyright of figures and other materials in the paper belongs original authors. ShareVR-Enabling co-located experiences for virtual reality between HMD and Non-HMD Users Jan Gugenheimer et al. CHI 2017 Presented by Ki-Sung Jeong 2018. 03. 22
Abstract VR 은다양한경험을가능하게하며엔터테인먼트의일부가되고있음 현재 VR 시스템은주로 HMD 를착용한사용자의몰입및경험에중점 HMD 를착용하지않은사용자들이이러한경험에서배제됨 HMD 를착용하지않은사용자를위해가상세계를 시각화할수있는 ShareVR 을설계하고구현 Ki-Sung Jeong 2017. 05. 16 # 2
Introduction VR 은현재많은발전을통해가정용엔터테인먼트환경의일부가됨 기술의진보를통해사용자가손을사용하여물리적으로걸어다니거나상호작용을할수있는몰입형가상환경을만들수있도록해줌 이러한몰입형가상환경은 HMD 사용자에게몰입감과즐거움을증가시키는데도움이됨 Doug A. Bowman and Ryan P. McMahan. 2007. Virtual Reality: How Much Immersion Is Enough? Computer 40, 7 (July 2007), 36 43. Ki-Sung Jeong 2017. 05. 16 # 3
Introduction VR 이가정용엔터테인먼트의필수부분이되고있는지금에도대부분의 VR 시스템은 HMD 사용자에게초점이맞추어져있음 가족구성원들, 혹은친구들과함께콘텐츠를경험하고즐기기위해서는 HMD 를착용하지않은사용자도함께경험해야함 본연구는 NON-HMD 사용자와 HMD 사용자의상호작용을위해어떻게시스템을제공해야하는지에대해설문을바탕으로 ShareVR 을설계및구현 Ki-Sung Jeong 2017. 05. 16 # 4
Introduction Contributions ShareVR 의개념, 설계및구현 VR 얼리어답터의피드백 (n = 48) 을기반으로 VR 에서공동위치비대칭경험을위한프로토타입 게임패드및 TV 로구성된기준선과비교하여 ShareVR 이즐거움, 존재감및사회적상호작용에미치는영향을탐구하고이점을보여주는사용자연구 공동배치된비대칭형 VR 경험및 3 가지어플리케이션의구현을위한설계공간탐구 Ki-Sung Jeong 2017. 05. 16 # 5
Playroom VR Ki-Sung Jeong 2017. 05. 16 # 6
Envisioned Scenario 계획된시나리오는 VR 이홈엔터테인먼트의필수가되었다는가정하에거실을주변으로공간을설정 NON-HMD 유저를위한적절한시각화제공 HMD 와 NON-HMD 사이의상호작용을고려 Ki-Sung Jeong 2017. 05. 16 # 7
Related Work Collaborative/Spatial Augmented Reality HMD 대신프로젝션기술을사용하여환경을구성 AR HMD 를가진사용자와타블렛을가진사용자사이의비대칭상호작용 Brett Jones et al. RoomAlive: Magical Experiences Enabled by Scalable, Adaptive Projector-camera Units. In Proceedings of the27th Annual ACM Symposium on User Interface Software and Technology (UIST 14). ACM, New York, NY, USA, Aaron Stafford et al./2006. Implementation of God-like Interaction Techniques for Supporting Collaboration Between Outdoor AR and Indoor Tabletop Users. In Proceedings of the 5th IEEE and ACM International Symposium on Mixed and Augmented Reality (ISMAR 06). IEEE Computer Society, Collaborative Virtual Environment 사용자가서로상호작용할수있는협력가상현실시스템 HMD 사용자와 PC 사용자가같이가상의환경을만드는연구 Jauvane C Oliveira, Xiaojun Shen, and Nicolas D Georganas. 2000. Collaborative virtual environment for industrial training and e-commerce. IEEE VRTS 288 (2000). Hikaru Ibayashi et al./ Dollhouse VR: a multi-view, multi-user collaborative design workspace with VR technology. In SIGGRAPH Asia 2015 Emerging Technologies. ACM, 8. Ki-Sung Jeong 2017. 05. 16 # 8
Related Work Asymmetric Co-located VR Gaming HMD, NON-HMD 가같이협력하는 Playroom VR 신체를통한참여와상호작용을통해즐거움과몰입감이증가될수있음 SCE Japan Studio. 2016. The Playroom VR. Game [PS4/PS VR]. (2016). SCCE, London, UK. Yue Gao and Regan Mandryk. 2012. The Acute Cognitive Benefits of Casual Exergame Play. In Proceedings of the SIGCHI Conference on Human Factors in Computing Systems (CHI 12). ACM, New York, NY, USA, Ki-Sung Jeong 2017. 05. 16 # 9
Online Survey 온라인설문조사를통해 Co-located asymmetric Interaction 에대한요구를탐색 초기사용자 ( 데모이용자 ) 를통해향후기술에서기대할수있는사항에대해자세히조사 조사는메일링을통해진행 총 48 건의응답 초기사용자에초점을맞추어개발및분석 Ki-Sung Jeong 2017. 05. 16 # 10
Online Survey Demographics 초기데모이용자 남성 46 명, 여성 2 명 대학학위 (77%), 평균 30.85 세 HMD ( 중복허용 ) HTC vive (54%) GoogleCardboard (41%) Oculus Rift CV1 (33%) Oculus Rift DK2 (21%) Samsung GearVR(19%) 가상현실에대한관심 전체인원의 73% 가관심을가짐 21% 가높은관심 6% 적당한관심 Ki-Sung Jeong 2017. 05. 16 # 11
Online Survey Current Coping Techniques VR 경험 94% 가 VR을경험 94% 중 38% 가정규식비대칭상호작용을경험 (AR + VR, 타블렛 +VR ) 94% 중 13% 비정규식비대칭상호작용을경험 (HMD + Non-HMD) 사용자사이의의사소통 음성 (91%) 컨트롤러 (28%) Ki-Sung Jeong 2017. 05. 16 # 12
Discussion of the Online Survey 응답자의 40% 가 HMD 를가진여러명의사람들과게임을즐김 HMD 의상호작용은주로음성을이용 사용자들은친구와함께 PC 등과같은플렛폼으로즐기는것을선호 But, HMD 를즐길수있는더좋은방법이있으면 VR 을이용하기위해친구들과더욱자주만날것이라고함 HMD & Non-HMD 이용을위한방안질문 대부분의응답자가 Playroom VR 과같은접근을선호 But, 더새로운대안에대한관심을가짐 이러한결과는현재사람들이기본적인게임역학에의존해있다는것을뜻함. 본연구는이결과를통해 Share VR 을구현하는데참고 ( 상호작용은음성을이용, 시각화와역할구분에초점 ) Ki-Sung Jeong 2017. 05. 16 # 13
ShareVR Concept and ImplementationⅠ Concept Non-HMD 사용자가 HMD 사용자경험의일부가되고두사용자가상호작용하며함께환경을탐험하는것을목표로 Share VR 을설계, 구현 구경꾼들이가상환경에서일어나는일을보며 HMD 사용자,Non- HMD 사용자와상호작용할수있도록하고싶음 조심해 와같은비명소리등등.. 거실환경에적합한엔터테인먼트시스템을개발하는것이목표 Ki-Sung Jeong 2017. 05. 16 # 14
ShareVR Concept and ImplementationⅡ Implementation 본연구는거실에서다양한사람들이참여가능한시스템을설계하는것이중요하다고생각함 HMD 를사용하지않기를원하는사용자가가상환경경험의일부가되스스로가참여에관심을가질수있도록하는것 이러한접근은 Non-HMD 사용자와구경꾼들이서로를보고이야기할수있기에또다른방식의상호작용을허용 우리는 PlayStation VR 과같은공간규모의 VR 시스템에중점을둠 NON-HMD 유저와 HMD 유저가같은공간에서같은수준의참여를제공 이러한형태의신체적참여와상호작용은즐거움과몰입의증가를가져옴 Ki-Sung Jeong 2017. 05. 16 # 15
ShareVR Concept and Implementation Concept and Hardware Implementation HMD : HTC Vive Projector BenQ W1080ST 2개를각각반대편에위치 공간의시각화를위함 Ki-Sung Jeong 2017. 05. 16 # 16
Concept and Hardware Implementation Interaction 본연구는하나의물리적공간에서 HMD, NON-HMD 사용자가공존 HTC VIVE Controller 1 Non-HMD User HTC VIVE + HTC VIVE Controller 2 HMD User 컨트롤러에부착된물리적인소품을사용 그냥컨트롤러자체진동기능. 온라인설문조사를바탕으로모든사용자는해드폰을사용하지않음 Ki-Sung Jeong 2017. 05. 16 # 17
Concept and Hardware Implementation Visualization 소파에앉아있는다른사용자를염두에두고시각화를설계 HMD 의시선이보이는모니터등 전체의공간을 Visualization 할수있도록두개의프로젝터를마주보고설치 이역시소파에앉아있는다른사용자가볼수있음 Non-HMD 사용자를위한 7 인치디스플레이를설치 Non-HMD 유저가가지고있는휴대폰으로전원공급 무선케이블을사용하려고하였으나디스플레이지연으로포기 Ki-Sung Jeong 2017. 05. 16 # 18
ShareVR Concept and Implementation Software Implementation Unity + SteamVR Unity 플러그인을사용하여구현 추가적으로 NewtonVR을사용하여가상객체와의인터렉션구현 NewtonVR에있는 HMD Camera객체 (Unity Prefab) 를이용 NewtonVR Sample Code.. Ki-Sung Jeong 2017. 05. 16 # 19
Implemented Experiences 3 가지종류의 Sample Scene 제작 BeMyLight, SneakyBoxes, SandBox Collaborative : Be My Light 배경 : 검은동굴 목표 : 동굴을탈출 내용 두사용자는동굴을탈출하기위해괴물과싸우고수수께끼를품 HMD 사용자 칼을휘둘러몬스터에게피해를입히고텔레포트를통해이동 Non-HMD 사용자 HMD사용자주위에마법의요정빛을생성 ( 유일한광원 ) 요정은괴물에게피해를줄수있는불덩어리를던질수있음 Ki-Sung Jeong 2017. 05. 16 # 20
Implemented Experiences Collaborative : Sneaky Boxes 배경 : 미국의 GreenLight를모방 목표 : 숨은 Non-HMD를찾음 내용 HMD User 배경에있는물체중하나로변신하여 HMD 유저를피해보석을찾아야함 Non-HMD User 배경물체가아닌 NON-HMD 를찾아죽여야됨 Ki-Sung Jeong 2017. 05. 16 # 21
Implemented Experiences Collaborative : Sandbox Application Soccer 목표 : 해딩을통해목표물을맞춤 장면내부에타겟을배치 Non-HMD User가 HMD User에게축구공을던짐 HMD유저는해딩을통해장면내부의타겟에축구공을맞춤 Ki-Sung Jeong 2017. 05. 16 # 22
Implemented Experiences Collaborative : Sandbox Application Lightsaber Duel 콘텐츠제작의도 : Non-HMD 사용자가시각화없이 HMD 사용자와상호작용이가능한지실험 스타워즈칼싸움 Ki-Sung Jeong 2017. 05. 16 # 23
Implemented Experiences Collaborative : Sandbox Application Puzzle 콘텐츠제작의도 : 더많은사용자참여기능에대한실험 기하학적도형이 HMD 유저주변으로만들어짐 Non-HMD 유저만주변의지형을볼수있음 HMD 유저는 Non-HMD 컨트롤러앞의화살표만볼수있음 의사소통은음성을통해이용 소파에있는사람들역시음성을통해 HMD 유저를지원 Ki-Sung Jeong 2017. 05. 16 # 24
Implemented Experiences Collaborative : Sandbox Application Drawing 콘텐츠제작의도 : 기존의 VR 경험을여러사용자와함께작업할수있도록확장하는것이얼마나간단한지에대한실험 HMD, Non-HMD 유저는공중에서컨트롤러를이용하여그림을그림 Ki-Sung Jeong 2017. 05. 16 # 25
User Study Study Design Share VR 이 HMD 와 Non-HMD 사용자간의즐거움, 몰입감, 사회적상호작용에미치는영향을측정 Study Design 실험은 Baseline System, HMD, Experience 에중점을맞춤 Baseline System 은 VIVE Controller 대신일반게임패드를이용한개별버전을만들어서실험 GEQ 설문지를이용 ( 게임경험질문지, 즐거움, 사실감등을측정 ) Ki-Sung Jeong 2017. 05. 16 # 26
User Study Procedure 소파, TV 화면, HTC VIVE 가움직일수있는거실과비슷한공간으로, 대학실험실에서진행 모든플레이세션은공정한비교를위해 5 분후에중단 각세션뒤에참가자들은경험과다른데이터들을위한설문을작성 평균 1 시간반이걸렸고, 참가자들은실험에대한비용을지불받음 Ki-Sung Jeong 2017. 05. 16 # 27
User Study Participants 평균연령 27.63 인 16 명의참가자를모집 남자 11 명, 여성 5 명 각참가자들은쌍으로모집되었고편한친구사이만모집 VR Device 에대한경험이많은사람들로모집 각참자가들은 VR 에대한관심은높은편이였지만향후 1 년간 VR 기기를직접구입하려는의도는낮았음 Ki-Sung Jeong 2017. 05. 16 # 28
Results(GEQ) Ki-Sung Jeong 2017. 05. 16 # 29
Results GEQ 수집데이터 최종비교 ( 즐거움, 현존감 ) Ki-Sung Jeong 2017. 05. 16 # 30
Results Enjoyment GEQ 긍정적경험, 부정적경험, 피곤함, 현실감등 4가지요소로구성 HMD 사용자는 Non-HMD 사용자에비해긍정적인경험점수가높음 Non-HMD 사용자는피곤함에높은점수를보임 HMD를사용한사람이현실감이훨씬높음 ShareVR 이 Baseline System 보다훨씬재밌다는평가를받음 ShareVR 에서의 Non-HMD 역할이 Baseline 보다재밌다는평가를받음 Ki-Sung Jeong 2017. 05. 16 # 31
Results Enjoyment Presence Baseline System 과비교하여 ShareVR 이훨씬좋다고평가를받음 Social Interaction SneakyBoxes 는 BeMyLight 보다높은점수를기록 리커트척도를통해시스템은사회적인상호작용에영향을준다고평가받음 ShareVR 이 Baseline System 보다훨씬매력적으로평가됨 Ki-Sung Jeong 2017. 05. 16 # 32
Discussion 본연구의목표는 HMD 와 Non-HMD 에대한 ShareVR 의즐거움, 사실감, 사회적인상호작용에대한영향을 Baseline 과비교하여조사하는것 GEQ 설문지에서큰차이가없었더라도최종비교 ( 주관적 ) 에서 Non- HMD 를위해 ShareVR 이좋다는것에높은등급의평가를받음 게임에따라 GEQ 의설문은게임의종류에따라영향을받음 HMD 사용자는주변의사용자와공간적, 시각적으로분리되지만주변에서공유되는정보는 HMD 유저에게이러한분리감을줄여줌 이는 Non-HMD 사용자역시 HMD 유저와경험을공유한다는걸보여줌 ShareVR 이 Baseline 보다즐거움, 사회적참여및사실감을향상시키는것으로나타남 이는비대칭접근방식을위해기존의게임을특별하게설계해야한다는걸의미함 Ki-Sung Jeong 2017. 05. 16 # 33
DesignSpace and Guidelines 추가적으로저자들한테실험을진행 Non-HMD 사용자는가상세계와 HMD 사용자의경험을비슷하게제공받음 HMD 사용자는 Non-HMD 사용자가주변에서관찰하고있었기때문에사물에부딪치지않고 Tracking Space 를벗어나지않았음 HMD 사용자의실수로인해 Non-HMD 유저가재미를느낌 모든사용자들이현장에서무슨일이벌어지는지완전히이해함 소파에사람이있을경우더높은경험을제공할수있음 축구게임과같이현실에서경험할수있는활동을기반으로하는게임은재미를느끼지못함 Ki-Sung Jeong 2017. 05. 16 # 34
Conclusion Projection 과 Mobile Display 를사용하는 ShareVR 을제작 HMD, Non-HMD 사용자를위한가상세계를시각화 얼리어답터의피드백을기반으로 ShareVR 을설계및구현 ShareVR 을 BaseLine 과비교하여즐거움, 사실감, 사회적상호작용면에서어떤지에대한실험을진행 추가적인간단한실험을통해제작의가이드라인을제시 Ki-Sung Jeong 2017. 05. 16 # 35
Result Video Ki-Sung Jeong 2017. 05. 16 # 36
Limitations and FutureWork 본연구는현재 2~3 명이함께노는것에제한됨 완벽한이해를위해더많은수의관측자를대상으로더많은조사가수행되어야함 앞으로더많은플레이어를통합하고배치하여가상현실의새로운공간과사회역학에미지는영향을조사할수있음 Ki-Sung Jeong 2017. 05. 16 # 37