혼합현실 기반 차량 주행 정보 인터페이스 디자인

Abstract

Augmented reality(AR) and virtual reality(VR) are being studied and developed constantly and the related market is steeply growing. But these two technologies have some issues. For enjoying contents in virtual reality, wearing a HMD(Head Mounted Device) is indispensable. But HMD is a bit heavy to use in daily life and causes dizziness and low visibility. Besides, in augmented reality, there are a lot of restrictions on the use of contents or games because of the small screen of smart phone.

Mixed Reality(MR) is the technology to remedy these shortcomings. MR mixes an interaction between human beings and computer graphics in virtual reality with real backgrounds and images in augmented reality. Hololens of Microsoft is a representative device. Although Hololens is worn on the head too as a HMD device, this is much more convenient to use and less comfortable, since this provides better visibility than the HMD of virtual reality. It is expected that in the future, this would evolve into a glasses or contact lens-type.

Typically, drivers of the present time drive checking four objects (dashboard, navigation, center facia, and front glass). If vehicle functions and options are added in the future, there would be more things that drivers should pay attention to. This may increase visual fatigue and highly decrease safety while driving long distances. Therefore, this study aims to devise an interface, which indicates essential information of car including car air-conditioning system, warning light and guide light, and fuel condition and engine condition, conveniences and road information including (semi-)autonomous driving condition, turn signal lamp, and signal and road congestion, and multimedia information including navigation, rear camera, surround view, DMB and music on the car front window, and is safe and easy to operate, based on the three functions (Gaze, Gesture, and Voice) of ‘Hololens’, using a glass and contact lens-type MR device that has the biggest potential for development and only integrates strong points of augmented reality and virtual reality.

The most important part in this study is to arrange the elements intuitively and efficiently and provide clear visibility, regardless of day and night, for safety of drivers. Thus, a survey was conducted to verify arrangement of design elements and contents and visibility. The survey items of design elements and contents were classified depending on the fields of view and for efficient visibility and arrangement, two to five plans were provided for each item.

Overall, the design elements used in this study got many votes and some design elements such as a voice recognition button were found to improve. When collecting opinions about things to improve and supplement depending on the fields of view, there were diverse ideas that were not even considered by the researcher. Lastly, the result of the survey on practicality of the interface design showed that the three operation methods, based on driving concentration, safety and visibility, and Hololens were greater than the existing methods. However, more than half the respondents said it was hard to be used among all age groups.

In conclusion, in order for all age groups to use comfortably, further research would need to develop the interface design of this study continuously, on the basis of different views and ideas mentioned in the survey. Moreover, this study will keep expanding by applying the functions for future vehicles to this study. It is anticipated that many automobile manufacturers could improve interior designs of cars more innovatively and guarantee economic feasibility of interior designs by drastically reducing the application of interior automobile parts like dashboard and navigation, based on this study finding.| 현재 증강현실과 가상현실에 대한 연구와 개발이 끊임없이 진행 중이며 관련 시장도 가파르게 성장하고 있다. 하지만, 두 기술은 몇 가지 문제점을 가지고 있다. 가상현실의 경우 콘텐츠를 즐기기 위해서는 머리에 쓰는 디바이스 HMD(Head Mounted Device)를 착용하여야 한다. 하지만 HMD는 일상생활에 활용하기에는 다소 무겁고 큰 데다 어지럼증과 시야 방해 등이 문제점으로 지적되고 있다. 또한, 증강현실을 이용한 콘텐츠들은 스마트폰의 작은 화면을 활용하므로 콘텐츠나 게임을 즐기기에 제한적인 부분이 많다.

이러한 단점을 보완할 수 있는 기술이 혼합현실(MR: Mixed Reality) 이다. 혼합현실은 가상현실의 인간과 컴퓨터 그래픽의 상호작용과 증강현실의 현실 배경과 이미지를 결합하였다. 대표적인 디바이스는 ‘마이크로소프트’ 홀로렌즈(Hololens)이다. 홀로렌즈도 HMD 디바이스로 머리에 쓰는 형태이지만 가상현실 HMD 보다 시야가 확보되어 훨씬 사용성이 높으며 불편함이 줄어들었다. 차후에 안경 및 콘택트렌즈 형태로 진화될 것으로 전망되고 있다.

또한, 현시대의 운전자들은 계기판과 내비게이션, 센터패시아, 앞 유리까지 크게 총 네 가지를 보며 운전을 하고 있다. 앞으로 차량의 기능들과 옵션이 추가되면서 운전자가 주시해야 할 부분은 더 많아질 것이다. 이에 따른 주시 피로도가 증가하여 장거리 운전 시 안전성이 매우 떨어진다. 따라서 본 연구에서는 가장 발전 가능성이 높고, 증강현실과 가상현실의 장점만을 결합한 혼합현실 기반의 콘텐츠 디자인으로 안경과 콘택트렌즈 형태로 진화된 혼합현실 디바이스를 이용하여 차량의 공조기, 경고 및 안내등, 연료 상태와 엔진 상태 등과 같은 차량의 필수 정보와 (반)자율주행 상태, 방향지시등, 신호 및 도로 정체 정도 표시 등과 같은 편의 및 일부 도로정보, 내비게이션, 후방카메라, 서라운드 뷰, DMB, 음악과 같은 멀티미디어 정보를 통합하여 앞 유리창에 표시하며 ’홀로렌즈’의 세 가지 조작방법인 응시(Gaze), 동작 인식(Gesture), 음성(Voice)을 기반으로 안전하면서도 쉽게 조작할 수 있는 인터페이스를 연구하였다.

본 연구를 진행하면서 가장 중점적으로 둔 부분은 운전자의 안전을 최우선으로 고려하여 직관적 및 효율적으로 요소들을 배치하고, 주야간 상관없이 뚜렷하게 볼 수 있는 가시성 확보였다. 이에 따라 디자인 요소와 콘텐츠들의 배치와 가시성에 대한 검증을 위해 설문을 시행하였다. 설문 항목은 본 연구의 모든 디자인 요소와 콘텐츠를 시야 별로 항목을 나누고, 가시성과 배치의 효율을 위해 각각의 항목별로 2안에서 5안을 제공하여 설문 항목을 구성하였다. 설문 결과로는 전체적으로 본 연구에서 사용한 디자인 요소들이 높은 득표수를 기록하였으며 음성인식 버튼 등 일부 디자인요소에서 개선할 점을 찾을 수 있었다. 시야별로 개선할 점과 보완할 점에 대한 의견을 받은 결과 필자가 생각하지 못했던 다양한 아이디어도 도출되었다. 끝으로 본 연구 인터페이스 디자인의 실용성에 대한 설문결과로 본 연구 수행의 세 가지 목표였던 운전집중도와 안전성 및 가시성, 그리고 홀로렌즈 기반의 세 가지 조작방법도 기존의 방식보다 뛰어나다고 판단되었다. 하지만 모든 연령층이 사용하기에는 어렵다는 의견도 절반이 넘는 득표수를 기록하였다.

따라서 후속 연구에서는 모든 연령대가 편리하게 사용할 수 있으며 설문을 통해 언급된 다양한 의견과 아이디어를 적용하여 본 연구의 인터페이스 디자인을 지속해서 발전시킬 것 이다. 또한 미래의 차량에 적용될 기능들을 본 연구에 적용하여 본 연구를 지속해서 확장해 나갈 것이다. 다양한 차량 제조회사에서 본 연구를 기반으로 계기판과 내비게이션 등 차량의 실내 주요 부품들이 대폭 줄어들어 차량 실내 디자인이 좀 더 획기적으로 디자인되고 실내 설계에 있어 경제성이 확보되기를 기대한다.