KR102155001B1 - Head mount display apparatus and method for operating the same - Google Patents

Head mount display apparatus and method for operating the same Download PDF

Info

Publication number
KR102155001B1
KR102155001B1 KR1020130074639A KR20130074639A KR102155001B1 KR 102155001 B1 KR102155001 B1 KR 102155001B1 KR 1020130074639 A KR1020130074639 A KR 1020130074639A KR 20130074639 A KR20130074639 A KR 20130074639A KR 102155001 B1 KR102155001 B1 KR 102155001B1
Authority
KR
South Korea
Prior art keywords
user
image
resolution
head
display device
Prior art date
Application number
KR1020130074639A
Other languages
Korean (ko)
Other versions
KR20150001425A (en
Inventor
김형준
손종현
조택일
최은지
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020130074639A priority Critical patent/KR102155001B1/en
Publication of KR20150001425A publication Critical patent/KR20150001425A/en
Application granted granted Critical
Publication of KR102155001B1 publication Critical patent/KR102155001B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0176—Head mounted characterised by mechanical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • G02B27/06—Viewing or reading apparatus with moving picture effect
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Abstract

본 발명은 헤드 마운트 디스플레이 장치 및 그 동작방법에 관한 것이다. 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치의 동작방법은, 제1 해상도의 영상을 수신하는 단계와, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하는 단계와, 사용자의 머리의 움직임을 감지하는 단계와, 감지되는 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하는 단계를 포함한다. 이에 의해, 사용자 이용 편의성이 향상될 수 있다. The present invention relates to a head mounted display device and a method of operating the same. A method of operating a head mounted display device according to an embodiment of the present invention includes receiving an image of a first resolution, and displaying a partial area of the image of the first resolution according to a second resolution display mode smaller than the first resolution. And detecting a movement of the user's head, and displaying another partial area of the image of the first resolution according to the detected movement of the user's head. Accordingly, user convenience may be improved.

Description

헤드 마운트 디스플레이 장치 및 그 동작방법{Head mount display apparatus and method for operating the same}Head mount display apparatus and method for operating the same

본 발명은 헤드 마운트 디스플레이 장치 및 그 동작방법에 관한 것이며, 더욱 상세하게는 사용자 이용 편의성이 향상시킬 수 있는 헤드 마운트 디스플레이 장치 및 그 동작방법에 관한 것이다.The present invention relates to a head mounted display device and a method of operating the same, and more particularly, to a head mounted display device capable of improving user convenience and an operating method thereof.

헤드 마운트 디스플레이 장치는 사용자의 머리에 착용하여 영상을 볼 수 있는 장치이다. 한편, 헤드 마운트 디스플레이 장치는, 사용자의 머리에 착용하므로, 사용자 입력을 수신하기 위한 수단이 제한적이다. The head mounted display device is a device that can be worn on a user's head to view an image. On the other hand, since the head mounted display device is worn on the user's head, the means for receiving a user input is limited.

이에 따라, 헤드 마운트 디스플레이 장치에서 사용자 입력을 위한 다양한 연구가 진행되고 있다. Accordingly, various studies for user input in a head mounted display device are being conducted.

본 발명의 목적은, 사용자 이용 편의성이 향상시킬 수 있는 헤드 마운트 디스플레이 장치 및 그 동작방법을 제공함에 있다.An object of the present invention is to provide a head mounted display device and a method of operating the same, which can improve user convenience.

상기 목적을 달성하기 위한 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치의 동작방법은, 제1 해상도의 영상을 수신하는 단계와, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하는 단계와, 사용자의 머리의 움직임을 감지하는 단계와, 감지되는 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하는 단계를 포함한다.In order to achieve the above object, a method of operating a head mounted display device according to an exemplary embodiment of the present invention includes receiving an image of a first resolution, and a second resolution display mode smaller than the first resolution. And displaying a partial region of the image, detecting a movement of the user's head, and displaying another partial region of the image of the first resolution according to the detected movement of the user's head.

한편, 상기 목적을 달성하기 위한 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치는, 소정 영상을 표시하는 디스플레이와, 디스플레이에 표시되는 영상을 확대하는 렌즈부와, 사용자의 머리의 움직임을 감지하는 센서부와, 제1 해상도의 영상을 수신하며, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하도록 제어하며, 감지되는 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하도록 제어하는 프로세서를 포함한다. On the other hand, the head mounted display device according to an embodiment of the present invention for achieving the above object includes a display for displaying a predetermined image, a lens unit for enlarging an image displayed on the display, and a sensor for detecting movement of a user's head. Receives an image of a second resolution and a second resolution, and controls to display a partial area of the image of the first resolution according to a second resolution display mode smaller than the first resolution, and according to the detected movement of the user's head, the first And a processor that controls to display another partial area of the image of the resolution.

본 발명의 일 실시예에 따른 헤드 마운트 디스플레이 장치는, 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시한 상태에서, 사용자의 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시할 수 있다. 이에 의해, 고해상도 영상에 대한 다운 스케일링 없이, 신속하게, 해당 영상을 재생하여 표시할 수 있게 된다. 이에 따라, 사용자의 이용 편의성이 증대될 수 있다.In the head mounted display device according to an embodiment of the present invention, according to a second resolution display mode, while displaying a partial area of an image of a first resolution, according to a movement of a user's head, another of the images of the first resolution Some areas can be displayed. As a result, it is possible to quickly reproduce and display the image without downscaling the high-resolution image. Accordingly, user convenience may be increased.

특히, 사용자의 머리의 상,하,좌, 또는 우 움직임에 대응하여, 표시 영상 영역을 이동하거나, 사용자의 머리의 앞 또는 뒤 움직임에 대응하여, 표시 영상을 줌인 또는 줌아웃할 수 있게 되어, 사용자가 원하는 영상 영역을 시청할 수 있게 된다.In particular, the display image area can be moved in response to the user's head movement up, down, left, or right, or the display image can be zoomed in or out in response to the user's head movement in front or behind. You can watch the desired video area.

한편, 사용자의 시선에 대응하여, 메뉴 표시 위치를 가변할 수 있어, 사용자의 이용 편의성이 증대될 수 있다.On the other hand, the menu display position can be varied in response to the user's gaze, so that user convenience can be increased.

도 1은 본 발명의 일 실시예에 따른 헤드 마운트 디스플레이 장치의 정면도이다.
도 2는 도 1의 헤드 마운트 디스플레이 장치의 배면도이다.
도 3은 도 1의 헤드 마운트 디스플레이 장치의 단면도이다.
도 4는 도 1의 헤드 마운트 디스플레이 장치의 간략한 내부 블록도이다.
도 5는 본 발명의 일실시예에 따른 헤드 마운트 디스플레이 장치의 동작 방법을 보여주는 순서도이다.
도 6 내지 도 16은 도 5의 동작 방법을 설명하기 위해 참조되는 도면이다.1 is a front view of a head mounted display device according to an embodiment of the present invention.
2 is a rear view of the head mounted display device of FIG. 1.
3 is a cross-sectional view of the head mounted display device of FIG. 1.
4 is a simplified internal block diagram of the head mounted display device of FIG. 1.
5 is a flowchart illustrating a method of operating a head mounted display device according to an embodiment of the present invention.
6 to 16 are views referenced to explain the operation method of FIG. 5.

이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다. Hereinafter, the present invention will be described in more detail with reference to the drawings.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.The suffixes "module" and "unit" for the constituent elements used in the following description are given in consideration of only the ease of writing in the present specification, and do not impart a particularly important meaning or role by themselves. Therefore, the "module" and "unit" may be used interchangeably with each other.

본 명세서에서 기술되는 헤드 마운트 디스플레이 장치는, 사용자의 머리에 착용가능한 헤드 마운트 디스플레 장치로서, 소정 영상을 표시할 수 있다. 특히, 영상을 표시하는 디스플레이와, 표시되는 영상을 확대하는 렌즈부를 구비하여, 사용자가, 디스플레이에 표시되는 영상을 확대된 영상으로 인식하도록 할 수 있다.The head mounted display device described herein is a head mounted display device that can be worn on the user's head and may display a predetermined image. In particular, a display for displaying an image and a lens unit for enlarging the displayed image may be provided so that a user may recognize an image displayed on the display as an enlarged image.

이하에서는 본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치에 대해 기술한다. Hereinafter, a head mounted display device according to an embodiment of the present invention will be described.

도 1은 본 발명의 일 실시예에 따른 헤드 마운트 디스플레이 장치의 정면도이고, 도 2는 도 1의 헤드 마운트 디스플레이 장치의 배면도이고, 도 3은 도 1의 헤드 마운트 디스플레이 장치의 단면도이다. 1 is a front view of a head mounted display device according to an embodiment of the present invention, FIG. 2 is a rear view of the head mounted display device of FIG. 1, and FIG. 3 is a cross-sectional view of the head mounted display device of FIG. 1.

도면을 참조하면, 사용자(700)는, 헤드 마운트 디스플레이 장치(100)를 머리에 착용할 수 있다. 도 1과 같이, 눈을 덮는 형태로, 착용 가능하며, 표시 영상의 몰입감 향상을 위해, 외부광 등은 차단되도록 하는 것이 바람직하다.Referring to the drawings, the user 700 may wear the head mounted display device 100 on the head. As shown in FIG. 1, it is preferable to cover the eyes and to be worn, and to block external light or the like in order to improve the immersion of the displayed image.

이러한 헤드 마운트 디스플레이 장치(100)를 착용한 사용자(700)는, 눕거나 앉아서, 재생되는 영상을 시청할 수 있게 된다. A user 700 wearing such a head mounted display device 100 may lie down or sit down and watch a reproduced image.

한편, 도 2와 같이, 헤드 마운트 디스플레이 장치(100)는 렌즈부(195L,195R)를 구비하며, 사용자의 눈에, 렌즈부(195L,195R)를 통해 확대되는 영상을 제공한다.Meanwhile, as shown in FIG. 2, the head mounted display apparatus 100 includes lens units 195L and 195R, and provides an image magnified to the user's eyes through the lens units 195L and 195R.

도 3은, 헤드 마운트 디스플레이 장치(100)의 상측 단면도를 나타낸다. 사용자(700)의 양안(710L,710R)에 일정 간격 이격되어, 헤드 마운트 디스플레이 장치(100)의 렌즈부(195L,195R)가 위치하며, 디스플레이(300L,300R)에서 각각 표시되는 영상은, 렌즈부(195L,195R)를 거쳐 확대되어, 사용자 양안(710L,710R)에 입사된다. 이에 따라, 사용자(700)는, 도면과 같이, 확대된 영상(300L,300R)을 인식할 수 있게 된다. 이때의 확대된 영상(300L,300R)은 허상 영상(virtual image)이다.3 shows an upper cross-sectional view of the head mounted display device 100. The lens units 195L and 195R of the head-mounted display device 100 are positioned at a predetermined interval apart from both eyes 710L and 710R of the user 700, and images displayed on the displays 300L and 300R, respectively, are It is enlarged through the units 195L and 195R, and is incident on both eyes 710L and 710R of the user. Accordingly, the user 700 can recognize the enlarged images 300L and 300R, as shown in the drawing. The enlarged images 300L and 300R at this time are virtual images.

도 4는 도 1의 헤드 마운트 디스플레이 장치의 간략한 내부 블록도이다.4 is a simplified internal block diagram of the head mounted display device of FIG. 1.

도면을 참조하면, 헤드 마운트 디스플레이 장치(100)는, 센서부(130), 통신 모듈(135), 메모리(140), 오디오 출력부(160), 프로세서(170), 디스플레이(180), 전원 공급부(190), 구동부(193) 및 렌즈부(195)를 구비할 수 있다. Referring to the drawings, the head mounted display device 100 includes a sensor unit 130, a communication module 135, a memory 140, an audio output unit 160, a processor 170, a display 180, and a power supply unit. (190), a driving unit 193, and a lens unit 195 may be provided.

센서부(130)는, 헤드 마운트 디스플레이 장치(100)의 움직임 정보, 특히, 사용자의 머리의 움직임 정보를 감지하고, 센싱 신호를 발생시킬 수 있다.The sensor unit 130 may detect movement information of the head mounted display device 100, particularly, movement information of a user's head, and generate a sensing signal.

예를 들어, 센서부(130)는, 모션 센서(미도시), 근접센서(미도시), 압력센서(미도시) 등 중 적어도 하나를 구비할 수 있다. For example, the sensor unit 130 may include at least one of a motion sensor (not shown), a proximity sensor (not shown), and a pressure sensor (not shown).

모션 센서(미도시)는 가속도 센서, 자이로 센서 등을 이용하여 헤드 마운트 디스플레이 장치(100)의 위치나 움직임 등을 감지한다. The motion sensor (not shown) detects the position or movement of the head mounted display device 100 using an acceleration sensor or a gyro sensor.

가속도 센서는, X축, Y축, Z축 방향에 대한 가속도 센서를 구비할 수 있다. 한편, 자이로 센서는 각속도를 측정하는 센서로서, 기준 방향에 대해 돌아간 방향을 감지할 수 있다. The acceleration sensor may include acceleration sensors in the X-axis, Y-axis, and Z-axis directions. Meanwhile, the gyro sensor is a sensor that measures an angular velocity, and can detect a direction that is turned relative to a reference direction.

근접센서(미도시)는 헤드 마운트 디스플레이 장치(100)로 접근하는 물체나, 헤드 마운트 디스플레이 장치(100)의 근방에 존재하는 물체의 유무 등을 기계적 접촉이 없이 검출할 수 있다.The proximity sensor (not shown) may detect the presence or absence of an object approaching the head mounted display device 100 or an object existing in the vicinity of the head mounted display device 100 without mechanical contact.

압력센서(미도시)는 헤드 마운트 디스플레이 장치(100)에 압력이 가해지는지 여부와, 그 압력의 크기 등을 검출할 수 있다. 예를 들어, 사용자 손에 의한 압력을 감지할 수 있다.The pressure sensor (not shown) may detect whether pressure is applied to the head mounted display device 100 and the magnitude of the pressure. For example, it is possible to detect pressure by the user's hand.

통신 모듈(135)은, 외부 장치와의 통신을 위한 인터페이스를 제공할 수 있다. 이를 위해, 통신 모듈(135)은, 이동통신 모듈(미도시), 무선 인터넷 모듈(미도시), 근거리 통신 모듈(미도시), 및 GPS 모듈(미도시) 등 중 적어도 하나를 포함할 수 있다. 예를 들어, 무선 인터넷 모듈(미도시)을 통해, WiFi 통신을 수행할 수 있으며, 근거리 통신 모듈(미도시)를 통해, NFC(Near Field Communication) 통신을 수행할 수 있다.The communication module 135 may provide an interface for communication with an external device. To this end, the communication module 135 may include at least one of a mobile communication module (not shown), a wireless Internet module (not shown), a short-range communication module (not shown), and a GPS module (not shown). . For example, WiFi communication may be performed through a wireless Internet module (not shown), and Near Field Communication (NFC) communication may be performed through a short-range communication module (not shown).

한편, 통신 모듈(135)은, 이동 단말기(미도시) 또는 외부 서버(미도시)와, 데이터를 교환할 수 있다. 구체적으로, 통신 모듈(135)은, 이동 단말기로부터, 영상 컨텐츠 등 각종 데이터를 수신할 수 있다. 한편, 이동 단말기로, 헤드 마운트 디스플레이 장치(100)의 상태 정보 등을 전송할 수도 있다.Meanwhile, the communication module 135 may exchange data with a mobile terminal (not shown) or an external server (not shown). Specifically, the communication module 135 may receive various types of data such as video content from a mobile terminal. Meanwhile, the state information of the head mounted display device 100 may be transmitted to the mobile terminal.

한편, 통신 모듈(135)은, 이동 단말기(미도시) 또는 외부 서버(미도시)로부터, 사용자(700)의 시력 정보를 수신할 수 있다.Meanwhile, the communication module 135 may receive vision information of the user 700 from a mobile terminal (not shown) or an external server (not shown).

메모리(140)는, 헤드 마운트 디스플레이 장치(100) 내의 프로세서(170)의 처리 또는 제어를 위한 프로그램이 저장될 수도 있고, 입력되거나 출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. The memory 140 may store a program for processing or controlling the processor 170 in the head mounted display device 100, or may perform a function for temporary storage of input or output data.

한편, 메모리(140)는, 외부 장치에서 수신되는 컨텐츠 데이터를 일시적으로 또는 일정 기간 동안 저장할 수 있다. Meanwhile, the memory 140 may temporarily store content data received from an external device or for a predetermined period.

오디오 출력부(160)는, 오디오 신호를 출력할 수 있다. 예를 들어, 디스플레이(180)에서 재생되는 컨텐츠의 오디오 신호를 출력할 수 있다. 한편, 오디오 출력부(160)는, 스피커를 구비할 수 있으며, 또는, 외부로 오디오 출력을 위한 오디오 출력 단자를 구비할 수도 있다.The audio output unit 160 may output an audio signal. For example, an audio signal of the content played on the display 180 may be output. Meanwhile, the audio output unit 160 may include a speaker, or may include an audio output terminal for audio output to the outside.

프로세서(170)는, 헤드 마운트 디스플레이 장치(100) 내의 각 유닛의 전반적인 동작을 제어한다. The processor 170 controls the overall operation of each unit in the head mounted display device 100.

예를 들어, 프로세서(170)는, 사용자 입력에 기초하여, 메모리(140)에 저장된 또는 통신 모듈(1345)을 통해 수신되는 영상 컨텐츠를 재생하여, 해당 비디오 신호와 오디오 신호를, 각각 디스플레이(180)와 오디오 출력부(160)에 출력할 수 있다.For example, the processor 170 reproduces video content stored in the memory 140 or received through the communication module 1345 based on a user input, and displays a corresponding video signal and an audio signal, respectively, on the display 180. ) And the audio output unit 160.

다른 예로, 프로세서(170)는, 센서부(130)에서 감지되는, 헤드 마운트 디스플레이 장치(100)의 움직임 정보, 특히, 사용자의 머리의 움직임 정보에 기초하여, 대응하는 동작을 수행하도록 제어할 수 있다.As another example, the processor 170 may control to perform a corresponding operation based on motion information of the head mounted display device 100 detected by the sensor unit 130, in particular, motion information of the user's head. have.

본 발명의 실시예와 관련하여, 프로세서(170)는, 제1 해상도의 영상을 수신하며, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시하도록 제어하며, 감지되는 사용자(700) 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시하도록 제어할 수 있다.In relation to an embodiment of the present invention, the processor 170 receives an image of a first resolution, and controls to display a partial area of an image of the first resolution according to a second resolution display mode smaller than the first resolution. , According to the detected movement of the user 700's head, it is possible to control to display another partial area of the image having the first resolution.

예를 들어, 프로세서(170)는, 사용자(700) 머리의 상,하,좌, 또는 우 움직임에 대응하여, 제1 해상도의 영상의 다른 일부 영역을 표시하도록 제어할 수 있다.For example, the processor 170 may control to display another partial area of an image having a first resolution in response to a movement of the user 700's head up, down, left, or right.

다른 예로, 프로세서(170)는, 사용자(700) 머리의 앞 또는 뒤 움직임에 대응하여, 표시되는 제1 해상도의 일부 영역을 줌인 하거나 줌아웃하여 표시하도록 제어할 수 있다.As another example, the processor 170 may control to zoom in or zoom out to display a partial area of the displayed first resolution in response to a movement of the user 700's head forward or backward.

한편, 프로세서(170)는, 메뉴 표시 모드에서, 사용자(700)의 시선에 대응하는 영역에, 메뉴를 표시하도록 제어할 수 있다.Meanwhile, in the menu display mode, the processor 170 may control to display a menu in an area corresponding to the gaze of the user 700.

한편, 프로세서(170)는, 감지되는 사용자(700) 머리 움직임에 따라, 출력되는 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변할 수 있다.Meanwhile, the processor 170 may change at least one of a frequency, a magnitude, or a phase of an output audio signal according to the detected movement of the user 700's head.

한편, 프로세서(170)는, 통신 모듈(135)을 통해 수신되는 사용자(700)의 시력 정보에 기초하여, 표시할 영상의 포커싱을 조절할 수 있다.Meanwhile, the processor 170 may adjust the focusing of an image to be displayed based on the vision information of the user 700 received through the communication module 135.

한편, 프로세서(170)는, 디스플레이(180)에 표시되는 영상의 컨텐츠 종류에 따라, 사용자(700)의 움직임에 대응하는 동작을 가변할 수 있다.Meanwhile, the processor 170 may vary an operation corresponding to the movement of the user 700 according to the type of content of the image displayed on the display 180.

한편, 프로세서(170)는, 프로세서(170)는, 사용자(700) 눈과 렌즈부(195) 사이의 거리를 가변하도록 제어할 수 있다. Meanwhile, the processor 170 may control the processor 170 to vary the distance between the eye of the user 700 and the lens unit 195.

디스플레이(180)는, 텍스트 또는 이미지 등을 표시할 수 있다. 특히, 디스플레이(180)는, 소정 영상을 표시할 수 있다. The display 180 may display text or an image. In particular, the display 180 may display a predetermined image.

한편, 디스플레이(180)는, 메뉴 표시 모드에서, 사용자(700)의 시선에 대응하는 영역에, 메뉴를 표시할 수 있다.Meanwhile, in the menu display mode, the display 180 may display a menu in an area corresponding to the gaze of the user 700.

전원 공급부(190)는, 프로세서(170)의 제어에 의해, 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다.The power supply unit 190 may supply power required for operation of each component under the control of the processor 170.

한편, 구동부(193)는, 프로세서(170)의 제어에 의해, 사용자(700) 눈과 렌즈부(195) 사이의 거리를 가변할 수 있다. 이를 위해, 구동부(193)는, 스텝핑 모터 등과 같은, 렌즈부 이동 부재(미도시)를 구비할 수 있다. 이러한 모터의 동작에 의해, 사용자(700) 눈과 렌즈부(195) 사이의 거리가 가변될 수 있다.Meanwhile, the driving unit 193 may change the distance between the eye of the user 700 and the lens unit 195 under the control of the processor 170. To this end, the driving unit 193 may include a lens unit moving member (not shown), such as a stepping motor. By the operation of the motor, the distance between the eye of the user 700 and the lens unit 195 may be varied.

도 5는 본 발명의 일실시예에 따른 헤드 마운트 디스플레이 장치의 동작 방법을 보여주는 순서도이고, 도 6 내지 도 16은 도 5의 동작 방법을 설명하기 위해 참조되는 도면이다.5 is a flow chart illustrating a method of operating a head mounted display device according to an embodiment of the present invention, and FIGS. 6 to 16 are views referenced to explain the operating method of FIG. 5.

먼저, 헤드 마운트 디스플레이 장치(100)는, 제1 해상도의 영상을 수신한다(S510).First, the head mounted display device 100 receives an image of a first resolution (S510).

헤드 마운트 디스플레이 장치(100)의 통신 모듈(135)은 외부 장치로부터 제1 해상도의 영상을 수신한다. 그리고, 수신되는 제1 해상도의 영상을 프로세서(170)로 전송한다.The communication module 135 of the head mounted display device 100 receives an image of a first resolution from an external device. Then, the received image of the first resolution is transmitted to the processor 170.

예를 들어, 제1 해상도의 영상은, UD(Ultra Definition) 영상, 파노라마(panorama) 영상, 21:9의 해상도를 가지는 와이드 시네마(wide cinema) 영상 등일 수 있다.For example, the image of the first resolution may be an ultra definition (UD) image, a panoramic image, a wide cinema image having a resolution of 21:9, and the like.

한편, 헤드 마운트 디스플레이 장치(100) 내의 디스플레이(180)가, UD 영상, 파노라마 영상, 21:9의 해상도 영상을 지원하지 않는 경우, 이러한 영상을 수신하는 프로세서(170)는 스케일링 작업을 통해, 디스플레이(180) 해상도로 다운 스케일링(down scaling)을 수행하여야 한다. 이러한 경우, 다운 스케일링으로 인한 재생 시간 지연 요소가 발생할 수 있다. On the other hand, when the display 180 in the head mounted display device 100 does not support a UD image, a panoramic image, or a 21:9 resolution image, the processor 170 receiving the image may perform a scaling operation to display (180) Down scaling should be performed with resolution. In this case, a playback time delay factor may occur due to downscaling.

본 발명에서는 이러한 점을 해결하기 위해, 프로세서(170)에서, 별도의 스케일링 없이, 제1 해상도의 영상 중 일부 영역을 디스플레이(180)에 표시하도록, 일부 영역을 출력하는 것으로 한다.In the present invention, in order to solve this problem, it is assumed that the processor 170 outputs a partial region so that a partial region of an image of the first resolution is displayed on the display 180 without separate scaling.

예를 들어, 디스플레이(180)가 1920X1080의 HD 영상의 표시가 가능하다면, 프로세서(170)는, 3840X2160의 UD 해상도의 영상을 수신하는 경우, UD 영상을 HD 영상으로 다운 스케일링하지 않고, UD 영상 중 HD 영상 영역에 대응하거나 그 이하인, UD 영상을 일부 영상 영역을 출력할 수 있다. For example, if the display 180 is capable of displaying a 1920X1080 HD image, the processor 170 does not downscale the UD image to an HD image when receiving an image with a UD resolution of 3840X2160, A partial image region of a UD image corresponding to or less than the HD image region may be output.

다음, 헤드 마운트 디스플레이 장치(100)는, 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 제1 해상도의 영상 중 일부 영역을 표시한다(S520). Next, the head mounted display apparatus 100 displays a partial area of the image of the first resolution according to the second resolution display mode smaller than the first resolution (S520).

헤드 마운트 디스플레이 장치(100)의 디스플레이(180)는, 표시 가능한 해상도에 맞게, 프로세서(170)에서, 출력되는 제1 해상도의 영상 중 일부 영역만을 표시할 수 있다.The display 180 of the head-mounted display device 100 may display only a partial area of an image of the first resolution output from the processor 170 in accordance with a displayable resolution.

상술한 바와 같이, 프로세서(170)에서 UD 영상의 일부 영역이 출력되는 경우, 디스플레이(180)는, UD 영상의 일부 영역만을 표시할 수 있다. 이에 따라, 사용자는, 입력되는 영상 중 일부 영역만을 시청할 수 있게 된다.As described above, when a partial region of the UD image is output from the processor 170, the display 180 may display only a partial region of the UD image. Accordingly, the user can view only a partial area of the input image.

도 6은 사용자(700)가 헤드 마운트 디스플레이 장치(100)를 착용하여, 제1 해상도의 영상(610) 중 일부 영역에 해당하는 영상(620)을 표시하는 것을 예시한다. 이때, 일부 영역에 해당하는 영상(620)의 가로 크기는 S1인 것을 알 수 있다.6 illustrates that the user 700 wears the head mounted display device 100 to display an image 620 corresponding to a partial area of the image 610 of the first resolution. At this time, it can be seen that the horizontal size of the image 620 corresponding to the partial region is S1.

한편, 도 6에서는, 디스플레이(180)에 제1 해상도의 영상 중 일부 영역에 해당하는 영상(620)과 함께, 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(625)가 표시되는 것을 예시한다. 이에 의해, 사용자는, 시청하고 있는 영상이, 전체 영상 영역 중 일부 영상 영역인 것을 인식할 수 있게 된다.Meanwhile, in FIG. 6, an object 625 representing a partial display mode or a second resolution display mode is displayed on the display 180 along with an image 620 corresponding to a partial area of an image of a first resolution. . Accordingly, the user can recognize that the video being viewed is a partial video area of the entire video area.

다음, 헤드 마운트 디스플레이 장치(100)는, 사용자(700) 머리의 움직임을 감지한다(S530).Next, the head mounted display device 100 detects the movement of the user 700's head (S530).

센서부(130)는, 사용자(700)의 머리의 움직임을 감지할 수 있다. 구체적으로, 가속도 센서를 통해, X축, Y축, Z축 방향에 대한 가속도를 감지하고, 자이로 센서를 통해, 각속도를 감지할 수 있다.The sensor unit 130 may detect movement of the user's head 700. Specifically, acceleration in the X-axis, Y-axis, and Z-axis directions may be sensed through the acceleration sensor, and angular velocity may be sensed through the gyro sensor.

프로세서(170)는, 센서부(130)에서 감지되는 센싱 신호에 기초하여, 사용자(700)의 머리의 움직임이, 상,하,좌, 또는 우로 이동인지, 앞, 뒤로 움직인지, 회전 움직임인 지 여부를 판단할 수 있다.Processor 170, based on the sensing signal sensed by the sensor unit 130, the movement of the head of the user 700, whether it is moving up, down, left, or right, forward, backward, or rotational movement. Can determine whether or not.

다음, 헤드 마운트 디스플레이 장치(100)는, 감지되는 사용자(700) 머리 움직임에 따라, 제1 해상도의 영상 중 다른 일부 영역을 표시한다(S540).Next, the head mounted display apparatus 100 displays another partial area of the image of the first resolution according to the detected movement of the user's head 700 (S540).

프로세서(170)는, 감지되는 사용자의 머리 움직임에 따라, 대응하는 동작을 수행한다. The processor 170 performs a corresponding operation according to the detected movement of the user's head.

특히, 프로세서(170)는, 제1 해상도의 영상 중 일부 영역을 디스플레이(180)에 출력하고 있는 상태에서, 사용자의 머리 움직임이 감지되면, 제1 해상도의 영상 중 다른 일부 영역을 디스플레이(180)에 출력할 수 있다.In particular, the processor 170 displays a partial region of the first resolution image on the display 180, and when a movement of the user's head is detected, the display 180 displays another partial region of the first resolution image. Can be printed on.

구체적으로, 프로세서(170)는, 사용자(700) 머리의 상,하,좌, 또는 우 움직임에 대응하여, 제1 해상도의 영상의 다른 일부 영역을 표시하도록 제어할 수 있다.Specifically, the processor 170 may control to display another partial area of the image of the first resolution in response to the movement of the user 700's head up, down, left, or right.

도 6은, 사용자(700)의 머리(705)의 움직임이, 상,하,좌, 또는 우로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상 영역이 그에 대응하여, 상,하,좌, 또는 우로 이동하는 것을 예시한다. 이에 의해, 사용자는, 제1 해상도의 영상 중 미쳐 시청하고 있지 못한 영역 영역을 간단하게 확인할 수 있게 된다.6, when the movement of the head 705 of the user 700 is moving up, down, left, or right, the image area displayed on the display 180 corresponds to that, up, down, left, Or it illustrates moving to the right. As a result, the user can simply check a region of the image of the first resolution that has not been viewed by the user.

도 7은 도 6과 같이, 제1 해상도의 영상(610) 중 일부 영역의 영상(9670)이 표시되나, 그 일부 영역의 수직 크기는, 제1 해상도 영상의 수직 크기와 동일하나, 수평 크기(S2)가 더 작은 것을 예시한다.7 shows an image 9670 of a partial region of the image 610 of the first resolution, as shown in FIG. 6, but the vertical size of the partial region is the same as the vertical size of the first resolution image, but the horizontal size ( Illustrate that S2) is smaller.

이러한 상태에서, 사용자(700)의 머리(705)의 움직임이, 좌 또는 우로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상 영역이 그에 대응하여, 좌 또는 우로 이동하는 것을 예시한다. In this state, when the movement of the head 705 of the user 700 moves to the left or right, the image area displayed on the display 180 moves to the left or right accordingly.

한편, 프로세서(170)는, 사용자(700) 머리의 상 또는 하 움직임에 대응하여, 표시되는 영상 영역이 좌 또는 우로 이동하도록 제어할 수 있다.Meanwhile, the processor 170 may control the displayed image area to move left or right in response to the upward or downward movement of the user 700's head.

구체적으로, 사용자(700)의 머리(705)의 움직임이, 상 또는 하로 이동인 경우, 좌 또는 우로 이동인 경우와 마찬가지로, 디스플레이(180)에 표시되고 있는 영상 영역이 좌 또는 우로 이동하는 것도 가능하다.Specifically, as in the case where the movement of the head 705 of the user 700 moves up or down, or moves to the left or right, the image area displayed on the display 180 may move to the left or right. Do.

한편, 도 7에서는, 디스플레이(180)에 제1 해상도의 영상 중 일부 영역에 해당하는 영상(670)과 함께, 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(675)가 표시되는 것을 예시한다. 이에 의해, 사용자는, 시청하고 있는 영상이, 전체 영상 영역 중 일부 영상 영역인 것을 인식할 수 있게 된다.Meanwhile, in FIG. 7, an object 675 representing a partial display mode or a second resolution display mode is displayed on the display 180 along with an image 670 corresponding to a partial area of an image of a first resolution. . Accordingly, the user can recognize that the video being viewed is a partial video area of the entire video area.

한편, 프로세서(170)는, 사용자(700) 머리의 앞 또는 뒤 움직임에 대응하여, 표시되는 제1 해상도의 일부 영역을 줌인 하거나 줌아웃하여 표시하도록 제어할 수 있다.Meanwhile, the processor 170 may control to zoom in or zoom out to display a partial area of the displayed first resolution in response to a movement of the user 700's head forward or backward.

한편, 도 6 및 도 7에서는 도시하지 않았지만, 사용자(700)가 현재 시청하고 있는 영상 영역 외의 영역에, 사용자가 관심 있어 하는 다른 영상 영역, 또는 전체 영상 영역 중 중요한 영상 영역이 존재하는 경우, 프로세서(170)는, 사용자의 시청 유도를 위한, 인디케이터를 표시하도록 제어할 수도 있다. 이에 의해, 사용자 관심 영역 또는 중요 영역에 대한 시청이 가능하게 된다. On the other hand, although not shown in FIGS. 6 and 7, if there is an important image region among the entire image region or another image region of interest to the user in a region other than the image region currently being viewed by the user 700, the processor Operation 170 may control to display an indicator for inducing a user's viewing. Accordingly, it is possible to view the user's interest area or important area.

도 8은, 사용자(700)의 머리(705)의 움직임이, 뒤로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌아웃하여 표시하는 것을 예시한다. FIG. 8 illustrates that, when the movement of the head 705 of the user 700 is moving backward, an image displayed on the display 180 is zoomed out and displayed.

즉, 제1 해상도의 영상(610) 중 일부 영역에 해당하는 영상(620)이 표시되다가, 뒤로 이동 움직임에 따라, 제1 해상도의 영상의 전 영역에 해당하는 영상(622)이 표시될 수 있다.That is, an image 620 corresponding to a partial region of the image 610 of the first resolution may be displayed, and then, according to a backward movement, an image 622 corresponding to the entire region of the image of the first resolution may be displayed. .

도면에서는 일부 영역에 해당하는 영상(620)의 가로 크기를 S1으로 하고, 전 영역에 해당하는 영상(622)의 가로 크기를 S3로 하여, S3의 크기가 더 큰 것으로 도시하나, 이와 달리, 그 크기는 동일한 것도 가능하다. 즉, 전 영역에 해당하는 영상(622)이 다운 스케일링되어, 표시되는 것이 가능하다.In the drawing, the horizontal size of the image 620 corresponding to a partial area is set to S1, and the horizontal size of the image 622 corresponding to the entire area is set to S3, and the size of S3 is shown to be larger. It is also possible to have the same size. That is, the image 622 corresponding to the entire area may be down-scaled and displayed.

이와 같이, 사용자가 제1 해상도 영상의 전 영역의 영상(622)을 시청할 수 있게 되어, 사용자의 이용 편의성이 증대된다.In this way, the user can view the image 622 of the entire region of the first resolution image, thereby increasing user convenience.

한편, 도면과 달리, 사용자(700)의 머리(705)의 움직임이, 뒤로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌인하는 것도 가능하다. On the other hand, unlike the drawings, when the movement of the head 705 of the user 700 is moving backward, it is possible to zoom in the image displayed on the display 180.

다음, 도 9는, 사용자(700)의 머리(705)의 움직임이, 앞으로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌인하여 표시하는 것을 예시한다. Next, FIG. 9 illustrates that, when the movement of the head 705 of the user 700 is moving forward, an image displayed on the display 180 is zoomed in and displayed.

즉, 제1 해상도의 영상(610)의 전 영역에 해당하는 영상(622)이 표시되다가, 앞으로 이동 움직임에 따라, 제1 해상도의 영상(610) 중 일부 영역에 해당하는 영상(620)이 표시될 수 있다.That is, the image 622 corresponding to the entire area of the image 610 of the first resolution is displayed, and then, according to the movement moving forward, the image 620 corresponding to the partial area of the image 610 of the first resolution is displayed. Can be.

한편, 도면과 달리, 사용자(700)의 머리(705)의 움직임이, 앞으로로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌아웃하는 것도 가능하다. On the other hand, unlike the drawing, when the movement of the head 705 of the user 700 is moving forward, it is possible to zoom out the image displayed on the display 180.

한편, 프로세서(170)는, 감지되는 사용자(700) 머리 움직임에 따라, 출력되는 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변할 수 있다.Meanwhile, the processor 170 may change at least one of a frequency, a magnitude, or a phase of an output audio signal according to the detected movement of the user 700's head.

도 10은, 사용자(700)의 머리(705)의 움직임이, 앞으로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌인하여 표시되고, 그에 따라 출력되는 오디오 신호의 크기가 커지는 것을 예시한다.FIG. 10 illustrates that when the movement of the head 705 of the user 700 is moving forward, an image displayed on the display 180 is zoomed in and displayed, and the size of the output audio signal increases accordingly. .

도면과 같이, 영상 줌인시, 사용자 몰입감을 증대시키기 위해, 헤드 마운트 디스플레이 장치(100)의 오디오 출력부(170)는, 제1 사운드(sound 1) 보다 크기(amplitude)가 더 큰 제2 사운드(sound 2)를 출력할 수 있다. 그 외, 주파수를 증가시키거나, 도플러 효과와 같이, 위상 차이를 점차적으로 감소시키거나, 이들의 조합도 가능하다.As shown in the drawing, in order to increase user immersion when zooming in an image, the audio output unit 170 of the head mounted display device 100 includes a second sound having a greater amplitude than the first sound (sound 1). sound 2) can be output. In addition, it is possible to increase the frequency, gradually reduce the phase difference, such as the Doppler effect, or a combination thereof.

한편, 사용자(700)의 머리(705)의 움직임이, 도 9와 같은 뒤로 이동인 경우, 디스플레이(180)에 표시되고 있는 영상을 줌아웃하고, 그에 따라 출력되는 오디오 신호의 크기를 작게하거나, 주파수를 작게하거나, 위상 차이를 크게하거나, 또는 이들의 조합도 가능하다.On the other hand, when the movement of the head 705 of the user 700 is moving backward as shown in FIG. 9, the image displayed on the display 180 is zoomed out, and the size of the output audio signal is reduced accordingly, or the frequency It is also possible to reduce the value, increase the phase difference, or a combination thereof.

한편, 사용자(700)의 머리(705)의 움직임이, 도 7 또는 도 8과 같은 상,하,좌, 또는 우 움직임인 경우, 프로세서(170)는, 오디오 출력부(170)에서 출력되는 오디오 신호의, 주파수, 크기, 위상 중 적어도 하나늘 가변할 수 있다.On the other hand, when the movement of the head 705 of the user 700 is an up, down, left, or right movement as shown in FIG. 7 or 8, the processor 170 may perform audio output from the audio output unit 170. At least one of signal, frequency, magnitude, and phase can be variable.

특히, 방향성 있는 오디오 신호를 출력할 수 있다. 예를 들어, 오디오 신호의 주파수 대역에서의 채널 간의 부호를 바꾸거나, 채널간의 Complex value를 조절하거나, 채널 간의 위상을 조절하거나, 각 주파수별 게인을 조절할 수 있다.In particular, it can output a directional audio signal. For example, it is possible to change a code between channels in a frequency band of an audio signal, adjust a complex value between channels, adjust a phase between channels, or adjust a gain for each frequency.

한편, 프로세서(170)는, 사용자(700)의 머리(705)의 움직임이, 도 7 또는 도 8과 같은 상,하,좌, 또는 우 움직임인 경우, 표시되는 영상의 오브젝트 변동에 따라, 해당 오브젝트에 대한 오디오 신호를 출력하도록 제어할 수 있다. On the other hand, the processor 170, when the movement of the head 705 of the user 700 is an up, down, left, or right movement as shown in FIG. 7 or 8, according to the object change of the displayed image, the corresponding You can control to output an audio signal for an object.

재생되는 영상 컨텐츠의 오디오 부호화시, 오브젝트별 코딩이 수행되고, 오브젝트별 코딩이 수행된, 오디오 데이터가, 헤드 마운트 디스플레이 장치(100)에 수신되는 경우, 프로세서(170)는, 사용자(700)의 머리(705)의 움직임에 대응하여, 오브젝트별 오디오 신호 재생을 수행할 수 있다.When audio encoding of the reproduced video content is performed, when object-specific coding is performed and object-specific coding is performed, and audio data is received by the head mounted display device 100, the processor 170 In response to the movement of the head 705, audio signal reproduction for each object may be performed.

도 11은 사용자(700)의 머리(705)의 움직임이 좌 이동인 경우, 표시되는 영상(620)을 좌로 이동시켜, 특정 오브젝트를 포함하는 영상(1120)을 표시하는 것을 예시한다. 11 illustrates an example of displaying an image 1120 including a specific object by moving the displayed image 620 to the left when the movement of the head 705 of the user 700 is left movement.

이때, 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(1125)가 함께 표시될 수 있다. 이에 의해, 사용자는, 시청하고 있는 영상이, 전체 영상 영역 중 일부 영상 영역인 것을 인식할 수 있게 된다.In this case, an object 1125 representing a partial display mode or a second resolution display mode may be displayed together. Accordingly, the user can recognize that the video being viewed is a partial video area of the entire video area.

도면을 참조하면, 좌 이동 전 표시되는 영상(620)은, 자동차의 일부 영역을 포함하는 영상이고, 좌 이동 후 표시되는 영상(1120)은, 기타 연주자를 포함하는 영상임을 알 수 있다. Referring to the drawing, it can be seen that the image 620 displayed before moving left is an image including a partial area of the vehicle, and the image 1120 displayed after moving left is an image including a guitar player.

영상 컨텐츠에 대한 오디오 코딩이, 자동차, 기타 연주자 별로, 오브젝트 코딩이 수행된 경우, 프로세서(170)는, 좌 이동 전 표시되는 영상(620)에 대응하여, 자동차와 관련 있는 제3 사운드(sound 3)를 출력할 수 있으며, 좌 이동 후 표시되는 영상(1120)에 대응하여, 기타 연주자와 관련 있는 제4 사운드(sound 4)를 출력할 수 있다.When the audio coding for the video content is performed by object coding for each car or other player, the processor 170 corresponds to the image 620 displayed before the left movement, and the third sound related to the vehicle (sound 3) is performed. ) May be output, and a fourth sound (sound 4) related to the guitar player may be output in response to the image 1120 displayed after moving left.

한편, 오브젝트 코딩이 수행되지 않은 경우라도, 프로세서(170)는, 사용자(700)의 머리(705)의 움직임이, 도 7 또는 도 8과 같은 상,하,좌, 또는 우 움직임인 경우, 표시되는 영상의 이동에 맞추어, 출력되는 오디오 신호의, 주파수, 크기, 위상 중 적어도 하나를 가변할 수 있다.On the other hand, even when object coding is not performed, the processor 170 displays when the movement of the head 705 of the user 700 is an up, down, left, or right movement as shown in FIG. 7 or 8. At least one of a frequency, a size, and a phase of the output audio signal may be varied according to the movement of the image to be output.

도 12는 복수의 헤드 마운트 디스플레이 장치의 사용 예를 예시한다.12 illustrates an example of using a plurality of head mounted display devices.

제1 사용자(700a)와 제2 사용자(700b) 사이에서, 동일 컨텐츠를 재생하여 실행하는 경우, 예를 들어, 2인용 게임 컨텐츠를 실행하는 경우, 제1 사용자(700a)가 착용한 제1 헤드 마운트 디스플레이 장치(100a)와 제2사용자(700b) 착용한 제2 헤드 마운트 디스플레이 장치(100b)는,서로 또는 경유하에 데이터를 교환할 수 있다.When playing and executing the same content between the first user 700a and the second user 700b, for example, when playing game content for two players, the first head worn by the first user 700a The mount display device 100a and the second head-mounted display device 100b worn by the second user 700b may exchange data with each other or via a pass.

그리고, 동일 컨텐츠의 영상 해상도가 제1 해상도인 경우, 각 헤드 마운트 디스플레이 장치(100a,100b)는 제1 해상도 보다 낮은 제2 해상도의 영상을 표시할 수 있다. 특히, 해당 사용자가 실행하고 있는 게임 영상을 표시할 수 있다.In addition, when the image resolution of the same content is the first resolution, each of the head mounted display devices 100a and 100b may display an image having a second resolution lower than the first resolution. In particular, it is possible to display an image of a game that the user is running.

도면과 같이, 2인용 게임 컨텐츠의 전체 영상(1210)이, 제1 사용자용 영상과 제2 사용자용 영상을 포함하는 경우, 제1 헤드 마운트 디스플레이 장치(100a)는, 제1 사용자용 영상(1220)을 표시하고, 제2 헤드 마운트 디스플레이 장치(100b)는, 제2 사용자용 영상(1230)을 표시할 수 이따.As shown in the drawing, when the entire image 1210 of the game content for two players includes an image for a first user and an image for a second user, the first head mounted display device 100a is an image for the first user 1220 ), and the second head mounted display device 100b may display the second user image 1230 at a later time.

이때, 제1 사용자용 영상(1220), 제2 사용자용 영상(1230)과 함께, 각각 일부 표시 모드 또는 제2 해상도 표시 모드를 나타내는 오브젝트(1225,1235)가, 각각 표시될 수 있다. 이에 의해, 2인용 영상 중 어느 사용자를 위한 영상인 지를 확인할 수 있게 된다.In this case, together with the first user image 1220 and the second user image 1230, objects 1225 and 1235 representing a partial display mode or a second resolution display mode, respectively, may be displayed. As a result, it is possible to check which of the two-player images are for users.

한편, 도 12에서, 각 사용자를 위한, 일부 영상이 표시된 상태에서, 도 6 또는 도 7과 같은, 상,하,좌, 또는 우 움직임이 있는 경우, 다른 사용자를 위한 영상이 표시되는 것도 가능하다. 즉, 제1 사용자(700a)가 머리(705)를 우로 이동하는 경우, 제1 헤드 마운트 디스플레이 장치(100a)는, 제1 사용자용 영상(1220)을 제2 사용자용 영상(1230)으로 교체하여 표시할 수 있다.Meanwhile, in FIG. 12, when some images are displayed for each user, as in FIG. 6 or 7, when there is an up, down, left, or right movement, an image for another user may be displayed. . That is, when the first user 700a moves the head 705 to the right, the first head mounted display device 100a replaces the first user image 1220 with the second user image 1230 Can be displayed.

한편, 줌인, 줌아웃도 가능하다. 즉, 도 8과 같이, 뒤로 이동 움직임이 있는 경우, 제1 헤드 마운트 디스플레이 장치(100a)는, 제1 사용자용 영상(1220)을 표시하다가, 줌아웃하여, 전체 영상(1210)을 표시할 수도 있다.Meanwhile, zoom in and zoom out are also possible. That is, as shown in FIG. 8, when there is a backward movement, the first head mounted display device 100a may display the first user image 1220 and then zoom out to display the entire image 1210. .

한편, 헤드 마운트 디스플레이 장치(100)는, 사용자(700)의 머리(705)에 착용 가능한 디스플레이 장치이므로, 사용자 시력에 따른, 영상 표시를 수행하는 것이 바람직하다.Meanwhile, since the head mounted display device 100 is a display device that can be worn on the head 705 of the user 700, it is preferable to display an image according to the user's eyesight.

사용자 시력에 대응하는 영상 표시의 일 방법으로는, 도 4의 설명에서 언급한 바와 같이, 렌즈부(195)의 위치를 이동시켜, 사용자 눈과, 렌즈부(195)의 위치를 가변하는 방법이 있다. One method of displaying an image corresponding to the user's eyesight is a method of changing the position of the user's eyes and the lens unit 195 by moving the position of the lens unit 195 as mentioned in the description of FIG. 4. have.

다른 방법으로는, 렌즈부(195)의 위치 이동 없이, 표시할 영상에 대한 신호 처리를 수행하는 방법이 있다.As another method, there is a method of performing signal processing on an image to be displayed without moving the position of the lens unit 195.

이러한 방법들은 모두, 사용자의 시력 정보를 기반으로 수행되는 것이 바람직하다. All of these methods are preferably performed based on the user's vision information.

이에, 본 발명의 실시예에서는, 사용자의 시력 정보를, 외부 장치로부터 수신하고, 시력 정보에 기초하여, 표시할 영상에 대한 신호 처리를 수행하는 방안을 제시한다.Accordingly, in an embodiment of the present invention, a method of receiving vision information of a user from an external device and performing signal processing on an image to be displayed based on the vision information is proposed.

도 13은, 사용자 시력 정보를 외부 장치(1300)로부터 수신하고, 수신되는 시력 정보에 따라, 컨텐츠의 포커싱을 조정하는 것을 예시한다.13 illustrates receiving user vision information from the external device 1300 and adjusting focusing of content according to the received vision information.

도 13(a)과 같이, 표시되는 영상(1310) 중 일부 영역(1315)에 대한 초점이 맞지 않는 경우, 사용자(700)는 이를 잘 인식할 수 없게 된다.As shown in FIG. 13(a), when the focus on some area 1315 of the displayed image 1310 is out of focus, the user 700 may not be able to recognize it well.

헤드 마운트 디스플레이 장치(100)는, 영상 컨텐츠 재생을 위해, 외부 장치(1300)로 시력 정보 전송 요청을 수행할 수 있으며, 외부 장치(1300)로부터 대응하는 사용자의 시력 정보(1305)를 통신 모듈(135)을 통해 수신할 수 있다.The head mounted display device 100 may perform a request for transmission of sight information to the external device 1300 to reproduce image content, and transmit sight information 1305 of a corresponding user from the external device 1300 to a communication module ( 135).

이때의 외부 장치(1300)는, 사용자의 시력 정보, 예를 들어, 디옵터 정보를 저장하고 있는 이동 단말기(미도시) 또는 서버(미도시) 등일 수 있다.The external device 1300 at this time may be a mobile terminal (not shown) or a server (not shown) that stores user's vision information, for example, diopter information.

프로세서(170)는, 수신되는 시력 정보(1305)에 대응하여, 재생할 영상에 대한 영상 신호 처리를 수행할 수 있다.The processor 170 may perform image signal processing on an image to be reproduced in response to the received vision information 1305.

예를 들어, 프로세서(170)는, 사용자 시력 정보에 대응하여, 영상 내에 포커싱할 영역을 결정하고, 결정된 포커싱 영역에 대한, 샤프니스 등을 강화하여, 포커싱을 강조할 수 있다.For example, the processor 170 may determine an area to be focused in an image in response to the user's vision information, and enhance the sharpness of the determined focusing area to emphasize focusing.

포커싱 영역 결정시, 프로세서(170)는, 영상 내의 깊이를 산출하고, 산출되는 깊이에 따라, 포커싱 영역을 결정할 수 있다. 예를 들어, 사용자가 시력이 안 좋을수록, 먼 영상이 잘 안 보이므로, 깊이가 작은, 영상 영역을 선택하여, 포커싱을 수행할 수 있다. When determining the focusing region, the processor 170 may calculate a depth in the image and determine the focusing region according to the calculated depth. For example, as the user has poor eyesight, the distant image is difficult to see, and thus an image region having a small depth may be selected to perform focusing.

한편, 프로세서(170)는, 메뉴 표시 모드에서, 사용자(700)의 시선에 대응하는 영역에, 메뉴를 표시하도록 제어할 수 있다.Meanwhile, in the menu display mode, the processor 170 may control to display a menu in an area corresponding to the gaze of the user 700.

도 2의 헤드 마운트 디스플레이 장치(100)의 배면도에서는 도시하지 않았지만, 좌안 렌즈부(195L)와 우안 렌즈부(195R) 사이에, 사용자 시선을 촬영하기 위한 카메라(미도시)가 더 배치될 수 있다.Although not shown in the rear view of the head mounted display device 100 of FIG. 2, a camera (not shown) for photographing a user's gaze may be further disposed between the left eye lens unit 195L and the right eye lens unit 195R. have.

프로세서(170)는, 카메라로부터 사용자 시선을 촬영을 수신하고, 사용자의 눈동자의 움직임을 파악할 수 있다.The processor 170 may receive a photograph of the user's gaze from the camera and detect the movement of the user's pupils.

그리고, 프로세서(170)는, 도 14와 같이, 사용자 시선의 움직임에 따라, 메뉴 표시 영역을 결정하고, 해당 영역에 메뉴를 표시하도록 제어할 수 있다.Further, as shown in FIG. 14, the processor 170 may determine a menu display area according to the movement of the user's gaze and control to display a menu in the corresponding area.

도 14(a)는, 사용자의 좌안(710L)과 우안(710R)의 각 눈동자(701L,701R)가 모두 우측으로 이동하는 경우, 표시 영상(1410)의 우측 영역(1420)에 메뉴(1425)가 표시되는 것을 예시한다. 이에 따라, 사용자 이용 편의성이 증대될 수 있다.14(a) shows a menu 1425 in the right area 1420 of the display image 1410 when the pupils 701L and 701R of the user's left eye 710L and the right eye 710R all move to the right. Exemplifies that is displayed. Accordingly, user convenience may be increased.

그리고, 프로세서(170)는, 메뉴가 표시된 상태에서, 사용자의 머리 움직임에 기초하여, 해당 항목을 선택할 수 있다.In addition, while the menu is displayed, the processor 170 may select a corresponding item based on the movement of the user's head.

프로세서(170)는, 도 14(b)와 같이, 사용자(700)가 머리(705)를 끄덕이면, 메뉴 내의 포커싱된 항목을 선택하는 것으로 판단할 수 있다. When the user 700 nods the head 705 as shown in FIG. 14B, the processor 170 may determine that the focused item in the menu is selected.

한편, 프로세서(170)는, 도 14(c)와 같이, 사용자(700)가 머리(705)를 상 또는 하로 움직이면, 메뉴 내의 포커싱을 상 또는 하로 이동시키는 것으로 판단할 수 있다. 이에 의해, 사용자가 간편하게, 메뉴 내의 원하는 항목을 선택할 수 있게 된다. Meanwhile, as shown in FIG. 14(c), when the user 700 moves the head 705 up or down, the processor 170 may determine that the focusing in the menu is moved up or down. Thereby, the user can conveniently select a desired item in the menu.

한편, 프로세서(170)는, 재생되어 표시되는 컨텐츠 종류에 따라, 사용자의 움직임에 대응하는 동작을 가변할 수 있다.Meanwhile, the processor 170 may vary an operation corresponding to the user's movement according to the type of content reproduced and displayed.

도 15(a)는 영화 컨텐츠(1510)와 컨텐츠 종류를 나타내는 오브젝트(1515)가 함꼐 표시되는 것을 예시한다.FIG. 15A illustrates that the movie content 1510 and the object 1515 representing the content type are displayed together.

이때, 프로세서(170)는, 도 15(b)와 같이, 사용자(700)가 머리(705)를 끄덕이면, 'yes', 도 15(c)와 같이, 사용자(700)가 머리(705)를 가로 저으면, 'no', 도 15(d)와 같이, 좌로 이동하면, '이전 시점으로 이동 재생', 도 15(e)와 같이 우로 이동하면, '이후 시점으로 이동 재생' 등의 동작을 수행하도록 제어할 수 있다. At this time, the processor 170, as shown in Figure 15 (b), if the user 700 nods the head 705,'yes', as in Figure 15 (c), the user 700 is the head 705 When horizontally shook'no', as shown in Fig. 15(d), moving to the left,'moving to the previous point of view', moving to the right as shown in Fig. 15(e),'moving to the next point of view', etc. Can be controlled to perform.

도 16(a)는 방송 영상(1610)와 컨텐츠 종류를 나타내는 오브젝트(1615)가 함꼐 표시되는 것을 예시한다.FIG. 16A illustrates that a broadcast image 1610 and an object 1615 indicating a content type are displayed together.

이때, 프로세서(170)는, 도 16(b)와 같이, 사용자(700)가 머리(705)를 하로 이동하면, '볼륨 다운', 도 16(c)와 같이, 사용자(700)가 머리(705)를 상으로 이동하면, '볼륨 업', 도 16(d)와 같이, 좌로 이동하면, '이전 채널 이동', 도 16(e)와 같이 우로 이동하면, '이후 채널 이동' 등의 동작을 수행하도록 제어할 수 있다. At this time, the processor 170, as shown in Figure 16 (b), when the user 700 moves the head 705 downward,'volume down', as shown in Figure 16 (c), the user 700 is the head ( When 705) is moved upward, operations such as'volume up', moving to the left as shown in FIG. 16(d),'moving the previous channel', and moving to the right as shown in FIG. Can be controlled to perform.

한편, 도 15와 도 16에 대한 도면 및 설명은, 해상도에 따른, 일부 영역 이동 표시와는 구분될 수 있다.Meanwhile, the drawings and descriptions of FIGS. 15 and 16 may be distinguished from a partial area movement display according to a resolution.

즉, 도 15와 도 16의 컨텐츠가 HD 컨텐트인 경우, 도 5 또는 도 6과 같은, UD 영상의 일부 영역 이동 표시와 달리, 컨텐츠 종류에 따른, 다른 동작이 수행될 수 있다.That is, when the content of FIGS. 15 and 16 is HD content, different operations may be performed according to the content type, unlike the display of moving a partial area of the UD image as shown in FIG. 5 or 6.

본 발명의 실시예에 따른 헤드 마운트 디스플레이 장치 및 그 동작방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The head mounted display device and its operation method according to an embodiment of the present invention are not limited to the configuration and method of the embodiments described as described above, but the above embodiments are each embodiment so that various modifications can be made. All or some of them may be selectively combined and configured.

한편, 본 발명의 헤드 마운트 디스플레이 장치의 동작방법은 헤드 마운트 디스플레이 장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the method of operating the head mounted display device of the present invention may be implemented as a code that can be read by a processor on a recording medium that can be read by a processor provided in the head mounted display device. The processor-readable recording medium includes all types of recording devices that store data that can be read by the processor. Examples of recording media that can be read by the processor include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, etc., and also include those implemented in the form of carrier waves such as transmission through the Internet. . Further, the processor-readable recording medium is distributed over a computer system connected through a network, so that the processor-readable code can be stored and executed in a distributed manner.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.In addition, although the preferred embodiments of the present invention have been illustrated and described above, the present invention is not limited to the specific embodiments described above, and the technical field to which the present invention belongs without departing from the gist of the present invention claimed in the claims. In addition, various modifications are possible by those of ordinary skill in the art, and these modifications should not be individually understood from the technical spirit or prospect of the present invention.

Claims (17)

사용자의 머리에 착용 가능한 헤드 마운트 디스플레이 장치의 동작방법에 있어서,
제1 해상도의 영상을 수신하는 단계;
상기 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 상기 제1 해상도의 영상 중 제1 일부 영역을 표시하는 단계;
상기 사용자의 머리의 움직임을 감지하는 단계;
상기 감지되는 사용자의 머리 움직임에 따라, 상기 제1 해상도의 영상 중 상기 제1 일부 영역과는 다른 제2 일부 영역을 표시하는 단계;
상기 감지되는 사용자의 머리의 움직임에 따라, 상기 제1 일부 영역에 포함되는 제1 오브젝트와 관련된 제1 오디오 신호를 출력하다가, 상기 제2 일부 영역에 포함되는 제2 오브젝트와 관련된 제2 오디오 신호로 변경하여 출력하는 단계;를 포함하고,
상기 제2 해상도 표시 모드는
상기 제1 해상도의 영상의 전체 영역 중 상기 제2 해상도에 해당하는 크기의 일부 영상 영역을 표시하는 모드인 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.In the operating method of the head mounted display device wearable on the user's head,
Receiving an image of a first resolution;
Displaying a first partial region of the image having the first resolution according to a second resolution display mode smaller than the first resolution;
Sensing the movement of the user's head;
Displaying a second partial region different from the first partial region of the image of the first resolution according to the detected movement of the user's head;
According to the detected movement of the user's head, a first audio signal related to a first object included in the first partial area is output and then converted to a second audio signal related to a second object included in the second partial area. Including; changing and outputting;
The second resolution display mode
And a mode for displaying a partial image region having a size corresponding to the second resolution among the entire region of the first resolution image. 제1항에 있어서,
상기 제2 일부 영역 표시 단계는,
상기 사용자의 머리의 상,하,좌, 또는 우 움직임에 대응하여, 상기 제1 해상도의 영상의 상기 제2 일부 영역을 표시하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
In the second partial area display step,
And displaying the second partial area of the image having the first resolution in response to a vertical, downward, left, or right movement of the user's head. 제1항에 있어서,
상기 제2 일부 영역 표시 단계는,
상기 사용자의 머리의 앞 또는 뒤 움직임에 대응하여, 상기 표시되는 제1 해상도의 상기 제1 일부 영역을 줌인 하거나 줌아웃하여 표시하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
In the second partial area display step,
A method of operating a head-mounted display device, comprising zooming in or zooming out to display the first partial area of the displayed first resolution in response to a movement of the user's head in front or behind. 제1항에 있어서,
메뉴 표시 모드에서, 상기 사용자의 시선에 대응하는 영역에, 메뉴를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
In the menu display mode, displaying a menu in an area corresponding to the user's gaze. 제1항에 있어서,
상기 감지되는 사용자의 머리 움직임에 따라, 출력되는 상기 제1 오디오 신호 또는 상기 제2 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
The operating method of a head mounted display device, wherein at least one of a frequency, a magnitude, or a phase of the output first audio signal or the second audio signal is varied according to the detected movement of the user's head. 제1항에 있어서,
외부로부터 상기 사용자의 시력 정보를 수신하는 단계;
상기 수신되는 시력 정보에 기초하여, 표시할 영상의 포커싱을 조절하는 단계;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
Receiving vision information of the user from the outside;
Adjusting the focusing of the image to be displayed based on the received vision information. 제1항에 있어서,
상기 제1 해상도 영상의 컨텐츠 종류에 따라, 상기 사용자의 움직임에 대응하는 상기 헤드 마운트 디스플레이 장치의 동작을 가변하며,
상기 동작은
‘컨텐츠의 재생 시점 변경', '컨텐츠의 볼륨 변경', '컨텐츠의 채널 변경'중 적어도 하나 이상을 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
According to the type of content of the first resolution image, the operation of the head mounted display device corresponding to the user's movement is varied,
The above operation is
A method of operating a head-mounted display device comprising at least one of'change of content playback point','content volume change', and'content channel change'. 제1항에 있어서,
상기 제1 일부 영역 표시시, 상기 제2 일부 영역을 시청을 위한 인디케이터를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치의 동작방법.The method of claim 1,
When the first partial region is displayed, displaying an indicator for viewing the second partial region; further comprising a. 사용자의 머리에 착용 가능한 헤드 마운트 디스플레이 장치에 있어서,
소정 영상을 표시하는 디스플레이;
상기 디스플레이에 표시되는 영상을 확대하는 렌즈부;
상기 사용자의 머리의 움직임을 감지하는 센서부;
제1 해상도의 영상을 수신하며, 상기 제1 해상도 보다 작은 제2 해상도 표시 모드에 따라, 상기 제1 해상도의 영상 중 제1 일부 영역을 표시하도록 제어하며, 상기 감지되는 사용자의 머리 움직임에 따라, 상기 제1 해상도의 영상 중 상기 제1 일부 영역과는 다른 제2 일부 영역을 표시하도록 제어하는 프로세서;를 포함하고,
상기 프로세서는,
상기 감지되는 사용자의 머리의 움직임에 따라, 상기 제1 일부 영역에 포함되는 제1 오브젝트와 관련된 제1 오디오 신호를 출력하다가, 상기 제2 일부 영역에 포함되는 제2 오브젝트와 관련된 제2 오디오 신호로 변경하여 출력하며,
상기 제2 해상도 표시 모드는
상기 제1 해상도의 영상의 전체 영역 중 상기 제2 해상도에 해당하는 크기의 일부 영상 영역을 표시하는 모드인 것을 특징으로 하는 헤드 마운트 디스플레이 장치.In the head mounted display device wearable on the user's head,
A display that displays a predetermined image;
A lens unit for enlarging an image displayed on the display;
A sensor unit detecting movement of the user's head;
Receives an image of a first resolution, and controls to display a first partial region of the image of the first resolution according to a second resolution display mode smaller than the first resolution, and according to the detected movement of the user's head, A processor that controls to display a second partial region different from the first partial region of the image having the first resolution; and
The processor,
According to the detected movement of the user's head, a first audio signal related to a first object included in the first partial area is output and then converted to a second audio signal related to a second object included in the second partial area. Change and print,
The second resolution display mode
And a mode for displaying a partial image region having a size corresponding to the second resolution among the entire region of the image having the first resolution. 제9항에 있어서,
상기 프로세서는,
상기 사용자의 머리의 상,하,좌, 또는 우 움직임에 대응하여, 상기 제1 해상도의 영상의 상기 제2 일부 영역을 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
The processor,
And controlling to display the second partial area of the image of the first resolution in response to the user's head movement up, down, left, or right. 제9항에 있어서,
상기 프로세서는,
상기 사용자의 머리의 앞 또는 뒤 움직임에 대응하여, 상기 표시되는 제1 해상도의 상기 제1 일부 영역을 줌인 하거나 줌아웃하여 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
The processor,
The head mounted display device, characterized in that controlling to zoom in or zoom out to display the first partial area of the displayed first resolution in response to a front or rear movement of the user's head. 제9항에 있어서,
상기 프로세서는,
메뉴 표시 모드에서, 상기 사용자의 시선에 대응하는 영역에, 메뉴를 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
The processor,
In the menu display mode, the head mounted display device, characterized in that controlling to display a menu in an area corresponding to the user's gaze. 제9항에 있어서,
상기 프로세서는,
상기 감지되는 사용자의 머리 움직임에 따라, 출력되는 상기 제1 오디오 신호 또는 상기 제2 오디오 신호의 주파수, 크기 또는 위상 중 적어도 하나를 가변하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
The processor,
The head mounted display device, wherein at least one of a frequency, a magnitude, or a phase of the output first audio signal or the second audio signal is changed according to the detected movement of the user's head. 제9항에 있어서,
외부로부터 상기 사용자의 시력 정보를 수신하는 통신 모듈;을 더 포함하고,
상기 프로세서는,
상기 수신되는 시력 정보에 기초하여, 표시할 영상의 포커싱을 조절하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
Further comprising a; communication module for receiving the vision information of the user from the outside,
The processor,
The head mounted display device, characterized in that adjusting focusing of an image to be displayed based on the received vision information. 제9항에 있어서,
상기 프로세서는,
상기 제1 해상도 영상의 컨텐츠 종류에 따라, 상기 사용자의 움직임에 대응하는 상기 헤드 마운트 디스플레이 장치의 동작을 가변하며,
상기 동작은
‘컨텐츠의 재생 시점 변경', '컨텐츠의 볼륨 변경', '컨텐츠의 채널 변경'중 적어도 하나 이상을 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
The processor,
According to the type of content of the first resolution image, the operation of the head mounted display device corresponding to the user's movement is varied,
The above operation is
A head-mounted display device comprising at least one of'change of content playback point','change of content volume', and'change of content channel'. 제9항에 있어서,
상기 사용자 눈과 상기 렌즈부 사이의 거리를 가변하는 구동부;를 더 포함하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
And a driving unit for varying a distance between the user's eye and the lens unit. 제9항에 있어서,
상기 프로세서는,
상기 제1 일부 영역 표시시, 상기 제2 일부 영역을 시청을 위한 인디케이터를 표시하도록 제어하는 것을 특징으로 하는 헤드 마운트 디스플레이 장치.The method of claim 9,
The processor,
When the first partial region is displayed, the second partial region is controlled to display an indicator for viewing.
KR1020130074639A 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same KR102155001B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130074639A KR102155001B1 (en) 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130074639A KR102155001B1 (en) 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same

Publications (2)

Publication Number Publication Date
KR20150001425A KR20150001425A (en) 2015-01-06
KR102155001B1 true KR102155001B1 (en) 2020-09-11

Family

ID=52475187

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130074639A KR102155001B1 (en) 2013-06-27 2013-06-27 Head mount display apparatus and method for operating the same

Country Status (1)

Country Link
KR (1) KR102155001B1 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11205305B2 (en) 2014-09-22 2021-12-21 Samsung Electronics Company, Ltd. Presentation of three-dimensional video
US10313656B2 (en) 2014-09-22 2019-06-04 Samsung Electronics Company Ltd. Image stitching for three-dimensional video
KR101564964B1 (en) * 2015-02-05 2015-11-02 계명대학교 산학협력단 Electrical stimulating head mounted display device reducing motion sickness in virtual reality
CN104702919B (en) 2015-03-31 2019-08-06 小米科技有限责任公司 Control method for playing back and device, electronic equipment
WO2017082457A1 (en) * 2015-11-11 2017-05-18 엘지전자 주식회사 Hmd and method for controlling same
KR102570950B1 (en) * 2015-12-28 2023-08-25 엘지디스플레이 주식회사 Display device for personal immersion apparatus
KR20180017736A (en) * 2016-08-10 2018-02-21 (주) 씽크브릿지 Head mounted display and method for controlling the same
WO2018097632A1 (en) * 2016-11-25 2018-05-31 Samsung Electronics Co., Ltd. Method and device for providing an image
US11049218B2 (en) 2017-08-11 2021-06-29 Samsung Electronics Company, Ltd. Seamless image stitching
US11347052B2 (en) * 2017-10-23 2022-05-31 Sony Corporation Display control apparatus, head mounted display, and display control method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009181209A (en) * 2008-01-29 2009-08-13 Funai Electric Co Ltd Contents storage and reproduction device and network system
JP2012008290A (en) * 2010-06-23 2012-01-12 Softbank Mobile Corp Spectacle type display device and server

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1195155A (en) * 1997-09-18 1999-04-09 Nec Software Kyushu Ltd Head up display device
KR20090084399A (en) * 2008-02-01 2009-08-05 주식회사 이엠디티 A headmounted display system with an enhancing visual acuity methods

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009181209A (en) * 2008-01-29 2009-08-13 Funai Electric Co Ltd Contents storage and reproduction device and network system
JP2012008290A (en) * 2010-06-23 2012-01-12 Softbank Mobile Corp Spectacle type display device and server

Also Published As

Publication number Publication date
KR20150001425A (en) 2015-01-06

Similar Documents

Publication Publication Date Title
KR102155001B1 (en) Head mount display apparatus and method for operating the same
US11024083B2 (en) Server, user terminal device, and control method therefor
US10534428B2 (en) Image processing device and image processing method, display device and display method, and image display system
US10009603B2 (en) Method and system for adaptive viewport for a mobile device based on viewing angle
US9858643B2 (en) Image generating device, image generating method, and program
EP3008548B1 (en) Head-mountable apparatus and systems
EP2843513A1 (en) Wearable device and method of outputting content thereof
US20140362113A1 (en) Change nature of display according to overall motion
KR20170013737A (en) Head mount display apparatus and method for operating the same
JP6642430B2 (en) Information processing apparatus, information processing method, and image display system
JP2015149634A (en) Image display device and method
EP3671408B1 (en) Virtual reality device and content adjusting method therefor
JP6348665B2 (en) Head mounted display, display control method and program
GB2517263A (en) Head-mountable apparatus and systems
CN105939497B (en) Media streaming system and media streaming method
KR20150006128A (en) Head mount display apparatus and method for operating the same
WO2019142432A1 (en) Information processing device, information processing method, and recording medium
WO2019150880A1 (en) Information processing device, information processing method, and program
CN106383577B (en) Scene control implementation method and system for VR video playing device
KR20170007341A (en) Method and apparatus for processing broadcast data by using external device
KR102437276B1 (en) Body movement based cloud vr device and method
WO2018216402A1 (en) Information processing apparatus, information processing method, and program
KR102140077B1 (en) Master device, slave device and control method thereof
WO2015033446A1 (en) Running assistance system and head mount display device used in same
WO2015099215A1 (en) Head-mounted display apparatus and method for operating same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant