KR20200030913A - Display apparatus for virtual reality, and control method thereof - Google Patents

Display apparatus for virtual reality, and control method thereof Download PDF

Info

Publication number
KR20200030913A
KR20200030913A KR1020180109733A KR20180109733A KR20200030913A KR 20200030913 A KR20200030913 A KR 20200030913A KR 1020180109733 A KR1020180109733 A KR 1020180109733A KR 20180109733 A KR20180109733 A KR 20180109733A KR 20200030913 A KR20200030913 A KR 20200030913A
Authority
KR
South Korea
Prior art keywords
region
interest
virtual reality
image
area
Prior art date
Application number
KR1020180109733A
Other languages
Korean (ko)
Inventor
배상호
Original Assignee
에스케이브로드밴드주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이브로드밴드주식회사 filed Critical 에스케이브로드밴드주식회사
Priority to KR1020180109733A priority Critical patent/KR20200030913A/en
Publication of KR20200030913A publication Critical patent/KR20200030913A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement
    • G06K9/00597
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0269Targeted advertisements based on user profile or attribute
    • G06Q30/0271Personalized advertisement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Game Theory and Decision Science (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

The present invention relates to a virtual reality (VR) display device capable of providing advertisements by reflecting 3D characteristics of a VR image and an operation method thereof. The present invention provides a VR display device comprising: a confirmation unit for checking a region of interest in a VR image based on a gaze direction of a viewer in the VR image; a determination unit for determining an object image as an advertisement target when the object image exists in the region of interest; and a display unit for displaying an advertisement related to the object image on at least a part of the VR image.

Description

가상현실표시장치 및 그 동작 방법{DISPLAY APPARATUS FOR VIRTUAL REALITY, AND CONTROL METHOD THEREOF}Virtual reality display device and its operation method {DISPLAY APPARATUS FOR VIRTUAL REALITY, AND CONTROL METHOD THEREOF}

본 발명은 가상현실(VR, Virtual Reality)영상의 3차원 특성을 반영하여 광고를 제공하기 위한 방안에 관한 것이다.The present invention relates to a method for providing advertisement by reflecting the 3D characteristics of a virtual reality (VR) video.

스마트 TV, 스마트폰과 같은 스마트 디바이스의 시장이 점차 커지고 있으며, 이를 이용한 광고 시스템도 점차 확대되고 있다.The market for smart devices such as smart TVs and smart phones is gradually increasing, and advertising systems using the smart devices are also gradually expanding.

이와 관련하여, 미디어 파일이 재생되는 동안 광고 이미지 또는 움직이는 영상이 출력되고 있으며 이러한 동영상 속의 객체 들도 모두 광고의 대상이 되고 있다.In this regard, an advertisement image or a moving image is output while the media file is being played, and all objects in the video are also targeted for advertisement.

최근에는 사용자의 시야의 변경에 의하여 시야변경에 따라 출력되는 영역이 달라져 현실감을 높인 가상현실(VR, Virtual Reality)영상이 개발되어 사용자들에게 다양한 흥미를 제공하고 있다.Recently, a virtual reality (VR) image has been developed that provides a variety of interests to users by changing the field of view according to the change of the user's field of view, thereby enhancing the sense of reality.

이러한 작금의 추세에 따라 종래의 일반적인 동영상과 달리 3차원 공간 특성을 가지게 되는 가상현실영상에 적절하고 효과적인 방법으로 광고를 제공할 수 있는 방법이 필요하게 되었다.In accordance with this trend, it is necessary to provide a method that can provide advertisements in an appropriate and effective manner for virtual reality images that have three-dimensional spatial characteristics, unlike conventional video.

본 발명은 상기한 사정을 감안하여 창출된 것으로서, 본 발명에서 도달하고자 하는 목적은, 가상현실(VR, Virtual Reality)영상의 3차원 특성을 반영하여 광고를 제공하는데 있다.The present invention has been created in view of the above circumstances, and an object of the present invention is to provide advertisements reflecting three-dimensional characteristics of a virtual reality (VR) image.

상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 가상현실표시장치는, 가상현실영상 내 시청자의 시선방향을 기초로 상기 가상현실영상 내에서의 관심영역을 확인하는 확인부; 상기 관심영역에 객체이미지가 존재하는 경우, 상기 객체이미지를 광고대상으로 결정하는 결정부; 및 상기 가상현실영상 내 적어도 일부 영역에 상기 객체이미지에 관련된 광고를 표시하는 표시부를 포함하는 것을 특징으로 한다.A virtual reality display device according to an embodiment of the present invention for achieving the above object, a confirmation unit for confirming a region of interest in the virtual reality image based on the viewer's gaze direction in the virtual reality image; A determination unit determining the object image as an advertisement target when an object image exists in the region of interest; And a display unit displaying advertisements related to the object image on at least a part of the virtual reality image.

구체적으로, 상기 확인부는, 기 설정된 시선유지시간 동안 상기 시청자의 시선방향이 머무는 영역을 상기 관심영역으로 확인할 수 있다.Specifically, the checking unit may check, as the region of interest, an area in which the viewer's gaze direction stays during a predetermined gaze retention time.

구체적으로, 상기 확인부는, 상기 시청자의 시선방향에 해당하는 공간벡터의 종점을 영역중심으로 하며, 상기 공간벡터의 길이에 따른 면적의 영역을 상기 관심영역으로 확인할 수 있다.Specifically, the identification unit may set an end point of the space vector corresponding to the viewer's gaze direction as an area center, and identify an area of an area according to the length of the space vector as the region of interest.

구체적으로, 상기 관심영역은, 상기 공간벡터의 길이가 길 수록 보다 넓은 면적의 영역으로 확인될 수 있다.Specifically, the region of interest may be identified as a region having a larger area as the length of the space vector increases.

구체적으로, 상기 결정부는, 상기 가상현실영상의 재생구간 중 상기 관심영역이 확인된 시점에 대응하는 특정 재생구간을 확인하여, 상기 특정 재생구간에 상기 관심영역에 존재하는 객체이미지를 광고대상으로 결정할 수 있다.Specifically, the determination unit determines a specific reproduction section corresponding to a point in time at which the region of interest is identified among the reproduction sections of the virtual reality image, and determines an object image existing in the region of interest in the specific reproduction section as an advertisement target. You can.

구체적으로, 상기 결정부는, 상기 관심영역에 2 이상의 객체이미지가 존재하는 경우, 상기 2 이상의 객체이미지 중 상기 관심영역과 중첩되는 영역의 면적이 보다 큰 특정 객체이미지를 광고대상으로 결정할 수 있다.Specifically, when two or more object images exist in the region of interest, the determination unit may determine a specific object image having a larger area of the region of interest between the two or more object images as an advertisement target.

상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른 가상현실표시장치의 동작 방법은, 가상현실영상 내 시청자의 시선방향을 기초로 상기 가상현실영상 내에서의 관심영역을 확인하는 확인단계; 상기 관심영역에 객체이미지가 존재하는 경우, 상기 객체이미지를 광고대상으로 결정하는 결정단계; 및 상기 가상현실영상 내 적어도 일부 영역에 상기 객체이미지에 관련된 광고를 표시하는 표시단계를 포함하는 것을 특징으로 한다.An operation method of a virtual reality display device according to an embodiment of the present invention for achieving the above object, a confirmation step of checking the region of interest in the virtual reality image based on the viewer's gaze direction in the virtual reality image; A determining step of determining the object image as an advertisement target when an object image exists in the region of interest; And a display step of displaying an advertisement related to the object image on at least a part of the virtual reality image.

구체적으로, 상기 확인단계는, 기 설정된 시선유지시간 동안 상기 시청자의 시선방향이 머무는 영역을 상기 관심영역으로 확인할 수 있다.Specifically, in the checking step, an area in which the viewer's gaze direction stays during a predetermined gaze retention time may be identified as the region of interest.

구체적으로, 상기 확인단계는, 상기 시청자의 시선방향에 해당하는 공간벡터의 종점을 영역중심으로 하며, 상기 공간벡터의 길이에 따른 면적의 영역을 상기 관심영역으로 확인할 수 있다.Specifically, in the checking step, an end point of the space vector corresponding to the viewer's gaze direction is an area center, and an area of an area according to the length of the space vector can be identified as the region of interest.

구체적으로, 상기 관심영역은, 상기 공간벡터의 길이가 길 수록 보다 넓은 면적의 영역으로 확인될 수 있다.Specifically, the region of interest may be identified as a region having a larger area as the length of the space vector increases.

구체적으로, 상기 결정단계는, 상기 가상현실영상의 재생구간 중 상기 관심영역이 확인된 시점에 대응하는 특정 재생구간을 확인하여, 상기 특정 재생구간에 상기 관심영역에 존재하는 객체이미지를 광고대상으로 결정할 수 있다.Specifically, in the determining step, a specific reproduction section corresponding to a point in time at which the region of interest is identified among the reproduction sections of the virtual reality image is checked, and an object image existing in the region of interest in the specific reproduction section is targeted for advertisement. Can decide.

구체적으로, 상기 결정단계는, 상기 관심영역에 2 이상의 객체이미지가 존재하는 경우, 상기 2 이상의 객체이미지 중 상기 관심영역과 중첩되는 영역의 면적이 보다 큰 특정 객체이미지를 광고대상으로 결정할 수 있다.Specifically, in the determining step, when two or more object images exist in the region of interest, a specific object image having a larger area of the region overlapping the region of interest among the two or more object images may be determined as an advertisement target.

이에, 본 발명에 따른 가상현실표시장치 및 그 동작 방법에 의하면, 가상현실(VR, Virtual Reality)영상에서 시청자의 시선방향에 기초한 관심사를 도출하고, 도출된 관심사에 해당하는 광고를 제공함으로써, 가상현실영상이 가지는 3차원 공간 특성에 특화된 효율적인 광고 제공 시스템을 구축할 수 있다.Thus, according to the virtual reality display device and its operation method according to the present invention, by deriving an interest based on the viewer's gaze direction from the virtual reality (VR, Virtual Reality) image, and providing an advertisement corresponding to the derived interest, virtual It is possible to construct an efficient advertisement providing system specialized in the 3D spatial characteristics of the real image.

도 1은 본 발명의 일 실시예에 따른 광고 제공 시스템을 보여주고 있다.
도 2는 본 발명의 일 실시예에 따른 가상현실표시장치의 개략적인 구성도.
도 3은 본 발명의 일 실시예에 따른 관심영역을 설명하기 위한 예시도.
도 4는 본 발명의 일 실시예에 따른 광고대상을 설명하기 위한 예시도.
도 5는 본 발명의 일 실시예에 따른 가상현실표시장치의 동작 방법을 설명하기 위한 순서도.
1 shows an advertisement providing system according to an embodiment of the present invention.
2 is a schematic configuration diagram of a virtual reality display device according to an embodiment of the present invention.
3 is an exemplary view for explaining a region of interest according to an embodiment of the present invention.
4 is an exemplary view for explaining an advertisement target according to an embodiment of the present invention.
5 is a flowchart illustrating an operation method of a virtual reality display device according to an embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 일 실시예에 대하여 설명한다.Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 광고 제공 시스템을 보여주고 있다.1 shows an advertisement providing system according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 광고 제공 시스템은, 가상현실영상이 표시되는 가상현실장비(10) 및 가상현실영상을 재생하는 가상현실표시장치(20)를 포함하는 구성을 가질 수 있다.As shown in FIG. 1, an advertisement providing system according to an embodiment of the present invention includes a virtual reality device 10 displaying a virtual reality image and a virtual reality display device 20 playing a virtual reality image. It may have a configuration.

가상현실장비(10)는 가상현실영상 내 시청자의 시선방향을 검출하는 장비를 일컫는 것으로서, 예컨대, HMD(Head mounted Display)가 이에 포함될 수 있다.The virtual reality equipment 10 refers to equipment that detects a viewer's gaze direction in a virtual reality image, and may include, for example, a HMD (Head mounted Display).

가상현실표지장치(20)는 가상현실영상을 재생하며, 가상현실장비(10)에서 검출되는 시청자의 시선방향에 상응하도록 가상현실영상이 표시되는 각도를 변경하는 장치를 일컫는 것으로서, 예컨대, 가상현실 제공을 위한 애플리케이션이 설치되는 단말(예: 스마트폰, PC) 또는 유무선 네트워크를 통해 접속 가능한 별도의 서버 형태로도 구현될 수 있다.The virtual reality display device 20 refers to a device that reproduces a virtual reality image and changes an angle at which the virtual reality image is displayed to correspond to a viewer's gaze direction detected by the virtual reality equipment 10, for example, virtual reality. It may also be implemented as a terminal (for example, a smart phone, a PC) on which an application for providing is installed, or as a separate server accessible through a wired or wireless network.

이상 본 발명의 일 실시예에 따른 광고 제공 시스템은, 전술한 구성을 기반으로 가상현실영상에서 시청자의 관심사에 해당하는 광고를 제공할 수 있는데, 이하에서는 이를 실현하기 위한 가상현실표시장치(20)의 구성에 대해 보다 구체적으로 설명하기로 한다.The advertisement providing system according to an embodiment of the present invention may provide advertisement corresponding to a viewer's interest in a virtual reality image based on the above-described configuration, and the virtual reality display device 20 for realizing the following will be provided. The configuration of the will be described in more detail.

도 2는 본 발명의 일 실시예에 따른 가상현실표시장치(20)의 개략적인 구성을 보여주고 있다.2 shows a schematic configuration of a virtual reality display device 20 according to an embodiment of the present invention.

도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 가상현실표시장치(20)는 가상현실영상 내 시청자의 관심영역을 확인하는 확인부(21), 광고대상을 결정하는 결정부(22), 및 광고를 표시하는 표시부(23)를 포함하는 구성을 가질 수 있다.As shown in FIG. 2, the virtual reality display device 20 according to an embodiment of the present invention includes a confirmation unit 21 for confirming a viewer's region of interest in a virtual reality image, and a determination unit 22 for determining an advertisement target ), And a display unit 23 for displaying advertisements.

이러한, 가상현실표시장치(20)의 구성 전체 내지는 적어도 일부는 하드웨어 모듈 형태 또는 소프트웨어 모듈 형태로 구현되거나, 하드웨어 모듈과 소프트웨어 모듈이 조합된 형태로도 구현될 수 있다.The whole or at least part of the configuration of the virtual reality display device 20 may be implemented in the form of a hardware module or a software module, or a combination of a hardware module and a software module.

여기서, 소프트웨어 모듈이란, 예컨대, 가상현실표시장치(20) 내에서 연산을 처리하는 프로세서에 의해 실행되는 명령어로 이해될 수 있으며, 이러한 명령어는 가상현실표시장치(20) 내 메모리에 탑재된 형태를 가질 수 있을 것이다.Here, the software module may be understood as, for example, an instruction executed by a processor that processes an operation in the virtual reality display device 20, and these instructions may include a form mounted in the memory in the virtual reality display device 20. Will have.

한편, 본 발명의 일 실시예에 따른 가상현실표시장치(20)는 전술한 구성 이외에, 가상현실장치(10)와의 실질적인 통신 기능을 담당하는 RF 모듈인 통신부(24)의 구성을 더 포함할 수 있다.On the other hand, the virtual reality display device 20 according to an embodiment of the present invention, in addition to the above-described configuration, may further include the configuration of the communication module 24 which is an RF module in charge of a practical communication function with the virtual reality device 10. have.

이러한 통신부(48)는 예컨대, 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기, 디지털 신호 처리기, 코덱(CODEC) 칩셋, 및 메모리 등을 포함하지만 이에 제한되지는 않으며, 이 기능을 수행하는 공지의 회로는 모두 포함할 수 있다.The communication unit 48 includes, but is not limited to, an antenna system, an RF transceiver, one or more amplifiers, a tuner, one or more oscillators, a digital signal processor, a codec (CODEC) chipset, and memory, for example, and performs this function. All known circuits can be included.

결국, 본 발명의 일 실시예에 따른 가상현실표시장치(20)는 전술한 구성에 따라 가상현실영상에서 시청자의 관심사에 해당하는 광고를 제공할 수 있는데, 이하에서는 이를 실현하기 위한 가상현실표시장치(20) 내 구성에 대해 보다 구체적으로 설명하기로 한다.After all, the virtual reality display device 20 according to an embodiment of the present invention can provide advertisements corresponding to the interests of viewers in the virtual reality image according to the above-described configuration, hereinafter, a virtual reality display device for realizing this (20) My configuration will be described in more detail.

확인부(21)는 가상현실영상 내 관심영역을 확인하는 기능을 수행한다.The confirmation unit 21 performs a function of checking a region of interest in the virtual reality image.

보다 구체적으로, 확인부(21)는 가상현실장치(10)에서 검출되는 가상현실영상 내 시청자의 시선방향에 기초하여 가상현실영상 내 관심영역을 확인하게 된다.More specifically, the confirmation unit 21 checks the region of interest in the virtual reality image based on the viewer's gaze direction in the virtual reality image detected by the virtual reality device 10.

이때, 확인부(21)는 가상현실영상 내 시청자의 눈의 위치를 기준으로 시선방향의 방향성을 가지게 되는 벡터인 공간벡터를 이용하여 관심영역을 특정할 수 있다.At this time, the confirmation unit 21 may specify a region of interest using a space vector, which is a vector having a direction in the line of sight based on the position of the viewer's eye in the virtual reality image.

즉, 확인부(21)는 시청자의 시선방향에 해당하는 공간벡터가 존재하는 경우, 이러한 공간벡터의 종점을 영역중심으로 일정 크기의 면적을 가지는 영역을 관심영역으로 확인할 수 있다.That is, when a space vector corresponding to the viewer's gaze direction exists, the confirmation unit 21 may identify an area having a certain size of area as the region of interest by terminating the end point of the space vector.

예를 들어, 도 3에 도시된 바와 같이, 시청자의 시선방향에 해당하는 공간벡터가 존재하는 경우, 이러한 공간벡터의 종점을 영역중심(a)으로 하며 일정 크기의 면적(b)을 가지게 되는 영역을 관심영역으로 확인할 수 있는 것이다.For example, as shown in FIG. 3, when a space vector corresponding to a viewer's gaze direction exists, an end point of the space vector is a region center (a) and an area (b) having a predetermined size Can be identified as the region of interest.

여기서, 관심영역의 면적(b)은 공간벡터의 길이 즉, 공간벡터의 시점과 종점 간의 거리에 의존되며, 이러한 공간벡터의 길이가 길수록 보다 넓은 면적으로 확인될 수 있다.Here, the area (b) of the region of interest depends on the length of the space vector, that is, the distance between the start and end points of the space vector, and the longer the length of the space vector, the larger the area.

참고로, 공간벡터의 길이가 길다는 것은 가상공간 내에서 시청자와 관심영역 간의 거리가 멀다는 것을 의미하는 것으로, 이러한 원거리 특성을 반영하여 공간벡터의 길이가 길수록 보다 넓은 면적의 영역을 관심영역으로 확인될 수 있는 것이다.For reference, the long space vector means that the distance between the viewer and the region of interest is far within the virtual space, and the longer the space vector is, the larger the area of interest is to be the region of interest within the virtual space. It can be confirmed.

다만, 확인부(21)는 이처럼 가상현실영상 내 관심영역을 확인함에 있어서, 시청자의 시선방향이 향하는 영역을 관심영역으로 무조건 확인하는 것이 아닌, 기 설정된 시선유지시간(예: 5초) 동안 시청자의 시선방향이 머무는 경우에 한해 해당 영역을 관심영역으로 확인함으로써, 확인된 관심영역에 대한 신뢰성을 확보할 수 있다.However, the confirmation unit 21 does not unconditionally check the region of the viewer's gaze direction toward the region of interest in confirming the region of interest in the virtual reality image, but for a predetermined gaze retention time (for example, 5 seconds). Reliability for the identified region of interest can be secured by confirming the region as the region of interest only when the gaze direction of is staying.

결정부(22)는 광고대상을 결정하는 기능을 수행한다.The determining unit 22 performs a function of determining an advertisement target.

보다 구체적으로, 결정부(22)는 가상현실영상 내 시청자의 시선방향에 따른 관심영역이 확인되며, 이러한 관심영역에 객체이미지가 존재하는 경우, 해당 객체이미지를 광고대상으로 결정하게 된다.More specifically, the determination unit 22 determines the region of interest according to the viewer's gaze direction in the virtual reality image, and if an object image exists in the region of interest, the object image is determined as an advertisement target.

이때, 결정부(22)는 가상현실영상의 재생구간 중 관심영역이 확인된 시점에 대응하는 특정 재생구간을 확인하여, 해당 재생구간에 관심영역에 존재하는 객체이미지를 광고대상으로 결정할 수 있다.At this time, the determination unit 22 may determine a specific reproduction section corresponding to a point in time at which the region of interest is identified among the reproduction sections of the virtual reality image, and determine an object image existing in the region of interest in the corresponding reproduction section as an advertisement target.

여기서, 관심영역이 확인된 시점에 대응하는 특정 재생구간은, 시청자의 시선방향이 유지되는 시청유지시간 동안에 해당하는 가상현실영상의 재상구간으로 이해될 수 있다.Here, the specific reproduction section corresponding to the time point at which the region of interest is confirmed may be understood as a replay section of the virtual reality image corresponding to the viewing maintenance time in which the viewer's gaze direction is maintained.

이를 위해, 본 발명의 일 실시예에서는 가상현실영상의 재생구간을 프레임 단위로 구분하며, 구분된 각 프레임의 3차원 영상(360 °)을 다 시점 각도(예: 15°)로 분할하여, 분할된 각 시점 영역에 존재하는 객체이미지에 대한 정보를 사전 획득할 필요가 있다.To this end, in one embodiment of the present invention, the reproduction section of the virtual reality image is divided into frame units, and the 3D image (360 °) of each divided frame is divided into multi-view angles (for example, 15 °) and divided It is necessary to obtain information about an object image existing in each view area.

한편, 이처럼 관심영역에 존재하는 객체이미지를 광고대상으로 결정하는 동작과 관련하여, 관심영역에 2 이상의 객체이미지가 존재하는 경우를 예상할 수 있다.Meanwhile, in relation to the operation of determining the object image existing in the region of interest as an advertisement target, it is possible to predict a case where two or more object images exist in the region of interest.

이 경우, 결정부(22)는 2 이상의 객체이미지 중 관심영역과 중첩되는 영역의 면적이 보다 큰 특정 객체이미지를 광고대상으로 결정할 수 있다.In this case, the determination unit 22 may determine, as an advertisement target, a specific object image having a larger area of a region overlapping the region of interest among two or more object images.

예를 들어, 도 4에 도시된 바와 같이 관심영역 내 제1객체이미지(A)와 제2객체이미지(B)가 존재하는 경우, 제1객체이미지(A)에서 관심영역과 중첩되는 영역의 면적(a), 및 제2객체이미지(B)에서 관심영역과 중첩되는 영역의 면적(b)을 확인하게 되며, 확인 결과, 제1객체이미지(A)에서 관심영역과 중첩되는 영역의 면적(a)이 제2객체이미지(B)에서 관심영역과 중첩되는 영역의 면적(b)보다 큰 경우, 제1객체이미지(A)를 광고대상으로 결정할 수 있는 것이다.For example, as illustrated in FIG. 4, when the first object image A and the second object image B exist in the region of interest, the area of the region overlapping the region of interest in the first object image A (a), and the area (b) of the region overlapping the region of interest in the second object image (B) is checked. As a result of the verification, the area (a) of the region overlapping the region of interest in the first object image (A) ) Is greater than the area (b) of the region overlapping the region of interest in the second object image (B), it is possible to determine the first object image (A) as an advertisement target.

표시부(23)는 광고를 표시하는 기능을 수행한다.The display unit 23 functions to display advertisements.

보다 구체적으로, 표시부(23)는 관심영역에 존재하는 객체이미지가 광고대상으로 결정된 경우, 해당 객체이미지와 관련하여 기 등록된 광고를 가상현실영상에 표시하게 된다.More specifically, when the object image existing in the region of interest is determined as an advertisement target, the display unit 23 displays a pre-registered advertisement related to the object image on the virtual reality image.

이때, 표시부(23)는 가상현실영상 내 적어도 일부 영역 예컨대, 광고대상으로 결정된 객체이미지와 광고가 중첩되어 표시되도록 하거나, 객체이미지와는 별도의 영역에 광고가 표시되도록 할 수 있으며, 이에 제한되는 것이 아닌, 가상현실영상 내에서 시청자가 인식 가능한 영역이라면 해당 영역에 광고가 표시되도록 할 수 있음은 물론이다.In this case, the display unit 23 may display at least a part of the virtual reality image, for example, an object image determined as an advertisement target and an advertisement overlapping, or may display an advertisement in a separate area from the object image. Of course, if the viewer is recognizable in the virtual reality image, the advertisement can be displayed in the corresponding region.

이상에서 살펴본 바와 같이 본 발명의 일 실시예에서의 가상현실표시장치(20)의 구성에 따르면, 가상현실(VR, Virtual Reality)영상에서 시청자의 시선방향에 기초한 관심사를 도출하고, 도출된 관심사에 해당하는 광고를 제공함으로써, 가상현실영상이 가지는 3차원 공간 특성에 특화된 효율적인 광고 제공 시스템을 구축할 수 있음을 알 수 있다.As described above, according to the configuration of the virtual reality display device 20 according to an embodiment of the present invention, a virtual reality (VR, Virtual Reality) image based on the viewer's gaze direction based on the interest derived, derived from the derived interest It can be seen that by providing the corresponding advertisement, it is possible to construct an efficient advertisement providing system specialized in the 3D spatial characteristics of the virtual reality image.

이하에서는 도 5를 참조하여 본 발명의 일 실시예에 따른 가상현실표시장치(20)의 동작 방법을 설명하기로 한다.Hereinafter, an operation method of the virtual reality display device 20 according to an embodiment of the present invention will be described with reference to FIG. 5.

먼저, 확인부(21)는 가상현실장치(10)에서 검출되는 가상현실영상 내 시청자의 시선방향에 기초하여 가상현실영상 내 관심영역을 확인한다(S11-S13).First, the confirmation unit 21 checks the region of interest in the virtual reality image based on the viewer's gaze direction in the virtual reality image detected by the virtual reality device 10 (S11-S13).

이때, 확인부(21)는 가상현실영상 내 시청자의 눈의 위치를 기준으로 시선방향의 방향성을 가지게 되는 벡터인 공간벡터를 이용하여 관심영역을 특정할 수 있다.At this time, the confirmation unit 21 may specify a region of interest using a space vector, which is a vector having a direction in the line of sight based on the position of the viewer's eye in the virtual reality image.

즉, 확인부(21)는 시청자의 시선방향에 해당하는 공간벡터가 존재하는 경우, 이러한 공간벡터의 종점을 영역중심으로 일정 크기의 면적을 가지는 영역을 관심영역으로 확인할 수 있다.That is, when a space vector corresponding to the viewer's gaze direction exists, the confirmation unit 21 may identify an area having a certain size of area as the region of interest by terminating the end point of the space vector.

예를 들어, 도 3에 도시된 바와 같이, 시청자의 시선방향에 해당하는 공간벡터가 존재하는 경우, 이러한 공간벡터의 종점을 영역중심(a)으로 하며 일정 크기의 면적(b)을 가지게 되는 영역을 관심영역으로 확인할 수 있는 것이다.For example, as shown in FIG. 3, when a space vector corresponding to a viewer's gaze direction exists, an end point of the space vector is a region center (a) and an area (b) having a predetermined size Can be identified as the region of interest.

여기서, 관심영역의 면적(b)은 공간벡터의 길이 즉, 공간벡터의 시점과 종점 간의 거리에 의존되며, 이러한 공간벡터의 길이가 길수록 보다 넓은 면적으로 확인될 수 있다.Here, the area (b) of the region of interest depends on the length of the space vector, that is, the distance between the start and end points of the space vector, and the longer the length of the space vector, the larger the area.

참고로, 공간벡터의 길이가 길다는 것은 가상공간 내에서 시청자와 관심영역 간의 거리가 멀다는 것을 의미하는 것으로, 이러한 원거리 특성을 반영하여 공간벡터의 길이가 길수록 보다 넓은 면적의 영역을 관심영역으로 확인될 수 있는 것이다.For reference, the long space vector means that the distance between the viewer and the region of interest is far within the virtual space, and the longer the space vector is, the larger the area of interest is to be the region of interest within the virtual space. It can be confirmed.

다만, 확인부(21)는 이처럼 가상현실영상 내 관심영역을 확인함에 있어서, 시청자의 시선방향이 향하는 영역을 관심영역으로 무조건 확인하는 것이 아닌, 기 설정된 시선유지시간(예: 5초) 동안 시청자의 시선방향이 머무는 경우에 한해 해당 영역을 관심영역으로 확인함으로써, 확인된 관심영역에 대한 신뢰성을 확보할 수 있다.However, the confirmation unit 21 does not unconditionally check the region of the viewer's gaze direction toward the region of interest in confirming the region of interest in the virtual reality image, but for a predetermined gaze retention time (for example, 5 seconds). Reliability for the identified region of interest can be secured by confirming the region as the region of interest only when the gaze direction of is staying.

그리고 나서, 결정부(22)는 가상현실영상 내 시청자의 시선방향에 따른 관심영역이 확인되며, 이러한 관심영역에 객체이미지가 존재하는 경우, 해당 객체이미지를 광고대상으로 결정한다(S14-S18).Then, the determination unit 22 identifies the region of interest according to the viewer's gaze direction in the virtual reality image, and when an object image exists in the region of interest, determines the object image as an advertisement target (S14-S18) .

이때, 결정부(22)는 가상현실영상의 재생구간 중 관심영역이 확인된 시점에 대응하는 특정 재생구간을 확인하여, 해당 재생구간에 관심영역에 존재하는 객체이미지를 광고대상으로 결정할 수 있다.At this time, the determination unit 22 may determine a specific reproduction section corresponding to a point in time at which the region of interest is identified among the reproduction sections of the virtual reality image, and determine an object image existing in the region of interest in the corresponding reproduction section as an advertisement target.

여기서, 관심영역이 확인된 시점에 대응하는 특정 재생구간은, 시청자의 시선방향이 유지되는 시청유지시간 동안에 해당하는 가상현실영상의 재상구간으로 이해될 수 있다.Here, the specific reproduction section corresponding to the time point at which the region of interest is confirmed may be understood as a replay section of the virtual reality image corresponding to the viewing maintenance time in which the viewer's gaze direction is maintained.

이를 위해, 본 발명의 일 실시예에서는 가상현실영상의 재생구간을 프레임 단위로 구분하며, 구분된 각 프레임의 3차원 영상(360 °)을 다 시점 각도(예: 15°)로 분할하여, 분할된 각 시점 영역에 존재하는 객체이미지에 대한 정보를 사전 획득할 필요가 있다.To this end, in one embodiment of the present invention, the reproduction section of the virtual reality image is divided into frame units, and the 3D image (360 °) of each divided frame is divided into multi-view angles (for example, 15 °) and divided It is necessary to obtain information about an object image existing in each view area.

한편, 이처럼 관심영역에 존재하는 객체이미지를 광고대상으로 결정하는 동작과 관련하여, 관심영역에 2 이상의 객체이미지가 존재하는 경우를 예상할 수 있다.Meanwhile, in relation to the operation of determining the object image existing in the region of interest as an advertisement target, it is possible to predict a case where two or more object images exist in the region of interest.

이 경우, 결정부(22)는 2 이상의 객체이미지 중 관심영역과 중첩되는 영역의 면적이 보다 큰 특정 객체이미지를 광고대상으로 결정할 수 있다.In this case, the determination unit 22 may determine, as an advertisement target, a specific object image having a larger area of a region overlapping the region of interest among two or more object images.

예를 들어, 도 4에 도시된 바와 같이 관심영역 내 제1객체이미지(A)와 제2객체이미지(B)가 존재하는 경우, 제1객체이미지(A)에서 관심영역과 중첩되는 영역의 면적(a), 및 제2객체이미지(B)에서 관심영역과 중첩되는 영역의 면적(b)을 확인하게 되며, 확인 결과, 제1객체이미지(A)에서 관심영역과 중첩되는 영역의 면적(a)이 제2객체이미지(B)에서 관심영역과 중첩되는 영역의 면적(b)보다 큰 경우, 제1객체이미지(A)를 광고대상으로 결정할 수 있는 것이다.For example, as illustrated in FIG. 4, when the first object image A and the second object image B exist in the region of interest, the area of the region overlapping the region of interest in the first object image A (a), and the area (b) of the region overlapping the region of interest in the second object image (B) is checked. As a result of the verification, the area (a) of the region overlapping the region of interest in the first object image (A) ) Is greater than the area (b) of the region overlapping the region of interest in the second object image (B), it is possible to determine the first object image (A) as an advertisement target.

이후, 표시부(23)는 관심영역에 존재하는 객체이미지가 광고대상으로 결정된 경우, 해당 객체이미지와 관련하여 기 등록된 광고를 가상현실영상에 표시한다(S19).Thereafter, when the object image existing in the region of interest is determined as an advertisement target, the display unit 23 displays a pre-registered advertisement related to the object image on the virtual reality image (S19).

이때, 표시부(23)는 가상현실영상 내 적어도 일부 영역 예컨대, 광고대상으로 결정된 객체이미지와 광고가 중첩되어 표시되도록 하거나, 객체이미지와는 별도의 영역에 광고가 표시되도록 할 수 있으며, 이에 제한되는 것이 아닌, 가상현실영상 내에서 시청자가 인식 가능한 영역이라면 해당 영역에 광고가 표시되도록 할 수 있음은 물론이다.In this case, the display unit 23 may display at least a part of the virtual reality image, for example, an object image determined as an advertisement target and an advertisement overlapping, or may display an advertisement in a separate area from the object image. Of course, if the viewer is recognizable in the virtual reality image, the advertisement can be displayed in the corresponding region.

이상에서 살펴본 바와 같이 본 발명의 일 실시예에 따른 가상현실표시장치(20)의 동작 방법에 따르면, 가상현실(VR, Virtual Reality)영상에서 시청자의 시선방향에 기초한 관심사를 도출하고, 도출된 관심사에 해당하는 광고를 제공함으로써, 가상현실영상이 가지는 3차원 공간 특성에 특화된 효율적인 광고 제공 시스템을 구축할 수 있음을 알 수 있다.As described above, according to the operation method of the virtual reality display device 20 according to an embodiment of the present invention, the virtual reality (VR, Virtual Reality) image based on the viewer's gaze direction based on deriving interests, derived interests It can be seen that, by providing the advertisement corresponding to, an efficient advertisement providing system specialized in the 3D spatial characteristics of the virtual reality image can be constructed.

한편, 본 명세서에서 설명하는 기능적인 동작과 주제의 구현물들은 디지털 전자 회로로 구현되거나, 본 명세서에서 개시하는 구조 및 그 구조적인 등가물들을 포함하는 컴퓨터 소프트웨어, 펌웨어 혹은 하드웨어로 구현되거나, 이들 중 하나 이상의 결합으로 구현 가능하다.  본 명세서에서 설명하는 주제의 구현물들은 하나 이상의 컴퓨터 프로그램 제품, 다시 말해 처리 시스템의 동작을 처리하기 위하여 혹은 이것에 의한 실행을 위하여 유형의 프로그램 저장매체 상에 인코딩된 컴퓨터 프로그램 명령에 관한 하나 이상의 모듈로서 구현될 수 있다.On the other hand, the functional operations and subject implementations described in this specification are implemented as digital electronic circuits, or the computer software, firmware, or hardware including the structures and structural equivalents disclosed herein, or one or more of them. It can be implemented in combination. Implementations of the subject matter described herein are one or more modules for computer program instructions encoded on a tangible program storage medium for processing or by execution of one or more computer program products, that is, processing systems. Can be implemented.

컴퓨터로 판독 가능한 매체는 기계로 판독 가능한 저장 장치, 기계로 판독 가능한 저장 기판, 메모리 장치, 기계로 판독 가능한 전파형 신호에 영향을 미치는 물질의 조성물 혹은 이들 중 하나 이상의 조합일 수 있다.The computer-readable medium can be a machine-readable storage device, a machine-readable storage substrate, a memory device, a composition of materials affecting a machine-readable propagated signal, or a combination of one or more of these.

본 명세서에서 "시스템"이나 "장치"라 함은 예컨대 프로그래머블 프로세서, 컴퓨터 혹은 다중 프로세서나 컴퓨터를 포함하여 데이터를 처리하기 위한 모든 기구, 장치 및 기계를 포괄한다. 처리 시스템은, 하드웨어에 부가하여, 예컨대 프로세서 펌웨어를 구성하는 코드, 프로토콜 스택, 데이터베이스 관리 시스템, 운영 체제 혹은 이들 중 하나 이상의 조합 등 요청 시 컴퓨터 프로그램에 대한 실행 환경을 형성하는 코드를 포함할 수 있다.As used herein, "system" or "device" encompasses all mechanisms, devices, and machines for processing data, including, for example, programmable processors, computers, or multiple processors or computers. The processing system may include, in addition to hardware, code that forms an execution environment for a computer program upon request, such as code constituting the processor firmware, protocol stack, database management system, operating system, or a combination of one or more of them. .

컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 애플리케이션, 스크립트 혹은 코드로도 알려져 있음)은 컴파일되거나 해석된 언어나 선험적 혹은 절차적 언어를 포함하는 프로그래밍 언어의 어떠한 형태로도 작성될 수 있으며, 독립형 프로그램이나 모듈, 컴포넌트, 서브루틴 혹은 컴퓨터 환경에서 사용하기에 적합한 다른 유닛을 포함하여 어떠한 형태로도 전개될 수 있다. 컴퓨터 프로그램은 파일 시스템의 파일에 반드시 대응하는 것은 아니다. 프로그램은 요청된 프로그램에 제공되는 단일 파일 내에, 혹은 다중의 상호 작용하는 파일(예컨대, 하나 이상의 모듈, 하위 프로그램 혹은 코드의 일부를 저장하는 파일) 내에, 혹은 다른 프로그램이나 데이터를 보유하는 파일의 일부(예컨대, 마크업 언어 문서 내에 저장되는 하나 이상의 스크립트) 내에 저장될 수 있다. 컴퓨터 프로그램은 하나의 사이트에 위치하거나 복수의 사이트에 걸쳐서 분산되어 통신 네트워크에 의해 상호 접속된 다중 컴퓨터나 하나의 컴퓨터 상에서 실행되도록 전개될 수 있다.A computer program (also known as a program, software, software application, script, or code) can be written in any form of a compiled or interpreted language or a programming language, including a priori or procedural languages. It can be deployed in any form, including components, subroutines or other units suitable for use in a computer environment. Computer programs do not necessarily correspond to files in the file system. The program is in a single file provided to the requested program, or in multiple interactive files (eg, files that store one or more modules, subprograms or parts of code), or parts of files that hold other programs or data. (Eg, one or more scripts stored in a markup language document). The computer program can be deployed to be executed on one computer or on multiple computers that are located at one site or distributed across multiple sites and interconnected by a communication network.

한편, 컴퓨터 프로그램 명령어와 데이터를 저장하기에 적합한 컴퓨터로 판독 가능한 매체는, 예컨대 EPROM, EEPROM 및 플래시메모리 장치와 같은 반도체 메모리 장치, 예컨대 내부 하드디스크나 외장형 디스크와 같은 자기 디스크, 자기광학 디스크 및 CD-ROM과 DVD-ROM 디스크를 포함하여 모든 형태의 비휘발성 메모리, 매체 및 메모리 장치를 포함할 수 있다. 프로세서와 메모리는 특수 목적의 논리 회로에 의해 보충되거나, 그것에 통합될 수 있다.On the other hand, computer-readable media suitable for storing computer program instructions and data include, for example, semiconductor memory devices such as EPROM, EEPROM and flash memory devices, such as magnetic disks such as internal hard disks or external disks, magneto-optical disks and CDs. It can include any type of non-volatile memory, media and memory devices, including -ROM and DVD-ROM disks. The processor and memory can be supplemented by, or incorporated into, special-purpose logic circuits.

본 명세서에서 설명한 주제의 구현물은 예컨대 데이터 서버와 같은 백엔드 컴포넌트를 포함하거나, 예컨대 애플리케이션 서버와 같은 미들웨어 컴포넌트를 포함하거나, 예컨대 사용자가 본 명세서에서 설명한 주제의 구현물과 상호 작용할 수 있는 웹 브라우저나 그래픽 유저 인터페이스를 갖는 클라이언트 컴퓨터와 같은 프론트엔드 컴포넌트 혹은 그러한 백엔드, 미들웨어 혹은 프론트엔드 컴포넌트의 하나 이상의 모든 조합을 포함하는 연산 시스템에서 구현될 수도 있다. 시스템의 컴포넌트는 예컨대 통신 네트워크와 같은 디지털 데이터 통신의 어떠한 형태나 매체에 의해서도 상호 접속 가능하다.Implementations of the subject matter described herein include, for example, a back-end component such as a data server, for example, a middleware component such as an application server, or, for example, a web browser or graphic user that allows a user to interact with the implementation of the subject matter described herein. It may be implemented in a front-end component, such as a client computer having an interface, or in a computing system that includes all one or more combinations of such back-end, middleware, or front-end components. The components of the system can be interconnected by any form or medium of digital data communication, such as a communication network.

본 명세서는 다수의 특정한 구현물의 세부사항들을 포함하지만, 이들은 어떠한 발명이나 청구 가능한 것의 범위에 대해서도 제한적인 것으로서 이해되어서는 안되며, 오히려 특정한 발명의 특정한 실시형태에 특유할 수 있는 특징들에 대한 설명으로서 이해되어야 한다. 마찬가지로, 개별적인 실시형태의 문맥에서 본 명세서에 기술된 특정한 특징들은 단일 실시형태에서 조합하여 구현될 수도 있다. 반대로, 단일 실시형태의 문맥에서 기술한 다양한 특징들 역시 개별적으로 혹은 어떠한 적절한 하위 조합으로도 복수의 실시형태에서 구현 가능하다. 나아가, 특징들이 특정한 조합으로 동작하고 초기에 그와 같이 청구된 바와 같이 묘사될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징들은 일부 경우에 그 조합으로부터 배제될 수 있으며, 그 청구된 조합은 하위 조합이나 하위 조합의 변형물로 변경될 수 있다.This specification includes details of many specific implementations, but these should not be understood as limiting on the scope of any invention or claim, but rather as a description of features that may be specific to a particular embodiment of the particular invention. It should be understood. Likewise, certain features described herein in the context of individual embodiments may be implemented in combination in a single embodiment. Conversely, various features that are described in the context of a single embodiment can also be implemented in multiple embodiments individually or in any suitable subcombination. Further, although features may operate in a particular combination and may initially be depicted as so claimed, one or more features from the claimed combination may in some cases be excluded from the combination, and the claimed combination subcombined. Or sub-combinations.

또한, 본 명세서에서는 특정한 순서로 도면에서 동작들을 묘사하고 있지만, 이는 바람직한 결과를 얻기 위하여 도시된 그 특정한 순서나 순차적인 순서대로 그러한 동작들을 수행하여야 한다거나 모든 도시된 동작들이 수행되어야 하는 것으로 이해되어서는 안 된다. 특정한 경우, 멀티태스킹과 병렬 프로세싱이 유리할 수 있다. 또한, 상술한 실시형태의 다양한 시스템 컴포넌트의 분리는 그러한 분리를 모든 실시형태에서 요구하는 것으로 이해되어서는 안되며, 설명한 프로그램 컴포넌트와 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 다중 소프트웨어 제품에 패키징될 수 있다는 점을 이해하여야 한다Also, although the descriptions describe the operations in the drawings in a specific order, it should be understood that such operations must be performed in the specific order or sequential order shown in order to obtain a desired result, or that all illustrated actions should be performed. Can not be done. In certain cases, multitasking and parallel processing may be advantageous. Further, the separation of various system components of the above-described embodiments should not be understood as requiring such separation in all embodiments, and the described program components and systems are generally integrated together into a single software product or packaged in multiple software products. Understand that you can

이와 같이, 본 명세서는 그 제시된 구체적인 용어에 본 발명을 제한하려는 의도가 아니다. 따라서, 상술한 예를 참조하여 본 발명을 상세하게 설명하였지만, 당업자라면 본 발명의 범위를 벗어나지 않으면서도 본 예들에 대한 개조, 변경 및 변형을 가할 수 있다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.As such, this specification is not intended to limit the invention to the specific terms presented. Therefore, although the present invention has been described in detail with reference to the above-described examples, those skilled in the art can make modifications, alterations, and modifications to these examples without departing from the scope of the present invention. The scope of the present invention is indicated by the following claims rather than the above detailed description, and it should be interpreted that all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts are included in the scope of the present invention. do.

본 발명에 일 실시예에 따른 가상현실표시장치 및 그 동작 방법에 따르면, 가상현실(VR, Virtual Reality)영상의 3차원 특성을 반영하여 광고를 제공할 수 있다는 점에서, 기존 기술의 한계를 뛰어 넘음에 따라 관련 기술에 대한 이용만이 아닌 적용되는 장치의 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있는 정도이므로 산업상 이용가능성이 있는 발명이다.According to the virtual reality display device and its operation method according to an embodiment of the present invention, it is possible to provide advertisements by reflecting the three-dimensional characteristics of a virtual reality (VR, Virtual Reality) image, and thus it overcomes the limitations of the existing technology. It is an invention with industrial applicability, as it is not only the use of related technologies, but also the possibility of commercial or sales of the applied device, as well as the degree to which it can be practiced in practice.

10: 가상현실장비
20: 가상현실표시장치
21: 확인부 22: 결정부
23: 표시부
10: virtual reality equipment
20: virtual reality display device
21: confirmation unit 22: decision unit
23: display

Claims (12)

가상현실영상 내 시청자의 시선방향을 기초로 상기 가상현실영상 내에서의 관심영역을 확인하는 확인부;
상기 관심영역에 객체이미지가 존재하는 경우, 상기 객체이미지를 광고대상으로 결정하는 결정부; 및
상기 가상현실영상 내 적어도 일부 영역에 상기 객체이미지에 관련된 광고를 표시하는 표시부를 포함하는 것을 특징으로 하는 가상현실표시장치.
A confirmation unit for checking a region of interest in the virtual reality image based on a viewer's gaze direction in the virtual reality image;
A determination unit determining the object image as an advertisement target when an object image exists in the region of interest; And
And a display unit displaying an advertisement related to the object image in at least a part of the virtual reality image.
제 1 항에 있어서,
상기 확인부는,
기 설정된 시선유지시간 동안 상기 시청자의 시선방향이 머무는 영역을 상기 관심영역으로 확인하는 것을 특징으로 하는 가상현실표시장치.
According to claim 1,
The confirmation unit,
A virtual reality display device characterized by checking the area in which the viewer's gaze direction stays during the preset gaze retention time as the region of interest.
제 1 항에 있어서,
상기 확인부는,
상기 시청자의 시선방향에 해당하는 공간벡터의 종점을 영역중심으로 하며, 상기 공간벡터의 길이에 따른 면적의 영역을 상기 관심영역으로 확인하는 것을 특징으로 하는 가상현실표시장치.
According to claim 1,
The confirmation unit,
A virtual reality display device characterized in that an end point of the space vector corresponding to the viewer's gaze direction is an area center, and an area of an area according to the length of the space vector is identified as the region of interest.
제 3 항에 있어서,
상기 관심영역은,
상기 공간벡터의 길이가 길 수록 보다 넓은 면적의 영역으로 확인되는 것을 특징으로 하는 가상현실표시장치.
The method of claim 3,
The region of interest,
A virtual reality display device characterized in that the longer the space vector is, the larger the area is identified.
제 1 항에 있어서,
상기 결정부는,
상기 가상현실영상의 재생구간 중 상기 관심영역이 확인된 시점에 대응하는 특정 재생구간을 확인하여, 상기 특정 재생구간에 상기 관심영역에 존재하는 객체이미지를 광고대상으로 결정하는 것을 특징으로 하는 가상현실표시장치.
According to claim 1,
The determining unit,
A virtual reality characterized by determining a specific reproduction section corresponding to a point in time at which the region of interest is identified among the reproduction sections of the virtual reality image, and determining an object image existing in the region of interest in the specific reproduction section as an advertisement target. Display device.
제 1 항에 있어서,
상기 결정부는,
상기 관심영역에 2 이상의 객체이미지가 존재하는 경우, 상기 2 이상의 객체이미지 중 상기 관심영역과 중첩되는 영역의 면적이 보다 큰 특정 객체이미지를 광고대상으로 결정하는 것을 특징으로 하는 가상현실표시장치.
According to claim 1,
The determining unit,
If there are two or more object images in the region of interest, a virtual reality display device characterized in that the specific object image having a larger area of the region overlapping the region of interest among the two or more object images is determined as an advertisement target.
가상현실영상 내 시청자의 시선방향을 기초로 상기 가상현실영상 내에서의 관심영역을 확인하는 확인단계;
상기 관심영역에 객체이미지가 존재하는 경우, 상기 객체이미지를 광고대상으로 결정하는 결정단계; 및
상기 가상현실영상 내 적어도 일부 영역에 상기 객체이미지에 관련된 광고를 표시하는 표시단계를 포함하는 것을 특징으로 하는 가상현실표시장치의 동작 방법.
A confirmation step of checking a region of interest in the virtual reality image based on a viewer's gaze direction in the virtual reality image;
A determining step of determining the object image as an advertisement target when an object image exists in the region of interest; And
And a display step of displaying an advertisement related to the object image on at least a part of the virtual reality image.
제 7 항에 있어서,
상기 확인단계는,
기 설정된 시선유지시간 동안 상기 시청자의 시선방향이 머무는 영역을 상기 관심영역으로 확인하는 것을 특징으로 하는 가상현실표시장치의 동작 방법.
The method of claim 7,
The confirmation step,
A method of operating a virtual reality display device, characterized in that a region in which the viewer's gaze direction stays for a predetermined gaze retention time is identified as the region of interest.
제 7 항에 있어서,
상기 확인단계는,
상기 시청자의 시선방향에 해당하는 공간벡터의 종점을 영역중심으로 하며, 상기 공간벡터의 길이에 따른 면적의 영역을 상기 관심영역으로 확인하는 것을 특징으로 하는 가상현실표시장치의 동작 방법.
The method of claim 7,
The confirmation step,
A method of operating a virtual reality display device, characterized in that an end point of the space vector corresponding to the viewer's gaze direction is an area center, and an area of an area along the length of the space vector is identified as the region of interest.
제 9 항에 있어서,
상기 관심영역은,
상기 공간벡터의 길이가 길 수록 보다 넓은 면적의 영역으로 확인되는 것을 특징으로 하는 가상현실표시장치.
The method of claim 9,
The region of interest,
A virtual reality display device characterized in that the longer the space vector is, the larger the area is identified.
제 7 항에 있어서,
상기 결정단계는,
상기 가상현실영상의 재생구간 중 상기 관심영역이 확인된 시점에 대응하는 특정 재생구간을 확인하여, 상기 특정 재생구간에 상기 관심영역에 존재하는 객체이미지를 광고대상으로 결정하는 것을 특징으로 하는 가상현실표시장치의 동작 방법.
The method of claim 7,
The determining step,
A virtual reality characterized by determining a specific reproduction section corresponding to a point in time at which the region of interest is identified among the reproduction sections of the virtual reality image, and determining an object image existing in the region of interest in the specific reproduction section as an advertisement target. How the display device works.
제 7 항에 있어서,
상기 결정단계는,
상기 관심영역에 2 이상의 객체이미지가 존재하는 경우, 상기 2 이상의 객체이미지 중 상기 관심영역과 중첩되는 영역의 면적이 보다 큰 특정 객체이미지를 광고대상으로 결정하는 것을 특징으로 하는 가상현실표시장치의 동작 방법.
The method of claim 7,
The determining step,
When there are two or more object images in the region of interest, the operation of the virtual reality display device is characterized in that a specific object image having an area larger than the region of interest among the two or more object images is determined as an advertisement target. Way.
KR1020180109733A 2018-09-13 2018-09-13 Display apparatus for virtual reality, and control method thereof KR20200030913A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180109733A KR20200030913A (en) 2018-09-13 2018-09-13 Display apparatus for virtual reality, and control method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180109733A KR20200030913A (en) 2018-09-13 2018-09-13 Display apparatus for virtual reality, and control method thereof

Publications (1)

Publication Number Publication Date
KR20200030913A true KR20200030913A (en) 2020-03-23

Family

ID=69998398

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180109733A KR20200030913A (en) 2018-09-13 2018-09-13 Display apparatus for virtual reality, and control method thereof

Country Status (1)

Country Link
KR (1) KR20200030913A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112752130A (en) * 2019-10-29 2021-05-04 上海海思技术有限公司 Data display method and media processing device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112752130A (en) * 2019-10-29 2021-05-04 上海海思技术有限公司 Data display method and media processing device

Similar Documents

Publication Publication Date Title
US9024844B2 (en) Recognition of image on external display
CN109416931B (en) Apparatus and method for gaze tracking
US9560415B2 (en) Method and system for interactive selection of items for purchase from a video
US20180261005A1 (en) Method and Apparatus for Constructing Three-Dimensional Map
US20160050465A1 (en) Dynamically targeted ad augmentation in video
CN107911737B (en) Media content display method and device, computing equipment and storage medium
JP6277329B2 (en) 3D advertisement space determination system, user terminal, and 3D advertisement space determination computer
US20170041568A1 (en) Curve profile control for a flexible display
WO2013192575A2 (en) Providing supplemental content with active media
US9535250B2 (en) Head mounted display device and method for controlling the same
US11119567B2 (en) Method and apparatus for providing immersive reality content
TWI748158B (en) Computerized system and method for in-video modification
US20180284950A1 (en) Display method and terminal
US10504289B2 (en) Method and apparatus for securely displaying private information using an augmented reality headset
US10042419B2 (en) Method and apparatus for providing additional information of digital signage content on a mobile terminal using a server
CN113965665A (en) Method and equipment for determining virtual live broadcast image
KR20200030913A (en) Display apparatus for virtual reality, and control method thereof
CA3038843A1 (en) Crossover interactive transaction system and method
KR102279681B1 (en) Apparatus and method for providing advertisement using pupil recognition
CN109636922B (en) Method and device for presenting augmented reality content
US20190058861A1 (en) Apparatus and associated methods
KR102034897B1 (en) Terminal apparatus for providing information of object comprised broadcast program and method for operating terminal apparatus
US20230388563A1 (en) Inserting digital contents into a multi-view video
US10854010B2 (en) Method and device for processing image, and recording medium
US10354176B1 (en) Fingerprint-based experience generation

Legal Events

Date Code Title Description
E601 Decision to refuse application