WO2020262738A1 - 투명 oled 디스플레이를 이용한 ar 쇼케이스 - Google Patents

투명 oled 디스플레이를 이용한 ar 쇼케이스 Download PDF

Info

Publication number
WO2020262738A1
WO2020262738A1 PCT/KR2019/007868 KR2019007868W WO2020262738A1 WO 2020262738 A1 WO2020262738 A1 WO 2020262738A1 KR 2019007868 W KR2019007868 W KR 2019007868W WO 2020262738 A1 WO2020262738 A1 WO 2020262738A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
product
showcase
transparent display
viewpoint
Prior art date
Application number
PCT/KR2019/007868
Other languages
English (en)
French (fr)
Inventor
홍성희
강훈종
홍지수
김영민
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Publication of WO2020262738A1 publication Critical patent/WO2020262738A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47F—SPECIAL FURNITURE, FITTINGS, OR ACCESSORIES FOR SHOPS, STOREHOUSES, BARS, RESTAURANTS OR THE LIKE; PAYING COUNTERS
    • A47F11/00—Arrangements in shop windows, shop floors or show cases
    • A47F11/06—Means for bringing about special optical effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/33—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements being semiconductor devices, e.g. diodes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
    • G09F9/30—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements
    • G09F9/33—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements being semiconductor devices, e.g. diodes
    • G09F9/335—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements in which the desired character or characters are formed by combining individual elements being semiconductor devices, e.g. diodes being organic light emitting diodes [OLED]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/39—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume the picture elements emitting light at places where a pair of light beams intersect in a transparent material
    • H—ELECTRICITY
    • H10—SEMICONDUCTOR DEVICES; ELECTRIC SOLID-STATE DEVICES NOT OTHERWISE PROVIDED FOR
    • H10K—ORGANIC ELECTRIC SOLID-STATE DEVICES
    • H10K50/00—Organic light-emitting devices
    • H10K50/10—OLEDs or polymer light-emitting diodes [PLED]

Definitions

  • the present invention relates to a technology related to VR (Virtual Reality) / AR (Augmented Reality), and more particularly, to a technology for implementing a showcase using a transparent display.
  • VR Virtual Reality
  • AR Augmented Reality
  • FIG. 1 is a view showing a showcase using a conventional transparent display. As shown, in a conventional showcase, products are displayed inside and a trademark or logo is displayed on a transparent display located in front.
  • a related image may be displayed on a transparent display, and the displayed image is in a 2D format. Therefore, since the internal product and the image are observed separately, the sensibility is greatly reduced.
  • the present invention has been conceived to solve the above problems, and an object of the present invention is to provide a showcase in which an image reproduced on a transparent display is displayed in 3D by incorporating an eye tracking technology into a transparent display.
  • a product display system includes a case in which a product is displayed; A camera for photographing an observation car looking at the product; A transparent display on which a 3D image is displayed; And a rendering device that generates a 3D image of a viewpoint that matches the line of sight of the observation vehicle and displays it on a transparent display.
  • the transparent display may be installed on the front surface of the case.
  • the rendering device may generate a 3D image of a viewpoint that fits the observer's gaze.
  • the rendering apparatus may calculate an average line of sight of the observer's line of sight and generate a 3D image of a viewpoint that fits the calculated average line of sight.
  • the 3D image may be an image including at least one of a product trademark, logo, description, usage, and advertisement.
  • the 3D image may include at least one of a curator service image and a docent service image for a product.
  • the transparent display may be a transparent OLED (Organic Light Emitting Diode) display.
  • OLED Organic Light Emitting Diode
  • a product display method includes: photographing an observation difference looking at a product displayed in a case; Generating a 3D image of a viewpoint matching the line of sight of the observation vehicle; And displaying the generated 3D image on a transparent display.
  • an image reproduced on the transparent display may be displayed in 3D by applying eye tracking technology to the transparent display of the showcase.
  • FIG. 1 is a view showing a showcase using a conventional transparent display
  • FIG. 2 is a conceptual diagram of an AR showcase according to an embodiment of the present invention
  • FIG. 3 is an internal block diagram of the AR showcase shown in FIG. 2;
  • FIG. 4 is a block diagram of the 3D image rendering apparatus shown in FIG. 3;
  • FIG. 5 is a flow chart provided to explain a method of displaying a product in an AR showcase according to another embodiment of the present invention.
  • step S220 of FIG. 5 is a detailed flowchart of step S220 of FIG. 5.
  • FIG. 2 is a conceptual diagram of an Augmented Reality (AR) showcase according to an embodiment of the present invention
  • FIG. 3 is an internal block diagram of the AR showcase shown in FIG. 2.
  • An AR showcase according to an embodiment of the present invention is an exhibition system that renders an image on a transparent display in front of the showcase.
  • the AR showcase uses eye tracking technology to change an image played on a transparent display according to a user's viewpoint.
  • AR showcase according to an embodiment of the present invention performing such a function is, as shown in FIGS. 2 and 3, a showcase 110, a camera 120, a 3D image rendering device 130, and a transparent OLED (Organic Light Emitting Diode) display 140.
  • OLED Organic Light Emitting Diode
  • the showcase 110 is a housing that forms a space in which products are displayed.
  • the showcase 110 is generally implemented in a cube shape, but may be implemented in other shapes.
  • the camera 120 is installed above the showcase 110 and is a means for photographing the front of the showcase 110, and photographs faces of observers viewing the products displayed in the showcase 110.
  • the camera 120 is preferably implemented in a small size, and of course, it may be installed at a location other than the upper portion of the showcase 110 and further separated from the showcase 110.
  • the transparent OLED display 140 is a display installed on the front of the showcase 110, and an image related to the product displayed in the showcase 110 is displayed. It can be replaced by other types of displays other than transparent OLED.
  • the 3D image rendering apparatus 130 generates/renders an image related to an exhibition product to be displayed on the transparent OLED display 140 in 3D, and transmits it to the transparent OLED display 140 for display.
  • the product-related 3D image generated by the 3D image rendering apparatus 130 may be a trademark, a logo, a description, a usage of the product, as well as a curator service image for an advertisement or product, a docent service image, and the like.
  • the 3D image rendering apparatus 130 analyzes the front image of the showcase 110 photographed by the camera 120 to determine the viewpoint of the observer. Specifically, the 3D image rendering apparatus 130 extracts the observer from the front image, checks the position of the eyes on the face of the observer, and identifies the viewpoint of the observer.
  • the identified viewpoint of the observer is used to determine the viewpoint of the 3D image generated by the 3D image rendering apparatus 130. That is, the 3D image rendering apparatus 130 generates a 3D image of a viewpoint suitable for the viewer's viewpoint and displays it on the transparent OLED display 140.
  • the product-related image is displayed in a more realistic three-dimensional shape on the transparent OLED display 140, and it fits well like augmented reality (AR) with the displayed product and is displayed.
  • AR augmented reality
  • the 3D image rendering apparatus 130 includes a communication unit 131, a processor 132, and a storage unit 133, as shown in FIG. 4.
  • the communication unit 131 is a communication interface for transmitting and receiving data with the camera 120 and the transparent OLED display 140. Through the communication unit 131, the front image of the showcase 110 is received from the camera 120, and the product-related 3D image is transmitted to the transparent OLED display 140.
  • the processor 132 is a means for analyzing the front image of the showcase 110 photographed by the camera 120 to determine the viewpoint of the observer, and to generate/render a 3D image of a viewpoint suitable for the identified observer's viewpoint. It consists of the GPU (Graphic Processing Unit) and CPU (Central Processing Unit).
  • the storage unit 133 provides a storage space necessary for the processor 132 to operate.
  • FIG. 5 is a flowchart for explaining a method of displaying a product in an AR showcase according to another embodiment of the present invention.
  • the camera 120 photographs the faces of observers viewing the product displayed in the showcase 110 (S210).
  • the captured image is transmitted to the 3D image rendering apparatus 130.
  • the 3D image rendering apparatus 130 analyzes the front image of the showcase 110 photographed in step S210 to determine the viewpoint of the observer (S220).
  • the 3D image rendering apparatus 130 generates a 3D image of a viewpoint that matches the viewpoint of the observer identified in step S220 (S230).
  • the 3D image rendering apparatus 130 transmits and displays the 3D image to the transparent OLED display 140 at the viewer's viewpoint generated in step S230 (S240).
  • step S220 of FIG. 5 is a detailed flowchart of step S220 of FIG. 5.
  • step S222-Y If there is one face of the observer extracted in step S221 (S222-Y), the direction of gaze is recognized from the face extracted in step S221 (S223), and the direction recognized in step S223 is determined as the viewer's viewpoint (S224) ).
  • step S222-N if there are two or more faces of the observer extracted in step S221 (S222-N), gaze directions are recognized from the faces extracted in step S221 (S225), and an average direction of the recognized gaze directions is calculated (S226). ). Then, the direction calculated in step S226 is determined as an observer's viewpoint (S227).
  • the AR showcase according to an embodiment of the present invention maximizes the sensory effect by grafting eye tracking technology to a transparent display using OLED to give an image reproduced on the transparent display a 3D effect and a floating effect.
  • a computer-readable recording medium containing a computer program that performs functions of the apparatus and method according to the present embodiment.
  • the technical idea according to various embodiments of the present disclosure may be implemented in the form of a computer-readable code recorded on a computer-readable recording medium.
  • the computer-readable recording medium can be any data storage device that can be read by a computer and can store data.
  • a computer-readable recording medium may be a ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical disk, hard disk drive, or the like.
  • a computer-readable code or program stored in a computer-readable recording medium may be transmitted through a network connected between computers.

Abstract

투명 디스플레이에 아이 트래킹 기술을 접목함으로써 투명 디스플레이에서 재생한 영상이 3D로 표출되는 쇼케이스가 제공된다. 본 발명의 실시예에 따른 상품 전시 시스템은 상품이 전시되는 케이스; 상품을 바라보는 관찰차를 촬영하는 카메라; 3D 영상이 표시되는 투명 디스플레이; 및 관찰차의 시선에 맞는 시점의 3D 영상을 생성하여, 투명 디스플레이에 표시하는 렌더링 장치;를 포함한다. 이에 의해, 쇼케이스의 투명 디스플레이에 아이 트래킹 기술을 접목함으로써 투명 디스플레이에서 재생한 영상이 3D로 표출되도록 할 수 있다.

Description

투명 OLED 디스플레이를 이용한 AR 쇼케이스
본 발명은 VR(Virtual Reality)/AR(Augmented Reality) 관련 기술에 관한 것으로, 더욱 상세하게는 투명 디스플레이를 이용하여 쇼케이스를 구현하는 기술에 관한 것이다.
도 1은 종래의 투명 디스플레이를 이용한 쇼케이스를 나타낸 도면이다. 도시된 바와 같이, 종래의 쇼케이스는 내부에 상품을 진열하고 전방에 위치한 투명 디스플레이에 상표나 로고 등을 표시하고 있다.
나아가, 투명 디스플레이에 관련 영상을 표시할 수도 있는데, 표시하는 영상은 2D 형태이다. 따라서, 내부 상품과 영상이 분리되어 관찰되는 바, 실감성이 많이 떨어진다.
이에 따라, 쇼케이스에 구현된 투명 디스플레이를 통해 제공하는 영상의 실감성을 높여 주어, 상품에 관한 단순한 정보의 안내에만 그치고 있는 것에서 나아가 더 나은 고객 서비스를 제공하기 위한 방안의 모색이 요청된다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 투명 디스플레이에 아이 트래킹 기술을 접목함으로써 투명 디스플레이에서 재생한 영상이 3D로 표출되는 쇼케이스를 제공함에 있다.
상기 목적을 달성하기 위한 본 발명의 일 실시예에 따른, 상품 전시 시스템은 상품이 전시되는 케이스; 상품을 바라보는 관찰차를 촬영하는 카메라; 3D 영상이 표시되는 투명 디스플레이; 및 관찰차의 시선에 맞는 시점의 3D 영상을 생성하여, 투명 디스플레이에 표시하는 렌더링 장치;를 포함한다.
투명 디스플레이는, 케이스의 전면에 설치되는 것일 수 있다.
렌더링 장치는, 관찰자가 1명인 경우, 관찰자의 시선에 맞는 시점의 3D 영상을 생성하는 것일 수 있다.
렌더링 장치는, 관찰자가 2명 이상인 경우, 관찰자의 시선들의 평균 시선을 산출하고, 산출된 평균 시선에 맞는 시점의 3D 영상을 생성하는 것일 수 있다.
3D 영상은, 상품의 상표, 로고, 설명, 사용법, 광고 중 적어도 하나를 포함하는 영상인 것일 수 있다.
3D 영상은, 상품에 대한 큐레이터 서비스 영상 및 도슨트 서비스 영상 중 적어도 하나를 포함하는 것일 수 있다.
투명 디스플레이는, 투명 OLED(Organic Light Emitting Diode) 디스플레이일 수 있다.
한편, 본 발명의 다른 실시예에 따른, 상품 전시 방법은 케이스에 전시된 상품을 바라보는 관찰차를 촬영하는 단계; 관찰차의 시선에 맞는 시점의 3D 영상을 생성하는 단계; 생성한 3D 영상을 투명 디스플레이에 표시하는 단계;를 포함한다.
이상 설명한 바와 같이, 본 발명의 실시예들에 따르면, 쇼케이스의 투명 디스플레이에 아이 트래킹 기술을 접목함으로써 투명 디스플레이에서 재생한 영상이 3D로 표출되도록 할 수 있다.
또한, 본 발명의 실시예들에 따르면, 쇼케이스의 투명 디스플레이를 통해 플로팅 효과에서 나아가 입체 효과까지 줄 수 있게 되어, 실감 효과를 높이고, 다양한 응용 서비스로 확장할 수 있게 된다.
도 1은 종래의 투명 디스플레이를 이용한 쇼케이스를 나타낸 도면,
도 2는 본 발명의 일 실시예에 따른 AR 쇼케이스의 개념도이고,
도 3은, 도 2에 도시된 AR 쇼케이스의 내부 블럭도,
도 4는, 도 3에 도시된 3D 영상 렌더링 장치의 블럭도,
도 5는 본 발명의 다른 실시예에 따른 AR 쇼케이스의 상품 전시 방법의 설명에 제공되는 흐름도, 그리고,
도 6은, 도 5의 S220단계에 대한 상세 흐름도이다.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.
도 2는 본 발명의 일 실시예에 따른 AR(Augmented Reality)) 쇼케이스의 개념도이고, 도 3은 도 2에 도시된 AR 쇼케이스의 내부 블럭도이다. 본 발명의 실시예에 따른 AR 쇼케이스는, 쇼케이스 전방의 투명 디스플레이에 영상을 렌더링하여 주는 전시 시스템이다.
실감 효과를 높이기 위해, 본 발명의 실시예에 따른 AR 쇼케이스는, 아이 트래킹 기술을 이용하여, 투명 디스플레이에 재생되는 영상을 사용자의 시점에 따라 변화시킨다.
이와 같은 기능을 수행하는 본 발명의 실시예에 따른 AR 쇼케이스는, 도 2와 도 3에 도시된 바와 같이, 쇼케이스(110), 카메라(120), 3D 영상 렌더링 장치(130) 및 투명 OLED(Organic Light Emitting Diode) 디스플레이(140)를 포함하여 구축된다.
쇼케이스(110)는 상품이 전시되는 공간을 형성하는 하우징이다. 쇼케이스(110)는 정육면체 형상으로 구현되는 것이 일반적이지만, 그 밖의 다른 형상으로 구현될 수도 있다.
카메라(120)는 쇼케이스(110)의 상부에 설치되어 쇼케이스(110)의 전방을 촬영하기 위한 수단으로, 쇼케이스(110)에 전시된 상품을 보고 있는 관찰자들의 안면들을 촬영한다.
카메라(120)는 소형으로 구현하는 것이 좋으며, 쇼케이스(110)의 상부가 아닌 다른 위치에, 나아가 쇼케이스(110)로부터 분리되어 설치될 수도 있음은 물론이다.
투명 OLED 디스플레이(140)는 쇼케이스(110)의 전면에 설치되는 디스플레이로, 쇼케이스(110)에 전시된 상품과 관련한 영상이 표시된다. 투명 OLED 이외의 다른 종류의 디스플레이로 대체될 수 있다.
3D 영상 렌더링 장치(130)는 투명 OLED 디스플레이(140)에 표시할 전시 상품 관련 영상을 3D로 생성/렌더링하여, 투명 OLED 디스플레이(140)로 전달하여 표시한다.
3D 영상 렌더링 장치(130)에 의해 생성되는 상품 관련 3D 영상은, 상품의 상표, 로고, 설명, 사용법 등은 물론이고, 광고나 상품에 대한 큐레이터 서비스 영상, 도슨트 서비스 영상 등일 수 있다.
또한, 3D 영상 렌더링 장치(130)는 카메라(120)에서 촬영된 쇼케이스(110)의 전방 영상을 분석하여, 관찰자의 시점을 파악한다. 구체적으로, 3D 영상 렌더링 장치(130)는 전방 영상에서 관찰자를 추출하고, 관찰자의 안면에서 눈의 위치를 확인하여, 관찰자의 시점을 파악하게 된다.
파악된 관찰자의 시점은 3D 영상 렌더링 장치(130)가 생성하는 3D 영상의 시점을 결정하는데 이용된다. 즉, 3D 영상 렌더링 장치(130)는 관찰자의 시점에 맞는 시점의 3D 영상을 생성하여 투명 OLED 디스플레이(140)에 표시한다.
이에 의해, 투명 OLED 디스플레이(140)에는 상품 관련 영상이 보다 현실감 있는 입체로 보이게 되는데, 전시된 상품과 함께 증강현실(AR) 처럼 잘 어울려져서 표출된다.
도 4는, 도 3에 도시된 3D 영상 렌더링 장치(130)의 블럭도이다. 3D 영상 렌더링 장치(130)는, 도 4에 도시된 바와 같이, 통신부(131), 프로세서(132) 및 저장부(133)를 포함한다.
통신부(131)는 카메라(120) 및 투명 OLED 디스플레이(140)와 데이터를 송수신하기 위한 통신 인터페이스이다. 통신부(131)를 통해, 카메라(120)로부터 쇼케이스(110)의 전방 영상이 수신되고, 투명 OLED 디스플레이(140)에 상품 관련 3D 영상을 전송한다.
프로세서(132)는 카메라(120)에서 촬영된 쇼케이스(110)의 전방 영상을 분석하여 관찰자의 시점을 파악하고, 파악된 관찰자의 시점에 맞는 시점의 3D 영상을 생성/렌더링하기 위한 수단으로, 다수의 GPU(Graphic Processing Unit)와 CPU(Central Processing Unit)를 포함하여 구성한다.
저장부(133)는 프로세서(132)가 동작함에 있어 필요한 저장 공간을 제공한다.
이하에서는, 도 2와 도 3에 도시된 AR 쇼케이스에 의해 상품 전시가 이루어지는 과정에 대해, 도 5를 참조하여 상세히 설명한다.
도 5는 본 발명의 다른 실시예에 따른 AR 쇼케이스의 상품 전시 방법의 설명에 제공되는 흐름도이다.
도시된 바와 같이, 먼저 카메라(120)가 쇼케이스(110)에 전시된 상품을 관람하는 관찰자들의 안면들을 촬영한다(S210). 촬영된 영상은 3D 영상 렌더링 장치(130)에 전달된다.
그러면, 3D 영상 렌더링 장치(130)는 S210단계에서 촬영된 쇼케이스(110)의 전방 영상을 분석하여, 관찰자의 시점을 파악한다(S220).
그리고, 3D 영상 렌더링 장치(130)는 S220단계에서 파악된 관찰자의 시점에 맞는 시점의 3D 영상을 생성한다(S230).
다음, 3D 영상 렌더링 장치(130)는 S230단계에서 생성된 관찰자의 시점에 3D 영상을 투명 OLED 디스플레이(140)에 전달하여 표시한다(S240).
이하에서는, 도 5의 S220단계에서 관찰자의 시점을 파악하는 구체적인 과정에 대해, 도 6을 참조하여 상세히 설명한다. 도 6은, 도 5의 S220단계에 대한 상세 흐름도이다.
먼저, S210단계에서 촬영된 쇼케이스(110)의 전방 영상에서 관찰자들의 안면들을 추출한다(S221).
만약, S221단계에서 추출된 관찰자의 안면이 1개이면(S222-Y), S221단계에서 추출된 안면에서 시선 방향을 인식하고(S223), S223단계에서 인식한 방향을 관찰자 시점으로 결정한다(S224).
반면, S221단계에서 추출된 관찰자의 안면이 2개 이상이면(S222-N), S221단계에서 추출된 안면들에서 시선 방향들을 인식하고(S225), 인식한 시선 방향들의 평균 방향을 산출한다(S226). 그리고, S226단계에서 산출한 방향을 관찰자 시점으로 결정한다(S227).
지금까지, 투명 OLED 디스플레이를 이용한 AR 쇼케이스에 대해 바람직한 실시예를 들어 상세히 설명하였다.
본 발명의 실시예에 따른 AR 쇼케이스는, OLED를 이용한 투명 디스플레이에 아이 트래킹 기술을 접목함으로써 투명 디스플레이에서 재생한 영상이 3D 효과 및 플로팅 효과를 주도록하여 실감 효과를 극대화하였다.
본 발명의 실시예에 따른 AR 쇼케이스를 통해, 투명 디스플레이의 플로팅 효과에 입체 효과를 부여할 수 있게 되어, 영상의 실감 효과를 향상시키고 다양한 응용 서비스를 창출할 수 있게 된다.
한편, 본 실시예에 따른 장치와 방법의 기능을 수행하게 하는 컴퓨터 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체에도 본 발명의 기술적 사상이 적용될 수 있음은 물론이다. 또한, 본 발명의 다양한 실시예에 따른 기술적 사상은 컴퓨터로 읽을 수 있는 기록매체에 기록된 컴퓨터로 읽을 수 있는 코드 형태로 구현될 수도 있다. 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터에 의해 읽을 수 있고 데이터를 저장할 수 있는 어떤 데이터 저장 장치이더라도 가능하다. 예를 들어, 컴퓨터로 읽을 수 있는 기록매체는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광디스크, 하드 디스크 드라이브, 등이 될 수 있음은 물론이다. 또한, 컴퓨터로 읽을 수 있는 기록매체에 저장된 컴퓨터로 읽을 수 있는 코드 또는 프로그램은 컴퓨터간에 연결된 네트워크를 통해 전송될 수도 있다.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

Claims (8)

  1. 상품이 전시되는 케이스;
    상품을 바라보는 관찰차를 촬영하는 카메라;
    3D 영상이 표시되는 투명 디스플레이; 및
    관찰차의 시선에 맞는 시점의 3D 영상을 생성하여, 투명 디스플레이에 표시하는 렌더링 장치;를 포함하는 것을 특징으로 하는 상품 전시 시스템.
  2. 청구항 1에 있어서,
    투명 디스플레이는,
    케이스의 전면에 설치되는 것을 특징으로 하는 상품 전시 시스템.
  3. 청구항 1에 있어서,
    렌더링 장치는,
    관찰자가 1명인 경우, 관찰자의 시선에 맞는 시점의 3D 영상을 생성하는 것을 특징으로 하는 상품 전시 시스템.
  4. 청구항 3에 있어서,
    렌더링 장치는,
    관찰자가 2명 이상인 경우, 관찰자의 시선들의 평균 시선을 산출하고, 산출된 평균 시선에 맞는 시점의 3D 영상을 생성하는 것을 특징으로 하는 상품 전시 시스템.
  5. 청구항 1에 있어서,
    3D 영상은,
    상품의 상표, 로고, 설명, 사용법, 광고 중 적어도 하나를 포함하는 영상인 것을 특징으로 하는 상품 전시 시스템.
  6. 청구항 1에 있어서,
    3D 영상은,
    상품에 대한 큐레이터 서비스 영상 및 도슨트 서비스 영상 중 적어도 하나를 포함하는 것을 특징으로 하는 상품 전시 시스템.
  7. 청구항 1에 있어서,
    투명 디스플레이는,
    투명 OLED(Organic Light Emitting Diode) 디스플레이인 것을 특징으로 하는 상품 전시 시스템.
  8. 케이스에 전시된 상품을 바라보는 관찰차를 촬영하는 단계;
    관찰차의 시선에 맞는 시점의 3D 영상을 생성하는 단계;
    생성한 3D 영상을 투명 디스플레이에 표시하는 단계;를 포함하는 것을 특징으로 하는 상품 전시 방법.
PCT/KR2019/007868 2019-06-28 2019-06-28 투명 oled 디스플레이를 이용한 ar 쇼케이스 WO2020262738A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190077660A KR102395370B1 (ko) 2019-06-28 2019-06-28 투명 oled 디스플레이를 이용한 ar 쇼케이스
KR10-2019-0077660 2019-06-28

Publications (1)

Publication Number Publication Date
WO2020262738A1 true WO2020262738A1 (ko) 2020-12-30

Family

ID=74061750

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/007868 WO2020262738A1 (ko) 2019-06-28 2019-06-28 투명 oled 디스플레이를 이용한 ar 쇼케이스

Country Status (2)

Country Link
KR (1) KR102395370B1 (ko)
WO (1) WO2020262738A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102505666B1 (ko) * 2021-12-30 2023-03-03 주식회사 닷밀 초실감 콘텐츠를 제공하기 위해 특정 위치의 관람객 시점에 최적화된 렌더링을 수행하는 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060262140A1 (en) * 2005-05-18 2006-11-23 Kujawa Gregory A Method and apparatus to facilitate visual augmentation of perceived reality
KR20120060950A (ko) * 2010-08-13 2012-06-12 주식회사 시공테크 투명 디스플레이 패널에 실제 사물의 위치를 고려한 가상 이미지를 투영하는 시스템 및 그 방법
KR20130113902A (ko) * 2012-04-08 2013-10-16 삼성전자주식회사 투명 디스플레이 장치 및 그 디스플레이 방법
KR20150029412A (ko) * 2013-09-10 2015-03-18 삼성디스플레이 주식회사 디스플레이 장치, 디스플레이 시스템 및 그 제어 방법
JP2017103638A (ja) * 2015-12-02 2017-06-08 日本電信電話株式会社 観察領域推定方法、観察領域推定装置、及びプログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106294489B (zh) * 2015-06-08 2022-09-30 北京三星通信技术研究有限公司 内容推荐方法、装置及系统
KR20180107670A (ko) * 2017-03-22 2018-10-02 주식회사 다윈테크 투명 oled를 이용한 전시 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060262140A1 (en) * 2005-05-18 2006-11-23 Kujawa Gregory A Method and apparatus to facilitate visual augmentation of perceived reality
KR20120060950A (ko) * 2010-08-13 2012-06-12 주식회사 시공테크 투명 디스플레이 패널에 실제 사물의 위치를 고려한 가상 이미지를 투영하는 시스템 및 그 방법
KR20130113902A (ko) * 2012-04-08 2013-10-16 삼성전자주식회사 투명 디스플레이 장치 및 그 디스플레이 방법
KR20150029412A (ko) * 2013-09-10 2015-03-18 삼성디스플레이 주식회사 디스플레이 장치, 디스플레이 시스템 및 그 제어 방법
JP2017103638A (ja) * 2015-12-02 2017-06-08 日本電信電話株式会社 観察領域推定方法、観察領域推定装置、及びプログラム

Also Published As

Publication number Publication date
KR102395370B1 (ko) 2022-05-09
KR20210001489A (ko) 2021-01-06

Similar Documents

Publication Publication Date Title
CN107920734B (zh) 视线检测方法和装置
US8581966B2 (en) Tracking-enhanced three-dimensional display method and system
US20140176591A1 (en) Low-latency fusing of color image data
WO2010101362A2 (en) Metadata generating method and apparatus and image processing method and apparatus using metadata
JP6845111B2 (ja) 情報処理装置および画像表示方法
WO2010027193A2 (en) Spatially correlated rendering of three-dimensional content on display components having arbitrary positions
WO2011112028A2 (ko) 입체 영상 생성 방법 및 그 장치
KR20150091474A (ko) 멀티 디스플레이 장치 상에서의 로우 레이턴시 이미지 디스플레이 기법
WO2011041466A1 (en) Systems and methods for interaction with a virtual environment
WO2018004154A1 (ko) 혼합현실 디스플레이 장치
CN111833458A (zh) 图像显示方法及装置、设备、计算机可读存储介质
WO2019088699A1 (ko) 영상 처리 방법 및 장치
CN112752085A (zh) 基于人眼跟踪的裸眼3d视频播放系统及方法
WO2020262738A1 (ko) 투명 oled 디스플레이를 이용한 ar 쇼케이스
CN111095348A (zh) 基于摄像头的透明显示器
WO2019151544A1 (ko) 다수의 led 바를 이용한 레이어드 타입의 체적형 디스플레이 시스템
CN110709879A (zh) 广告信息处理系统、广告显示区域评价方法以及广告信息处理用程序
Peterson et al. Visual clutter management in augmented reality: Effects of three label separation methods on spatial judgments
KR20100015141A (ko) 스테레오스코픽 동영상에서 이미지를 합성하는 방법 및장치
CN116301379A (zh) 3d场景影像全息显示方法、装置、系统、设备及存储介质
US20230316810A1 (en) Three-dimensional (3d) facial feature tracking for autostereoscopic telepresence systems
WO2019124802A1 (ko) 개별 영상신호 출력을 이용한 매핑 유사홀로그램 제공 장치 및 방법
WO2021182124A1 (ja) 情報処理装置、及び情報処理方法
WO2018066734A1 (ko) 프로젝터 자세에 연동하는 콘텐츠 디스플레이 시스템 및 방법
CN115410242A (zh) 视线估计方法和装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19934519

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19934519

Country of ref document: EP

Kind code of ref document: A1