KR20200031216A - 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버 - Google Patents

증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버 Download PDF

Info

Publication number
KR20200031216A
KR20200031216A KR1020180109935A KR20180109935A KR20200031216A KR 20200031216 A KR20200031216 A KR 20200031216A KR 1020180109935 A KR1020180109935 A KR 1020180109935A KR 20180109935 A KR20180109935 A KR 20180109935A KR 20200031216 A KR20200031216 A KR 20200031216A
Authority
KR
South Korea
Prior art keywords
display device
product
content
information
user
Prior art date
Application number
KR1020180109935A
Other languages
English (en)
Other versions
KR102188929B1 (ko
Inventor
진병각
Original Assignee
나모웹비즈주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 나모웹비즈주식회사 filed Critical 나모웹비즈주식회사
Priority to KR1020180109935A priority Critical patent/KR102188929B1/ko
Priority to CN201980060021.3A priority patent/CN112703524A/zh
Priority to PCT/KR2019/008489 priority patent/WO2020054957A1/ko
Publication of KR20200031216A publication Critical patent/KR20200031216A/ko
Application granted granted Critical
Publication of KR102188929B1 publication Critical patent/KR102188929B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurosurgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)

Abstract

상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치는 상기 디스플레이 장치에 구비된 제 1 카메라를 통해 상품을 촬영하는 제 1 촬영부, 상기 디스플레이 장치에 구비된 제 2 카메라를 통해 사용자의 얼굴을 촬영하는 제 2 촬영부, 상기 디스플레이 장치의 각도를 측정하는 측정부, 상기 촬영된 상품에 대한 정보 및 상기 촬영된 사용자의 얼굴에 대한 정보를 서버로 전송하는 전송부, 상기 서버로부터 분석된 상기 상품에 대한 정보 및 상기 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신하는 수신부 및 상기 인식 정보와 관련된 컨텐츠를 출력하는 출력부를 포함하되, 상기 출력부는 상기 측정된 디스플레이 장치의 각도에 기초하여 상기 컨텐츠의 출력 위치를 조절한다.

Description

증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버{DISPLAY DEVICE, METHOD AND SERVER FOR PROVIDING AUGMENTED REALITY, VIRTUAL REALITY OR MIXED REALITY CONTENTS}
본 발명은 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버에 관한 것이다.
증강 현실(AR, Augmented Reality)이란 현실의 이미지나 배경에 3차원의 가상 이미지를 겹쳐서 하나의 영상으로 보여주는 기술을 말한다. 증강 현실은 현실과 가상을 혼합된 영상으로 제공함으로써, 실제 환경 보다 나은 현실감과 부가 정보를 사용자에게 제공한다는 장점을 가지고 있다.
이러한 증강 현실 서비스와 관련하여, 선행기술인 한국공개특허 제 2017-0054146호는 증강 현실 제공 방법을 개시하고 있다.
최근, 증강 현실을 이용한 다양한 서비스가 제공되고 있다. 그러나, 이러한 종래의 서비스들은 스마트폰 또는 HMD (Head mounted Display)를 이용할 필요가 있다.
즉, 종래의 서비스들은 스마트폰 또는 HMD가 필수적으로 요구됨에 따라 상용화된 서비스들이 많지 않다.
상품을 촬영하여 상품과 관련된 컨텐츠를 증강 현실, 가상 현실 또는 혼합 현실로 출력함으로써, 사용자가 상품에 대한 외관 및 상세 정보를 직관적으로 파악할 수 있도록 하는 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버를 제공하고자 한다.
사용자의 얼굴을 촬영하여 사용자를 인식하고, 상품과 관련된 복수의 컨텐츠 중 인식된 사용자 정보를 이용하여 사용자에게 제공할 최적의 컨텐츠를 결정하여 제공하도록 하는 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버를 제공하고자 한다.
사용자의 시선에 기초하여 디스플레이 장치의 각도가 조절되고, 조절된 디스플레이 장치의 각도에 따라 사용자가 컨텐츠를 시청하기 적합하도록 컨텐츠의 출력 위치를 조절하는 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버를 제공하고자 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 수단으로서, 본 발명의 일 실시예는, 디스플레이 장치에 구비된 제 1 카메라를 통해 상품을 촬영하는 제 1 촬영부, 상기 디스플레이 장치에 구비된 제 2 카메라를 통해 사용자의 얼굴을 촬영하는 제 2 촬영부, 상기 디스플레이 장치의 각도를 측정하는 측정부, 상기 촬영된 상품에 대한 정보 및 상기 촬영된 사용자의 얼굴에 대한 정보를 서버로 전송하는 전송부, 상기 서버로부터 분석된 상기 상품에 대한 정보 및 상기 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신하는 수신부 및 상기 인식 정보와 관련된 컨텐츠를 출력하는 출력부를 포함하되, 상기 출력부는 상기 측정된 디스플레이 장치의 각도에 기초하여 상기 컨텐츠의 출력 위치를 조절하는 것인 디스플레이 장치를 제공할 수 있다.
본 발명의 다른 실시예는, 디스플레이 장치에 구비된 제 1 카메라를 통해 상품을 촬영하는 단계, 상기 디스플레이 장치에 구비된 제 2 카메라를 통해 사용자의 얼굴을 촬영하는 단계, 상기 디스플레이 장치의 각도를 측정하는 단계, 상기 촬영된 상품에 대한 정보 및 상기 촬영된 사용자의 얼굴에 대한 정보를 서버로 전송하는 단계, 상기 서버로부터 분석된 상기 상품에 대한 정보 및 상기 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신하는 단계 및 상기 인식 정보와 관련된 컨텐츠를 출력하는 단계를 포함하되, 상기 컨텐츠를 출력하는 단계는 상기 측정된 디스플레이 장치의 각도에 기초하여 상기 컨텐츠의 출력 위치를 조절하는 것인 컨텐츠 제공 방법을 제공할 수 있다.
본 발명의 또 다른 실시예는, 본 발명의 또 다른 실시예는, 디스플레이 장치로부터 상기 디스플레이 장치에 의해 촬영된 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 수신하는 수신부, 상기 수신한 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 분석하는 분석부, 상기 분석된 상품에 대한 정보에 기초하여 상품 인식 정보를 추출하고, 상기 분석된 사용자의 얼굴에 대한 정보에 기초하여 사용자 인식 정보를 추출하는 추출부, 상기 추출된 상품 인식 정보 및 사용자 인식 정보를 포함하는 인식 정보를 상기 디스플레이 장치로 전송하는 전송부를 포함하되, 상기 인식 정보에 기초하여 상기 상품과 관련된 컨텐츠가 상기 디스플레이 장치에서 출력되고, 상기 컨텐츠는 상기 디스플레이 장치에서 측정된 상기 디스플레이 장치의 각도에 기초하여 출력 위치가 조절되는 것인 서버를 제공할 수 있다.
상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 상품을 촬영하여 상품과 관련된 컨텐츠를 증강 현실로 출력함으로써, 사용자가 상품에 대한 외관 및 상세 정보를 직관적으로 파악할 수 있도록 하는 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버를 제공할 수 있다.
사용자의 얼굴을 촬영하여 사용자를 인식하고, 상품과 관련된 복수의 컨텐츠 중 인식된 사용자 정보를 이용하여 사용자에게 제공할 최적의 컨텐츠를 결정하여 제공하도록 하는 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버를 제공할 수 있다.
사용자의 시선에 기초하여 디스플레이 장치의 각도가 조절되고, 조절된 디스플레이 장치의 각도에 따라 사용자가 컨텐츠를 시청하기 적합하도록 컨텐츠의 출력 위치를 조절하는 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버를 제공할 수 있다.
상품의 상태에 따라 컨텐츠의 시나리오에 대응하는 컨텐츠를 제공하도록 하는 상품과 관련된 컨텐츠를 제공하는 디스플레이 장치 및 방법을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 컨텐츠 제공 시스템의 구성도이다.
도 2a 및 도 2b는 본 발명의 일 실시예에 따른 디스플레이 장치를 도시한 예시적인 도면이다.
도 3은 본 발명의 일 실시예에 따른 디스플레이 장치의 구성도이다.
도 4a 내지 도 4e는 본 발명의 일 실시예에 따른 디스플레이 장치에서 상품과 관련된 컨텐츠를 제공하는 과정을 설명하기 위한 예시적인 도면이다.
도 5는 본 발명의 일 실시예에 따른 디스플레이 장치에서 상품과 관련된 컨텐츠를 제공하는 방법의 순서도이다.
도 6은 본 발명의 일 실시예에 따른 서버의 구성도이다.
도 7은 본 발명의 일 실시예에 따른 서버에서 디스플레이 장치에서 상품과 관련된 컨텐츠를 제공하는 방법의 순서도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.
본 명세서에 있어서 단말 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말 또는 디바이스에서 수행될 수도 있다.
이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 컨텐츠 제공 시스템의 구성도이다. 도 1을 참조하면, 컨텐츠 제공 시스템(1)은 디스플레이 장치(110) 및 서버(120)를 포함할 수 있다. 디스플레이 장치(110) 및 서버(120)는 컨텐츠 제공 시스템(1)에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다.
도 1의 컨텐츠 제공 시스템(1)의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 디스플레이 장치(110)는 서버(120)와 동시에 또는 시간 간격을 두고 연결될 수 있다.
네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷 (WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 블루투스 통신, 적외선 통신, 초음파 통신, 가시광 통신(VLC: Visible Light Communication), 라이파이(LiFi) 등이 포함되나 이에 한정되지는 않는다.
디스플레이 장치(110)는 디스플레이 장치(110)에 구비된 제 1 카메라(111)를 통해 상품(100)을 촬영할 수 있다.
디스플레이 장치(110)는 디스플레이 장치(110)에 구비된 제 2 카메라(112)를 통해 사용자의 얼굴을 촬영할 수 있다.
디스플레이 장치(110)는 디스플레이 장치(110)의 각도를 측정할 수 있다.
디스플레이 장치(110)는 촬영된 상품(100)에 대한 정보 및 촬영된 사용자의 얼굴에 대한 정보를 서버(120)로 전송할 수 있다.
디스플레이 장치(110)는 서버(120)로부터 분석된 상품(100)에 대한 정보 및 사용자의 얼굴에 대한 정보 등과 관련된 인식 정보를 수신할 수 있다. 여기서, 인식 정보는 회원 정보, 과거 구매 이력, 선호 상품 및 선호 정보 중 등을 포함하는 사용자 인식 정보 및 상품(100)의 식별자를 포함하는 상품 인식 정보를 포함할 수 있다.
디스플레이 장치(110)는 사용자 인식 정보 및 상품 인식 정보에 기초하여 출력될 컨텐츠를 결정할 수 있다. 예를 들어, 디스플레이 장치(110)는 상품(100)에 대한 복수의 컨텐츠 중 과거 구매 이력, 선호 상품 및 선호 정보 중 등에 기초한 최적 컨텐츠를 결정할 수 있다.
디스플레이 장치(110)는 상품(100)의 상태가 변경됨에 따라 출력될 컨텐츠를 변경할 수 있다.
디스플레이 장치(110)는 인식 정보와 관련된 컨텐츠를 출력할 수 있다. 이 때, 디스플레이 장치(110)는 측정된 디스플레이 장치(110)의 각도에 기초하여 컨텐츠의 출력 위치를 조절할 수 있다. 예를 들어, 디스플레이 장치(110)는 측정된 디스플레이 장치(110)의 각도 및 제 2 촬영부(112)로부터 촬영된 사용자의 얼굴의 이미지로부터 도출된 사용자의 위치에 기초하여 컨텐츠의 출력 위치를 조절할 수 있다.
디스플레이 장치(110)는 표시된 컨텐츠에 대해 사용자로부터 터치 명령 또는 음성 명령 중 등을 입력받을 수 있다.
디스플레이 장치(110)는 데이터베이스를 통해 각 상품마다 다양한 컨텐츠를 저장할 수 있다. 다양한 컨텐츠는 예를 들어, 프로모션에 대한 컨텐츠, 광고에 대한 컨텐츠, 기능에 대한 컨텐츠, 증강 현실 컨텐츠 등을 포함할 수 있다.
이러한 디스플레이 장치(110)는 복수의 상품이 진열된 진열대 상에서 복수의 상품의 전방에 위치하며, 레일(130) 상에서 디스플레이 장치(110)에 구비된 이동 기구를 통해 복수의 상품 중 어느 하나의 전방으로 이동될 수 있다.
서버(120)는 디스플레이 장치(110)로부터 촬영된 상품에 대한 정보 및 촬영된 사용자의 얼굴에 대한 정보를 수신할 수 있다.
서버(120)는 수신한 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 분석하여 관련된 인식 정보를 추출할 수 있다. 여기서, 인식 정보는 회원 정보, 과거 구매 이력, 선호 상품 및 선호 정보 등을 포함하는 사용자 인식 정보 및 상품의 식별자를 포함하는 상품 인식 정보를 포함할 수 있다.
서버(120)는 추출된 인식 정보를 디스플레이 장치(110)로 전송할 수 있다.
도 2a 및 도 2b는 본 발명의 일 실시예에 따른 디스플레이 장치를 도시한 예시적인 도면이다. 여기서, 디스플레이 장치(110)는 복수의 상품이 진열된 진열대 상에서 복수의 상품의 전방에 위치한다.
도 2a는 본 발명의 일 실시예에 따른 디스플레이 장치의 정면도이다. 도 2a를 참조하면, 디스플레이 장치(110)는 제 1 카메라(111), 제 2 카메라(112), 디스플레이 모듈(113), 마이크(114), 이동 기구(115)를 포함할 수 있다.
제 1 카메라(111)는 디스플레이 장치(110)의 후면에 구비되어, 디스플레이 장치(110)의 후방에 위치한 상품(100)을 촬영할 수 있다.
제 2 카메라(112)는 디스플레이 장치(110)의 전면에 구비되어, 디스플레이 장치(110)를 시청하는 사용자의 얼굴을 촬영할 수 있다.
디스플레이 모듈(113)은 디스플레이 패널을 통해 상품(100)과 관련된 컨텐츠를 출력할 수 있다.
디스플레이 모듈(113)은 터치 센서가 탑재되어, 사용자로부터 출력된 컨텐츠에 대한 터치 입력을 수신할 수 있다.
마이크(114)는 사용자로부터 출력된 컨텐츠에 대한 음성 입력을 수신할 수 있다.
이동 기구(115)는 디스플레이 장치(110)가 복수의 상품 중 어느 하나의 전방으로 이동되도록 할 수 있다. 예를 들어, 디스플레이 장치(110)는 레일(130) 상에서 이동 기구(115)를 통해 사용자에 의해 복수의 상품 중 어느 하나의 상품의 전방으로 이동될 수 있다.
도 2b는 본 발명의 일 실시예에 따른 디스플레이 장치의 측면도이다. 도 2a 및 도 2b를 참조하면, 디스플레이 장치(110)는 힌지(hinge; 116)를 더 포함할 수 있다. 여기서, 힌지(116)는 전자식 또는 기계식 힌지일 수 있다.
힌지(116)는 디스플레이 장치(110)의 기울기가 수동 또는 자동으로 조절되도록 할 수 있다. 이는, 사용자별 신장 차이에 따라 사용자의 시선 각도도 달라지게 되므로, 힌지(116)를 통해 디스플레이 장치(110)의 기울기를 수동 또는 자동으로 조절되도록 함으로써, 사용자의 시선이 디스플레이 장치(110)의 정면을 응시할 수 있도록 하기 위함이다.
예를 들어, 디스플레이 장치(110)의 기울기가 제 1 각도(예를 들어, 0°)에 해당하는 경우, 사용자는 힌지(116)를 통해 사용자의 시선이 디스플레이 장치(110)의 정면을 응시하기에 적합하도록 디스플레이 장치(110)의 기울기를 제 2 각도(예를 들어, 60°)로 조절(117)할 수 있다.
도 3은 본 발명의 일 실시예에 따른 디스플레이 장치의 구성도이다. 도 3을 참조하면, 디스플레이 장치(110)는 제 1 촬영부(310), 제 2 촬영부(320), 측정부(330), 전송부(340), 수신부(350), 컨텐츠 결정부(360), 출력부(370), 입력부(380) 및 데이터베이스(390)를 포함할 수 있다.
제 1 촬영부(310)는 디스플레이 장치(110)에 구비된 제 1 카메라(111)를 통해 상품(100)을 촬영할 수 있다. 여기서, 제 1 카메라(111)는 디스플레이 장치(110)의 후면에 설치된 것으로, 제 1 촬영부(310)는 디스플레이 장치(110)의 후면에 설치된 제 1 카메라(111)를 통해 상품(100)의 정면을 촬영할 수 있다.
제 2 촬영부(320)는 디스플레이 장치(110)에 구비된 제 2 카메라(112)를 통해 사용자의 얼굴을 촬영할 수 있다. 여기서, 제 2 카메라(112)는 디스플레이 장치(110)의 정면에 설치된 것으로, 제 2 촬영부(320)는 디스플레이 장치(110)의 정면에 설치된 제 2 카메라(112)를 통해 사용자의 얼굴을 촬영할 수 있다.
측정부(330)는 디스플레이 장치(110)의 각도를 측정할 수 있다. 예를 들어, 측정부(330)는 디스플레이 장치(110)의 화면이 사용자의 시선과 대응되도록 기울기가 조절된 후, 디스플레이 장치(110)의 각도를 측정할 수 있다. 여기서, 디스플레이 장치(110)의 각도는 진열대와 디스플레이 장치(110)의 디스플레이 패널이 이루는 각도를 의미할 수 있다.
측정부(330)는 디스플레이 패널이 힌지(116; 도 2 참조)에 의해 지지되는 위치에 기초하여 디스플레이 장치(110)의 각도를 측정할 수 있다.
전송부(340)는 촬영된 상품에 대한 정보 및 촬영된 사용자의 얼굴에 대한 정보를 서버(120)로 전송할 수 있다. 여기서, 촬영된 상품에 대한 정보 및 촬영된 사용자의 얼굴에 대한 정보는 상품 이미지 및 얼굴 이미지일 수 있다.
수신부(350)는 서버(120)로부터 분석된 상품(100)에 대한 정보 및 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신할 수 있다. 여기서, 인식 정보는 회원 정보, 과거 구매 이력, 선호 상품 및 선호 정보 중 등을 포함하는 사용자 인식 정보 및 상품(100)의 식별자를 포함하는 상품 인식 정보를 포함할 수 있다.
컨텐츠 결정부(360)는 사용자 인식 정보 및 상품 인식 정보에 기초하여 출력될 컨텐츠를 결정할 수 있다.
예를 들어, 컨텐츠 결정부(360)는 상품(100)에 대한 복수의 컨텐츠 중 과거 구매 이력, 선호 상품 및 선호 정보(예를 들어, 선호 색상, 선호 디자인 등) 중 등에 기초한 최적 컨텐츠를 결정할 수 있다.
예를 들어, 컨텐츠 결정부(360)는 상품(100)의 상태가 변경됨에 따라 출력될 컨텐츠를 변경할 수 있다. 여기서, 상품(100)의 상태의 변경은 상품(100)의 형상 변화, 기능 변화 등을 포함할 수 있다.
예를 들어, 상품(100)에 구비된 도어가 닫혀진 경우(예컨대, 사용자가 상품(100)을 열지 않은 경우), 컨텐츠 결정부(360)는 상품(100)의 외관 또는 기본 기능과 관련된 컨텐츠를 최적 컨텐츠로 결정할 수 있다. 이에 반해, 상품(100)에 구비된 도어가 열린 경우(예컨대, 사용자가 상품(100)을 열은 경우), 컨텐츠 결정부(360)는 상품(100)의 내부 구성, 동작 과정, 내부 기능 등과 관련된 컨텐츠를 최적 컨텐츠로 결정할 수 있다.
출력부(370)는 인식 정보와 관련된 컨텐츠를 출력할 수 있다. 이 때, 출력부(370)는 측정된 디스플레이 장치(110)의 각도에 기초하여 컨텐츠의 출력 위치를 조절할 수 있다.
예를 들어, 출력부(370)는 측정된 디스플레이 장치(110)의 각도 및 제 2 촬영부(112)로부터 촬영된 사용자의 얼굴의 이미지로부터 도출된 사용자의 시청 위치에 기초하여 컨텐츠의 출력 위치를 조절할 수 있다.
즉, 디스플레이 장치(110)는 제 2 촬영부(112)로부터 촬영된 사용자의 얼굴의 이미지로부터 사용자의 시청 위치(사용자의 시선 각도를 포함함)를 도출하고, 디스플레이 장치(110)의 각도 및 사용자의 시청 위치를 고려하여 컨텐츠의 출력 위치를 조절할 수 있다.
이는, 사용자별로 신장 차이가 존재하므로, 사용자 마다의 시선 각도를 고려하여 사용자가 컨텐츠의 시청에 적합하도록 컨텐츠의 출력 위치를 조정함으로써, 각 사용자의 시선과 대응되는 위치에 컨텐츠가 출력되도록 하기 위함이다. 특히, 후술하는 바와 같이, 본 발명의 컨텐츠는 증강 현실 컨텐츠를 포함하므로, 디스플레이 장치(110)에 비춰지는 상품(100) 상에 출력되는 증강 현실 컨텐츠의 출력 위치를 결정함에 있어 사용자의 시선 각도가 반드시 고려될 필요가 있다.
입력부(380)는 표시된 컨텐츠에 대해 사용자로부터 터치 명령 또는 음성 명령 등을 입력받을 수 있다. 예를 들어, 입력부(380)는 디스플레이에 구비된 터치 센서를 통해 사용자로부터 표시된 컨텐츠에 대한 터치 명령을 입력받을 수 있다. 다른 예를 들어, 입력부(380)는 마이크를 통해 사용자로부터 표시된 컨텐츠에 대한 음성 명령을 입력받을 수 있다. 여기서, 터치 명령 또는 음성 명령은 컨텐츠의 시나리오에 따른 다음 동작 명령, 상품(100)에 대한 각각의 상세 기능을 설명하기 위한 명령, 광고 또는 프로모션 출력 명령 등을 포함할 수 있다.
데이터베이스(390)는 각 상품마다 다양한 컨텐츠를 저장할 수 있다. 다양한 컨텐츠는 예를 들어, 프로모션에 대한 컨텐츠, 광고에 대한 컨텐츠, 기능에 대한 컨텐츠 등을 포함하며, 이러한 다양한 컨텐츠는 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠로 표현되는 것일 수 있다. 이는, 상품과 관련된 컨텐츠를 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 통해 제공함으로써, 사용자는 상품과 관련된 정보를 직관적으로 확인할 수 있다는 장점을 제공할 수 있다.
도 4a 내지 도 4e는 본 발명의 일 실시예에 따른 디스플레이 장치에서 상품과 관련된 컨텐츠를 제공하는 과정을 설명하기 위한 예시적인 도면이다.
도 4a는 본 발명의 일 실시예에 따른 디스플레이 장치에서 사용자 인식 정보에 기초하여 상품 모델을 추천하는 과정을 설명하기 위한 예시적인 도면이다. 도 4a를 참조하면, 디스플레이 장치(110)는 디스플레이 장치(110)에 구비된 카메라를 통해 상품의 촬영 없이 사용자의 얼굴만 촬영된 경우, 사용자 인식 정보와 관련된 컨텐츠(예를 들어, 추천 상품, 추천 모델 등)를 출력할 수 있다. 사용자 인식 정보는 예를 들어, 회원 번호, 과거 구매 이력, 선호 상품 및 선호 정보 등을 포함할 수 있다.
디스플레이 장치(110)는 사용자 인식 정보에 기초하여 컨텐츠를 디스플레이 장치(110)에 출력할 수 있다. 예를 들어, 디스플레이 장치(110)는 화면의 제 1 영역(400)에 사용자 정보를 출력하고, 화면 제 2 영역(410)에 채팅창을 출력하고, 화면의 제 3 영역(420)에 관련 컨텐츠를 출력할 수 있다. 제 1 영역(400)에는 나이, 구매 상품, 관심 상품 등과 같은 사용자 정보가 출력될 수 있다. 제 2 영역(410)에는 챗봇과 사용자 간의 채팅이 가능한 채팅창이 출력될 수 있다. 예를 들어, 챗봇이 "어떤 상품을 찾으세요"라고 질문한 후, 사용자가 "밥솥 추천해줘"라고 응답한 경우, 챗봇은 "오른쪽과 같이 추천해드려요"라는 메시지를 제공할 수 있다. 제 3 영역(420)에는 사용자가 원하는 상품과 관련된 추천 모델(예를 들어, 사용자의 선호 색상의 모델)이 출력될 수 있다.
도 4b 내지 도 4e는 본 발명의 일 실시예에 따른 디스플레이 장치에서 상품과 관련된 프로모션 컨텐츠가 출력된 예시적인 도면이다.
디스플레이 장치(110)는 상품(100)과 관련된 컨텐츠를 출력할 수 있다. 예를 들어, 디스플레이 장치(110)는 레일(130) 상에서 복수의 상품이 진열된 진열대 상에서 복수의 상품의 전방에 위치하여 레일(130) 상에서 사용자에 의해 디스플레이 장치에 구비된 이동 기구를 통해 복수의 상품 중 어느 하나의 상품의 전방으로 이동되고, 이동된 위치에서 촬영된 상품(100)과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다. 다른 예를 들어, 디스플레이 장치(110)는 도 4a에서 출력된 추천 모델로부터 사용자에 의해 선택된 모델과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수도 있다.
이하에서는, 디스플레이 장치(110)에서 카메라를 통해 상품 및 사용자의 얼굴이 촬영됨으로써, 상품 및 사용자 얼굴에 대한 인식 정보와 관련된 컨텐츠를 출력하는 경우에 대해 설명하도록 한다.
도 4b를 참조하면, 디스플레이 장치(110)는 상품의 외관과 관련된 컨텐츠를 출력할 수 있다. 예를 들어, 디스플레이 장치(110)는 상품(100)에 관한 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다. 예를 들어, 디스플레이 장치(110)는 상품의 외관을 사용자가 모두 확인할 수 있도록 상품(100)의 외관을 360도로 회전시키며 출력할 수 있다.
도 4c를 참조하면, 디스플레이 장치(110)는 상품의 기능과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다. 예를 들어, 디스플레이 장치(110)는 사용자로부터 터치 명령 또는 음성 명령을 통해 상품(100)의 기능과 관련된 컨텐츠의 출력을 입력받아 기능과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다. 기능은 예를 들어, 상품(100)의 모델명, 크기, 중량, 소비전력, 용량 등을 포함할 수 있다.
도 4d를 참조하면, 디스플레이 장치(110)는 사용자로부터 터치 명령 또는 음성 명령을 통해 상품(100)의 내부 구성과 관련된 컨텐츠의 출력을 입력받아 내부 구성과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다. 이와 달리, 사용자가 상품(100)을 제어한 경우(예컨대, 상품(100)을 열은 경우), 디스플레이 장치(110)가 내부 구성과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다.
도 4e를 참조하면, 디스플레이 장치(110)는 사용자로부터 터치 명령 또는 음성 명령을 통해 상품(100)의 동작과 관련된 컨텐츠의 출력을 입력받아 동작과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다. 예를 들어, 디스플레이 장치(110)를 통해 촬영된 상품이 밥솥인 경우, 디스플레이 장치(110)는 밥솥의 동작과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 출력할 수 있다.
도 5는 본 발명의 일 실시예에 따른 디스플레이 장치에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법의 순서도이다. 도 5에 도시된 디스플레이 장치(110)에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법은 도 1 내지 도 4e에 도시된 실시예에 따른 컨텐츠 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 4e에 도시된 실시예에 따른 디스플레이 장치(110)에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법에도 적용된다.
단계 S510에서 디스플레이 장치(110)는 디스플레이 장치(110)에 구비된 제 1 카메라(111)를 통해 상품(100)을 촬영할 수 있다.
단계 S520에서 디스플레이 장치(110)는 디스플레이 장치(110)에 구비된 제 2 카메라(112)를 통해 사용자의 얼굴을 촬영할 수 있다.
단계 S530에서 디스플레이 장치(110)는 디스플레이 장치(110)의 각도를 측정할 수 있다.
단계 S540에서 디스플레이 장치(110)는 촬영된 상품에 대한 정보 및 촬영된 사용자의 얼굴에 대한 정보를 서버(120)로 전송할 수 있다.
단계 S550에서 디스플레이 장치(110)는 서버(120)로부터 분석된 상품(100)에 대한 정보 및 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신할 수 있다.
단계 S560에서 디스플레이 장치(110)는 인식 정보와 관련된 컨텐츠를 출력할 수 있다. 이 때, 컨텐츠는 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠 등을 포함하며, 디스플레이 장치(110)는 측정된 디스플레이 장치(110)의 각도에 기초하여 컨텐츠의 출력 위치를 조절할 수 있다.
상술한 설명에서, 단계 S510 내지 S560은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 6은 본 발명의 일 실시예에 따른 서버의 구성도이다. 도 6을 참조하면, 서버(120)는 수신부(610), 분석부(620), 추출부(630) 및 전송부(640)를 포함할 수 있다.
수신부(610)는 디스플레이 장치(110)로부터 디스플레이 장치(110)에 의해 촬영된 상품(100)에 대한 정보 및 사용자의 얼굴에 대한 정보를 수신할 수 있다.
분석부(620)는 수신한 상품(100)에 대한 정보 및 사용자의 얼굴에 대한 정보를 분석할 수 있다. 예를 들어, 분석부(620)는 수신한 상품(100)에 대한 정보에 기초하여 상품(100)의 윤곽선, 색상 등을 분석할 수 있다. 다른 예를 들어, 분석부(620)는 수신한 사용자의 얼굴에 대한 정보에 기초하여 사용자의 얼굴 특징점을 분석할 수 있다.
추출부(630)는 분석된 상품에 대한 정보에 기초하여 상품 인식 정보를 추출하고, 분석된 사용자의 얼굴에 대한 정보에 기초하여 사용자 인식 정보를 추출할 수 있다.
전송부(640)는 추출된 상품 인식 정보 및 사용자 인식 정보를 포함하는 인식 정보를 디스플레이 장치(110)로 전송할 수 있다.
도 7은 본 발명의 일 실시예에 따른 서버에서 디스플레이 장치에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법의 순서도이다. 도 7에 도시된 서버(120)에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법은 도 1 내지 도 6에 도시된 실시예에 따른 컨텐츠 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 6에 도시된 실시예에 따른 서버(120)에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법에도 적용된다.
단계 S710에서 서버(120)는 디스플레이 장치(110)로부터 디스플레이 장치(110)에 의해 촬영된 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 수신할 수 있다.
단계 S720에서 서버(120)는 수신한 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 분석할 수 있다.
단계 S730에서 서버(120)는 분석된 상품에 대한 정보에 기초하여 상품 인식 정보를 추출하고, 분석된 사용자의 얼굴에 대한 정보에 기초하여 사용자 인식 정보를 추출할 수 있다.
단계 S740에서 서버(120)는 추출된 상품 인식 정보 및 사용자 인식 정보를 포함하는 인식 정보를 디스플레이 장치(110)로 전송할 수 있다.
상술한 설명에서, 단계 S710 내지 S740은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 1 내지 도 7을 통해 설명된 디스플레이 장치 및 서버에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 또한, 도 1 내지 도 7을 통해 설명된 디스플레이 장치 및 서버에서 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램의 형태로도 구현될 수 있다.
컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
100: 상품
110: 디스플레이 장치
111: 제 1 카메라
112: 제 2 카메라
113: 디스플레이 모듈
114: 마이크
115: 이동 기구
116: 힌지
120: 서버
130: 레일
310: 제 1 촬영부
320: 제 2 촬영부
330: 측정부
340: 전송부
350: 수신부
360: 컨텐츠 결정부
370: 출력부
380: 입력부
390: 데이터베이스

Claims (20)

  1. 상품과 관련된 컨텐츠를 제공하는 디스플레이 장치에 있어서,
    상기 디스플레이 장치에 구비된 제 1 카메라를 통해 상품을 촬영하는 제 1 촬영부;
    상기 디스플레이 장치에 구비된 제 2 카메라를 통해 사용자의 얼굴을 촬영하는 제 2 촬영부;
    상기 디스플레이 장치의 각도를 측정하는 측정부;
    상기 촬영된 상품에 대한 정보 및 상기 촬영된 사용자의 얼굴에 대한 정보를 서버로 전송하는 전송부;
    상기 서버로부터 분석된 상기 상품에 대한 정보 및 상기 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신하는 수신부; 및
    상기 인식 정보와 관련된 컨텐츠를 출력하는 출력부를 포함하되,
    상기 출력부는 상기 측정된 디스플레이 장치의 각도에 기초하여 상기 컨텐츠의 출력 위치를 조절하는 것인, 디스플레이 장치.
  2. 제 1 항에 있어서,
    상기 인식 정보는 회원 정보, 과거 구매 이력, 선호 상품 및 선호 정보 중 적어도 하나를 포함하는 사용자 인식 정보 및 상품의 식별자를 포함하는 상품 인식 정보를 포함하는 것인, 디스플레이 장치.
  3. 제 2 항에 있어서,
    상기 사용자 인식 정보 및 상기 상품 인식 정보에 기초하여 출력될 컨텐츠를 결정하는 컨텐츠 결정부를 더 포함하는 것인, 디스플레이 장치.
  4. 제 3 항에 있어서,
    상기 컨텐츠 결정부는 상기 상품에 대한 복수의 컨텐츠 중 상기 과거 구매 이력, 선호 상품 및 선호 정보 중 적어도 어느 하나에 기초한 최적 컨텐츠를 결정하는 것인, 디스플레이 장치.
  5. 제 1 항에 있어서,
    각 상품마다 다양한 컨텐츠를 저장하는 데이터베이스를 더 포함하고,
    상기 다양한 컨텐츠는 프로모션에 대한 컨텐츠, 광고에 대한 컨텐츠, 기능에 대한 컨텐츠 중 적어도 하나를 포함하는 것인, 디스플레이 장치.
  6. 제 5 항에 있어서,
    상기 다양한 컨텐츠는 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 포함하는 것인, 디스플레이 장치.
  7. 제 3 항에 있어서,
    상기 컨텐츠 결정부는 상기 상품의 상태가 변경됨에 따라 상기 출력될 컨텐츠를 변경하는 것인, 디스플레이 장치.
  8. 제 1 항에 있어서,
    상기 표시된 컨텐츠에 대해 사용자로부터 터치 명령 또는 음성 명령 중 적어도 하나를 입력받는 입력부를 더 포함하는 것인, 디스플레이 장치.
  9. 제 1 항에 있어서,
    상기 디스플레이 장치는 복수의 상품이 진열된 진열대 상에서 상기 복수의 상품의 전방에 위치하고,
    상기 디스플레이 장치는, 상기 디스플레이 장치가 상기 복수의 상품 중 어느 하나의 전방으로 이동되기 위한 이동 기구를 포함하는 것인, 디스플레이 장치.
  10. 제 1 항에 있어서,
    상기 출력부는 상기 측정된 디스플레이 장치의 각도 및 상기 제 2 촬영부로부터 촬영된 상기 사용자의 얼굴의 이미지로부터 도출된 상기 사용자의 위치에 기초하여 상기 컨텐츠의 출력 위치를 조절하는 것인, 디스플레이 장치.
  11. 디스플레이 장치에서 상품과 관련된 컨텐츠를 제공하는 방법에 있어서,
    상기 디스플레이 장치에 구비된 제 1 카메라를 통해 상품을 촬영하는 단계;
    상기 디스플레이 장치에 구비된 제 2 카메라를 통해 사용자의 얼굴을 촬영하는 단계;
    상기 디스플레이 장치의 각도를 측정하는 단계;
    상기 촬영된 상품에 대한 정보 및 상기 촬영된 사용자의 얼굴에 대한 정보를 서버로 전송하는 단계;
    상기 서버로부터 분석된 상기 상품에 대한 정보 및 상기 사용자의 얼굴에 대한 정보 중 적어도 하나와 관련된 인식 정보를 수신하는 단계; 및
    상기 인식 정보와 관련된 컨텐츠를 출력하는 단계를 포함하되,
    상기 컨텐츠를 출력하는 단계는 상기 측정된 디스플레이 장치의 각도에 기초하여 상기 컨텐츠의 출력 위치를 조절하는 것인, 컨텐츠 제공 방법.
  12. 제 11 항에 있어서,
    상기 인식 정보는 회원 정보, 과거 구매 이력, 선호 상품 및 선호 정보 중 적어도 하나를 포함하는 사용자 인식 정보 및 상품의 식별자를 포함하는 상품 인식 정보를 포함하는 것인, 컨텐츠 제공 방법.
  13. 제 12 항에 있어서,
    상기 사용자 인식 정보 및 상기 상품 인식 정보에 기초하여 출력될 컨텐츠를 결정하는 단계를 더 포함하는 것인, 컨텐츠 제공 방법.
  14. 제 13 항에 있어서,
    상기 컨텐츠를 결정하는 단계는 상기 상품에 대한 복수의 컨텐츠 중 상기 과거 구매 이력, 선호 상품 및 선호 정보 중 적어도 어느 하나에 기초한 최적 컨텐츠를 결정하는 것인, 컨텐츠 제공 방법.
  15. 제 11 항에 있어서,
    데이터베이스에 각 상품마다 다양한 컨텐츠가 저장되고,
    상기 다양한 컨텐츠는 프로모션에 대한 컨텐츠, 광고에 대한 컨텐츠, 기능에 대한 컨텐츠 중 적어도 하나를 포함하는 것인, 컨텐츠 제공 방법.
  16. 제 15 항에 있어서,
    상기 다양한 컨텐츠는 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 포함하는 것인, 컨텐츠 제공 방법.
  17. 제 13 항에 있어서,
    상기 컨텐츠를 결정하는 단계는 상기 상품의 상태가 변경됨에 따라 상기 출력될 컨텐츠를 변경하는 것인, 컨텐츠 제공 방법.
  18. 제 11 항에 있어서,
    상기 표시된 컨텐츠에 대해 사용자로부터 터치 명령 또는 음성 명령 중 적어도 하나를 입력받는 단계를 더 포함하는 것인, 컨텐츠 제공 방법.
  19. 제 11 항에 있어서,
    상기 컨텐츠를 출력하는 단계는 상기 측정된 디스플레이 장치의 각도 및 상기 제 2 촬영부로부터 촬영된 상기 사용자의 얼굴의 이미지로부터 도출된 상기 사용자의 위치에 기초하여 상기 컨텐츠의 출력 위치를 조절하는 것인, 컨텐츠 제공 방법.
  20. 상품과 관련된 컨텐츠를 제공하는 서버에 있어서,
    디스플레이 장치로부터 상기 디스플레이 장치에 의해 촬영된 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 수신하는 수신부;
    상기 수신한 상품에 대한 정보 및 사용자의 얼굴에 대한 정보를 분석하는 분석부;
    상기 분석된 상품에 대한 정보에 기초하여 상품 인식 정보를 추출하고, 상기 분석된 사용자의 얼굴에 대한 정보에 기초하여 사용자 인식 정보를 추출하는 추출부;
    상기 추출된 상품 인식 정보 및 사용자 인식 정보를 포함하는 인식 정보를 상기 디스플레이 장치로 전송하는 전송부를 포함하되,
    상기 인식 정보에 기초하여 상기 상품과 관련된 컨텐츠가 상기 디스플레이 장치에서 출력되고,
    상기 컨텐츠는 상기 디스플레이 장치에서 측정된 상기 디스플레이 장치의 각도에 기초하여 출력 위치가 조절되는 것인, 서버.
KR1020180109935A 2018-09-14 2018-09-14 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버 KR102188929B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020180109935A KR102188929B1 (ko) 2018-09-14 2018-09-14 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버
CN201980060021.3A CN112703524A (zh) 2018-09-14 2019-07-10 提供与商品相关的增强现实、虚拟现实或混合现实内容的显示装置、方法及服务器
PCT/KR2019/008489 WO2020054957A1 (ko) 2018-09-14 2019-07-10 상품과 관련된 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180109935A KR102188929B1 (ko) 2018-09-14 2018-09-14 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버

Publications (2)

Publication Number Publication Date
KR20200031216A true KR20200031216A (ko) 2020-03-24
KR102188929B1 KR102188929B1 (ko) 2020-12-09

Family

ID=69777900

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180109935A KR102188929B1 (ko) 2018-09-14 2018-09-14 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버

Country Status (3)

Country Link
KR (1) KR102188929B1 (ko)
CN (1) CN112703524A (ko)
WO (1) WO2020054957A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022119119A1 (ko) * 2020-12-02 2022-06-09 주식회사 픽스트리 멀티채널 미디어 송수신 방법 및 시스템

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023157112A1 (ja) * 2022-02-16 2023-08-24 日本電気株式会社 陳列支援システム、陳列支援方法、および記録媒体

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100127138A (ko) * 2009-05-25 2010-12-03 엘지전자 주식회사 디스플레이장치 및 그의 시야각 조절 방법
JP2013054593A (ja) * 2011-09-05 2013-03-21 Toshiba Tec Corp 情報処理装置及びプログラム
KR20130117303A (ko) * 2012-04-18 2013-10-25 삼성전자주식회사 증강 현실 이미지를 디스플레이하기 위한 방법 및 그 전자 장치
KR20160023208A (ko) * 2014-08-21 2016-03-03 엘지전자 주식회사 미러 디스플레이 장치 및 그의 동작 방법

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009105559A (ja) * 2007-10-22 2009-05-14 Nec Saitama Ltd 撮影画像からの認識対象検出処理方法およびカメラ付き携帯型電子機器
CN102880974A (zh) * 2012-09-12 2013-01-16 江苏乐买到网络科技有限公司 一种用于向用户发送商品团购信息的系统
KR101553067B1 (ko) * 2012-11-22 2015-09-15 강원대학교산학협력단 증강현실 내비케이터
KR101602828B1 (ko) * 2014-09-01 2016-03-14 유형근 얼굴인식형 인터랙티브 디지털 사이니지장치
CN105096180A (zh) * 2015-07-20 2015-11-25 北京易讯理想科技有限公司 基于增强现实的商品信息显示方法及装置
KR102335060B1 (ko) * 2015-11-09 2021-12-03 에스케이텔레콤 주식회사 증강 현실 제공 방법
CN107507017A (zh) * 2017-07-07 2017-12-22 阿里巴巴集团控股有限公司 一种线下导购方法和装置
CN107358451A (zh) * 2017-07-17 2017-11-17 竹间智能科技（上海）有限公司 一种交互式智能魔镜
CN108009891A (zh) * 2017-12-15 2018-05-08 杨智勇 基于富媒体显示商品信息的系统及货架及信息展示方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100127138A (ko) * 2009-05-25 2010-12-03 엘지전자 주식회사 디스플레이장치 및 그의 시야각 조절 방법
JP2013054593A (ja) * 2011-09-05 2013-03-21 Toshiba Tec Corp 情報処理装置及びプログラム
KR20130117303A (ko) * 2012-04-18 2013-10-25 삼성전자주식회사 증강 현실 이미지를 디스플레이하기 위한 방법 및 그 전자 장치
KR20160023208A (ko) * 2014-08-21 2016-03-03 엘지전자 주식회사 미러 디스플레이 장치 및 그의 동작 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022119119A1 (ko) * 2020-12-02 2022-06-09 주식회사 픽스트리 멀티채널 미디어 송수신 방법 및 시스템
KR20220077781A (ko) * 2020-12-02 2022-06-09 주식회사 픽스트리 멀티채널 미디어 송수신 방법 및 시스템

Also Published As

Publication number Publication date
KR102188929B1 (ko) 2020-12-09
CN112703524A (zh) 2021-04-23
WO2020054957A1 (ko) 2020-03-19

Similar Documents

Publication Publication Date Title
RU2656817C2 (ru) Устройства, системы и способы захвата и отображения внешнего вида
US9674485B1 (en) System and method for image processing
US20150215351A1 (en) Control of enhanced communication between remote participants using augmented and virtual reality
KR101670815B1 (ko) Ｖｒ 및 ａｒ 기반 실시간 지식 공유 서비스 제공 방법
US20100253778A1 (en) Media displaying system and method
CN107430629A (zh) 计算机呈现中的视觉内容的分优先级显示
KR101886738B1 (ko) 소셜 네트워크 서비스에 등록되는 게시물에 대해 피드백 효과를 제공하는 장치 및 사용자 단말
US20120224070A1 (en) Eyeglasses with Integrated Camera for Video Streaming
US20150220773A1 (en) System and method for eye alignment in video
US20140098210A1 (en) Apparatus and method
CN107078917A (zh) 托管电话会议
US20160277707A1 (en) Message transmission system, message transmission method, and program for wearable terminal
WO2020093798A1 (zh) 一种显示目标图像的方法、装置、终端及存储介质
KR102188929B1 (ko) 증강 현실, 가상 현실 또는 혼합 현실 컨텐츠를 제공하는 디스플레이 장치, 방법 및 서버
US11520309B2 (en) Operating system for advertisement-type 3D printer compatible with IoT
KR102586911B1 (ko) 지능형 마케팅 및 광고 플랫폼
WO2020151430A1 (zh) 一种空气成像系统及其实现方法
KR101784095B1 (ko) 복수의 영상 데이터를 이용하는 헤드 마운트 디스플레이 장치 및 복수의 영상 데이터를 송수신하기 위한 시스템
US8862764B1 (en) Method and Apparatus for providing Media Information to Mobile Devices
CN107204026B (zh) 一种用于显示动画的方法和装置
KR20180131687A (ko) 실시간기반 및 컨텐츠 기반 실시간 공연공유 서비스 제공시스템
KR20210085433A (ko) 퍼스널 컬러 추천 서비스 시스템
CN113014960A (zh) 一种在线制作视频的方法、装置及存储介质
KR102434017B1 (ko) 증강현실 콘텐츠 출력 장치
CN115002554A (zh) 直播画面调整方法、系统、装置及计算机设备

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant