KR20240000986A - 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법 - Google Patents

오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법 Download PDF

Info

Publication number
KR20240000986A
KR20240000986A KR1020220077864A KR20220077864A KR20240000986A KR 20240000986 A KR20240000986 A KR 20240000986A KR 1020220077864 A KR1020220077864 A KR 1020220077864A KR 20220077864 A KR20220077864 A KR 20220077864A KR 20240000986 A KR20240000986 A KR 20240000986A
Authority
KR
South Korea
Prior art keywords
information
terminal
server
host
live
Prior art date
Application number
KR1020220077864A
Other languages
English (en)
Inventor
이기훈
Original Assignee
이기훈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이기훈 filed Critical 이기훈
Priority to KR1020220077864A priority Critical patent/KR20240000986A/ko
Publication of KR20240000986A publication Critical patent/KR20240000986A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2542—Management at additional data server, e.g. shopping server, rights management server for selling goods, e.g. TV shopping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0613—Third-party assisted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Databases & Information Systems (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법에 관한 것이다.
보다 자세하게는, 본 발명은 전통시장, 마트, 백화점 등의 오프라인 매장에서 생방송으로 진행되는 라이브 커머스를 적용하여 구매자(시청자)가 라이브 커머스 방송을 시청하면서 용이하게 방송에 등장하는 물품(객체)을 구매할 수 있는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법에 관한 것이다.
본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법에서 라이브 방송 영상은 상기 객체가 표시되는 화면영역에 상기 메인정보를 상기 객체에 대응되도록 증강현실(Augmented Reality)로 표시할 수 있다.

Description

오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법{APPARATUS AND METHOD FOR LIVE COMMERCE IN OFFLINE MARKET USING METAVERSE}
본 발명은 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법에 관한 것이다.
보다 자세하게는, 본 발명은 전통시장, 마트, 백화점 등의 오프라인 매장에서 생방송으로 진행되는 라이브 커머스를 적용하여 구매자(시청자)가 라이브 커머스 방송을 시청하면서 용이하게 방송에 등장하는 물품(객체)을 구매할 수 있는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법에 관한 것이다.
인터넷이 발달하면서 온라인에서 물품을 구매하는 인터넷 구매 시스템이 개발되어 상용화되었다.
이에 따라, 구매자들은 오프라인의 쇼핑공간에 직접 방문하지 않더라도 인터넷 쇼핑몰을 방문하여 물품을 구매할 수 있게 되었다.
하지만, 인터넷 쇼핑몰에서는 온라인의 특성상 구매하는 물품의 신뢰성이 문제되는 경우가 많다.
[문헌 1] 대한민국 등록특허공보 제10-2283232호(2021.07.30. 공고) [문헌 2] 대한민국 공개특허공보 제10-2021-0014280호(2021.02.09. 공개)
본 발명은 오프라인 매장에서 생방송으로 진행되는 라이브 커머스를 적용하여 구매자(시청자)가 라이브 커머스 방송을 시청하면서 방송에 등장하는 물품(객체)을 구매할 수 있도록 하는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법을 제공하는데 그 목적이 있다.
본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법은 호스트 대리인(Host Agent)에 대응하는 호스트 단말기(Host Terminal)에서 카메라부(Camera Part)를 이용하여 주변의 영상정보를 수집하고, 마이크부(Microphone Part)를 이용하여 주변의 소리정보를 수집하는 단계, 서버(Server)에서 상기 호스트 단말기로부터 상기 영상정보 및 상기 소리정보를 수신하고, 수신한 상기 영상정보 및 상기 소리정보를 근거로 하여 상기 영상정보에 포함된 객체(Object)에 대한 메인정보를 추출하는 단계, 상기 서버에서 상기 영상정보, 상기 소리정보 및 상기 객체에 대한 정보를 이용하여 라이브 방송 영상을 제작하는 단계, 상기 서버에서 상기 라이브 방송 영상을 구매자 단말기(Buyer Terminal)로 전송하는 단계 및 상기 구매자 단말기에서 상기 서버로 상기 객체에 대해 구매요청을 전송하는 단계를 포함하고, 상기 라이브 방송 영상은 상기 객체가 표시되는 화면영역에 상기 메인정보를 상기 객체에 대응되도록 증강현실(Augmented Reality)로 표시할 수 있다.
또한, 상기 서버에서 상기 영상정보에 포함된 상기 객체에 대한 정보를 근거로 하여 상기 메인정보를 추출하는 단계 및 상기 서버에서 상기 소리정보에 포함된 상기 객체에 대한 정보를 근거로 하여 상기 메인정보를 업데이트하는 단계를 더 포함할 수 있다.
또한, 상기 서버에서 상기 소리정보를 분석하여 상기 소리정보에 대응되는 객체를 판별하는 단계, 상기 서버에서 판별한 상기 객체에 대응하여 상기 소리정보에 포함된 상기 객체에 대한 정보를 추출하는 단계 및 상기 서버에서 상기 메인정보와 상기 소리정보로부터 추출한 상기 객체에 대한 정보가 매칭(Matching)되지 않는 경우 상기 메인정보를 소리정보로부터 추출한 상기 객체에 대한 정보를 이용하여 업데이터하는 단계를 더 포함할 수 있다.
또한, 상기 서버에서 미리 설정된 게스트 대리인(Guest Agent)에 대응하는 게스트 단말기(Guest Terminal)로 상기 구매요청을 전송하는 단계, 상기 게스트 단말기에서 상기 구매요청에 대응하는 상기 객체의 이미지를 촬영하고, 촬영한 이미지를 상기 서버로 전송하는 단계 및 상기 서버는 상기 게스트 단말기로부터 수신한 상기 객체의 이미지를 상기 구매자 단말기로 전송하는 단계를 더 포함할 수 있다.
본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치는 카메라부(Camera Part) 및 마이크부(Microphone Part)를 포함하고, 상기 카메라부를 이용하여 주변의 영상정보를 수집하고, 상기 마이크부를 이용하여 주변의 소리정보를 수집하는 호스트 대리인(Host Agent)에 대응하는 호스트 단말기(Host Terminal), 상기 호스트 단말기로부터 상기 영상정보 및 상기 소리정보를 수신하고, 수신한 상기 영상정보 및 상기 소리정보를 근거로 하여 상기 영상정보에 포함된 객체(Object)에 대한 메인정보를 추출하고, 상기 영상정보, 상기 소리정보 및 상기 객체에 대한 정보를 이용하여 라이브 방송 영상을 제작하는 서버(Server) 및 상기 서버로부터 상기 라이브 방송 영상을 수신하고, 상기 객체에 대해 구매요청을 상기 서버로 전송하는 구매자 단말기(Buyer Terminal)를 포함하고, 상기 라이브 방송 영상은 상기 객체가 표시되는 화면영역에 상기 객체에 대한 정보를 증강현실(Augmented Reality)로 표시할 수 있다.
본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법은 구매자(시청자)가 라이브 커머스 방송을 시청하면서 방송에 등장하는 물품(객체)을 구매할 수 있어서 구매자(시청자)가 오프라인 매장을 직접 방문하지 않고도 오프라인 매장에서 판매하는 물품(객체)를 용이하게 구매할 수 있는 효과가 있다.
본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법은 구매자(시청자)가 라이브 커머스 방송에 등장하는 물품(객체)을 구매할 수 있기 때문에 쇼핑에 대한 신뢰성을 향상시키는 효과가 있다.
도 1 내지 도 2는 본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치에 대해 설명하기 위한 도면이다.
도 3 내지 도 8은 본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법에 대해 설명하기 위한 도면이다.
도 9 내지 도 16은 객체에 대한 메인정보를 추출하는 방법에 대해 설명하기 위한 도면이다.
도 17 내지 도 19는 구매자 단말기에서 객체를 구매하는 방법에 대해 설명하기 위한 도면이다.
도 20 내지 도 22는 라이브 방송 중 판매자 단말기에서 새로운 조건을 제시하는 방법에 대해 설명하기 위한 도면이다.
도 23 내지 도 25는 임시 게스트 단말기를 설정하는 방법의 일례에 대해 설명하기 위한 도면이다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법은 대해 상세히 설명한다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해될 수 있다.
본 발명을 설명함에 있어서 제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지 않을 수 있다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용될 수 있다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다.
및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함할 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급되는 경우는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해될 수 있다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다.
본 문서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것으로서, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해될 수 있다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가지는 것으로 해석될 수 있으며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않을 수 있다.
아울러, 본 문서에 개시된 실시예는 당 업계에서 평균적인 지식을 가진 자에게 보다 완전하게 설명하기 위해서 제공되는 것으로서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.
본 문서에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 수 있다.
본 문서에서 설명되는 다양한 실시예들은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록매체 내에서 구현될 수 있다.
하드웨어적인 구현에 의하면, 본 발명의 실시예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다.
한편, 소프트웨어적인 구현에 의하면, 본 발명에서 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다.
도 1 내지 도 2는 본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치에 대해 설명하기 위한 도면이다.
도 1 내지 도 2를 살펴보면, 본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치(1A, 이하 '라이브 커머스 장치'라 칭할 수 있다.)는 호스트 단말기(Host Terminal, 10), 서버(Server, 40), 적어도 하나의 게스트 단말기(Guest Terminal, 20), 적어도 하나의 구매자 단말기(Buyer Terminla, 30) 및 적어도 하나의 판매자 단말기(Seller Terminal, 50)를 포함할 수 있다.
도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 라이브 커머스 장치(1A)를 구현하는 것도 가능하다. 예를 들면, 라이브 커머스 장치(1A)에서 판매자 단말기(50)가 생략되는 것도 가능할 수 있다.
호스트 단말기(10)는 호스트 대리인(Host Agent, 이하 '호스트'라 칭할 수 있다.)에 대응하는 단말기일 수 있다.
호스트는 라이브 커머스 방송을 진행하는 진행자라고도 할 수 있다.
호스트는 라이브 커머스 방송을 진행하면서 영상을 촬영할 매장을 선택하는 등 방송 경로를 선택할 수 있다.
아울러, 호스트는 적어도 하나의 판매자와 대화를 나누면서 라이브 커머스 방송을 진행할 수 있다.
호스트 단말기(10)는, 도 2에 나타나 있는 바와 같이, 메인 단말기(Main Terminal, 100), 카메라부(Camera Part, 110) 및 마이크부(Microphone Part, 120)를 포함할 수 있다.
카메라부(110)는 주변 영상을 촬영할 수 있다.
마이크부(120)의 주변의 소리를 수집할 수 있다.
메인 단말기(100)는 영상의 촬영 및 소리의 수집을 전체적으로 제어할 수 있다.
아울러, 메인 단말기(100)는 카메라부(110)가 촬영한 영상으로 영상정보를 생성하고, 마이크부(120)가 수집한 소리를 이용하여 소리정보를 생성할 수 있다.
다른 관점에서 보면, 호스트 단말기(10)는 카메라부(110) 및 마이크부(120)를 포함하고, 카메라부(110)를 이용하여 주변의 영상정보를 수집하고, 마이크부(120)를 이용하여 주변의 소리정보를 수집할 수 있다.
이를 고려하면, 호스트 단말기(10)는 라이브 방송 영상 제작에 필요한 영상정보 및 소리정보를 수집하는 단말기로서 방송 단말기(Broadcasting Terminal)이라고도 할 수 있다.
도 2에서는 호스트 단말기(10)가 메인 단말기(100), 카메라부(110) 및 마이크부(120)로 분할되어 있는 것으로 설명하고 있지만, 본 발명은 이에 한정되지 않을 수 있다. 예를 들면, 본 발명에서 호스트 단말기(10)는 메인 단말기(100), 카메라부(110) 및 마이크부(120)가 하나로 통합되는 것이 가능할 수 있다.
서버(40)는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법을 전반적으로 관리하고 제어할 수 있다.
예를 들면, 서버(40)는 호스트 단말기(10)로부터 영상정보 및 소리정보를 수신하고, 수신한 영상정보 및 소리정보를 근거로 하여 영상정보에 포함된 객체(Object, OB)에 대한 메인정보(Main Information)를 추출할 수 있다.
여기서, 객체(OB)는 판매의 대상이 되는 물품을 의미할 수 있다. 예를 들면, 객체(OB)는 배추, 무, 상추 등의 신선식품 및 의류, 신발, 명품 등의 공산품 등이 가능하다.
본 발명에서 판매할 수 있는 객체(OB)는 위에 언급한 종류에 한정되지 않을 수 있다.
여기서, 객체(OB)의 메인정보는 객체(OB)의 이름, 가격, 원산지, 용량, 무게 정보 등 객체(OB)에 관련된 정보를 포함할 수 있다.
서버(40)는 영상정보, 소리정보 및 객체(OB)에 대한 정보를 이용하여 라이브 방송 영상을 제작할 수 있다.
아울러, 서버(40)는 제작한 라이브 방송 영상을 적어도 하나의 구매자 단말기(30) 및/또는 적어도 하나의 게스트 단말기(20)로 전송할 수 있다.
여기서, 라이브 방송 영상은 객체(OB)가 표시되는 화면영역에 객체(OB)에 대한 정보를 증강현실(Augmented Reality, AR)로 표시하는 것일 수 있다.
이에 따라, 라이브 방송 영상을 증강현실 라이브 방송 영상이라고 칭하는 것이 가능하다.
라이브 방송 영상은 이하의 설명을 통해 보다 명확해질 수 있다.
구매자 단말기(30)는 서버(40)에서 제공하는 라이브 방송 영상을 시청하는 시청자(구매자)에 대응되는 단말기일 수 있다.
구매자 단말기(30)는 서버(40)로부터 라이브 방송 영상을 수신하고, 라이브 방송 영상에 포함된 객체에 대해 구매요청을 서버(40)로 전송할 수 있다.
게스트 단말기(20)는 미리 설정된 게스트 대리인(Guest Agent, 이하 '게스트'라 칭할 수 있다.)에 대응하는 단말기일 수 있다.
게스트는 라이브 커머스 방송의 진행을 돕는 도우미 혹은 보조 진행자라고도 할 수 있다.
게스트는 게스트 단말기(20)를 이용하여 호스트에게 방송 경로를 조언할 수 있고, 방문할 추천 매장을 알릴 수 있고, 구매자의 구매요청에 대응하여 적어도 하나의 객체(OB)의 이미지를 촬영하고, 촬영한 이미지를 전송할 수 있다.
게스트는 라이브 커머스 방송을 위해 고용된 인원일 수 있다.
또는, 게스트는 라이브 커머스 방송이 진행되는 오프라인 매장에 관련된 인원일 수 있다. 예를 들어, 라이브 커머스 방송이 A 전통시장에서 진행되는 경우에, A 전통시장에 관련된 관계자가 게스트로 등록될 수 있다.
호스트 단말기(10)는 게스트 단말기(20)에 대응되는 것도 가능할 수 있다. 자세하게는, 호스트 단말기(10)는 호스트 단말기(10)로서 영상정보 및 소리정보를 수집하면서도 게스트 단말기(20)로서의 기능을 수행하는 것이 가능할 수 있다.
다른 관점에서 설명하면, 호스트 단말기(10)는 일종의 게스트 단말기(20)일 수 있다.
판매자 단말기(50)는 객체(OB)를 판매하는 판매자에 대응되는 단말기일 수 있다.
판매자 단말기(50)는 라이브 커머스 방송 진행 시에 선택적으로 등록할 수 있다.
이러한 구성의 라이브 커머스 장치(1A)를 이용한 라이브 커머스 방법에 대해 이하에서 상세히 설명하기로 한다.
도 3 내지 도 8은 본 발명에 따른 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법에 대해 설명하기 위한 도면이다. 이하에서는 이상에서 상세히 설명한 부분에 대한 설명은 생략될 수 있다.
이하에서는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법을 간략하게 '라이브 커머스 방법'이라고 칭할 수 있다.
도 3을 살펴보면, 우선 대리인(호스트 및/또는 게스트)측에서는 호스트 단말기(10)가 서버(40)에 접속(S10)할 수 있다.
이후, 호스트 단말기(10)가 호스트에 대응되는 정보, 즉 호스트 정보를 서버(40)에 입력(S11)할 수 있다. 예를 들면, 호스트의 이름, 나이, 주소 등의 개인 정보, 호스트 단말기(10)의 번호 등에 대한 단말기 정보를 서버(40)에 입력하는 것이 가능하다.
아울러, 호스트 단말기(10)는 서버(40)에 호스트의 목소리에 대한 정보, 즉 목소리 정보를 입력(S11)하는 것이 가능하다.
목소리 정보는 호스트의 목소리의 패턴에 대한 정보, 주파수에 대한 정보 등 호스트 목소리를 구분하기 위한 정보를 포함할 수 있다.
서버(40)에 호스트의 목소리에 대한 정보를 입력하게 되면, 서버(40)는 소리정보에서 호스트의 말을 충분히 효과적이면서도 정밀하게 검출할 수 있다.
아울러, 서버(40)에서 호스트의 목소리에 대한 정보를 입력하게 되면 전통시장 등의 복잡하고 시끄러운 환경에서도 소리정보에서 호스트의 음성을 충분히 명확하게 추출할 수 있다.
호스트 단말기(10)는 호스트 정보, 호스트의 목소리 정보 등을 서버(40)에 입력하는 방법으로 호스트 정보를 서버(40)에 등록(S13)할 수 있다.
호스트 단말기(10)는 호스트 정보를 서버(40)에 등록한 이후에 적어도 하나의 게스트에 대한 정보를 서버(40)에 입력(S14)할 수 있다.
여기서, 게스트는 라이브 커머스 방송의 진행을 돕는 인원으로서 호스트 단말기(10)가 직접 선택하여 서버(40)에 등록하는 것이 가능하다.
아울러, 호스트 단말기(10)는 적어도 하나의 게스트에 대응되는 단말기, 즉 적어도 하나의 게스트 단말기(20)를 서버(40)에 등록(S15)할 수 있다.
이처럼, 적어도 하나의 게스트 단말기(20)는 호스트 단말기(10)에서 선택하여 등록하는 것이 가능하다.
혹은, 적어도 하나의 게스트 단말기(20)는 호스트 단말기(10)가 선택하여 등록하는 방법이 아닌 스스로 서버(40)에 등록하는 것이 가능할 수 있다.
이처럼, 스스로 서버(40)에 등록한 게스트 단말기(20)를 임시 게스트 단말기(Temporarily Guest Terminal, TGT)라고 칭할 수 있다. 임시 게스트 단말기(TGT)에 대해서는 이후에 상세히 설명하기로 한다.
한편, 구매자(시청자)측에서는 구매자 단말기(30)가 서버(40)에 접속(S20)할 수 있다.
이후, 구매자 단말기(20)가 구매자에 대응되는 정보, 즉 구매자 정보를 서버(40)에 입력(S21)할 수 있다. 예를 들면, 구매자의 이름, 나이, 주소, 계좌정보, 신용카드 정보 등의 개인 정보, 구매자 단말기(30)의 번호 등에 대한 단말기 정보를 서버(40)에 입력하는 것이 가능하다.
구매자 단말기(30)는 구매자 정보를 서버(40)에 입력하는 방법으로 서버(40)에 등록(S22)할 수 있다.
한편, 판매자측에서는 판매자 단말기(50)가 서버(40)에 접속(S30)할 수 있다.
이후, 판매자 단말기(50)가 판매자에 대응되는 정보, 즉 판매자 정보를 서버(40)에 입력(S31)할 수 있다. 예를 들면, 판매자의 이름, 나이, 주소, 계좌번호 등의 개인 정보, 판매자 단말기(50)의 번호 등에 대한 단말기 정보를 서버(40)에 입력하는 것이 가능하다.
판매자 단말기(50)는 판매자 정보를 서버(50)에 입력하는 방법으로 서버(40)에 등록(S22)할 수 있다.
호스트 단말기(10), 적어도 하나의 게스트 단말기(20) 및 적어도 하나의 구매자 단말기(30)가 서버(40)에 등록된 상태에서 라이브 커머스 방송을 실시하는 것이 가능하다.
도 4에 나타나 있는 바와 같이, 호스트 단말기(10)에서는 라이브 커머스 방송에 참여할 적어도 하나의 게스트 단말기(20)를 선택할 수 있다(S100).
예를 들어, 대구의 서문시장에서 라이브 커머스 방송을 촬영하는 경우를 가정하여 보자.
이러한 경우, 도 5에 나타나 있는 바와 같이, 호스트 단말기(10)에서는 미리 설정된 5명의 게스트(머슴1, 머슴2, 홈더하기 마트직원, 일버 마트직원, 서문시장 관계자) 중 대구 서문시장에서 방송 진행에 참여할 게스트로서 머슴1, 머슴2 및 서문시장 관계자를 선택할 수 있다.
아울러, 호스트 단말기(10)에서는 머슴1, 머슴2 및 서문시장 관계자에 대응하여 3개의 게스트 단말기(20)를 설정하는 것이 가능할 수 있다.
적어도 하나의 게스트 단말기(20)를 설정한 이후에 라이브 커머스 방송을 시작할 수 있다(S200).
라이브 커머스 방송이 시작되면 호스트 단말기(10)에서 카메라부(110)가 주변영상을 촬영하여 영상정보를 수집하고 마이크부(120)가 소리정보를 수집할 수 있다(S300).
영상정보는 동영상 타입의 정보를 포함할 수 있다.
소리정보는 호스트 단말기(10)의 주변에서 수집되는 정보일 수 있다. 예를 들면, 호스트와 주변 상인(혹은 판매자)과의 대화가 소리정보로서 수집될 수 있다. 혹은, 주변 상인이 호스트를 향해 하는 말이 소리정보로서 수집될 수 있다.
호스트 단말기(10)에서는 수집한 영상정보와 소리정보를 서버(40)로 전송할 수 있다.
그러면 서버(40)에서는 호스트 단말기(10)로부터 수신한 영상정보와 소리정보를 분석하여 영상정보에서 적어도 하나의 객체(OB)를 추출할 수 있다(S400).
이후, 서버(40)에서는 추출한 객체(OB)에 대응하여 영상정보 및 소리정보 중 적어도 하나로부터 메인정보를 추출할 수 있다(S500).
이후, 서버(40)에서는 추출한 메인정보, 영상정보 및 소리정보를 이용하여 라이브 방송 영상(라이브 커머스 방송 영상)을 제작할 수 있다(S600).
라이브 방송 영상에는 영상정보로부터 추출한 정보, 소리정보로부터 추출한 정보 및 메인정보가 포함될 수 있다.
이후, 서버(40)에서는 제작한 라이브 방송 영상을 적어도 하나의 구매자 단말기(30) 및/또는 적어도 하나의 게스트 단말기(20)로 전송할 수 있다(S700).
서버(40)가 적어도 하나의 게스트 단말기(20)로 제작한 라이브 방송 영상을 전송하게 되면, 방송 진행을 돕는 적어도 하나의 게스트가 발송 상황을 빠르게 확인할 수 있어서 신속한 대처가 가능할 수 있다.
여기서는, 서버(40)가 적어도 하나의 구매자 단말기(30) 및/또는 적어도 하나의 게스트 단말기(20)로 라이브 방송 영상을 전송하는 것으로 설명하고 있지만, 본 발명은 이에 한정되지 않을 수 있다.
예를 들면, 본 발명에서는 서버(40)가 유튜브 등의 사이트를 통해 실시간 스트리밍으로 라이브 방송 영상을 업로드하고, 적어도 하나의 구매자 단말기(30) 및/또는 적어도 하나의 게스트 단말기(20)에서 해당 사이트에 접속하여 라이브 방송 영상을 시청하는 것도 가능할 수 있다.
호스트 단말기(10)에서 전송하는 영상정보 및 소리정보를 근거로 하여 제작된 라이브 방송 영상이 적어도 하나의 구매자 단말기(30) 및/또는 적어도 하나의 게스트 단말기(20)로 전송된다는 점에서 위 2가지 방법은 유사하다고 볼 수도 있다.
라이브 방송 영상을 전송한 이후에, 서버(40)에서는 적어도 하나의 구매자 단말기(30)로부터 구매요청이 수신되는지의 여부를 판단할 수 있다(S800).
제 S800 단계에서 판단별과, 구매요청이 수신되지 않는 경우에는 미리 설정된 제 1 기능(Default 1)을 수행할 수 있다(S900).
제 1 기능은 구매요청이 수신될 때까지 대기하는 기능 등을 예로 들 수 있다.
반면에, 제 S800 단계에서 판단별과 구매요청이 수신되는 경우에는 서버(40)에서는 구매요청을 구매자의 정보에 매칭시켜 저장하고, 구매요청을 적어도 하나의 게스트 단말기(20)로 전송할 수 있다(S1000).
그러면, 구매요청을 수신한 게스트 단말기(20)에서는 구매요청에 대응하여 미리 설정된 작업을 진행할 수 있다.
본 발명에 따른 라이브 커머스 방법에서 라이브 방송 영상의 실시예에 대해 전통시장에서 채소(객체(OB))를 구매하는 경우를 가정하여 상세히 설명하기로 한다.
먼저, 호스트가 호스트 단말기(10)를 이용하여 전통시장에서 영상을 촬영할 수 있다.
예를 들면, 도 6의 (A)에 나타나 있는 바와 같이, 호스트 단말기(10)는 채소를 판매하는 매대를 촬영한 영상정보를 서버(40)로 전송할 수 있다. 물론, 호스트 단말기(10)는 마이크부(120)를 이용하여 수집한 소리정보를 함께 서버(40)로 전송할 수 있다.
그러면, 서버(40)에서는 호스트 단말기(10)로부터 수신한 영상정보를 분석하여 영상정보에 포함된 적어도 하나의 객체(OB)를 추출할 수 있다.
예를 들면, 도 6의 (B)에 나타나 있는 바와 같이, 서버(40)에서는 수신한 영상정보에서 제 1 객체(OB1) 및 제 2 객체(OB2)를 추출할 수 있다.
제 1 객체(OB1)는 배추이고, 제 2 객체(OB2)는 깻잎일 수 있다.
여기서는 영상정보에 포함된 객체를 2개(제 1 객체(OB1) 및 제 2 객체(OB2))인 경우를 예로 들어 설명하지만, 본 발명은 이에 한정되지 않을 수 있다.
예를 들면, 영상정보는 1개의 객체 또는 3개 이상의 객체가 포함되는 경우도 가능할 수 있다.
이후, 서버(40)에서는 호스트 단말기(10)로부터 수신한 영상정보 및 소리정보 중 적어도 하나로부터 객체(OB), 즉 제 1 객체(OB1) 및 제 2 객체(OB2)의 메인정보를 추출할 수 있다.
객체(OB)의 메인정보를 추출하는 방법은 이후에 상세히 설명하기로 한다.
객체(OB)의 메인정보를 추출한 이후에 서버(40)는 영상정보, 소리정보 및 메인정보를 이용하여 라이브 방송 영상을 제작하고, 제작한 영상을 적어도 하나의 구매자 단말기(30) 및/또는 적어도 하나의 게스트 단말기(20)로 전송할 수 있다.
여기서, 라이브 방송 영상은 메인정보가 객체(OB)에 대응하여 증강현실(AR)로 표시될 수 있다.
도 7의 (A)에 나타나 있는 바와 같이, 서버(40)가 영상정보에서 제 1 객체(OB1) 및 제 2 객체(OB2)를 추출하는 경우를 가정하여 보자.
영상정보, 소리정보 및 메인정보로부터 제작된 라이브 방송 영상이 구매자 단말기(30)의 화면에 표시되는 경우에는, 도 7의 (B)에 나타나 있는 바와 같이, 객체(OB)가 표시되는 구매자 단말기(30) 및/또는 게스트 단말기(20)의 화면영역에 객체(OB)에 대한 정보, 예컨대 메인정보(MI)를 객체(OB)에 대응되도록 증강현실(AR)로 표시할 수 있다.
다르게 표현하면, 구매자 단말기(30) 및/또는 게스트 단말기(20)의 화면에 표시되는 라이브 방송 영상에서는 객체(OB)의 메인정보(MI)를 증강현실로 표현할 수 있다.
이러한 경우, 구매자(시청자)는 라이브 방송을 시청하면서 라이브 방송에 등장하는 객체(OB)의 이름, 가격, 수량, 원산지 등의 메인정보를 용이하게 파악하는 것이 가능하다.
만약, 구매자(시청자)가 구매자 단말기(30)의 화면에 표시된 라이브 방송 영상에서 제 1 객체(OB1) 또는 제 2 객체(OB2)의 메인정보를 터치 혹은 클릭 등의 방법으로 선택할 수 있다.
이러한 경우, 도 8의 (A) 또는 (B)에 나타나 있는 바와 같이, 제 1 객체(OB1) 또는 제 2 객체(OB2)에 대한 상세한 정보(확대된 영상정보 포함)가 구매자 단말기(30)의 화면에 표시될 수 있다.
이하에서는 객체(OB)에 대한 메인정보를 추출하는 방법에 대해 상세히 설명하기로 한다.
도 9 내지 도 16은 객체에 대한 메인정보를 추출하는 방법에 대해 설명하기 위한 도면이다. 이하에서는 이상에서 상세히 설명한 부분에 대한 설명은 생략될 수 있다.
도 9에 나타나 있는 바와 같이, 서버(40)에서 객체(OB)를 추출한 단계(S400) 이후에 서버(40)는 영상정보를 분석(S401)하고, 분석결과를 바탕으로 영상정보에 객체(OB)에 대해 문자 및/또는 숫자로 표시된 정보가 포함되어 있는지의 여부를 판단할 수 있다(S403).
여기서, 객체(OB)에 대해 문자 및/또는 숫자로 표시된 정보를 1차 영상정보라고 할 수 있다.
제 S403 단계에서 판단결과, 영상정보에 객체(OB)에 대해 문자 및/또는 숫자로 표시된 정보(1차 영상정보)가 없는 경우에는 미리 설정된 제 2 기능(Default 2)을 수행할 수 있다(S405).
제 2 기능은 영상정보에 객체(OB)에 대해 문자 및/또는 숫자로 표시된 정보(1차 영상정보)가 없음을 알리는 기능 또는 제 S402 단계로 진행하는 기능 등을 예로 들 수 있다.
반면에, 제 S403 단계에서 판단결과, 영상정보에 객체(OB)에 대해 문자 및/또는 숫자로 표시된 정보(1차 영상정보)가 포함된 경우에는 해당 정보(1차 영상정보)를 추출할 수 있다(S407).
한편, 서버(40)에서 영상정보를 분석하면서 이와 함게 소리정보를 분석(S402)하고, 분석결과를 바탕으로 소리정보에 객체(OB)에 관련된 정보가 포함되어 있는지의 여부를 판단할 수 있다(S404).
여기서, 소리정보에 포함된 객체(OB)에 관련된 정보를 1차 소리정보라고 할 수 있다.
제 S404 단계에서 판단결과, 소리정보에 객체(OB)에 관련된 정보(1차 소리정보)가 없는 경우에는 미리 설정된 제 3 기능(Default 3)을 수행할 수 있다(S406).
제 3 기능은 소리정보에 객체(OB)에 관련된 정보(1차 소리정보)가 없음을 알리는 기능 또는 제 S401 단계로 진행하는 기능 등을 예로 들 수 있다.
반면에, 제 S404 단계에서 판단결과, 소리정보에 객체(OB)에 관련된 정보(1차 소리정보)가 포함된 경우에는 해당 정보(1차 소리정보)를 추출할 수 있다(S408).
영상정보 및/또는 소리정보에서 1차 영상정보 및/또는 1차 소리정보를 추출(S407, S408)한 이후에 추출한 정보가 단독정보인지의 여부를 판단할 수 있다(S409).
여기서, 1차 영상정보가 없는 상태에서 1차 소리정보만 존재하는 경우에 그 1차 소리정보를 단독정보라고 할 수 있다.
또는, 1차 소리정보가 없는 상태에서 1차 영상정보만 존재하는 경우에 그 1차 영상정보를 단독정보라고 할 수 있다.
즉, 1차 영상정보 및 1차 소리정보 중 어느 하나만 단독으로 존재하는 경우에 존재하는 그 정보를 단독정보라고 할 수 있다.
제 S409 단계에서 판단결과, 추출된 정보가 단독정보인 경우에는 그 추출된 정보를 메인정보로서 설정할 수 있다(S410).
이후, 서버(40)에서는 객체(OB)의 메인정보를 갱신할지의 여부를 판단할 수 있다(S413).
제 S413 단계에서 판단결과, 메인정보를 갱신하는 경우에는 다시 제 S401 단계 및/또는 제 402 단계로 진행할 수 있다.
반면에, 제 S413 단계에서 판단결과, 메인정보를 갱신하지 않는 경우에는 라이브 방송 영상을 제작하는 단계(S600)로 진행할 수 있다.
한편, 제 S409 단계에서 판단결과, 추출한 정보가 단독정보가 아닌 경우에는 추출된 정보들이 서로 매칭(Matching)되는지의 여부를 판단할 수 있다(S411).
예를 들면, 1차 영상정보와 1차 소리정보가 함께 추출된 경우에는 1차 소리정보와 1차 영상정보가 서로 매칭되는지의 여부를 판단할 수 있다.
여기서, 1차 영상정보와 1차 소리정보가 매칭된다는 것은 1차 영상정보에 대응되는 객체의 정보와 1차 소리정보에 대응되는 객체의 정보가 일치 혹은 동일한 것을 의미할 수 있다.
제 S411 단계에서 판단결과, 1차 영상정보와 1차 소리정보가 매칭되는 경우에는 1차 영상정보 또는 1차 소리정보를 메인정보로서 설정할 수 있다(S410).
반면에, 제 S411 단계에서 판단결과, 1차 영상정보와 1차 소리정보가 매칭되지 않는 경우에는 1차 영상정보와 1차 소리정보를 비교하여 더 좋은 조건의 정보를 선택할 수 있다(S412).
이후, 선택된 더 좋은 조건의 정보를 메인정보로서 설정할 수 있다(S410).
이상에서 설명한 객체(OB)의 메인정보 추출방법의 실시예에 대해 전통시장에서 채소(객체(OB))를 구매하는 경우를 가정하여 상세히 설명하기로 한다.
먼저, 호스트가 호스트 단말기(10)를 이용하여 전통시장에서 영상을 촬영할 수 있다.
예를 들면, 도 10의 (A)에 나타나 있는 바와 같이, 호스트 단말기(10)는 채소를 판매하는 판매대를 촬영한 영상정보를 서버(40)로 전송할 수 있다. 물론, 호스트 단말기(10)는 마이크부(120)를 이용하여 수집한 소리정보를 함께 서버(40)로 전송할 수 있다.
그러면, 서버(40)에서는 호스트 단말기(10)로부터 수신한 영상정보를 분석하여 영상정보에 포함된 적어도 하나의 객체(OB)를 추출할 수 있다.
예를 들면, 객체(OB)로서 냉이를 추출할 수 있다.
아울러, 서버(40)에서는 영상정보에서 냉이에 대해 문자 및/또는 숫자로 표시된 정보, 예컨대 가격표 등의 1차 영상정보(IOB)를 판별하고, 판별한 1차 영상정보(IOB)를 추출할 수 있다.
도 10의 (A)에서는 객체(OB), 즉 냉이에 대한 1차 영상정보(IOB)로서 '냉이 1000원 국산'을 추출하는 것을 예로 들고 있다. 이는 객체(OB), 즉 냉이에 대한 가격표에 포함된 내용일 수 있다.
여기서는, 객체(OB)에 대한 1차 영상정보가 냉이에 대한 독립적인 가격표를 포함하는 것으로 제시되었으나, 본 발명은 이에 한정되지 않을 수 있다. 예를 들면, 1차 영상정보는 다수의 객체(OB)에 대한 이름, 가격, 원산지, 용량 등이 함께 표시된 통합 가격표를 포함하는 것도 가능할 수 있다.
1차 영상정보(IOB)를 추출한 경우에는 추출한 1차 영상정보(IOB)를 이용하여 객체(OB)의 메인정보를 추출할 수 있다.
아울러, 도 10의 (B)에 나타나 있는 바와 같이, 추출한 메인정보를 객체(OB)에 대응되도록 증강현실(AR)로 표시할 수 있다.
도 10의 (B)에서는 객체(OB), 즉 냉이에 대한 가격표에 포함된 1차 영상정보(IOB)를 근거로 하여 '냉이 1묶음 천원'이라는 메인정보를 추출한 경우를 게시하고 있다.
이처럼, 영상정보에 포함된 객체(OB)에 관련된 정보, 즉 가격표 등을 포함하는 1차 영상정보(IOB)를 이용하여 객체(OB)의 메인정보를 추출하는 것이 가능하다.
위에서 설명한 바와는 다르게 소리정보만으로 객체(OB)의 메인정보를 추출하는 방법의 일례를 이하에서 설명한다.
먼저, 호스트 단말기(10)가 영상을 촬영하여 도 11의 (A)와 같은 영상정보를 획득하고, 영상정보에서 '배추'에 대응하는 객체(OB)를 검출하는 경우를 가정하자.
이러한 경우, 영상정보에는 1차 영상정보(IOB)가 포함되지 않아서 영상정보만으로는 객체(OB)의 가격, 원산지 등의 메인정보를 추출하기 어려운 상황일 수 있다.
이러한 경우, 호스트 단말기(10)는 소리정보를 수집하고, 수집한 소리정보를 서버(40)로 전송할 수 있다.
그러면, 서버(40)에서는 호스트 단말기(10)로부터 전송받은 소리정보를 분석하여 소리정보에서 객체(OB)에 대한 정보를 검출할 수 있다.
자세하게는, 소리정보를 도 11의 (B)에 나타나 있는 바와 같은 텍스트로 변환하고, 변환한 텍스트를 구문 분석하여 '배추'를 키워드(Keyword, KW)로 검색하여 추출할 수 있다.
소리정보를 텍스트로 변환하는 과정에서 텍스트 음성 변환(Text To Speech, TTS) 기술을 이용하는 것이 가능하다. 텍스트 음성 변환(TTS) 기술은 이미 널리 알려진 기술이므로 텍스트 음성 변환(TTS) 기술에 대한 더 이상의 상세한 설명은 생략하기로 한다.
'배추'는 객체(OB)에 대응되는 키워드(KW) 중 하나일 수 있다.
아울러, 소리정보로부터 변환한 텍스트에서 배추에 관련된 정보, 예컨대 가격, 원산지 등의 정보를 판별하여 추출할 수 있다.
예를 들면, 도 11의 (B)의 경우와 같이 키워드(KW)인 배추에 대응하여 '한포기', '2천원' 등의 정보를 판별하여 추출할 수 있다. 이러한 '한포기', '2천원' 등도 키워드(KW)일 수 있다.
여기서, 소리정보로부터 추출한 '배추', '한포기', '2천원' 등의 정보가 1차 소리정보에 대응될 수 있다.
이를 고려하면, 1차 소리정보는 소리정보로부터 변환한 텍스트에서 추출한 적어도 하나의 키워드(KW), 예컨대 '배추', '한포기', '2천원' 등의 키워드(KW)를 포함하는 것이 가능하다.
이와 같은 방법으로 추출한 '배추', '한포기', '2천원' 등의 1차 소리정보를 근거로 하여 객체(OB), 즉 배추에 대한 메인정보를 추출할 수 있다.
여기서, 배추에 대한 메인정보(MI)는 '한 포기에 2천원'에 대응될 수 있다.
이후, 도 11의 (C)에 나타나 있는 바와 같이, 추출한 메인정보를 화면영역에서 객체(OB)에 대응되도록 증강현실로 표시하는 것이 가능할 수 있다.
소리정보를 분석하는 과정에서 호스트의 말(음성) 및/또는 판매자의 말(음성)을 함께 고려할 수 있다.
아울러, 소리정보를 분석하는 과정에서 호스트의 모션(Motion) 및/또는 판매자의 모션을 함께 참조하는 것이 바람직할 수 있다.
예를 들어, 호스트가 판매자와 대화하는 과정에서 소정의 객체(OB)를 손가락 등의 포인팅 수단으로 가르키는 경우에는, 호스트와 판매자가 가르킨 객체(OB)에 대해 대화를 나누고 있을 가능성이 크다.
이를 고려할 때, 소리정보를 분석할 때, 호스트 및/또는 판매자의 모션을 함께 고려하는 것이 바람직할 수 있다.
한편, 소리정보와 영상정보를 함께 고려하여 객체(OB)의 메인정보를 추출하는 방법의 일례를 이하에서 설명한다.
먼저, 호스트 단말기(10)가 영상을 촬영하여 도 12의 (A)와 같은 영상정보를 획득하고, 영상정보에서 '냉이'에 대응하는 객체(OB)를 검출하는 경우를 가정하자.
여기서, 서버(40)는 영상정보에서 가격표에 대응되는 1차 영상정보(IOB)를 추출하고, 추출한 1차 영상정보(IOB)를 이용하여 객체(OB)인 '냉이'에 대한 메인정보(MI)(냉이 1묶음 천원)를 추출할 수 있다.
1차 영상정보를 이용하여 객체(OB)의 메인정보(MI)를 추출하는 방법에 대해서는 앞선 도 10의 (A), (B)를 통해 상세히 설명한 바 있다.
아울러, 호스트 단말기(10)에서는 영상정보와 함께 소리정보를 수집하여 서버(40)로 전송할 수 있다.
그러면, 영상정보를 분석하여 1차 영상정보(IOB)를 추출하면서, 이와 함께 소리정보를 분석하고, 소리정보로부터 객체(OB)에 관련된 정보를 검출할 수 있다.
예를 들어, 서버(40)는 호스트 단말기(10)로부터 수신한 소리정보를 도 12의 (A)에 나타나 있는 바와 같은 텍스트로 변환하고, 변환한 텍스트를 구문 분석하여 '냉이', '3묶음', '2천원'을 키워드(KW)로서 추출할 수 있다.
여기서, 소리정보로부터 추출한 '냉이', '3묶음', '2천원' 등의 정보가 1차 소리정보에 대응될 수 있다.
이와 같은 방법으로 추출한 '냉이', '3묶음', '2천원' 등의 1차 소리정보를 근거로 하여 객체(OB), 즉 배추에 대한 메인정보를 추출할 수 있다.
여기서, 냉이에 대한 메인정보(MI)는 '냉이 3묶음에 2천원'에 대응될 수 있다.
이러한 경우, 도 12의 (A)와 같이 영상정보로부터 추출한 냉이에 대한 메인정보(냉이 1묶음에 천원)와 도 12의 (B)와 같이 소리정보로부터 추출한 냉이에 대한 메인정보(냉이 3묶음에 2천원)은 매칭되지 않을 수 있다.
이하에서는 영상정보로부터 추출한 냉이에 대한 메인정보(냉이 1묶음에 천원)를 제 1 메인정보라 하고, 소리정보로부터 추출한 냉이에 대한 메인정보(냉이 3묶음에 2천원)를 제 2 메인정보라고 할 수 있다.
이처럼, 영상정보로부터 추출한 제 1 메인정보와 소리정보로부터 추출한 제 2 메인정보가 매칭되지 않는 경우에는, 서버(40)에서는 제 1 메인정보와 제 2 메인정보를 비교하여 더 좋은 조건을 갖는 정보를 검출할 수 있다.
예를 들면, 도 12와 같은 경우에는 제 2 메인정보(냉이 3묶음에 2천원)가 제 1 메인정보(냉이 1묶음 천원)보다 더 좋은 조건(가격조건)을 포함하는 경우에, 서버(40)는 제 2 메인정보를 객체(OB)인 냉이에 대한 메인정보(MI)로서 선택할 수 있다.
이후, 도 12의 (C)에 나타나 있는 바와 같이, 제 2 메인정보에 대응되는 메인정보(MI)를 화면영역에서 객체(OB)에 대응되도록 증강현실로 표시하는 것이 가능할 수 있다.
도 12의 (C)와 같이 제 1 메인정보와 제 2 메인정보 중에서 더 좋은 조건을 포함하는 정보를 선택하는 경우에는 객체(OB)의 메인정보의 조건(가격조건)이 이전에 비해 더 개선(혹은 갱신)된 것으로 볼 수 있다.
이를 고려하여, 구매자 단말기(30) 및/또는 게스트 단말기(20)의 화면에는 객체(OB)인 냉이에 대한 메인정보(MI)가 갱신된 정보임을 알리는 갱신알림표시(UDM)를 추가로 표시할 수 있다.
이러한 경우, 구매자는 구매자 단말기(30)의 화면에 표시된 갱신알림표시(UDM)으로 해당 객체(OB)의 가격이 할인되는 등, 구매조건이 더 개선된 것을 용이하게 확인할 수 있고, 이로 인해 구매자의 쇼핑 욕구가 자극될 수 있다.
객체(OB)의 메인정보(MI)를 갱신하는 방법의 다른 실시예에 대해 이하에서 설명한다.
먼저, 호스트 단말기(10)가 주변의 대화를 수집하는 방법으로 소리정보를 수집하고, 수집한 소리정보를 서버(40)로 전송하는 경우를 가정하자.
여기서, 소리정보는 호스트와 판매자와의 대화를 포함할 수 있다.
서버(40)는 호스트 단말기(10)로부터 수신한 소리정보를 텍스트로 변환하고, 변환한 텍스트에서 제 1 부분(PT1)을 먼저 분석할 수 있다. 아울러, 서버(40)는 변환된 텍스트의 제 1 부분(PT1)을 분석한 이후에 제 2 부분(PT2)을 분석할 수 있다.
소리정보로부터 변환된 텍스트가 제 1 부분(PT1)과 제 2 부분(PT2)을 포함하는 경우의 일례가 도 13의 (A)에 나타나 있다.
서버(40)는 변환된 텍스트의 제 1 부분(PT1)을 구문 분석하여 '배추', '한포기', '2천원'을 키워드(KW)로서 추출할 수 있다.
이러한 경우, 서버(40)는 변환된 텍스트의 제 1 부분(PT1)에 대응하여 '배추 한포기에 2천원'을 객체(OB), 즉 배추에 대한 메인정보(MI)로서 추출할 수 있다.
이후, 서버(40)는 변환된 텍스트의 제 2 부분(PT2)을 구문 분석하여 '배추', '한포기', '1500원'을 키워드(KW)로서 추출할 수 있다.
이러한 경우, 서버(40)는 변환된 텍스트의 제 2 부분(PT2)에 대응하여 '배추 한포기에 1500원'을 객체(OB), 즉 배추에 대한 메인정보(MI)로서 추출할 수 있다.
도 13의 (A)에서는 객체(OB), 즉 배추의 메인정보가 더 좋은 방향으로 갱신된 것으로 볼 수 있다.
이러한 경우, 도 13의 (B)에 나타나 있는 바와 같이, 변환된 텍스트의 제 2 부분(PT2)에 대응되는 객체(OB)의 메인정보(MI)를 화면영역에서 객체(OB)에 대응되도록 증강현실로 표시하는 것이 가능할 수 있다.
아울러, 구매자 단말기(30) 및/또는 게스트 단말기(20)의 화면에 객체(OB)에 대한 메인정보(MI)가 갱신된 정보임을 알리는 갱신알림표시(UDM)를 추가로 표시할 수 있다.
한편, 호스트와 판매자와의 대화 과정에서 다른 판매자가 더 좋은 조건을 말로서 제시하는 경우가 발생할 수 있다.
이러한 경우에는, 서버(40)는 호스트와 대화중인 판매자가 제시한 조건(가격, 원산지 등)과 다른 판매자가 말로서 제시하는 조건을 비교하여 더 좋은 조건을 선택하는 것이 가능하다.
예를 들면, 도 14의 (A)에 나타나 있는 바와 같이, 호스트가 라이브 방송을 진행하면서 판매자 1과 객체(OB), 예컨대 배추에 대해 대화를 나눌 수 있다.
그러면 서버(40)에서는 호스트 단말기(10)로부터 수신한 호스트와 판매자 1과의 대화를 분석하여 '배추 한포기에 2천원'이라는 메인정보(MI)를 추출할 수 있다.
이러한 경우, 호스트 단말기(10)가 촬영한 영상정보에는 판매자 1이 포함되거나, 판매자 1이 판매하는 객체(OB), 즉 배추가 포함되거나, 판매자 1에 대응되는 매장(제 1 매장)이 포함될 수 있다.
이러한 호스트와 판매자 1의 대화과정에서 판매자 2가 급작스럽게 객체(OB), 즉 배추에 대한 새로운 조건을 제시할 수 있다.
예를 들면, 판매자 2가 "여기는 한포기에 1800원입니다"라는 조건을 말로서 제시할 수 있다.
이러한 경우, 서버(40)에서는 판매자 2의 말을 텍스트로 변환하고, 변환한 텍스트를 구문 분석하여 '한포기', '1800원'이라는 키워드(KW)를 추출할 수 있다.
이후, 서버(40)는 추출한 키워드(KW)를 이용하여 판매자 2가 제시하는 조건에 해당하는 메인정보(MI)를 '배추 한포기에 1800원'으로 추출할 수 있다.
이후, 서버(40)는 판매자 1에 대응되는 메인정보(MI)와 판매자 2에 대응되는 메인정보(MI)를 비교하여 더 좋은 조건을 포함하는 판매자 2에 대응되는 메인정보(MI)를 선택할 수 있다.
이후, 판매자 2에 대응되는 메인정보(MI)를 구매자 단말기(30) 및/또는 게스트 단말기(20)의 화면에 증강현실로 표시할 수 있다.
한편, 호스트 단말기(10)가 촬영하는 영상정보에서 판매자 2, 판매자 2가 판매하는 객체(OB) 및 판매자 2에 대응되는 매장(제 2 매장)은 포함되지 않을 수 있다.
다른 관점에서 보면, 라이브 방송 영상에서 판매자 2의 말(음성)은 포함되어 들릴 수 있으나, 판매자 2, 판매자 2가 판매하는 객체(OB) 및 판매자 2에 대응되는 매장(제 2 매장)은 포함되지 않을 수 있다.
이러한 경우, 현재 라이브 방송 영상에서는 판매자 2, 판매자 2가 판매하는 객체(OB) 및 판매자 2에 대응되는 매장(제 2 매장)의 위치를 파악하기 어려울 수 있다.
이처럼, 판매자 1, 판매자 1이 판매하는 객체(OB) 및 판매자 1에 대응되는 매장(제 1 매장) 중 적어도 하나는 라이브 방송 영상에 포함되어 확인될 수 있으나, 판매자 2, 판매자 2가 판매하는 객체(OB) 및 판매자 2에 대응되는 매장(제 2 매장)은 포함되지 않아서 확인이 어려운 경우에는, 도 14의 (B)에 나나타 있는 바와 같이, 확인이 가능한 판매자 1에 대응되는 메인정보(MI)가 판매자 1이 판매하는 객체(OB)에 대응하여 증강현실로 표시될 수 있다.
아울러, 확인이 어려운 판매자 2에 대응되는 메인정보(MI)는 저가알림정보로서 판매자 1에 대응되는 메인정보(MI)와 함께 화면에 표시될 수 있다.
이러한 경우, 구매자 및/또는 게스트는 현재 라이브 방송 영상에서 소개하고 있는 객체(OB)보다 더 좋은 조건을 갖는 새로운 조건이 제시되었음을 용이하게 확인될 수 있다.
그러면 게스트는 호스트에게 현재 조건보다 더 좋은 새로운 조건이 제시되었음을 알리고, 그에 대응하여 이동하도록 호스트를 안내할 수 있다.
이를 위해, 도 15에 나타나 있는 바와 같이, 서버(40)는 게스트 단말기(20)로 저가알림정보를 전송하고, 게스트 단말기(20)에서는 판매자 2가 제시한 조건에 대응하는 다양한 정보를 화면에 표시할 수 있다.
구매자 측에서는 더 좋은 조건을 갖춘 객체(OB)가 라이브 방송 영상에 등장할 때까지 구매를 보류하는 것이 가능하다.
이처럼, 라이브 방송 영상 중에 저가알림정보를 제공하는 경우에는 구매자로 하여금 쇼핑에 흥미를 갖도록 유도할 수 있다.
한편, 보다 원활한 라이브 방송의 진행을 위해 서버(40)는 호스트가 이동중에는 객체(OB)를 검출하는 작업을 일시적으로 중지하는 것이 가능하다.
도 16에 나타나 있는 바와 같이, 호스트 단말기(10)에서 영상정보 및 소리정보를 수집하는 과정에서 호스트 단말기(10)의 작동 모드를 선택할 수 있다(S310).
서버(40)는 호스트 단말기(10)에서 판매모드를 선택했는지의 여부를 판단(S320)할 수 있다.
제 S320 단계에서 판단결과, 판매모드를 선택한 경우에는 호스트 단말기(10)가 수집한 영상정보에서 객체(OB)를 추출하는 단계(S400)로 진행할 수 있다.
반면에, 제 S320 단계에서 판단결과, 판매모드를 선택하지 않은 경우에는 서버(40)는 호스트 단말기(10)에서 이동모드를 선택했는지의 여부를 판단(S300)할 수 있다.
제 S330 단계에서 판단결과, 이동모드를 선택하지 않은 경우에는 미리 설정된 제 4 기능(Default 4)을 수행할 수 있다.
제 4 기능은 호스트 단말기(10)의 작동 모드가 선택될 때까지 대기하는 기능 등을 예로 들 수 있다.
반면에, 제 S330 단계에서 판단결과, 이동모드를 선택하는 경우에는 호스트 단말기(10)를 이동모드로 설정(S340)할 수 있다.
이동모드에서는 호스트 단말기(10)에서 서버(40)로 영상정보 및 소리정보를 전송하더라도 서버(40)에서는 영상정보에서의 객체(OB)의 추출, 메인정보(MI)의 추출을 일시적으로 중지할 수 있다.
이러한 경우, 데이터 처리량을 줄이는 것이 가능하다.
아울러, 호스트 단말기(10)의 이동 중 흔들리는 화면에 의해 오동작이 발생할 수 있는 가능성을 줄일 수 있다.
이하에서는 적어도 하나의 구매자 단말기(30)에서 구매요청을 하는 방법에 대해 설명하기로 한다.
도 17 내지 도 19는 구매자 단말기에서 객체를 구매하는 방법에 대해 설명하기 위한 도면이다. 이하에서는 이상에서 상세히 설명한 부분에 대한 설명은 생략될 수 있다.
적어도 하나의 구매자 단말기(30)에서 서버(40)로 소정의 객체(OB)에 대응하여 구매요청을 전송할 수 있다.
예를 들면, 도 18의 (A)에 나타나 있는 바와 같이, 구매자 단말기(30)의 화면에 영상정보가 표시되고, 영상정보에서 소정의 객체(OB)에 대응하도록 메인정보(MI)가 증강현실로 표시될 수 있다.
이러한 상태에서 구매자는 구매자 단말기(30)의 화면에 표시된 객체(OB) 및/또는 메인정보(MI)를 터치하여 객체(OB)에 대한 원하는 구매수량을 입력하는 것이 가능하다.
이러한 방식으로 구매자 단말기(30)에서 구매요청을 입력하는 것이 가능하다.
그러면, 서버(40)에서는 구매자 단말기(30)의 구매요청에 대한 정보를 구매자 단말기(30)의 정보에 매칭시켜 저장하고, 구매요청을 적어도 하나의 게스트 단말기(20)로 전송할 수 있다(S1000).
아울러, 구매요청을 수신한 게스트 단말기(20)에서는 구매요청에 대한 정보를 화면에 표시할 수 있다.
예를 들면, 도 18의 (B)에 나타나 있는 바와 같이, 게스트 단말기(20)의 화면에 구매자의 이름, 구매내용(수량), 구매단가, 구매자 주소, 구매자 연락처 등을 포함하는 구매요청을 표시하는 것이 가능하다.
이후, 도 17에 나타나 있는 바와 같이, 구매요청을 서버(40)로부터 수신한 게스트 단말기(20)에서는 구매요청에 대응하는 적어도 하나의 객체(OB)의 이미지를 촬영할 수 있다(S1010).
예를 들면, 도 19의 (A)에 나타나 있는 바와 같이, 게스트 단말기(20)에서는 구매자 단말기(30)가 전송하는 구매요청에 대응하는 객체(OB), 예컨대 배추의 사진을 촬영할 수 있다.
이후, 게스트 단말기(20)에서는 촬영한 이미지 정보를 서버(40)로 전송(S1020)할 수 있다.
그러면, 서버(40)에서는 게스트 단말기(20)로부터 수신한 이미지 정보를 대응하는 구매자 단말기(30) 및 대응하는 게스트 단말기(20)에 매칭시켜 저장할 수 있다.
아울러, 서버(40)는 게스트 단말기(20)로부터 수신한 이미지 정보를 구매요청을 전송한 구매자 단말기(30)로 전송할 수 있다.
그러면, 도 19의 (B)에 나타나 있는 바와 같이, 구매자는 게스트 단말기(20)가 촬영하여 전송한 이미지 정보를 확인하여 자신이 선택한 객체(OB)가 맞는지 혹은 선택한 객체(OB)에 만족하는지를 용이하게 판단할 수 있다.
이후, 구매자 단말기(30)에서는 게스트 단말기(20)로부터 전송받은 이미지 정보를 근거로 하여 해당 객체(OB)를 반품할지의 여부를 선택할 수 있다(S1030).
제 S1030 단계에서 구매자 단말기(30)에서 반품을 선택하지 않는 경우에는 해당 객체(OB)에 대해 구매확인을 할 수 있다(S1040).
이러한 경우, 게스트 단말기(20)에서는 이미지를 촬영한 객체(OB)를 구매자 단말기(30)에 대응하여 분류하고 장바구니에 담을 수 있다.
이후, 게스트 단말기(20)는 장바구니에 담긴 객체(OB)를 대응하는 구매자에게 발송한 정보를 구매자 단말기(30) 및/또는 서버(40)로 전송할 수 있다.
반면에, 제 S1030 단계에서 구매자 단말기(30)에서 반품을 선택하는 경우에는 해당 객체(OB)에 대한 반품을 원한다는 정보를 서버(40)로 전송할 수 있다(S1050).
서버(40)에서는 반품정보를 해당 게스트 단말기(20)로 전송하고, 반품에 대한 정보를 저장할 수 있다.
그러면, 게스트 단말기(20)에서는 반품을 확인(S1060)하고, 촬영한 해당 객체(OB)의 이미지 정보를 삭제할 수 있다.
예를 들면, 도 19의 (B)에 나타나 있는 바와 같이, 구매자 단말기(30)에서는 구매확정 메뉴를 선택하거나 혹은 반품 메뉴를 선택하는 것이 가능하다.
이처럼, 본 발명에서는 호스트는 라이브 방송을 진행하고, 적어도 하나의 게스트가 구매요청에 대응하는 객체(OB)를 장바구니에 담는 등 분류작업에 참여할 수 있다.
아울러, 적어도 하나의 게스트 단말기(20)에서는 구매자 단말기(30)의 구매요청에 대응하여 판매자로부터 객체(OB)를 수령하는 작업을 진행할 수 있다.
한편, 라이브 방송 중 적어도 하나의 판매자 단말기(50)에서 서버(40)로 소정 객체(OB)에 대해 새로운 조건을 제시하는 것이 가능하다. 이에 대해, 첨부된 도면을 참조하여 살펴보면 아래와 같다.
도 20 내지 도 22는 라이브 방송 중 판매자 단말기에서 새로운 조건을 제시하는 방법에 대해 설명하기 위한 도면이다. 이하에서는 이상에서 상세히 설명한 부분에 대한 설명은 생략될 수 있다.
도 20에 나타나 있는 바와 같이, 라이브 방송 영상이 전송된 이후에 적어도 하나의 판매자 단말기(50)에서 서버(40)로 소정의 객체(OB)에 대응하는 조건정보를 입력(S1100)하고 전송(S1110)할 수 있다.
판매자 단말기(50)가 새로운 조건을 입력하는 방법의 일례가 도 21의 (A)에 나타나 있다.
도 21의 (A)에 나타나 있는 '배추 1포기당 천원'의 메인정보는 현재 라이브 방송에 소개되고 있는 객체(OB), 즉 배추의 가격보다 더 낮은 가격을 포함할 수 있다. 예를 들면, 현재 라이브 방송에 소개되고 있는 객체(OB), 즉 배추의 가격은 2천원이고, 판매자 단말기(50)에서 서버(40)로 전송하는 새로운 조건에서 객체(OB), 즉 배추의 가격은 2천원보다 낮은 천원일 수 있다.
예를 들면, 서버(40)에 미리 등록된 판매자가 라이브 방송 영상을 시청하면서 라이브 방송에서 소개되고 있는 객체(OB)의 메인정보(MI)를 확인할 수 있다.
그리고 판매자는 자신이 판매하는 동일한 객체(OB)의 조건, 예컨대 가격, 원산지, 수량, 생산일자, 빛깔, 품질 등이 라이브 방송에서 현재 소개되고 있는 객체(OB)에 비해 더 우월하다고 판단할 수 있다.
이러한 경우, 판매자는 해당 객체(OB)에 대해서 새로운 조건을 서버(40)로 제시할 수 있다.
그러면, 서버(40)에서는 판매자 단말기(50)로부터 전송받은 조건을 분석하고, 분석한 결과 판매자 단말기(50)로부터 전송받은 조건이 현재 라이브 방송에서 소개되고 있는 객체(OB)의 조건보다 가격, 수량, 원산지 및 품질 중 적어도 하나의 관점에서 더 좋은 조건인지를 판단할 수 있다(S1120).
제 S1120 단계에서 판단결과, 판매자 단말기(50)로부터 수신한 새로운 조건이 현재 라이브 방송에 소개되고 있는 객체(OB)의 조건보다 더 좋은 조건이 아닌 경우에는 미리 설정된 제 5 기능(Default 5)을 수행할 수 있다(S1130).
제 5 기능은 제시한 조건이 현재 라이브 방송에 소개되고 있는 객체(OB)의 조건보다 더 좋지 않다는 것을 해당 판매자 단말기(50)로 전송하는 기능 등을 예로 들 수 있다.
반면에, 제 S1120 단계에서 판단결과 판매자 단말기(50)로부터 수신한 새로운 조건이 현재 라이브 방송에 소개되고 있는 객체(OB)의 조건보다 더 좋은 조건인 경우에는 판매자 단말기(50)가 새롭게 제시한 조건을 수락할 수 있다(S1140).
이후, 서버(40)에서는 새로운 조건을 제시한 판매자 단말기(50)로 위치정보의 제공을 요청할 수 있다(S1150).
그러면, 판매자 단말기(50)에서는 위치정보 제공 요청에 대응하여 서버(40)로 자신의 위치정보를 입력하고 전송할 수 있다(S1160).
판매자 단말기(50)에서 입력하는 위치정보의 일례가 도 21의 (B)에 나타나 있다.
도 21의 (B)는 라이브 방송 영상을 시청하던 판매자가 라이브 방송에서 보이는 호스트의 위치를 근거로 하여 제공한 것으로 볼 수 있다.
판매자 단말기(50)로부터 위치정보를 수신한 서버(40)는 판매자 단말기(50)의 위치정보를 적어도 하나의 게스트 단말기(20) 및/또는 호스트 단말기(10)로 전송할 수 있다(S1180).
만약, 호스트가 라이브 방송 중 호스트 단말기(10)를 통해 위치정보를 확인하기 어려운 상황인 경우에는 판매자 단말기(50)의 위치정보를 적어도 하나의 게스트 단말기(20)로 전송하는 것이 가능하다.
서버(40)가 적어도 하나의 게스트 단말기(20)로 제공하는 판매자 단말기(50)에 대응되는 위치정보의 일례가 도 21의 (C)에 나타나 있다.
서버(40)는 새로운 조건을 제시한 판매자 단말기(50)에 대응되는 매장을 추천 매장으로 설정하는 것이 가능하다.
이러한 경우 적어도 하나의 게스트는 호스트에게 추천매장의 위치를 알려서 호스트로 하여금 추천매장을 방문하도록 유도할 수 있다.
한편, 판매자 단말기(50)에서는 위치정보를 전송한 이후에 화면에 소정의 식별마크를 표시할 수 있다(S1170).
이러한 식별마크에 대한 정보는 서버(40)에서 해당 판매자 단말기(50)로 전송될 수 있다.
예를 들면, 도 22의 (A)에 나타나 있는 바와 같이 식별마크(IDM)는 판매자 단말기(50)의 화면에 표시되는 '여기'라는 충분히 큰 문자로 표시된 문자열을 포함하는 것이 가능하다.
또는, 도 22의 (B)에 나타나 있는 바와 같이 식별마크(IDM)는 판매자 단말기(50)의 화면에 표시되는 별표 마크를 포함하는 것이 가능하다.
이러한 경우, 호스트 및/또는 적어도 하나의 게스트는 전통시장 등의 복잡한 환경에서도 새로운 조건을 제시한 판매자 단말기(50)를 육안으로 용이하게 찾을 수 있다.
아울러, 서버(40)는 판매자 단말기(50)별로 서로 다른 식별마크(IDM)를 부여하는 것이 가능하다.
한편, 서버(40)는 식별마크에 대한 정보를 적어도 하나의 게스트 단말기(20)에도 전송할 수 있다.
이러한 경우, 특정 식별마크(IDM), 예컨대 별표 마크를 부여받은 판매자 단말기(50)에서 화면에 별표 마크를 표시한 상태에서 호스트 및/또는 적어도 하나의 게스트를 향해 화면을 보일 수 있다.
그러면, 호스트 및/또는 적어도 하나의 게스트는 전통시장 등의 복잡한 환경에서도 해당 식별마크를 이용하여 추천매장을 용이하게 찾을 수 있다.
한편, 구매자 및/또는 구매하고하 하는 객체의 수가 충분히 많은 경우에는 미리 설정된 게스트 단말기(20) 이외에 라이브 방송을 도울 수 있는 임시 게스트 단말기(TGT)를 적어도 하나 추가로 설정하는 것이 가능하다. 이에 대해 첨부된 도면을 참조하여 살펴보면 아래와 같다.
도 23 내지 도 25는 임시 게스트 단말기를 설정하는 방법의 일례에 대해 설명하기 위한 도면이다. 이하에서는 이상에서 상세히 설명한 부분에 대한 설명은 생략될 수 있다.
도 23에 나타나 있는 바와 같이, 적어도 하나의 구매자 단말기(30)로부터 구매요청이 서버(40)로 접수되는 경우에 적어도 하나의 임시 게스트 단말기(TGT)를 추가할지를 선택할 수 있다(S1200).
제 S1200 단계에서 임시 게스트 단말기(TGT)를 추가하지 않는 것으로 선택하는 경우에는 미리 설정된 제 6 기능(Default 6)을 수행할 수 있다(S1210).
제 9 기능은 임시 게스트 단말기(TGT)를 사용하지 않고 해당 매장에 대응하여 구매요청을 처리하는 기능 등을 예로 들 수 있다.
반면에, 제 S1200 단계에서 임시 게스트 단말기(TGT)를 추가하는 것으로 선택하는 않는 경우에는 적어도 하나의 게스트 단말기(20)에서 해당 매장에 관련된 단말기, 즉 매장 관련자 단말기의 정보를 입력(S1220)하고, 입력한 서버(40)로 전송할 수 있다.
그러면 서버(40)에서 매장 관련자 단말기를 임시 게스트 단말기(TGT)로 사용할 것을 승인할 수 있다(S1230).
이후, 승인된 임시 게스트 단말기(TGT)는 해당 매장에 대응하여 임시 게스트 단말기(TGT)로 등록될 수 있다(S1240).
예를 들어, 호스트가 전통시장 내에서 제 1 채소매장을 방문하여 라이브 방송을 진행하는 경우를 가정하여 보자.
제 1 채소매장에서 구매자 단말기(30)로부터의 구매요청이 급증하는 경우에는 미리 설정된 게스트들만으로는 급증한 구매요청을 모두 처리하기 어려울 수 있다.
이러한 경우, 제 1 채소매장에 관련된 관련자, 예컨대 제 1 채소매장 주인, 종업원, 가족 등을 임시 게스트로 서버(40)에 등록하고, 등록한 임시 게스트의 단말기를 임시 게스트 단말기(TGT)로 서버(40)에 등록하는 것이 가능할 수 있다.
제 1 채소매장에 대응하여 등록된 임시 게스트 단말기(TGT)들은 제 1 채소매장에 관련된 구매요청을 수신하고 이를 처리할 수 있다.
예를 들어, 제 1 채소매장에 대응하여 제 1 임시 게스트 단말기(TGT)와 제 1-1 임시 게스트 단말기(TGT)를 등록하고, 제 2 채소매장에 대응하여 제 2 임시 게스트 단말기(TGT)와 제 2-1 임시 게스트 단말기(TGT)를 등록하는 경우를 가정하여 보자.
이러한 경우, 구매자 단말기(30)가 제 1 채소매장의 객체(OB)에 대응하여 구매요청을 전송하는 경우에는, 서버(40)는 제 1 채소매장에 대응되는 구매요청을 제 1 임시 게스트 단말기(TGT)와 제 1-1 임시 게스트 단말기(TGT)에 전송할 수 있다.
그러면, 제 1 임시 게스트 단말기(TGT)와 제 1-1 임시 게스트 단말기(TGT)에서는 구매요청에 대응하여 해당 객체(OB)의 이미지 정보를 생성하고, 생성한 이미지 정보를 서버(40)로 전송할 수 있다.
아울러, 제 1 임시 게스트 단말기(TGT)와 제 1-1 임시 게스트 단말기(TGT)에 대응되는 임시 게스트들은 제 1 채소매장에 대응되는 구매요청에 대응하여 소정의 객체(OB)를 분류하여 장바구니에 담고, 장바구니에 담은 객체(OB)를 구매요청을 한 구매자 단말기(30)에 대응되는 주소지로 배송할 수 있다.
한편, 서버(40)는 제 1 채소매장에 대응되는 구매요청을 제 2 임시 게스트 단말기(TGT)와 제 2-1 임시 게스트 단말기(TGT)로는 전송하지 않을 수 있다.
반면에, 구매자 단말기(30)가 제 2 채소매장의 객체(OB)에 대응하여 구매요청을 전송하는 경우에는, 서버(40)는 제 2 채소매장에 대응되는 구매요청을 제 2 임시 게스트 단말기(TGT)와 제 2-1 임시 게스트 단말기(TGT)에 전송할 수 있다.
이처럼, 임시 게스트 단말기(TGT)는 매장에 대응되는 것으로 해당 매장의 객체(OB)의 판매를 돕기 위해 등록될 수 있다.
서버(40)는 임시 게스트 단말기(TGT)와는 다르게 미리 설정된 게스트 단말기(20)에는 제 1 채소매장의 객체(OB)에 대응하여 구매요청에 대한 정보 및 제 2 채소매장의 객체(OB)에 대응하여 구매요청에 대한 정보를 모두 전송할 수 있다.
이를 고려하면, 게스트 단말기(20)는 라이브 방송을 전체적으로 돕기 위해 설정되는 것으로도 볼 수 있다.
한편, 매장별로 임시 게스트 단말기(TGT)를 사용하기 위해서는 라이브 방송 중 신속하고 명확하게 매장을 구분할 필요가 있다. 이를 위해, 호스트는 매장을 구분하기 위한 매장구분정보를 사용하는 것이 가능하다.
도 24에 나타나 있는 바와 같이, 호스트 단말기(10)가 영상정보 및 소리정보를 수집한 상태에서 매장개시정보가 호스트 단말기(10)에 감지될 수 있다(S1300).
그러면, 호스트 단말기(10)는 감지한 매장개시정보를 서버(40)로 전송하고, 서버(40)에서는 매장개시정보를 근거로 하여 해당 매장을 식별할 수 있다(S1310).
아울러, 서버(40)에서는 현재 라이브 방송이 식별된 매장에 대응되는 것으로 설정할 수 있다.
아울러, 서버(40)에서는 식별된 매장에 대응되는 임시 게스트 단말기(TGT)가 존재하는지의 여부를 판단할 수 있다(S1320).
제 S1320 단계에서 판단결과, 식별된 매장에 대응되는 임시 게스트 단말기(TGT)가 존재하지 않는 경우에는 미리 설정된 제 7 기능(Default 7)을 수행할 수 있다(S1330).
제 7 기능은 미리 설정된 적어도 하나의 게스트 단말기(20)로 식별된 매장에 대응하는 구매요청을 처리하는 기능, 식별된 매장에 대응하여 적어도 하나의 임시 게스트 단말기(TGT)를 설정하라고 추천하는 기능 등을 예로 들 수 있다.
반면에, 제 S1320 단계에서 판단결과 식별된 매장에 대응되는 임시 게스트 단말기(TGT)가 존재하는 경우에는 식별된 매장에 대한 정보와 임시 게스트 단말기(TGT)의 정보를 매칭시킬 수 있다.
즉, 적어도 하나의 임시 게스트 단말기(TGT)를 식별된 매장에 대응하여 사용할 수 있도록 활성화할 수 있다.
이후, 호스트 단말기(10)가 미리 설정된 매장종료정보를 감지(S1350)하면 서버(40)는 현재 호스트가 식별된 매장에서 이탈한 것으로 설정(S1360)할 수 있다.
예를 들어, 호스트가 전통시장에서 라이브 방송을 진행하는 경우를 가정하여 보자.
호스트가 복수의 매장 중에서 제 1 매장에 방문하면서, 도 25의 (A)에 나타나 있는 바와 같이, '아브라카다브라'를 외칠 수 있다.
여기서, '아브라카다브라'가 제 1 매장을 식별 및 개시하기 위한 일종의 매장개시정보일 수 있다.
호스트가 '아브라카다브라'를 외치면 서버(40)는 이를 감지하여 현재 호스트가 특정 매장, 예컨대 제 1 매장에 방문하여 라이브 방송을 진행하는 것으로 판별할 수 있다.
이후, 도 25의 (B)에 나타나 있는 바와 같이, 호스트가 '익스페토 페트로늄'을 외치는 것이 가능하다.
여기서, '익스페토 페트로늄'이 제 1 매장을 종료하기 위한 일종의 매장종료정보일 수 있다.
호스트가 '익스페토 페트로늄'을 외치면 서버(40)는 이를 감지하여 현재 호스트가 특정 매장, 예컨대 제 1 매장으로부터 이탈하여 이동하는 것으로 판별할 수 있다.
여기서, 호스트가 매장개시정보로서 '아브라카다브라'를 외친 이후에 매장종료정보로서 '익스페토 페트로늄'을 외치기 이전 사이의 기간에서 등록되는 임시 게스트 단말기(TGT)는 해당 기간에 대응되는 매장, 즉 제 1 매장에 대응되는 임시 게스트 단말기(TGT)로 설정되는 것이 가능하다.
이를 고려하면, 호스트가 매장개시정보를 제시한 이후부터 매장종료정보를 제시하기 이전의 기간에서 해당 매장에서는 객체(OB)의 판매에 필요한 적어도 하나의 임시 게스트 단말기(TGT)를 게스트 단말기(20)를 통해 서버(40)에 등록하여 사용하는 것이 가능할 수 있다.
여기서는, 호소트의 음성으로 매장개시정보 및 매장종료정보를 제시하는 경우를 설명하였지만 본 발명은 이에 한정되지 않을 수 있다. 예를 들면, 호스트는 특정 컬러 혹은 형태의 카드를 이용하여 매장개시정보로 사용하는 것이 가능할 수 있다.
이와 같이, 상술한 본 발명의 기술적 구성은 본 발명이 속하는 기술분야의 당업자가 본 발명의 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다.
그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해되어야 하고, 본 발명의 범위는 전술한 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (5)

  1. 호스트 대리인(Host Agent)에 대응하는 호스트 단말기(Host Terminal)에서 카메라부(Camera Part)를 이용하여 주변의 영상정보를 수집하고, 마이크부(Microphone Part)를 이용하여 주변의 소리정보를 수집하는 단계;
    서버(Server)에서 상기 호스트 단말기로부터 상기 영상정보 및 상기 소리정보를 수신하고, 수신한 상기 영상정보 및 상기 소리정보를 근거로 하여 상기 영상정보에 포함된 객체(Object)에 대한 메인정보를 추출하는 단계;
    상기 서버에서 상기 영상정보, 상기 소리정보 및 상기 객체에 대한 정보를 이용하여 라이브 방송 영상을 제작하는 단계;
    상기 서버에서 상기 라이브 방송 영상을 구매자 단말기(Buyer Terminal)로 전송하는 단계; 및
    상기 구매자 단말기에서 상기 서버로 상기 객체에 대해 구매요청을 전송하는 단계;
    를 포함하고,
    상기 라이브 방송 영상은
    상기 객체가 표시되는 화면영역에 상기 메인정보를 상기 객체에 대응되도록 증강현실(Augmented Reality)로 표시하는 것을 특징으로 하는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법.
  2. 제 1 항에 있어서,
    상기 서버에서 상기 영상정보에 포함된 상기 객체에 대한 정보를 근거로 하여 상기 메인정보를 추출하는 단계; 및
    상기 서버에서 상기 소리정보에 포함된 상기 객체에 대한 정보를 근거로 하여 상기 메인정보를 업데이트하는 단계;
    를 더 포함하는 것을 특징으로 하는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법.
  3. 제 2 항에 있어서,
    상기 서버에서 상기 소리정보를 분석하여 상기 소리정보에 대응되는 객체를 판별하는 단계;
    상기 서버에서 판별한 상기 객체에 대응하여 상기 소리정보에 포함된 상기 객체에 대한 정보를 추출하는 단계; 및
    상기 서버에서 상기 메인정보와 상기 소리정보로부터 추출한 상기 객체에 대한 정보가 매칭(Matching)되지 않는 경우 상기 메인정보를 소리정보로부터 추출한 상기 객체에 대한 정보를 이용하여 업데이터하는 단계;
    를 더 포함하는 것을 특징으로 하는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법.
  4. 제 1 항에 있어서,
    상기 서버에서 미리 설정된 게스트 대리인(Guest Agent)에 대응하는 게스트 단말기(Guest Terminal)로 상기 구매요청을 전송하는 단계;
    상기 게스트 단말기에서 상기 구매요청에 대응하는 상기 객체의 이미지를 촬영하고, 촬영한 이미지를 상기 서버로 전송하는 단계; 및
    상기 서버는 상기 게스트 단말기로부터 수신한 상기 객체의 이미지를 상기 구매자 단말기로 전송하는 단계;
    를 더 포함하는 것을 특징으로 하는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 방법.
  5. 카메라부(Camera Part) 및 마이크부(Microphone Part)를 포함하고, 상기 카메라부를 이용하여 주변의 영상정보를 수집하고, 상기 마이크부를 이용하여 주변의 소리정보를 수집하는 호스트 대리인(Host Agent)에 대응하는 호스트 단말기(Host Terminal);
    상기 호스트 단말기로부터 상기 영상정보 및 상기 소리정보를 수신하고, 수신한 상기 영상정보 및 상기 소리정보를 근거로 하여 상기 영상정보에 포함된 객체(Object)에 대한 메인정보를 추출하고, 상기 영상정보, 상기 소리정보 및 상기 객체에 대한 정보를 이용하여 라이브 방송 영상을 제작하는 서버(Server); 및
    상기 서버로부터 상기 라이브 방송 영상을 수신하고, 상기 객체에 대해 구매요청을 상기 서버로 전송하는 구매자 단말기(Buyer Terminal);
    를 포함하고,
    상기 라이브 방송 영상은
    상기 객체가 표시되는 화면영역에 상기 객체에 대한 정보를 증강현실(Augmented Reality)로 표시하는 것을 특징으로 하는 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치.
KR1020220077864A 2022-06-24 2022-06-24 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법 KR20240000986A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220077864A KR20240000986A (ko) 2022-06-24 2022-06-24 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220077864A KR20240000986A (ko) 2022-06-24 2022-06-24 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20240000986A true KR20240000986A (ko) 2024-01-03

Family

ID=89539017

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220077864A KR20240000986A (ko) 2022-06-24 2022-06-24 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20240000986A (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210014280A (ko) 2019-07-30 2021-02-09 (주)트라이큐빅스코리아 오프라인 가상 제품 진열 매장에서 가상 제품 쇼핑 방법 및 그 시스템
KR102283232B1 (ko) 2020-08-18 2021-07-30 주식회사 앱플러 비디오 커머스 시스템에서 라이브 영상 방송을 통해 상품에 대한 정보를 실시간으로 제공 및 실시간 상품 정보를 제작하기 위한 방법 및 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210014280A (ko) 2019-07-30 2021-02-09 (주)트라이큐빅스코리아 오프라인 가상 제품 진열 매장에서 가상 제품 쇼핑 방법 및 그 시스템
KR102283232B1 (ko) 2020-08-18 2021-07-30 주식회사 앱플러 비디오 커머스 시스템에서 라이브 영상 방송을 통해 상품에 대한 정보를 실시간으로 제공 및 실시간 상품 정보를 제작하기 위한 방법 및 장치

Similar Documents

Publication Publication Date Title
US11238655B2 (en) Offline shopping guide method and apparatus
US10423925B2 (en) Kiosk cluster
US9049488B2 (en) Systems and methods for displaying and interacting with interaction opportunities associated with media content
WO2017045462A1 (zh) 视频流中的物品相关信息展示方法及系统
CN108292425A (zh) 自动引导的图像捕获和展示
CA3154613A1 (en) Online live video sales management system
CN109213310B (zh) 信息互动设备、数据对象信息处理方法及装置
JP5395920B2 (ja) 検索装置、検索方法、検索プログラム、及びそのプログラムを記憶するコンピュータ読取可能な記録媒体
KR102474047B1 (ko) 사진 또는 비디오에서 잠재적 목록에 대한 관심 수집
US20150215674A1 (en) Interactive streaming video
JP6120467B1 (ja) サーバ装置、端末装置、情報処理方法、およびプログラム
JP2015133033A (ja) レコメンド装置、レコメンド方法、およびプログラム
US20150235264A1 (en) Automatic entity detection and presentation of related content
KR102473915B1 (ko) 콘텐츠 기반의 상품 판매 중개 서비스 제공 방법, 장치 및 컴퓨터프로그램
US20240153064A1 (en) Systems and methods for processing vehicle images based on criteria
US20150379616A1 (en) Wearable computing device gift registry system
JP2017228278A (ja) サーバ装置、端末装置、情報処理方法、およびプログラム
JP2016024596A (ja) 情報処理装置
KR20240000986A (ko) 오프라인 매장에서 메타버스를 이용한 라이브 커머스 장치 및 방법
JP6354232B2 (ja) 販売促進装置、販売促進方法及びプログラム
CN113990419A (zh) 体检展示方法、装置、存储介质及虚拟现实可穿戴设备
KR20180092053A (ko) 지능형 쇼핑 관리시스템
CN110956075A (zh) 图像处理装置、图像处理方法及记录介质
CN111127128A (zh) 商品推荐方法、装置及存储介质
US20240179376A1 (en) Systems and Methods for Obtaining Automated Images in a Live Video Event