KR20240001631A - 라이브 방송 제공 방법 및 시스템 - Google Patents

라이브 방송 제공 방법 및 시스템 Download PDF

Info

Publication number
KR20240001631A
KR20240001631A KR1020220078544A KR20220078544A KR20240001631A KR 20240001631 A KR20240001631 A KR 20240001631A KR 1020220078544 A KR1020220078544 A KR 1020220078544A KR 20220078544 A KR20220078544 A KR 20220078544A KR 20240001631 A KR20240001631 A KR 20240001631A
Authority
KR
South Korea
Prior art keywords
augmented reality
broadcast
item
user terminal
live broadcast
Prior art date
Application number
KR1020220078544A
Other languages
English (en)
Other versions
KR102632812B1 (ko
Inventor
송재훈
이철균
가이슬
이누리
박은수
박은지
장준영
이상필
김지혜
이선
현순미
김효진
Original Assignee
네이버 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 네이버 주식회사 filed Critical 네이버 주식회사
Priority to KR1020220078544A priority Critical patent/KR102632812B1/ko
Publication of KR20240001631A publication Critical patent/KR20240001631A/ko
Application granted granted Critical
Publication of KR102632812B1 publication Critical patent/KR102632812B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/418—External card to be used in combination with the client device, e.g. for conditional access
    • H04N21/4185—External card to be used in combination with the client device, e.g. for conditional access for payment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N2005/2726—Means for inserting a foreground image in a background image, i.e. inlay, outlay for simulating a person's appearance, e.g. hair style, glasses, clothes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Circuits Of Receivers In General (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 라이브 커머스에서, 상품에 대한 정보를 보다 효과적으로 제공하기 위한 라이브 방송 제공 방법 및 시스템에 관한 것이다. 본 발명에 따른 라이브 방송 제공 방법은, 라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 단계, 상기 수신에 근거하여, 사용자 단말기의 디스플레이부 상에 상기 방송 영상을 제공하는 단계, 상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하는 단계, 상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 단계를 포함할 수 있다.

Description

라이브 방송 제공 방법 및 시스템{METHOD AND SYSTEM FOR PROVIDING LIVE BROADCASTING}
본 발명은 라이브 커머스에서, 상품에 대한 정보를 보다 효과적으로 제공하기 위한 라이브 방송 제공 방법 및 시스템에 관한 것이다.
기술이 발전함에 따라, 전자기기(예를 들어, 스마트폰, 태블릿 PC, 자동화 기기 등)의 보급이 대중화되었으며, 이에 따라 일상생활의 많은 부분에서 전자기기에 대한 의존도가 점차적으로 높아지고 있다.
나아가, 전자기기의 대중화는 인터넷을 기반으로 한 서비스의 발전을 촉진시켰으며, 이를 통해, 종래 오프라인에 대한 의존도가 높았던 소비패턴은, 점차적으로 온라인(on-line)으로 옮겨가고 있는 실정이다.
이러한 트렌드의 변화에 맞추어, 상품 판매와 같은 서비스의 특성상 오프라인(off-line)에 기반을 둔 산업 분야 역시, 온라인을 통한 다양한 마케팅을 통하여 고객을 유치하는 것이 보편화되고 있다.
이에, 최근에는, 온라인을 통한 다양한 상품 판매 서비스가 제공되고 있으며, 그 활용도 또한 매우 높아지고 있다. 그러나, 이러한 온라인을 통한 상품 판매 서비스는, 미리 업로드 된 상품 정보만을 제공하는 것으로서, 소비자는 여전히 상품에 대한 다양한 정보를 제공받고 싶어 한다.
이러한 니즈를 해결하고자, 라이브(Live) 방송을 이용한 상품을 판매하는 방법이 도입되고 있다. 실시간 쌍방향 영상을 이용한 온라인 상품 판매 방법(참조특허, 대한민국 공개특허 10-2009-0001838호)은, 온라인 라이브 방송을 이용하여 실시간으로 소비자와 소통함으로써, 소비자가 얻고 싶은 상품 정보를 즉각적으로 제공할 수 있게 되었다.
그러나, 이러한 라이브 방송을 이용한 상품 판매 방법 역시, 소비자가 상품을 직접 사용해볼 수 없다는 아쉬움이 존재한다. 이에, 고객이 소지한 전자기기만으로도, 상품을 테스트할 수 있는 서비스에 대한 니즈가 여전히 존재한다.
본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 라이브 방송을 시청하는 사용자에게 상품에 대한 정보를 보다 효과적으로 제공할 수 있는 사용자 경험을 제공하기 위한 것이다.
더 나아가, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 라이브 방송을 시청하는 사용자가, 라이브 방송을 통해 판매되는 상품을 체험 또는 테스트할 수 있는 서비스를 제공하기 위한 것이다.
특히, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 시청 중이던 라이브 방송을 중단하지 않고도, 라이브 방송을 통해 판매되는 상품을 체험 또는 테스트할 수 있는 서비스를 제공하기 위한 것이다.
나아가, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 라이브 방송을 시청하는 사용자에게, 라이브 방송을 통해 판매되는 상품의 다양한 정보를 다각적으로 제공할 수 있는 서비스를 제공하기 위한 것이다.
나아가, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 라이브 방송을 시청하는 사용자 또는 상품을 체험하는 사용자가 상품을 간편하게 구매할 수 있는 서비스를 제공하기 위한 것이다.
본 발명에 따른 라이브 방송 제공 방법은, 라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 단계, 상기 수신에 근거하여, 사용자 단말기의 디스플레이부 상에 상기 방송 영상을 제공하는 단계, 상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하는 단계, 상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 단계 및 상기 사용자 단말기에서 상기 방송 영상을 수신하고 있는 상태에서, 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 상기 디스플레이부 상에 표시하는 단계를 포함할 수 있다.
나아가, 본 발명에 따른 라이브 방송 제공 시스템은, 통신부, 카메라 및 디스플레이부를 포함하는 사용자 단말과 연동하며, 상기 통신부를 통해, 라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 제어부를 포함할 수 있다.
이러한 시스템의 제어부는, 상기 사용자 단말기의 디스플레이부 상에 상기 방송 영상을 제공하고, 상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하고, 상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하며, 상기 사용자 단말기에서 상기 방송 영상을 수신하고 있는 상태에서, 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 상기 디스플레이부 상에 표시할 수 있다.
나아가, 본 발명에 따른, 전자기기에서 하나 이상의 프로세스에 의하여 실행되며, 컴퓨터로 판독될 수 있는 기록매체에 저장된 프로그램은, 라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 단계, 상기 수신에 근거하여, 사용자 단말기의 디스플레이부 상에 상기 방송 영상을 제공하는 단계, 상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하는 단계, 상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 단계 및 상기 사용자 단말기에서 상기 방송 영상을 수신하고 있는 상태에서, 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 상기 디스플레이부 상에 표시하는 단계를 수행하는 명령어들을 포함하는 것을 특징으로 한다.
본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 증강현실 기능을 활용하여, 사용자가 라이브 방송을 시청하면서, 라이브 방송에서 소개되는 상품을 체험할 수 있는 사용자 경험을 제공할 수 있다.
이와 같은, 본 발명에 따른 라이브 방송 제공 방법 및 시스템에 의하면, 소비자는, 직접 매장을 방문하지 않더라도, 상품에 대한 체험을 할 수 있어, 매장을 방문하는 시간을 절약함은 물론, 상품의 구매를 보다 신중하게 할 수 있다.
나아가, 본 발명에 따른 라이브 방송 제공 방법 및 시스템에 의하면, 판매자는, 소비자들에게 상품을 다양하게 체험할 수 있는 기회를 제공함으로써, 소비자들의 보다 적극적인 상품 구매를 유도할 수 있다. 나아가, 판매자는 직접 매장을 운영하지 않더라도 라이브 방송을 통하여 다양한 소비자를 만나고, 상품을 체험시킴으로써, 매장을 운영하는 운영비를 절약함은 물론, 상품 판매의 기회를 다양하게 가질 수 있다.
한편, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 라이브 방송의 제공, 상품에 대한 체험, 상품에 대한 구매 프로세스 제공을, 라이브 방송이 진행중인 상황에서 일원화하여 제공할 수 있다. 이를 통해, 소비자는 본 발명에 따른 라이브 방송을 시청하는 것 만으로도, 상품에 대한 체험과 구매를 보다 편리하게 수행할 수 있다.
도 1은 본 발명에 따른 라이브 방송을 설명하기 위한 개념도이다.
도 2는 본 발명에 따른 라이브 방송 제공 시스템을 설명하기 위한 개념도이다.
도 3은 본 발명에 따른 라이브 방송 제공 방법을 설명하기 위한 흐름도이다.
도 4a 및 도 4b는 본 발명에 따른 라이브 방송 제공 방법에서, 증강 현실 기능의 활성화를 설명하기 위한 개념도이다.
도 5는 본 발명에 따른 라이브 방송을 통해 제공되는 방송 영상을 설명하기 위한 개념도이다.
도 6은 본 발명에서 증강 현실 기능을 통해 제공되는 카메라 영상을 설명하기 위한 개념도이다.
도 7은 본 발명에 따른 DB를 설명하기 위한 개념도이다.
도 8, 도 9 및 도 10은 본 발명에서 판매자 단말기에 제공되는 사용자 환경을 설명하기 위한 개념도들이다.
도 11 및 도 12는 본 발명에서 추가 아이템 정보를 제공하는 방법을 설명하기 위한 개념도들이다.
도 13 내지 도 15는 본 발명과 관련된 증강 현실 서비스를 설명하기 위한 개념도들이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소에는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명은, 라이브 방송을 제공하는 방법에 관한 것으로, 특히, 라이브(Live) 방송의 제공과 함께 증강 현실 서비스를 제공함으로써, 사용자가 라이브 방송을 시청함과 동시에 라이브 방송에서 판매하는 상품(商品)을 체험(경험) 또는 테스트(Test) 할 수 있는 서비스를 제공하는 것이다.
여기에서, 라이브 방송은, 온라인(On-line) 상에서 소비자와 실시간으로 소통하면서 상품을 소개하는 스트리밍(streaming) 방송으로, 스트리밍 방송, 라이브 커머스(Live Commerce), 쇼핑 라이브(Shopping Live) 로도 명명될 수 있다.
여기에서 증강 현실(Augmented Reality)이란, 현실의 이미지나 배경에 가상 이미지를 겹쳐서 하나의 영상으로 보여주는 기술로, 현실의 이미지에 가상의 이미지를 겹치는 방식으로 영상을 합성하거나, 현실의 이미지의 적어도 일부를 변형하는 것을 의미할 수 있다. 여기에서, 현실의 이미지는 사용자 단말기에 구비된 카메라를 통해 수신되는 카메라 영상을 의미할 수 있다.
본 발명에서는, 카메라 영상(20)에 아이템(특정 아이템) 또는 상품과 관련된 정보를 합성하거나, 아이템(특정 아이템) 또는 상품과 관련된 정보를 반영하기 위하여 카메라 영상(20)의 적어도 일부를 변경하는 것을 통해, 증강 현실 그래픽 처리를 수행할 수 있다.
본 발명에서는, 사용자 단말기에서 라이브 방송의 방송 영상이 제공되고 있는 상태에서, 카메라로부터 수신된 카메라 영상에, 라이브 방송에서 판매하는 상품과 관련된 증강 현실 그래픽 처리를 수행하여, 증강 현실 그래픽 처리된 카메라 영상을 제공함으로써, 라이브 방송 시청과 상품 체험(테스트)이 동시에 가능한 라이브 방송 제공 방법을 제공할 수 있다.
여기에서, “카메라 영상(20)”은, 카메라를 통해 촬영된 사진(또는 이미지), 동영상 및 프리뷰(preview) 화면 중 적어도 하나를 포함할 수 있다. 즉, 본 발명에서는 카메라를 통해 수신된 사진(또는 이미지), 동영상 및 프리뷰 화면 중 적어도 하나에 증강 현실 그래픽 처리를 수행할 수 있다. 다만, 이하에서는 이들을 구분하지 않고 모두 카메라 영상(20)으로 표현하여 설명하도록 한다. 도 1은 본 발명에 따른 라이브 방송을 설명하기 위한 개념도이다.
도 1에 도시된 것과 같이, 본 발명에 따른 라이브 방송 제공 시스템(100)은, 사용자 단말기(200)의 디스플레이부 상에 라이브 방송의 방송 영상(10)을 제공할 수 있다.
이러한 라이브 방송의 방송 영상(10)은, 상품 판매와 관련된 판매자(또는 판매자에 해당하는 사용자) 측의 사용자 단말기를 통해 촬영되어, 상품 구매와 관련된 소비자(또는 소비자에 해당하는 사용자) 측의 사용자 단말기에 제공(또는 출력)될 수 있다.
본 발명에서는 용어의 혼동을 피하기 위하여, 상품 판매와 관련된 사용자를 “판매자” 또는 “(라이브 방송)진행자”로 명명하고, 판매자 측에서 사용되는 사용자 단말기를, “판매자 단말기(또는 판매자 측 단말기)”, “진행자 단말기”, “라이브 방송 진행 단말기”, “라이브 커머스 진행 단말기”, “판매 관련 단말기” 등으로 명명할 수 있다.
또한, 상품 구매와 관련된 사용자를 “소비자”, “구매자” 또는 “시청자”로 명명하고, 소비자 측에서 사용되는 사용자 단말기를, “소비자 단말기(또는 소비자 측 단말기)”, “구매자 단말기”, “시청자 단말기” 등으로 명명할 수 있다.
계속해서 도 1에 도시된 것과 같이, 방송 영상(10)은, 상기 방송 영상(10) 과 연계된 다양한 연관 정보 및 연관 그래픽 객체(11a 내지 11f)와 함께 사용자 단말기(200)의 디스플레이부 상에 제공(또는 출력)될 수 있다.
본 발명에서, 방송 영상(10)과 연관 정보 및 연관 그래픽 객체(11a 내지 11f)가 함께 제공(또는 출력)된다는 것은, 방송 영상(10)의 적어도 일 영역에 연관 정보 및 연관 그래픽 객체(11a 내지 11f)가 오버랩(overlap) 또는 중첩되어 제공(또는 출력)되는 것으로 이해될 수 있다.
방송 영상(10)에 오버랩되는 연관 정보 및 연관 그래픽 객체(11a 내지 11f)는, i) 판매자에 의해 미리 입력된 정보(ex: 라이브 방송 타이틀(title) 정보(11a), 상품 정보(11b), 증강 현실 서비스를 위한 증강 현실 기능 아이콘(또는 그래픽 객체, 11c), ii) 라이브 방송과 관련된 다양한 아이콘(11d, 11e), ii) 판매자 및 소비자(또는 복수의 소비자) 중 적어도 하나에 의해 입력된 채팅(Chatting) 정보(11f) 중 적어도 하나를 포함할 수 있다.
한편, 본 발명에 따른, 라이브 방송 제공 방법은, 애플리케이션(application) 또는 소프트웨어(software)의 형태로 구현되는 시스템에 의하여 일련의 과정이 수행될 수 있다(이하에서는, 애플리케이션과 소프트웨어의 용어를 구분하지 않고, 통일하여 애플리케이션이라고 명명한다). 즉, 본 발명에 따른, 라이브 방송 제공 시스템(100)은, “라이브 방송 제공 애플리케이션”, “라이브 커머스 애플리케이션”, “쇼핑 라이브(Shopping Live) 애플리케이션” 이라고도 명명될 수 있다.
이하에서는, 첨부된 도면과 함께, 본발명에 따른 라이브 방송 제공 시스템에 대하여, 보다 구체적으로 살펴본다. 도 2는 본 발명에 따른 라이브 방송 제공 시스템을 설명하기 위한 개념도이다.
도 2에 도시된 것과 같이, 본 발명에 따른 라이브 방송 제공 시스템(100)은, 라이브 방송 서버(300)로부터 방송 영상을 수신하고, 이를 사용자 단말기(200) 상에 제공할 수 있다. 나아가, 라이브 방송 영상은, 판매자 단말기에서 다이렉트로 사용자 단말기(200)로 제공되는 것 또한 가능하다.
라이브 방송 서버(300)는, 라이브 방송 스트리밍(streaming) 서비스를 제공하는 서버로, 특정 사용자 단말기로부터 방송 영상을 수신하고, 수신한 방송 영상을 본 발명에 따른 라이브 방송 시스템(100)에 제공할 수 있다.
특히, 본 발명에 따른 라이브 방송 서버(300)는, 쇼핑 서비스와 연계되어 라이브 방송 스트리밍 서비스를 제공할 수 있다. 이 경우, 특정 사용자 단말기는 판매자 단말기에 해당하고, 라이브 방송 제공 시스템(100)은, 소비자 단말기에서 구현되는 라이브 방송 제공 애플리케이션일 수 있다.
이에, 본 발명에 따른 라이브 방송 서버(300)는, “서버”, “방송 서버”, “라이브 서버”, “라이브 커머스 서버”, “커머스 서버” 등으로 혼용되어 명명될 수 있다.
나아가, 라이브 방송 서버(300)는, 방송 영상과 관련된 i) 방송 정보, ii) 아이템 정보, iii) 채팅 정보 및 vi) 기능 아이콘(또는 그래픽 객체) 중 적어도 하나를 본 발명에 라이브 방송 제공 시스템(100)에 제공할 수 있다.
여기에서, 아이템 정보는 아이템에 대한 정보로서, 아이템은, 라이브 밧오을 통해 판매 또는 광고(홍보)의 대상이 되는 상품을 의미할 수 있다.
방송 정보는, 특정 방송 영상과 관련된 다양한 정보일 수 있다. 예를 들어, 방송 정보는, 특정 방송 영상의 타이틀(title) 정보(ex: “월간선물샵 8회: 블랙프라이데이 특집”), 진행자 정보(“바비 코스메틱”), 시청자 정보(ex: “331,425 시청중”), 방송 타입 정보(ex: 라이브) 등을 포함할 수 있다.
아이템 정보는, 특정 방송과 연계된 적어도 하나의 아이템과 관련된 다양한 정보일 수 있다. 예를 들어, 아이템 정보는, 특정 방송 영상의 라이브 방송에서 판매 또는 소개하는 아이템의 썸네일 이미지, 아이템 명칭 정보, 아이템의 상세 정보, 아이템 가격 정보 등을 포함할 수 있다.
채팅 정보는, 판매자 단말기 및 다수의 소비자 단말기에 의해, 특정 방송 영상의 라이브 방송과 실시간으로 교환되는 메시지로 이해될 수 있다.
기능 아이콘(또는 그래픽 객체)는, 특정 방송 영상 및 쇼핑 서비스와 관련된 다양한 기능과 연계된 아이콘(그래픽 객체)일 수 있다.
상기 방송 정보, 아이템 정보, 채팅 정보 및 기능 아이콘(또는 그래픽 객체)는, 특정 방송 영상과 관련된 판매자 단말기로부터 수신된 정보 및 라이브 방송 서버(300)의 저장된 정보 중 적어도 하나에 근거하여, 본 발명에 따른 라이브 제공 시스템(100)에 제공될 수 있다.
라이브 방송 서버(300)에 저장된 정보는, 라이브 방송 서버(300)의 관리자에 의해 입력된 정보일 수 있다.
이처럼, 본 발명에 따른 라이브 방송 서버(300)는, 쇼핑 서비스와 연계된 라이브 방송 스트리밍 서비스를 제공하기 위하여, 라이브 방송의 방송 영상과 관련된 다양한 정보를 함께 제공할 수 있다.
한편, 본 발명에 라이브 방송 제공 시스템(100)은, 도 2에 도시된 것과 같이, 애플리케이션의 형태로 사용자 단말기(200)에 설치되어, 라이브 방송의 방송 영상과 함께 증강 현실 서비스를 제공하는 과정을 수행할 수 있다. 이러한, 애플리케이션은, 사용자 단말기(200)상에서의 사용자의 요청에 의하여 사용자 단말기(200) 상에 설치될 수 있으며, 또는 사용자 단말기(200) 출고 당시, 사용자 단말기(200)에 설치되어 존재할 수 있다. 이와 같은, 라이브 방송 제공 시스템을 구현하는 애플리케이션은, 데이터 통신을 통하여, 외부 데이터(data) 저장소(또는 외부 서버(server))로부터 다운로드(download)되어, 사용자 단말기(200) 상에 설치될 수 있다. 그리고, 사용자 단말기(200) 상에서, 본 발명에 따른 라이브 방송 제공 시스템이 구현된 애플리케이션이 실행되는 경우, 라이브 방송의 방송 영상과 함께 증강 현실 서비스를 제공하기 위한 일련의 과정이 진행될 수 있다.
본 발명에서 언급되는 사용자 단말기(200)는, 본 발명에 따른 라이브 방송 제공 시스템(100)이 동작가능한 전자기기이면 되며, 그 종류에 특별한 제한을 두지 않는다. 예를 들어, 사용자 단말기(200)는, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 휴대용 컴퓨터(laptop computer), 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook), 데스크톱 컴퓨터(desktop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 웨어러블 디바이스(wearable device, 예를 들어, 워치형 단말기 (smartwatch), 글래스형 단말기 (smart glass), HMD(head mounted display)) 등이 포함될 수 있다.
한편, 이와 같이, 애플리케이션의 형태로 구현될 수 있는 본 발명에 따른 라이브 방송 제공 시스템(100)은, 통신부(110), 저장부(120) 및 제어부(130) 중 적어도 하나를 포함할 수 있다. 위의 구성요소들은, 소프트웨어적인 구성요소로서, 사용자 단말기(200)의 하드웨어적인 구성요소와 연동하여 기능을 수행할 수 있다.
예를 들어, 통신부(110)는, 사용자 단말기(200)에 구비된 통신 모듈(예를 들어, 이동통신 모듈, 근거리 통신 모듈, 무선 인터넷 모듈, 위치정보 모듈, 방송 수신 모듈 등)의 구성을 이용하여, 본 발명과 관련된 정보(또는 데이터)를 적어도 하나의 외부기기(또는 라이브 방송 서버, 100 a)와 송수신 하는 역할을 수행할 수 있다.
또한, 저장부(120)는 사용자 단말기(200)에 구비된 메모리 및 외부 저장소(또는 외부 서버,100a) 중 적어도 하나를 이용하여, 라이브 방송 제공 및 증강 현실 서비스 제공과 관련된 정보를 저장하거나, 시스템과 관련된 정보, 또는 명령들을 저장할 수 있다.
본 발명에서 저장부(120)에 “저장된다”고 함은, 물리적으로는, 사용자 단말기(200)의 메모리 또는 외부 저장소(또는 외부 서버, 100a)에 정보가 저장됨을 의미할 수 있다.
한편, 본 발명에 대응되는 애플리케이션이 사용자 단말기(200)에서 삭제되는 경우, 저장부(120)에 저장된 정보 또한, 사용자 단말기(200)에서 삭제될 수 있다. 또한, 외부 저장소(100a)는, 클라우드(cloud) 방식의 저장소일 수 있다.
본 발명에서는 사용자 단말기(200)의 메모리와 외부 저장소(또는 외부 서버, 100a)를 구분하지 않고, 모두 저장부(120)를 표현하여 설명하도록 한다.
한편, 제어부(130)는 사용자 단말기(200)에 구비된 CPU(Central Processing Unit)를 이용하여, 본 발명을 수행하기 위한 전반적인 제어를 수행할 수 있다. 위에서 살펴본 구성요소들은 제어부(130)의 제어 하에 동작할 수 있으며, 제어부(130)는 사용자 단말기(200)의 물리적인 구성요소들에 대한 제어를 수행할 수 있음은 물론이다.
예를 들어, 제어부(130)는, 사용자 단말기(200)에 구비된 디스플레이부(210)를 통해 라이브 방송의 방송 영상이 출력되도록 제어를 수행할 수 있다. 또한, 제어부(130)는, 사용자 단말기(200)에 구비된 카메라(220)를 통해, 영상 또는 사진(또는 이미지, image)의 촬영을 제어를 수행할 수 있다. 또한, 제어부(130)는, 사용자 단말기(200)의 입력부(미도시)를 통해 사용자로부터 정보를 입력 받을 수 있다.
사용자 단말기(200)에 구비된 디스플레이부(210), 카메라(220) 및 입력부(미도시)의 그 종류에는 특별한 제한이 없다. 예를 들어, 입력부(미도시)는 기계식 (mechanical) 입력수단(또는, 메커니컬 키, 예를 들어, 마우스(mouse), 조이스틱(joy stic), 물리적인 버튼, 돔 스위치 (dome switch), 조그 휠, 조그 스위치 등) 및 터치식 입력수단 중 적어도 하나를 포함할 수 있다. 일 예로서, 터치식 입력수단은, 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키(virtual key), 소프트 키(soft key) 또는 비주얼 키(visual key)로 이루어지거나, 터치스크린 이외의 부분에 배치되는 터치 키(touch key)로 이루어질 수 있다.
한편, 상기 가상키 또는 비주얼 키는, 다양한 형태를 가지면서 터치스크린 상에 표시되는 것이 가능하며, 예를 들어, 그래픽(graphic), 텍스트(text), 아이콘(icon), 비디오(video) 또는 이들의 조합으로 이루어질 수 있다. 이때, 입력부(미도시)가 터치 스크린을 포함하는 경우, 사용자 단말기(200)의 디스플레이부(110)는 터치 스크린으로 이루어 질 수 있으며, 정보를 출력하는 역할과, 정보를 입력받는 역할을 모두 수행할 수 있다.
나아가, 제어부(130)는, 사용자 단말기의 디스플레이부(210)를 통해 라이브 방송의 방송 영상을 제공하고 있는 상태에서, 사용자로부터 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신할 수 있다. 사용자의 증강 현실 기능에 대한 활성화 요청에 응답하여, 제어부(130)는 사용자 단말기에 구비된 카메라(220)로부터 수신되는 카메라 영상(20)에 대해, 라이브 방송에 연계된 아이템과 관련된 그래픽 처리를 수행할 수 있다. 그리고, 제어부(130)는, 방송 영상과 함께 증강 현실 그래픽 처리가 수행된 카메라 영상(20)을 사용자 단말기의 디스플레이부(210)에 표시할 수 있다. 이를 통해, 사용자는 라이브 방송의 방송 영상을 시청하면서, 동시에 라이브 방송에서 판매하는 아이템을 체험(또는 경험, 테스트)할 수 있다. 이하에서는, 사용자가 라이브 방송의 방송 영상을 시청하면서, 라이브 방송에 연계된 아이템을 체험 또는 테스트할 수 있도록, 본 발명에 따른 라이브 방송 제공 시스템(100a)에서, 라이브 방송 서비스 및 증강 현실 서비스를 동시에 제공하는 방법에 대해 보다 구체적으로 설명하도록 한다.
도 3은 본 발명에 따른 라이브 방송 제공 방법을 설명하기 위한 흐름도이고, 도 4a및 도 4b는 본 발명에 따른 라이브 방송 제공 방법에서, 증강 현실 기능의 활성화를 설명하기 위한 개념도이다. 나아가, 도 5는 본 발명에 따른 라이브 방송을 통해 제공되는 방송 영상을 설명하기 위한 개념도이며, 도 6은 본 발명에서 증강 현실 기능을 통해 제공되는 카메라 영상을 설명하기 위한 개념도이다.
나아가, 도 7은 본 발명에 따른 상품 DB를 설명하기 위한 개념도이고, 도 8, 도 9 및 도 10은 본 발명에서 판매자 단말기에 제공되는 사용자 환경을 설명하기 위한 개념도들이다. 도 11 및 도 12는 본 발명에서 추가 아이템 정보를 제공하는 방법을 설명하기 위한 개념도들이고, 도 13 내지 도 15는 본 발명과 관련된 증강 현실 서비스를 설명하기 위한 개념도들이다.
본 발명에 따른 라이브 방송 제공 방법에서는, 라이브 방송 서버(300)로부터, 라이브 방송의 방송 영상을 수신하는 과정이 진행될 수 있다(S310, 도 3 참조).
라이브 방송의 방송 영상의 수신은, 사용자 단말기(200)에서 이루어질 수 있다.
앞서 설명한 것과 같이, 라이브 방송 서버(300)는, 판매자 단말기로부터 라이브 방송의 방송 영상을 수신하고, 이를 본 발명에 따른 라이브 방송 제공 시스템(100)에 제공할 수 있다.
통신부(110)는, 라이브 방송 제공 서버(300)에서 실시간으로 진행하는 라이브 방송의 방송 영상을, 라이브 방송 제공 서버(300)로부터 스트리밍(Streaming) 기법으로 수신할 수 있다.
즉, 제어부(130)는, 통신부(110)가 라이브 방송이 진행되는 동안에, 방송 영상을 계속해서 수신하도록 통신부(110)를 제어할 수 있다.
다음으로, 본 발명에 따른 라이브 방송 제공 방법에서는, 라이브 방송 서버(300)로부터 방송 영상을 수신한 것에 근거하여, 사용자 단말기(200)의 디스플레이부(210) 상에 수신한 방송 영상(10)을 제공할 수 있다(S320, 도 3 참조).
도 4a의 (a)에 도시된 것과 같이, 제어부(130)는, 수신한 방송 영상(10)이 사용자 단말기(200)의 디스플레이부를 통해 제공(재생 또는 출력 또는 표시)되도록, 디스플레이부(210)를 제어할 수 있다.
이와 같이, 제어부(130)는 방송 영상(10)이 사용자 단말기(200)의 디스플레이부를 통해 제공(재생 또는 출력 또는 표시)되도록, 사용자 단말기(200)의 디스플레이부를 제어하는 제1 데이터 처리를 수행할 수 있다. 이러한 제1 데이터 처리는, 후술하는 증강 현실 서비스와 관련된 제2 데이터 처리와 동시에 수행될 수 있다.
한편, 디스플레이부에서 제공되는 방송 영상(10)는 사용자가 선택한 방송 채널에 해당하는 방송 영상(10)일 수 있다.
다음으로, 본 발명에 따른 라이브 방송 제공 방법에서는, 사용자 단말기(200)의 디스플레이부 상에 방송 영상(10)이 제공되고 있는 상태에서, 사용자 단말기(200)로부터 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하는 과정이 진행될 수 있다(S330, 도 3 참조).
증강 현실 기능에 대한 활성화 요청은, 앞서 살펴본 것과 같이, 사용자 단말기(200)로부터 아이콘(410)이 선택되는 것에 근거하여 수신될 수 있다.
상기 아이콘(410)이 선택되면, 제어부(130)는, 방송 영상의 라이브 방송에서 판매하는 아이템과 연계된 증강 현실 기능에 대한 활성화 기능 요청이 있는 것으로 판단할 수 있다.
도 4a의 (a)에 도시된 것과 같이, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에 방송 영상(10)이 제공되고 있는 상태에서, 디스플레이부의 일 영역에, 증강 현실 기능에 링크된 아이콘(410)이 표시되도록 제어할 수 있다.
제어부(130)는, 실시간으로 재생되는 방송 영상(10) 상에, 증강 현실 기능에 링크된 아이콘(410)이 오버랩(overlab)되어 표시되도록, 사용자 단말기(200)의 디스플레이부를 제어할 수 있다.
상기 아이콘(410)은, 상기 아이콘(410)과 함께 제공되는 방송 영상의 라이브 방송에서 판매(또는 소개)하는 아이템에 연계된 증강 현실 기능에 링크되어 있을 수 있다.
상기 아이콘(410)이 선택되면, 사용자 단말기에는, 현재 방송 영상에서 소개되고 있는 아이템에 대한 증강 현실 기능이 제공될 수 있다.
본 발명에서, 증강 현실 기능은, 방송 영상에서 소개되고 있는 아이템에 따라, 해당 아이템에 연계되는 증강 현실 기능을 제공할 수 있다.
일 예로, 라이브 방송에서 제1 아이템(ex: “립스틱”)을 판매하는 경우, 방송 영상에는 제1 아이템의 아이템 정보(또는 상품 정보)가 제공될 수 있고, 이 경우, 제1 아이템을 판매하는 라이브 방송의 방송 영상과 함께 표시되는 아이콘(410)에는, 제1 아이템에 연계된 증강 현실 기능이 링크되어 있을 수 있다.
방송 영상에서 소개되고 있는 아이템의 특정은, 도 4a에 도시된 것과 같이, 방송 영상(10)과 함께 표시되고 있는 아이템 정보(430)에 근거하여 이루어질 수 있다.
즉, 제어부(130)는 방송 영상(10)에서 제공되는 아이템 정보(430)에 따라, 아이템 정보(430)에 대응되는 증강 현실 기능을 제공할 수 있다.예를 들어, 라이브 방송에서 제2 아이템(ex: “파운데이션”)을 판매하는 경우, 제1 아이템의 아이템 정보(또는 상품 정보)가 제공될 수 있고, 이 경우 제2 아이템을 판매하는 라이브 방송의 방송 영상(10)과 함께 표시되는 아이콘(410)에는, 제2 아이템에 연계된 증강 현실 기능이 링크되어 있을 수 있다.
한편, 방송 영상(10)에는 상기 아이템 정보(430)가 제공되는 영역이 특정되어 존재하며, 상기 아이템 정보(430)가 제공되기로 특정된 특정 영역에, 어느 아이템에 대한 아이템 정보가 제공되었는지에 따라, 서로 다른 증강 현실 그래픽 처리를 수행할 수 있다. 이와 같이, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에 제공되는 방송 영상(10)이, 제1 아이템을 판매하는 방송 영상에서 제2 아이템을 판매하는 방송 영상을 변경되는 것에 근거하여, 사용자 단말기(200)의 디스플레이부 상의 아이콘(410)이 선택되었을 때, 제2 아이템에 연계된 증강 현실 그래픽 처리를 수행할 수 있다.
즉, 제어부(130)는 제1 아이템을 판매하는 방송 영상이 출력되고 있는 동안에 상기 아이콘(410)이 선택된 경우, 카메라 영상(20)에 대해 제1 아이템에 연계된 증강 현실 그래픽 처리를 수행하고, 제어부(130)는 제2 아이템을 판매하는 방송 영상이 출력되고 있는 동안에 상기 아이콘(410)이 선택된 경우, 카메라 영상(20)에 대해 제2 아이템에 연계된 증강 현실 그래픽 처리를 수행할 수 있다.
한편, 방송 영상에서 어느 아이템에 대한 방송 영상을 출력하고 있는지에 대한 특정은, 방송 영상에 함께 제공되는 아이템 정보가, 어느 아이템에 대한 것인지에 근거하여 결정될 수 있다.
즉, 앞서 설명한 것과 같이, 아이템 정보가 출력되는 특정 영역에, 어느 아이템에 대한 아이템 정보가 출력되었는지에 따라, 제어부(130)는 카메라 영상에 대해, 상기 특정 영역에서 출력되고 있는 아이템 정보에 대응되는 증강 현실 그래픽 처리를 수행할 수 있다.
한편, 특정 영역에서 출력되고 있는 아이템 정보(430)에 따른 아이템에, 증강 현실 기능이 연계되어 있지 않은 경우, 증강 현실 기능을 활성화하기 위한 상기 아이콘(410)은 출력되지 않을 수 있다.
즉, 본 발명에서는, 아이템 마다 증강 현실 기능의 적용 여부가 다를 수 있으며, 제어부(130)는 증강 현실 기능이 연계된 아이템이 방송 영상에서 소개되고 있는 경우에 한하여, 증강 현실 기능 아이콘을 방송 영상에 제공할 수 있다.
이하에서 설명되는 “증강 현실 기능에 대한 활성화 요청”은, 사용자 단말기(200)의 디스플레이부를 통해 제공되는 방송 영상의 라이브 방송에서 판매하는 상품과 관련된 증강 현실 기능에 대한 활성화 요청으로 이해될 수 있다.
또한, 이하에서 설명되는 “증강 현실 기능”은, 사용자 단말기(200)의 디스플레이부를 통해 제공되는 방송 영상의 라이브 방송에서 판매하는 상품과 관련된 증강 현실 기능으로 이해될 수 있다.
한편, 본 발명에 따른 라이브 방송 제공 시스템(100)은, 웹 정보를 화면에 표시하는 소프트웨어(ex: 웹 브라우저(wep-browser), 모바일 브라우저(mobile browser))를 통해, 라이브 방송 서버(300)에서 수신한 방송 영상(10)을 사용자 단말기(200)의 디스플레이부에 제공할 수 있다.
제어부(130)는, 웹 정보를 화면에 표시하는 소프트웨어를 통해 사용자 단말기 (200)의 디스플레이부 상에 방송 영상(10)이 표시되고 있는 상태에서, 사용자 단말기 (200)로부터 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신할 수 있다.
이 경우, 도 4b의 (a)에 도시된 것과 같이, 제어부(130)는, 증강 현실 기능에 대한 활성화 요청을 수신한 것에 근거하여, 증강 현실 기능을 제공하는 애플리케이션 또는 소프트웨어(이하, 증강 현실 애플리케이션)의 실행을 안내하는 안내 문구(ex: “AR 메이크업 미리보기를 위해 쇼핑 라이브 앱으로 이동하시겠습니까?”)를 포함하는 팝업 윈도(Pop up Window)를 사용자 단말(200)의 디스플레이부 상에 표시할 수 있다.
제어부(130)는, 상기 안내 문구(440)가 사용자 단말(200)에 표시되고 있는 상태에서, 사용자 단말기(200)로부터 증강 현실 기능 애플리케이션 실행 요청을 수신하는 것에 근거하여, 증강 현실 기능 애플리케이션을 실행할 수 있다.
또한, 제어부(130)는, 사용자 단말기(200)에 상기 증강 현실 기능 애플리케이션이 설치되어 있지 않는 경우, 상기 증강 현실 기능 애플리케이션의 설치를 유도하기 위하여, 상기 증강 현실 애플리케이션을 설치와 관련된 페이지를 사용자 단말기(200) 상에 제공할 수 있다.
다음으로, 본 발명에 따른 라이브 방송 제공 방법에서는, 증강 현실 기능에 대한 활성화 요청에 응답하여, 사용자 단말기(200)에 구비된 카메라로부터 수신되는 카메라 영상(20)에 대해, 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 과정이 진행될 수 있다(S340, 도 3 참조).
제어부(130)는, 증강 현실 기능에 대한 활성화 요청이 있는 경우에도, 방송 영상을 제공과 관련된 제1 데이터 처리를 계속적으로 수행하면서, 증강 현실 서비스 제공과 관련된 제2 데이터 처리를 수행할 수 있다.
여기에서, 증강 현실 서비스 제공과 관련된 제2 데이터 처리는, 사용자 단말기(200)에 카메라를 활성화하고, 활성화된 카메라로부터 수신한 카메라 영상(20)에 대해 증강 현실 그래픽 처리를 수행하는 것으로 이해될 수 있다.
이때, 제어부(130)는 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한에 근거하여, 사용자 단말기(200)에 구비된 카메라에 대한 접근을 수행할 수 있다.
제어부(130)는, 사용자 단말기(200)에 구비된 카메라의 활성화와 관련된 제어를 수행할 수 있다. 제어부(130)는 카메라 활성화와 관련된 제어를 수행하기 위하여, 본 발명에 따른 라이브 제공 시스템(100)에서 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한을 확인할 수 있다.
확인 결과, 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한이 존재하지 않는 경우, 제어부(130)는 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한을 획득하기 위하여, 도 4b의 (b)에 도시된 것과 같이, 사용자 단말기(200)의 디스플레이부의 일 영역 상에 접근 권한 획득과 관련된 정보를 출력할 수 있다. 예를 들어, 제어부(130)는 접근 권한 획득과 관련된 팝업(pop up) 또는 모달 윈도(또는 모들 윈도, Modal Window)를 출력할 수 있다.
상기 팝업(pop up) 또는 모달 윈도(Modal Window)에는, 접근 권한 획득과 관련된 안내 문구(ex: ”실시간 가상 메이크업 미리보기 촬영 기능을 이용하시려면 카메라 접근 허용이 필요합니다”)를 포함할 수 있다.
제어부(130)는 상기 팝업(pop up) 또는 모달 윈도(Modal Window)의 일 영역에 대한 사용자 입력에 근거하여, 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한을 획득할 수 있다.
이러한, 팝업(pop up) 또는 모달 윈도(Modal Window)는, 증강 현실 기능에 대한 최초의 활성화 요청이 있는 경우에 한하여 최초 1회만 노출될 수 있다.
제어부(130)는 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한을 1회 획득한 이후에는, 증강 현실 기능에 대한 활성화 요청이 있더라도, 상기 팝업(pop up) 또는 모들 윈도(Modal Window)가 사용자 단말기(200)의 디스플레이부 상에 출력되지 않도록 제어할 수 있다.
한편, 확인 결과, 사용자 단말기(200)에 구비된 카메라에 대한 접근 권한이 존재하는 경우, 제어부(130)는 사용자 단말기(200)에 구비된 카메라가 활성화되도록 제어할 수 있다. 즉, 제어부(130)는 사용자 단말기(200)에 구비된 카메라를 실행시킬 수 있다.
이 경우, 제어부(130)는, 사용자 단말기(200)의 전면에 구비된 제1 타입의 카메라 및 후면에 구비된 제2 타입의 카메라 중 어느 하나의 타입의 카메라가 활성화되도록 제어할 수 있다. 예를 들어, 제어부(130)는 제1 타입의 카메라가 제2 타입의 카메라보다 우선하여 활성화되도록 사용자 단말기(200)를 제어할 수 있다.
제어부(130)는 증강 현실 기능에 대한 활성화 요청에 근거하여, 사용자 단말기(200)의 전면에 구비된 제1 타입의 카메라가 활성화되는 것을 기본 값(또는 디폴트(Default value)으로 설정할 수 있다.
이와 같이, 제어부(130)는 증강 현실 기능에 대한 활성화 요청에 근거하여, 사용자 단말기(200)의 카메라로부터 카메라 영상이 수신되도록, 상기 증강 현실 기능의 활성화에 연동하여 상기 사용자 단말기의 카메라가 활성화할 수 있다.
나아가, 제어부(130)는, 활성화된 사용자 단말기(200)의 카메라로부터 카메라 영상(20)을 수신할 수 있다.
여기에서, “카메라 영상(20)”은, 카메라를 통해 촬영된 사진(또는 이미지), 동영상 및 프리뷰(preview) 화면 중 적어도 하나를 포함할 수 있다. 즉, 본 발명에서는 카메라를 통해 수신된 사진(또는 이미지), 동영상 및 프리뷰 화면 중 적어도 하나에 증강 현실 그래픽 처리를 수행할 수 있다. 다만, 이하에서는 이들을 구분하지 않고 모두 카메라 영상(20)으로 표현하여 설명하도록 한다.
제어부(130)는, 사용자 단말기(200)에 구비된 카메라로부터 카메라 영상(20)이 수신되는 것에 근거하여, 카메라 영상(20)에 증강 현실 그래픽 처리를 수행할 수 있다.
본 발명에서, 그래픽 처리를 수행한다고 함은, 라이브 방송에서 판매하는 아이템에 매칭되어 존재하는 상품 정보에 근거하여, 카메라 영상(20)의 적어도 일부분에 대한 시각적인 변형 또는 카메라 영상(20)에 시각적인 정보를 합성하는 것을 의미할 수 있다.
도 7에 도시된 것과 같이, 기 특정된 DB(database)에는, 특정 라이브 방송(700)과 연계된 아이템 각각 마다의 상품 정보(또는 아이템 정보, 621, 622)를 포함하는 맵핑 정보(720)가 존재할 수 있다. 이러한 맵핑 정보(720)에 포함된 특정 아이템(ex: 제1 아이템)의 상품 정보(621)에는, 상기 특정 아이템과 관련된 증강 현실 기능에서 수행되는 그래픽 처리에 대한 그래픽 정보(721c)가 포함되어 있을 수 있다. 특정 아이템(ex: 제1 아이템)의 그래픽 정보(621c)에는, 카메라 영상(20)에서 시각적 변형이 이루어져야 하는 피사체의 일 부분을 특정하는 “피사체 정보”가 포함될 수 있다. 이러한 피사체 정보는, 아이템의 종류에 근거하여 설정되어질 수 있다.
일 예로, 아이템이 입술(lip) 메이크업(makeup)에 대한 상품인 경우, 피사체 정보에는, 사용자 얼굴 중 입술 부분을 특정하는 정보를 포함하고, 아이템이 눈(eye) 메이크업에 대한 상품인 경우, 피사체 정보는, 사용자 얼굴 중 눈 부분을 특정하는 정보를 포함할 수 있다.
다른 예로, 아이템이 귀(ear) 액세서리(accessory)에 대한 상품인 경우, 피사체 정보에는 사용자 얼굴 중 귀 부분을 특정하는 정보를 포함하고, 아이템이 손(hand) 액세서리에 대한 상품인 경우, 피사체 정보에는 사용자 신체 중 손 부분을 특정하는 정보를 포함할 수 있다.
또 다른 예로, 아이템이 상의(上衣, 신체의 상반부에 착용하는 의복)에 대한 상품인 경우, 피사체 정보에는, 사용자 신체 중 상반부(또는 상체) 부분을 특정하는 정보를 포함하고, 아이템이 하의(下衣, 신체의 하반부에 착용하는 의복)에 대한 상품인 경우, 피사체 정보에는, 사용자 신체 중 하반부(또는 하체) 부분을 특정하는 정보를 포함할 수 있다.
제어부(130)는 피사체 정보를 이용하여, 카메라 영상에서, 피사체 정보에 대응되는 부분을 특정하고, 특정된 부분을 중심으로 증강 현실 그래픽 처리를 수행할 수 있다.
한편, 관련된 증강 현실 기능에서 수행되는 그래픽 처리에 대한 그래픽 정보에는 피사체 정보가 포함되지 않는 것 또한 가능하다. 이 경우, 제어부(130)는 이미지 인식 기술을 이용하여, 카메라 영상에서 피사체를 인식하고, 인식된 피사체에서 아이템의 종류에 근거하여, 증강 현실 그래픽 처리의 대상이 되는 부분을 특정할 수 있다. 이 경우, 제어부(130)는 인공지능 기술을 기반으로, 아이템의 종류에 대응되는 부분을 카메라 영상에서 특정할 수 있다.
나아가, 특정 아이템(ex: 제1 아이템)의 그래픽 정보(621c)에는, 카메라 영상(20)의 시각적 변형을 위한 그래픽 처리 타입에 대한 “타입 정보”가 포함될 수 있다. 이러한 그래픽 타입 정보는, 판매자 단말로부터 수신된 정보에 근거하여 설정될 수 있다.
여기에서, 시각적 변형을 위한 그래픽 처리 타입의 예는 매우 다양하며, 예를 들어, i) 카메라 영상(20)에 대한 색상 변환(또는 색 보정(calibration))을 수행하는 그래픽 처리 타입, ii) 카메라 영상(20)의 밝기, 대비, 선명도, 색 변환값 중 적어도 하나를 조절하는 그래픽 처리 타입, iii) 카메라 영상(20)에 대해 텍스트, 정적인 이미지, 또는 동적인 영상과 같은 그래픽 객체를 삽입(또는 합성)하는 그래픽 처리 타입 등이 존재할 수 있다. 제어부(130)는 위에서 살펴본 다양한 그래픽 처리 타입 중 어느 하나의 타입 또는 복수의 타입에 따른 그래픽 처리를 카메라 영상에 대해 수행할 수 있다.
나아가, 특정 아이템(ex: 제1 아이템)의 그래픽 정보(621c)에는, 카메라 영상(20)의 시각적 변형에 의해 피사체의 일 부분에 대응되는 영역에서 표현되어야 하는 색상에 대한 “색상 정보”가 포함될 수 있다. 예를 들어, 아이템이 입술(lip) 메이크업(makeup)에 대한 상품인 경우, 색상 정보에는, 입술 부분에 대응되는 영역에서 표현되어야 하는 색상(ex: “컬러 코드 B46143” 또는 “AR 세팅 코드 AR123”) 정보를 포함할 수 있다.
나아가, 특정 아이템(ex: 제1 아이템)의 그래픽 정보(621c)에, 카메라 영상(20)의 시각적 변형에 의해 피사체의 일 부분에 대응되는 영역에 합성(또는 삽입) 되어야 하는 그래픽 객체에 대한 모양 정보가 포함될 수 있다. 예를 들어, 아이템이 귀(ear) 액세서리(accessory)에 대한 상품인 경우, 모양 정보에는, 귀(ear) 액세서리 모양의 그래픽 객체에 대한 정보를 포함할 수 있다.
한편, 제어부(130)는, 위에서 살펴본 그래픽 정보에 근거하여, 카메라 영상(20)에서, 시각적 변형이 이루어져야 하는 피사체의 일 부분을 포함되어 있는지를 확인할 수 있다.
확인 결과, 카메라 영상(20)에, 시각적 변형이 이루어져야 하는 피사체의 일 부분이 포함되어 있으면, 제어부(130)는 상기 피사체의 일부분에 대응되는 카메라 영상(20)의 특정 부분(또는 특정 영역)을 특정할 수 있다.
일 예로, 특정 아이템(ex: 제1 아이템)의 그래픽 정보(621c)에, 사용자 얼굴 중 “입술 부분”을 시각적 변형이 이루어져야 하는 부분으로 특정하는 정보가 포함되어 있는 경우, 제어부(130)는 카메라 영상(20)에서 사용자 얼굴을 인식할 수 있다. 그리고 도 4a의 (b)에 도시된 것과 같이, 제어부(130)는 카메라 영상(20)에서, 사용자 얼굴 중 입술 부분에 대응되는 특정 부분(또는 특정 영역, 420)을 특정할 수 있다.
다른 예로, 특정 아이템(ex: 제1 아이템)의 그래픽 정보(621c)에, 사용자 얼굴 중 눈 부분을 시각적 변형이 이루어져야 하는 부분으로 특정하는 정보가 포함되어 있는 경우, 제어부(130)는 카메라 영상(20)에서, 사용자 얼굴 중 눈 부분에 대응되는 특정 부분(또는 특정 영역)을 특정할 수 있다.
나아가, 제어부(130)는 카메라 영상(20)의 특정 부분(또는 특정 영역, 420)에 대해 매칭된 매칭 정보에 따른 그래픽 처리 타입으로 그래픽 처리를 수행할 수 있다.
상기 특정 부분에 대해 매칭된 그래픽 처리 타입이, 카메라 영상(20)에 대한 색상 변환(또는 색 보정(calibration))을 수행하는 타입인 경우, 제어부(130)는 특정 부분(또는 특정 영역)의 색상을 색상 정보에 대응되도록 변경할 수 있다.
예를 들어, 도 4a의 (b)에 도시된 것과 같이, 사용자 얼굴 중 입술 부분에 대응되는 카메라 영상(20)의 특정 부분(또는 특정 영역, 420)은, 색상 정보에 대응되는 색상이 보이도록 색상이 변경될 수 있다.
이러한 색상 변경 또는 색 보정을 통해, 사용자는 카메라 영상에 포함된 자신의 얼굴 이미지에 화장을 한 것과 같은 효과를 경험할 수 있다.
다른 예로서, 그래픽 처리 타입이, 카메라 영상(20)에 대해 그래픽 객체를 삽입(또는 합성)하는 타입인 경우, 제어부(130)는 특정 부분(또는 특정 영역)에 모양 정보에 대응되는 그래픽 객체를 삽입(또는 합성)할 수 있다.
예를 들어, 제어부(130)는, 사용자 얼굴 중 귀 부분에 대응되는 카메라 영상(20)의 특정 부분(또는 특정 영역)에, 모양 정보에 대응되는 귀 액세서리(ex: 귀걸이)의 그래픽 객체를 삽입(또는 합성)할 수 있다.
이러한 그래픽 객체 삽입을 통해, 사용자는 카메라 영상에 포함된 자신의 모습에 액세서리를 착용해보는 것과 같은 효과를 경험할 수 있다.
이처럼, 제어부(130)는 사용자 단말기(200)로부터 증강 현실 기능에 대한 활성화 요청에 응답하여, 카메라 영상(20)에 대한 그래픽 처리를 수행할 수 있다.
한편, 증강 현실 기능이 연계되지 않은 아이템의 상품정보에는 그래픽 정보가 포함되지 않을 수 있다.
나아가, 위에서 살펴본 기 특정된 DB는 라이브 방송 서버 또는 라이브 방송 서버에 연계된 외부 서버에 저장되어 존재할 수 있다.
한편, 위에서 살펴본 제1 및 제2 아이템의 상품 정보와 같은 아이템의 상품 정보들은, 라이브 방송 서버의 아이템 DB에 저장되어 존재할 수 있다. 나아가, 이러한 아이템 DB는 특정 판매자 계정에 연계되어 분류되는 것이 가능하다. 즉, 특정 판매자 계정에서 판매되는 아이템의 아이템 정보가, 각각 특정 판매자 계정을 기준으로 구분되어 아이템 DB를 형성할 수 있다.
한편, 기 특정된 DB에 포함된 상품 정보는 이러한 아이템 DB로부터 판매자 또는 라이브 방송 서버로부터 선택되어, 기 특정된 DB에 포함되는 것이 가능하다.
다음으로, 본 발명에 따른 라이브 방송 제공 방법에서는, 사용자 단말기(200)에서 방송 영상(10)을 수신하고 있는 상태에서, 증강 현실 그래픽 처리가 수행된 카메라 영상(20)을, 사용자 단말기(200)의 디스플레이부 상에 표시하는 과정이 진행될 수 있다(S350, 도 3 참조).
앞서 설명한 것과 같이, 제어부(130)는, 증강 현실 기능에 대한 활성화 요청이 있더라도, 방송 영상(10) 제공과 관련된 제1 데이터 처리 및 증강 현실 서비스 제공과 관련된 제2 데이터 처리를 동시에 수행할 수 있다. 즉, 제어부(130)는 제1 데이터 처리를 중단하지 않고, 제1 데이터 처리 및 제2 데이터 처리가 병렬적으로 수행되도록 사용자 단말기(200)를 제어할 수 있다.
도 4a의 (b)에 도시된 것과 같이, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에, 방송 영상(10)과 함께 증강 현실 그래픽 처리가 수행된 카메라 영상(20)이 표시되도록 제어할 수 있으며, 이를 본 발명에서는, “PIP(Picture In Picture) 모드”로 명명할 수 있다.
제어부(130)는, 증강 현실 기능에 대한 활성화 요청에 응답하여, 사용자 단말기(200)의 디스플레이부를 PIP 모드로 제어함으로써, 방송 영상(10) 및 증강 현실 그래픽 처리가 수행된 카메라 영상(20)을 함께 제공할 수 있다.
이와 같이, 본 발명에서는, 제1 데이터 처리 및 제2 데이터 처리를 병렬적으로 수행하여 PIP 모드를 통해, 방송 영상(10) 및 증강 현실 그래픽 처리가 수행된 카메라 영상(20)을 동시에 제공할 수 있다. 이를 통해, 사용자는 라이브 방송의 시청을 중단하지 않고도, 증강 현실을 통해 라이브 방송에서 판매하는 상품을 체험 또는 테스트할 수 있다.
한편, 본 발명에 따른 라이브 제공 시스템(100)에서는, 라이브 방송에 대한 사용자의 관심(또는 흥미)을 향상시키고, 사용자에게 라이브 방송을 통해 판매하는 상품에 대한 정보를 직관적으로 제공하고, 사용자가 보다 편리하게 증강 현실 서비스를 이용할 수 있도록 하는 다양한 사용자 환경을 제공할 수 있다. 이하에서는 본 발명에 따른 라이브 방송 제공 시스템(100)에서 제공하는 다양한 사용자 환경에 대해 구체적으로 설명하도록 한다.
도 4a의 (b)에 도시된 것과 같이, 사용자 단말기(200)의 디스플레이부는, 메인 디스플레이 영역(A) 및 서브 디스플레이 영역(B) 중 적어도 하나를 포함할 수 있다.
서브 디스플레이 영역(B)은 상기 메인 디스플레이 영역(A) 중 적어도 일부에 오버랩되어 표시될 수 있다.
서브 디스플레이 영역(B)이 메인 디스플레이 영역(A)에서 오버랩되는 위치는, 시스템 관리자에 의하여 설정되거나 사용자 입력에 근거하여 변경될 수 있다. 나아가, 메인 디스플레이 영역(A) 및 서브 디스플레이 영역(B) 중 적어도 하나의 출력 크기 또한 시스템 관리자 및 사용자 입력에 근거하여 설정 및 변경될 수 있음은 물론이다.
위의 예에서는, 서브 디스플레이 영역(B)이 메인 디스플레이 영역(A)상에 오버랩 되는 경우에 대하여 살펴보았으나, 본 발명은 위의 예에 한정되지 않는다. 예를 들어, 사용자 단말기(200)의 디스플레이부는 복수의 디스플레이 영역으로 분할될 수 있으며, 이 중 어느 하나는 메인 디스플레이 영역(A)으로, 다른 하나는 서브 디스플레이 영역(B)이 될 수 있다. 이때, 메인 디스플레이 영역(A) 및 서브 디스플레이 영역(B)은 서로 중첩되지 않거나, 적어도 일부만 중첩될 수 있다.
한편, 제어부(130)는 증강 현실 기능의 활성화 여부에 근거하여, 메인 디스플레이 영역(A) 및 서브 디스플레이부 영역(B) 중 적어도 하나에 방송 영상(10)이 표시되도록 제어할 수 있다.
도 4a의 (a)에 도시된 것과 같이, 증강 현실 기능의 비활성화 상태에서는, 제어부(130)는, 방송 영상(10)이 메인 디스플레이 영역(A) 상에 표시되도록 제어할 수 있다.
반면에, 도 4a의 (b)에 도시된 것과 같이, 증강 현실 기능의 활성화 상태에서는, 제어부(130)는, 방송 영상(10)은, 서브 디스플레이 영역(B)에 표시되고, 카메라 영상(또는 그래픽 처리가 수행된 카메라 영상, 20)은, 메인 디스플레이 영역(A)에 표시될 수 있다. 이하에서는 설명의 편의를 위하여, 카메라 영상(20)과 그래픽 처리가 수행된 카메라 영상(20)을 혼용하여 사용하도록 한다.
제어부(130)는, 증강 현실 기능이 비활성화 상태에서 활성화 상태로 전환되는 것에 근거하여, 메인 디스플레이 영역(A)에서는 방송 영상(10)이 사라지고 카메라 영상(20)이 표시되도록 디스플레이부(210)를 제어할 수 있다. 그리고, 제어부(130)는 서브 디스플레이 영역(B)에서는 방송 영상(10)이 표시되도록 디스플레이부(210)를 제어할 수 있다. 즉, 제어부(130)는, 증강 현실 기능이 비활성화 상태에서 활성화 상태로 전환되더라도, 메인 디스플레이 영역(A)에서 표시되던 방송 영상(10)이 서브 디스플레이 영역(B)을 통해 계속해서 표시되도록 디스플레이부(210)를 제어할 수 있다. 이를 통해, 사용자는 증강 현실 서비스를 제공받으면서 시청 중이던 방송 영상(10)을 끊기지 않고 계속해서 시청할 수 있다.
한편, 도 5의 (a)에 도시된 것과 같이, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상(또는 메인 디스플레이 영역(A))에 방송 영상(10)이 제공되는 있는 상태에서, 사용자 단말기(200)의 디스플레이부의 적어도 일 영역에, 방송 영상(10)과 관련된 다양한 정보가 표시되도록 제어할 수 있다.
제어부(130)는, 기 특정된 DB에 특정 라이브 방송과 매칭되어 존재하는 다양한 정보에 근거하여, 특정 라이브 방송의 방송 영상(10)과 함께 다양한 정보가 표시되도록 제어할 수 있다.
본 발명에서, 도 5의 (a)에 도시된 것과 같이, 방송 영상(10)과 함께 다양한 정보가 사용자 단말기(200)의 디스플레이부를 통해 표시되는 것을, “방송 영상(10)의 적어도 일 영역에 정보를 표시(또는 출력 또는 제공)한다”, “다양한 정보가 포함된 방송 영상(10)을 표시(또는 출력 또는 제공) 한다”고 표현할 수 있다.
앞서 살펴본 것과 같이, 기 특정된 DB에는, 특정 라이브 방송(700)과 관련된 채널 정보(710) 및 맵핑 정보(720)가 매칭되어 존재할 수 있다.
특정 라이브 방송(700)과 관련된 채널 정보(710)에는, 특정 라이브 방송(700)을 진행 및 시청하는데 활용되는 정보가 포함될 수 있다. 예를 들어, 채널 정보(710)에는, i) 특정 라이브 방송(700)의 타이틀(title) 정보(711), ii) 특정 라이브 방송을 시청하는 시청자 정보(ex: 시청자 수, 712), iii) 특정 라이브 방송을 진행하는 진행자 정보(713) 등에 포함될 수 있다.
상기 채널 정보(710)에서, i) 타이틀 정보(711) 및 iii) 진행자 정보(713)는 판매자 단말기로부터 수신된 정보에 근거하여 설정될 수 있다. 반면에, 상기 채널 정보(710)에서, ii) 시청자 정보(712)는, 라이브 방송 서버(300)에 의해, 특정 라이브 방송(700)을 시청하는 시청자 수를 집계하여 생성(또는 설정)될 수 있다.
제어부(130)는, 특정 라이브 방송(700)과 관련된 채널 정보(710)에 근거하여, 5a의 (a)에 도시된 것과 같이, 특정 라이브 방송(700)의 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 적어도 일 영역에, 상기 채널 정보(710)를 표시할 수 있다. 이 때, 제어부(130)는 상기 채널 정보(710)를 텍스트(text), 그래픽 객체 또는 아이콘 등으로 디스플레이부에 표시할 수 있다.
예를 들어, 5a의 (a)에 도시된 것과 같이, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 제1 영역(510)에는, 특정 라이브 방송(700)의 타이틀 정보(ex: “월간선물샵 8회: 블랙프라이데이 특집”), 특정 라이브 방송(700)을 시청하는 시청자 정보(ex: “시청자 수 331, 425명”)가 표시될 수 있다. 특정 라이브 방송을 시청하는 사용자는 디스플레이부를 보는 것 만으로, 시청중인 라이브 방송에 대한 정보를 직관적으로 인식할 수 있다.
나아가, 도 7에 도시된 것과 같이, 특정 라이브 방송(700)과 관련된 맵핑 정보(720)에는, 특정 라이브 방송과 연계된 적어도 하나의 아이템 각각과 관련된 상품 정보(721, 722)를 포함할 수 있다. 특정 아이템(ex: 제1 아이템)을 예로 들어, 특정 아이템과 관련된 상품 정보(721)를 설명하면, 상품 정보(721)에는, i) 특정 아이템이 증강 현실 기능에 연계되었음을 나타내는 연계 정보(721a), ii) 특정 아이템의 쇼핑 서비스에 활용 가능한 아이템 정보(ex: 특정 아이템의 상품명, 특정 아이템의 가격 정보, 특정 아이템을 설명하는 용도로 활용되는 특정 아이템의 상세 정보, 721b), iii) 특정 아이템과 관련된 그래픽 처리를 수행하는데 활용되는 그래픽 정보(ex: 색상 정보, 721c), vi) 특정 아이템의 체험 또는 구매를 유도하는 타겟 정보(721d) 중 적어도 하나를 포함할 수 있다. 상기 상품 정보(721)는, 판매자 단말기로부터 수신된 정보에 근거하여 설정될 수 있다.
제어부(130)는, 특정 라이브 방송(700)과 관련된 맵핑 정보(720)에 근거하여, 5의 (a)에 도시된 것과 같이, 특정 라이브 방송(700)의 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 적어도 일 영역에, 상기 맵핑 정보(720)를 표시할 수 있다. 이 때, 제어부(130)는 상기 맵핑 정보(710)를 텍스트(text), 그래픽 객체 또는 아이콘 등으로 디스플레이부에 표시할 수 있다.
도 5의 (a)에 도시된 것과 같이, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 제2 영역(510)에는, 특정 라이브 방송(700)과 연계된 아이템과 관련된 증강 현실 기능을 제공하기 위한 기능 아이콘(410)이 표시될 수 있다. 상기 기능 아이콘(410)에는, 특정 라이브 방송(700)과 연계된 적어도 하나의 아이템에 대한 증강 현실 기능이 링크되어 있을 수 있다.
이러한, 증강 현실 기능에 링크된 아이콘(410)은, 라이브 방송에 연계된 아이템이 증강 현실 기능에 매칭되어 있는지 여부에 근거하여, 사용자 단말기(200)의 디스플레이부 상에, 방송 영상(10)과 함께 표시될 수 있다.
제어부(130)는, 라이브 방송에 연계된 아이템이 증강 현실 기능에 매칭되어 있는 경우, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 제1 영역(520)에, 상기 증강 현실 기능에 링크된 아이콘(410)을 표시할 수 있다.
보다 구체적으로, 제어부(130)는, 특정 라이브 방송(700)의 맵핑 정보(720)에, 특정 라이브 방송(700)과 관련된 적어도 하나의 아이템이 증강 현실 기능에 연계되었음을 나타내는 증강 현실 기능 연계 정보(721a)가 포함되어 있는 것에 근거하여, 상기 제2 영역(520)에 증강 현실 기능에 링크된 아이콘(410)을 표시할 수 있다.
이와 달리, 제어부(130)는, 라이브 방송에 연계된 아이템이 증강 현실 기능에 매칭되어 있지 않은 경우, 도 5의 (b)에 도시된 것과 같이, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 제1 영역(520)에, 상기 증강 현실 기능에 링크된 아이콘이 표시되는 것을 제한할 수 있다.
보다 구체적으로, 제어부(130)는, 특정 라이브 방송(700)의 맵핑 정보(720)에, 증강 현실 기능에 연계되었음을 나타내는 증강 현실 기능 연계 정보가 포함되어 있지 않는 것에 근거하여, 상기 제2 영역(520)에 증강 현실 기능에 링크된 아이콘(410)이 표시되는 것을 제한할 수 있다.
나아가, 도 5의 (a)에 도시된 것과 같이, 사용자 단말기(200)의 디스플레이부 상에서, 상기 증강 현실 기능에 링크된 아이콘(410) 주변에는, 상기 증강 현실 기능의 활성화를 유도하는 안내 메시지(ex: “AR 메이크업 미리보기로 컬러를 체험해 보세요”530)가 표시될 수 있다.
이러한 안내 메시지(530)는, 증강 현실 기능이 연계된 아이템의 상품 정보가 방송 영상에 출력된 후, 기 설정된 시간 동안에만, 디스플레이부(210)상에 출력될 수 있다.
나아가, 이러한 안내 메시지(530)는, 증강 현실 기능이 연계된 아이템의 상품 정보가 방송 영상에 출력되는 동안, 기 설정된 시간을 주기로 디스플레이부(210)상에 출력되었다가 사라질 수 있다.
나아가, 이러한 안내 메시지(530)는 사용자 단말기에서 증강 현실 기능이 한번도 활성화되지 않은 경우, 또는 현재 라이브 방송을 시청하는 중에 증강 현실 기능이 한번도 사용자 단말기에서 활성화되지 않은 경우에 한하여, 디스플레이부(210)상에 출력될 수 있다. 한편, 사용자는, 안내 메시지(530)를 통해, 증강 현실 기능에 링크된 아이콘(410)을 통해, 현재 시청 중인 특정 라이브 방송(700)에서 판매하는 상품(또는 아이템)을 체험 또는 테스트하는 서비스를 이용할 수 있음을 직관적으로 인식할 수 있다.
계속해서, 도 5의 (a)에 도시된 것과 같이, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 제3 영역(530)에는, 특정 라이브 방송(700)과 연계된 적어도 하나의 상품(또는 아이템)에 대한 다양한 아이템 정보가 표시될 수 있다. 앞서 살펴본 것과 같이, 증강 현실 기능에 연계된 아이콘(520)은, 상기 제3 영역(530)에 출력된 아이템 정보에 따른 아이템이 증강 현실 기능이 연계된 경우에 한하여, 제2 영역(520)에 출력될 수 있다.
한편, 제3 영역(530)에 출력되는 상품 정보는 라이브 방송에서 소개되는, 아이템의 상품명(ex: “리라 파우더 매트립”), 아이템의 가격 정보(ex: “40,000원”) 및 아이템의 설명 정보 중 적어도 하나를 포함할 수 있다.
계속해서, 도 5의 (a)에 도시된 것과 같이, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부의 제4 영역(540)에는, 특정 라이브 방송(700)과 관련된 채팅(chatting) 정보가 표시될 수 있다. 채팅 정보는, 특정 라이브 방송(700) 진행 중에, 판매자 단말기 또는 복수의 소비자 단말기로부터 수신된 메시지를 포함될 수 있다. 제어부(130)는 판매자 단말기 또는 복수의 소비자 단말기로부터 실시간으로 수신되는 메시지를, 디스플레이부의 제4 영역(540)을 통해 표시할 수 있다.
이와 같이, 제어부(130)는 사용자 단말기(200)의 디스플레이부 상에 특정 라이브 방송의 방송 영상(10)이 표시되고 있는 상태에서, 상기 디스플레이부 상에 특정 라이브 방송과 관련된 다양한 정보를 함께 제공함으로써, 사용자가 하나의 디스플레이부를 통해 특정 라이브 방송과 관련된 다양한 정보를 한번에 인식하도록 할 수 있다.
한편, 본 발명에서는 카메라 영상(20)과 함께, 증강 현실 기능과 연계된 다양한 정보를 사용자 단말기(200)의 디스플레이부(또는 메인 디스플레이 영역(A))에 제공함으로써, 사용자가 증강 현실을 통한 아이템 체험 서비스를 보다 편리하고 직관적으로 이용하도록 할 수 있다.
도 6에 도시된 것과 같이, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에 카메라 영상(20)이 제공되는 있는 상태에서, 사용자 단말기(200)의 디스플레이부의 적어도 일 영역에, 증강 현실 기능과 관련된 다양한 정보가 표시되도록 제어할 수 있다.
도 6에 도시된 것과 같이, 카메라 영상(20)과 함께 증강 현실 기능과 연계된 다양한 정보가, 사용자 단말기(200)의 디스플레이부를 통해 표시되는 것을, “카메라 영상(20)의 적어도 일 영역에 정보를 표시(또는 출력 또는 제공)한다”, “다양한 정보가 포함된 카메라 영상(10)을 표시(또는 출력 또는 제공) 한다”고 표현할 수 있다. 이 때, 카메라 영상(20)의 증강 현실 그래픽 처리가 수행된 카메라 영상(20)일 수 있다. 증강 현실 기능과 연계된 다양한 정보 역시, 기 특정된 DB에 특정 라이브 방송과 매칭되어 존재하는 다양한 정보에 근거하여, 디스플레이부에 표시될 수 있다.
도 7에 도시된 것과 같이, 기 특정된 DB에는, 특정 라이브 방송(700)과 연계된 아이템 각각 마다의 상품 정보(721, 722)를 포함하는 맵핑 정보(720)가 존재할 수 있다. 복수의 아이템(ex: 제1 아이템 및 제2 아이템)의 각각의 상품 정보(721, 722)에는, 상기 복수의 아이템 각각과 관련된 증강 현실 기능에서 수행되는 그래픽 처리에 대한 그래픽 정보(721c, 722c)가 포함되어 있을 수 있다.
앞서 설명한 것과 같이, 특정 아이템의 그래픽 정보(721c, 722c)는, i) 특정 아이템과 관련하여, 카메라 영상(20)의 시각적 변형이 이루어져야 하는 피사체의 일 부분을 특정하는 “피사체 정보”, ii) 특정 아이템과 관련하여, 카메라 영상(20)의 시각적 변형을 위한 그래픽 처리 타입에 대한 “타입 정보”, iii) 특정 아이템과 관련하여, 카메라 영상(20)의 시각적 변형에 의해 피사체의 일 부분에 대응되는 영역에서 표현되어야 하는 색상에 대한 “색상 정보” 및 vi) 특정 아이템과 관련하여, 카메라 영상(20)의 시각적 변형에 의해 피사체의 일 부분에 대응되는 영역에 합성(또는 삽입) 되어야 하는 그래픽 객체에 대한 “모양 정보” 중 적어도 하나가 포함될 수 있다.
제어부(130)는, 특정 라이브 방송(700) 연계된 복수의 아이템 각각의 그래픽 정보(721c, 721c)에 근거하여, 도 5의 (b)에 도시된 것과 같이, 카메라 영상(20)이 표시되는 사용자 단말기(200)의 디스플레이부의 적어도 일 영역에, 상기 그래픽 정보(721c, 722c)를 표시할 수 있다. 이 때, 제어부(130)는 상기 그래픽 정보(721c, 722c)를 텍스트(text), 그래픽 객체 또는 아이콘 등으로 디스플레이부에 표시할 수 있다.
이러한 그래픽 정보(721c, 722c)는, 아이템에 설정된 복수의 옵션에 각각 대응될 수 있다. 여기에서, 옵션은, 아이템을 구매시, 구매하고자 하는 아이템을 특정하기 위한 선택 정보로서, 아이템이 입술(lip) 메이크업(makeup)에 해당하는 상품(ex: 립스틱)인 경우, 옵션은 립스팁의 색상 정보일 수 있다.
이하에서는 설명의 편의를 위하여, 특정 라이브 방송(700)과 연계된 아이템이 입술(lip) 메이크업(makeup)에 대한 상품인 경우를 예를 들어 설명하도록 한다.
도 6에 도시된 것과 같이, 카메라 영상(20)이 표시되는 사용자 단말기(200)의 디스플레이부의 제1 영역(610)에는, 특정 라이브 방송(700)과 연계된 아이템(또는 증강 현실 기능에 연계된 아이템)에 설정된 옵션에 대응되는 그래픽 객체(예를 들어, 도면부호 611, 612)가 출력될 수 있다. 이러한 옵션에 대응되는 그래픽 객체는, 옵션 각각에 대응되는 색상 정보에 대응되는 그래픽 객체일 수 있다.
이 경우, 상기 카메라 영상(20)은, 상기 아이템에 대응되는 복수의 옵션에 각각 해당하는 색상 정보 중 어느 하나(611)에 의한 그래픽 처리가 수행된 카메라 영상(20)일 수 있다. 예를 들어, 카메라 영상(20)은, 상기 제1 영역(610) 중 특정 일부 영역(610a)에 포함된 그래픽 객체(611)에 대응되는 색상 정보에 대응되도록 색상 변환이 이루어진 카메라 영상(20)에 해당될 수 있다. 예를 들어, 카메라 영상(20)은, 사용자 얼굴 중 입술 부분에 대응되는 영역(420)이, 상기 특정 일부 영역(610a)에 포함된 그래픽 객체(611)에 대응되는 색상 정보로 색 변환이 이루어져 있을 수 있다.
나아가, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에, 카메라 영상(20)이 표시되고 있는 상태에서, 제1 영역(610)에 가해진 기 설정된 사용자 입력을 수신하는 것에 근거하여, 상기 카메라 영상(20)에 대한 증강 현실 그래픽 처리를 변경할 수 있다.
보다 구체적으로, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에, 특정 아이템의 제1 옵션에 해당하는 색상 정보에 대응되는 그래픽 처리가 수행된 카메라 영상(20)이 표시되고 있는 상태에서, 제1 영역(610)에 가해진 기 설정된 사용자 입력에 의해 상기 제1 옵션과는 다른 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 선택되는 것에 근거하여, 상기 카메라 영상(20)에 대해 상기 제2 옵션의 색상 정보에 따른 그래픽 처리를 수행할 수 있다.
일 예로, 상기 특정 일부 영역(610a)에 제1 옵션의 색상 정보에 대응되는 그래픽 객체(611)가 표시되고 있는 상태에서, 제1 영역(610)에 대한 스와이프(swipe) 입력에 연동하여 상기 특정 일부 영역(610a)에 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 표시되는 것으로, 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 선택될 수 있다.
즉, 제어부(130)는 기 설정된 사용자 입력(예를 들어, 드래그, 스와이프 입력)에 근거하여, 상기 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 상기 특정 일부 영역(610a)으로 이동하는 경우, 상기 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 선택된 것으로 처리할 수 있다. 이 경우, 제어부(130)는 카메라 영상에 대해 상기 제2 옵션의 색상 정보를 이용하여 증강 현실 그래픽 처리를 수행할 수 있다.
다른 예로, 상기 특정 일부 영역(610a)에 제1 옵션의 색상 정보에 대응되는 그래픽 객체(611)가 표시되고 있는 상태에서, 사용자 단말기(200)로부터 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 선택된 경우, 제어부(130)는 상기 제2 의 색상 정보에 대응되는 그래픽 객체(612)가 선택된 것으로 처리할 수 있다.
이 경우, 제어부(130)는 카메라 영상에 대해 상기 제2 옵션의 색상 정보를 이용하여 증강 현실 그래픽 처리를 수행할 수 있다.
한편, 상기 특정 일부 영역(610a)에는, 상기 제1 옵션의 색상 정보에 대응되는 그래픽 객체(611) 대신 상기 제2 옵션의 색상 정보에 대응되는 그래픽 객체(612)가 위치할 수 있다. 이와 같이, 사용자는, 제1 영역(610)에 표시된 복수의 그래픽 객체(611, 612) 중 어느 하나를 선택하여, 다양한 아이템을 체험해볼 수 있다.
한편, 제어부(130)는 상기 특정 일부 영역(610a)에 위치한 그래픽 객체가 사용자 단말기(200)로부터 선택되는 경우, 증강 현실 그래픽 처리된 카메라 영상에 대한 촬영을 수행할 수 있다. 이 경우, 증강 현실 그래픽 처리된 카메라 영상은 사용자 단말기의 저장부 또는 외부 서버(라이브 방송 서버 또는 클라우드 서버 등)에 저장될 수 있다.
한편, 도 6에 도시된 것과 같이, 카메라 영상(20)이 표시되는 사용자 단말기(200)의 디스플레이부에서, 상기 특정 일부 영역(610a)의 주변의 제2 영역(620)에는, 상기 특정 일부 영역(610a)에 포함된 그래픽 객체(611)에 대응되는 옵션을 설명하는 설명 문구(ex: “301 스프링데이트”) 및 상기 옵션에 해당하는 아이템을 추천하는 추천 문구(ex: “인기 컬러”) 중 적어도 하나가 표시될 수 있다.
이러한 설명 문구 및 안내 문구 역시, 위에서 살펴본 기 특정된 상품 DB 상에, 상기 아이템과 매칭되어 존재할 수 있다. 예를 들어, 상기 설명 문구 및 안내 문구는, 상기 아이템의 체험 또는 구매를 유도하는 타겟 정보(621d)에 포함될 수 있다.
계속해서, 도 6에 도시된 것과 같이, 카메라 영상(20)이 표시되는 사용자 단말기(200)의 디스플레이부의 제3 영역(630)에는, 특정 라이브 방송(700)과 연계된 적어도 하나의 상품(또는 아이템)에 대한 다양한 아이템 정보가 표시되어, 아이템의 상품명(ex: “리라 파우더 매트립”)으로서 활용되거나, 아이템의 가격 정보(ex: “40,000원”)로서 활용되거나, 아이템을 설명하는 용도로 다양하게 활용될 수 있다.
이 때, 상기 제3 영역(630)에는, 카메라 영상(20)에 그래픽 처리가 수행된 특정 아이템에 대응되는 옵션 정보가 포함될 수 있다. 제어부(130)는, 사용자 단말기(200)의 디스플레이부에, 제1 옵션의 색상 정보에 따라 그래픽 처리가 수행된 카메라 영상(20)이 표시되고 있는 상태에서는, 상기 제3 영역(630)에는 상기 아이템에 대응되는 제1 옵션 정보가 표시되도록 제어할 수 있다. 그리고, 제어부(130)는 상기 제1 영역(610)에 대한 기 설정된 사용자 입력에 근거하여, 상기 카메라 영상(20)에 제2 옵션의 색상 정보에 따른 그래픽 처리를 수행하는 것과 연동하여, 상기 제3 영역(630) 상에 상기 제2 옵션에 대응되는 정보가 표시되도록 제어할 수 있다.
한편, 앞서 설명한 것과 같이, 증강 현실 기능이 비활성화 된 상태에서는, 사용자 단말기(200)의 메인 디스플레이 영역(A)에 방송 영상(10)이 표시되고(도 4a의 (a) 참조), 증강 현실 기능이 활성화된 상태에서는, 사용자 단말기(200)의 메인 디스플레이 영역(A)에 카메라 영상(20)이 표시될 수 있다(도 4a의 (b) 참조).
제어부(130)는, 도 4a에 도시된 것과 같이, 사용자 단말기(200)의 메인 디스플레이 영역(A) 상의 적어도 일 영역에는, 증강 현실 기능의 활성화 여부와 독립적으로, 라이브 방송에 연계된 아이템과 관련된 아이템 정보가 계속해서 표시되도록 제어할 수 있다.
보다 구체적으로, 제어부(130)는, 증강 현실 활성화 기능을 비활성화 상태에서 활성화 상태로 전환하는 것에 근거하여 사용자 단말기(200)의 메인 디스플레이 영역(A) 상에, 방송 영상(10)에서 카메라 영상(20)이 표시되더라도, 방송 영상(10)과 함께 표시되던 아이템 정보(430)가 카메라 영상(20)과 함께 계속해서 표시되도록 제어할 수 있다.
이를 통해, 사용자는, 증강 현실 기능이 활성화된 상태에서도, 증강 현실을 통해 체험하고 있는 아이템이 무엇인지를 계속해서 확인할 수 있다.
한편, 앞서 설명한 것과 같이, 본 발명에 따른 라이브 방송 제공 시스템(100)은, 기 특정된 DB에 근거하여, 사용자 단말기(200)의 디스플레이부에 다양한 정보를 표시할 수 있을 뿐만 아니라, 라이브 방송에서 진행하는 상품에 대한 증강 현실 기능을 제공할지 여부를 결정할 수 있다.
본 발명에 따른 기 특정된 상품 DB는, 판매자 단말기로부터 수신한 정보에 근거하여 구축될 수 있으며, 본 발명에 따른 라이브 방송 제공 시스템(100)에서 다양한 정보 및 증강 현실 기능을 제공하는 근거가 될 수 있다. 즉, 본 발명에서는, 판매자 단말기로부터 수신한 정보에 근거하여 기 특정된 상품 DB를 구축하고, 구축된 기 특정된 상품 DB에 근거하여 라이브 방송 제공 서비스 및 증강 현실 기능 제공 서비스를 수행할 수 있다.
이러한 기 특정된 상품 DB는, 라이브 방송 서버(300)에 의해 구축되거나, 본 발명에 따른 라이브 방송 제공 시스템(100)과 연계된 별도의 외부 서버(100a)에 의해 구축될 수 있다. 이하에서는 라이브 방송 서버(300) 및 본 발명에 따른 라이브 방송 제공 시스템(100)과 연계된 별도의 외부 서버(100a)를 구분하지 않고, 라이브 방송 서버(300)에 의해, 기 특정된 상품 DB를 구축하는 것으로 설명하도록 한다.
라이브 방송 서버(300)에서는, 판매자 단말기로부터, 수신한 정보를 활용하여 기 특정된 상품 DB를 구축하고, 본 발명에 따른 라이브 제공 시스템(100)의 요청에 응답하여, 기 특정된 상품 DB에 포함된 다양한 정보(또는 데이터)를 본 발명에 따른 라이브 제공 시스템(100)에 제공할 수 있다.
라이브 방송 서버(300)는, 판매자 단말기로부터 라이브 방송과 관련된 정보, 라이브 방송에서 판매하는 상품에 대한 정보 및 상품의 증강 현실 기능과 관련된 정보 중 적어도 하나를 제공받기 위하여, 도 8, 도 9 및 도 10에 도시된 것과 같이, 판매자 페이지(800, 900, 1000)를 판매자 단말기에 제공할 수 있다.
여기에서, 판매자 페이지(800, 900, 1000)는, 라이브 방송을 통해 상품을 판매하려는 판매자가, i) 라이브 방송과 관련된 정보(ex: 방송 타이틀 정보, 방송 진행자 정보 등), ii) 판매 상품과 관련된 정보(ex: 아이템 종류 정보, 아이템 명칭 정보, 아이템 가격 정보, 아이템 제조원 정보, 아이템을 추천하기 위한 추천 정보, 아이템의 판매 통계 정보 등) 및 ii) 증강 현실 기능과 관련된 다양한 정보를 입력 및 설정할 수 있도록 하는 기능을 제공하는 페이지(또는 화면)로 이해될 수 있다.
특히, 라이브 방송 서버(300)는, 판매자 페이지(800, 900, 1000)를 통해, 아이템에 대한 증강 현실 기능을 매칭하기 위한 다양한 정보를 입력받는 기능을 제공할 수 있다.
도 8에 도시된 것과 같이, 판매자 페이지(800)에는, 특정 아이템에 대한 증강 현실 기능 매칭 여부를 설정할 수 있는 기능 아이콘(810)을 포함할 수 있다.
클라우드 서버는, 상기 기능 아이콘(810)에 대한 사용자 입력을 수신하는 것에 근거하여, 판매자 페이지(800)의 일 영역에 증강 현실 기능 매칭을 위한 페이지로 연동되는 화면(ex: 팝업(pop-up), 820)을 표시할 수 있다.
라이브 방송 서버(300)는, 상기 화면(820)을 통해, 증강 현실 기능 매칭을 위한 페이지에 대한 요청(ex: “설정” 선택, 821)을 수신하는 것에 응답하여, 도 9에 도시된 것과 같이, 특정 아이템에 대한 증강 현실 기능 매칭을 위한 판매자 페이지(800)를 제공할 수 있다.
특정 아이템에 대한 증강 현실 기능 매칭을 위한 판매자 페이지(900)는, i) 증강 현실 기능에 매칭되는 특정 아이템 정보(ex: “상품번호”)를 등록하는 영역(910), ii) 상기 특정 아이템의 이미지를 등록하는 영역(920), iii) 특정 아이템과 관련된 옵션명(ex: 아이템 명칭 또는 아이템 넘버)을 등록하는 영역(930), vi) 상기 특정 아이템과 관련된 그래픽 정보(ex: 색상 정보)를 입력하는 영역(940, 950) 및 v) 상기 특정 아이템을 추천 또는 설명하는데 활용되는 정보를 입력하는 영역(960) 중 적어도 하나를 포함할 수 있다.
라이브 방송 서버(300)는 상기 판매자 페이지(900)를 통해 입력(또는 수신)된 정보에 근거하여, 특정 아이템에 대해 증강 현실 기능을 매칭하고, 특정 아이템과 증강 현실 기능과 관련된 다양한 정보를 연계하여 기 특정된 상품 DB를 구축할 수 있다.
나아가, 도 10에 도시된 것과 같이, 판매자 페이지(1000)에는, 증강 현실 기능에 기 매칭된 특정 아이템에 대한 수정 기능을 제공하는 아이콘(1010), 삭제 기능을 제공하는 아이콘(1020) 및 히스토리 정보 제공에 매칭된 아이콘(1030) 중 적어도 하나를 포함할 수 있다.
사용자는, 도 10에 도시된 판매자 페이지(1000)에서, 수정 기능을 제공하는 아이콘(1010)함으로써, 증강 현실 기능에 기 매칭된 특정 아이템에 대한 정보(ex: 색상 정보)를 수정하거나 추가할 수 있다. 또한, 사용자는 삭제 기능을 제공하는 아이콘(1020)을 선택하여 특정 아이템이 더 이상 증강 현실 기능에 매칭되지 않도록 할 수 있다.
나아가, 라이브 방송 서버(300)는, 히스토리 정보 제공에 매칭된 아이콘(1030)에 대한 사용자 입력에 응답하여, 판매자 페이지(1000)의 일 영역 상에, 특정 아이템에 대한 증간 현실 기능의 설정 히스토리 정보(1040)를 제공할 수 있다.
이처럼, 본 발명에서는 판매자(또는 진행자)가 증강 현실 기능 제공 여부 및 증강 현실 기능을 통해 제공하는 상품 체험에 대한 설정을 직접 수행할 수 있는 서비스를 제공할 수 있으며, 판매자(또는 진행자)의 설정에 근거하여 특정 아이템에 대한 증강 현실 기능을 제공할 수 있다.
이에, 판매자는 판매자 페이지를 통해, 정보를 입력하는 과정만으로 소비자들에게 손쉽게 자신의 판매 상품을 체험할 수 있는 기회를 제공할 수 있다.
한편, 앞서 설명한 것과 같이, 사용자 단말기(200)의 디스플레이부에는, 증강 현실 기능의 활성화 여부와 독립적으로 라이브 방송과 연계된 아이템과 관련된 아이템 정보가 계속해서 표시될 수 있다.
상기 아이템 정보에는, 라이브 방송과 연계된 복수의 아이템 중 어느 하나와 관련된 아이템 정보(ex: 특정 아이템 명, 가격 등)을 포함할 수 있다. 사용자는, 상기 아이템 정보를 통해 특정 아이템에 대한 정보를 제공받을 수 있다. 나아가 사용자는 특정 아이템의 아이템 정보 외에 보다 더 다양한 아이템에 대한 아이템 정보를 추가로 제공받고 싶어할 수 있다.
이에, 본 발명에서는, 증강 현실 기능의 활성화 여부와는 독립적으로, 사용자 단말기(200)의 디스플레이부 상에 라이브 방송에 연계된 추가 아이템의 아이템 정보를 제공할 수 있다.
여기에서, “추가 아이템”은, 다양하게 설정될 수 있다. 라이브 방송에 연계된 복수의 아이템 중 방송 영상(10)과 함께 표시된 아이템 정보의 아이템 외에 다른 아이템으로 이해될 수 있다. 예를 들어, 라이브 방송과 연계된 제1 입술 메이크업 대한 아이템 및 제2 입술 메이크업 대한 아이템 중 제1 입술 메이크업에 대한 아이템의 아이템 정보가 방송 영상(10)과 함께 표시되었다고 가정하자. 이 경우, 추가 아이템은 제2 입술 메이크업에 대한 아이템으로 이해될 수 있다.
나아가, “추가 아이템”은, 라이브 방송에 연계된 아이템과 관련된 아이템으로 이해될 수 있다. 예를 들어, 라이브 방송에 연계된 아이템이 입술 메이크업에 대한 아이템이라고 가정하자. 이 경우, 추가 아이템은 아이 메이크업에 대한 아이템에 해당될 수 있다.
본 발명에서는, 사용자 단말기(200)의 디스플레이부 상에 특정 아이템의 아이템 정보를 표시하고 있는 상태에서, 추가 아이템의 아이템 정보에 대한 사용자 요청에 응답하여, 추가 아이템의 아이템 정보를 제공할 수 있다.
도 11의(a)에 도시된 것과 같이, 제어부(130)는 사용자 단말기(200)의 메인 디스플레이 영역(A)에 방송 영상(10)이 표시되고 있는 상태에서, 추가 아이템 목록에 링크된 그래픽 객체(ex: “더보기”, 1140)에 대한 사용자 선택을 수신할 수 있다.
그리고, 도 11의(b)에 도시된 것과 같이, 상기 사용자 선택에 응답하여, 제어부(130)는 메인 디스플레이 영역(A)의 적어도 일 영역에, 복수의 추가 아이템 정보 항목(1110, 1120, 1130)을 포함하는 추가 아이템 정보 목록(1100)을 표시할 수 있다.
추가 아이템 정보 목록(1100)에 포함된 복수의 아이템 각각의 아이템 정보 항목(1110, 1120, 1130)에는, 각 항목에 대응되는 아이템의 썸네일 이미지, 아이템 명(ex: “리라 스파이시 볼륨 매트”), 가격 정보(ex: “39,000원”), 이벤트 정보 중 적어도 하나를 포함할 수 있다.
나아가, 추가 아이템 정보 목록(1100)에 포함된 복수의 아이템 중 특정 아이템에 증강 현실 기능이 매칭되어 있는 것에 근거하여, 특정 아이템의 아이템 항목의 일 영역(1120a)에는, 상기 특정 아이템과 관련된 증강 현실 기능에 링크된 아이콘(1120b)이 포함되어 있을 수 있다.
한편, 제어부(130)는, 증강 현실 기능이 활성화된 상태에서도, 추가 아이템의 아이템 정보에 대한 사용자 요청에 응답하여, 추가 아이템의 아이템 정보를 제공할 수 있다.
도 12의 (a)에 도시된 것과 같이, 제어부(130)는 사용자 단말기(200)의 메인 디스플레이 영역(A)에 카메라 영상(20)이 표시되고 있는 상태에서, 추가 아이템 목록에 링크된 그래픽 객체(1240)에 대한 사용자 선택을 수신할 수 있다.
그리고, 도 12(b)에 도시된 것과 같이, 상기 사용자 선택에 응답하여, 제어부(130)는 메인 디스플레이 영역(A)의 적어도 일 영역에, 복수의 추가 아이템 정보 항목(1210, 1220, 1230)을 포함하는 추가 아이템 정보 목록(1200)을 표시할 수 있다.
추가 아이템 정보 목록(1200)에 포함된 복수의 아이템 각각의 아이템 정보 항목(1210, 1220, 1230)에는, 각 항목에 대응되는 아이템의 썸네일 이미지, 아이템 명(ex: “리라 스파이시 볼륨 매트”), 가격 정보(ex: “39,000원”), 이벤트 정보 중 적어도 하나를 포함할 수 있다.
나아가, 추가 아이템 정보 목록(1200)에 포함된 복수의 아이템 중 특정 아이템에 증강 현실 기능이 매칭되어 있는 것에 근거하여, 특정 아이템의 아이템 항목의 일 영역(1220a)에는, 상기 특정 아이템과 관련된 증강 현실 기능에 링크된 아이콘(1240)이 포함되어 있을 수 있다.
이와 같이, 사용자는, 방송 영상(10)이 표시되는 사용자 단말기(200)의 디스플레이부에 함께 표시된 증강 현실 기능에 링크된 아이콘(410)을 통해 특정 아이템에 대한 증강 현실 기능을 제공받을 수 있다. 그리고, 사용자는, 추가 아이템 목록(1100, 1200)에 포함된 증강 현실 기능에 링크된 아이콘(1120b, 1220b)을 통해서도 추가 아이템에 대한 증강 현실 기능을 제공받을 수 있다.
제어부(130)는 다양한 상황에서 노출되는 증강 현실 기능에 링크된 아이콘이, 사용자 단말기(200)로부터 선택되기만 하면, 사용자 단말기의 카메라를 활성화시킬 수 있다. 그리고, 제어부(130)는 활성화된 카메라를 통해 수신되는 카메라 영상에, 증강 현실 그래픽 처리를 수행하여, 사용자에게, 아이템에 대한 체험을 제공할 수 있다.
한편, 본 발명에서는, 증강 현실 기능이 활성화 상태에서 비활성화 상태로 전환하는 것에 근거하여, PIP(Picture In Picture) 모드 종료와 관련된 데이터 처리를 수행할 수 있다.
제어부(130)는, 사용자 단말기(200)로부터 증강 현실 기능에 대한 비활성화 요청을 수신하는 것에 응답하여, 증강 현실 기능을 활성화 상태에서 비활성화 상태로 전환할 수 있다.
도 13의 (a)에 도시된 것과 같이, 상기 증강 현실 기능에 대한 비활성화 요청은, 사용자 단말기(200)로부터 증강 현실 기능 비활성화 기능에 매칭된 그래픽 객체(또는 아이콘, 1300)가 선택되는 것에 근거하여 수신될 수 있다.
보다 구체적으로, 메인 디스플레이 영역(A)에는 카메라 영상(20)을 표시하고, 서브 디스플레이 영역(B)에는 방송 영상(10)이 표시되어 있는 상태에서, 메인 디스플레이 영역(A)의 일 영역에 위치하는 상기 그래픽 객체(1300)가 선택되는 것에 근거하여, 제어부(130)는 증강 현실 기능에 대한 비활성화 요청을 수신할 수 있다.
이러한 증강 현실 기능 비활성화 기능에 매칭된 그래픽 객체(1300)는, “증강 현실 기능 종료 버튼”, “PIP 모드 종료 버튼”, “방송 영상으로 되돌아 가기 버튼” 등으로 다양하게 명명될 수 있다.
도 13의 (b)에 도시된 것과 같이, 제어부(130)는, 증강 현실 기능에 대한 비활성화 요청을 수신한 것에 응답하여, 사용자 단말기(200)의 디스플레이부 상에서 서브 디스플레이 영역(B)이 사라지도록 제어할 수 있다. 그리고, 제어부(130)는, 사용자 단말기(200)의 디스플레이부에 메인 디스플레이 영역(A)만이 포함되도록 제어할 수 있다.
나아가, 제어부(130)는, 카메라 영상(20)이 표시되던 메인 디스플레이 영역(A)에, 방송 영상(10)이 표시되도록 제어할 수 있다. 그리고, 제어부(130)는 사용자 단말기(200)의 디스플레이부에 카메라 영상(20)의 표시는 제한할 수 있다.
이 경우, 메인 디스플레이 영역(A)에 표시되는 방송 영상(10)은, 서브 디스플레이 영역(B)에서 표시되던 방송 영상(10)일 수 있다.
즉, 증강 현실 기능이 활성화 상태에서 비활성화 상태로 전환되면, 제어부(130)는 서브 디스플레이 영역(B)에서 표시되던 방송 영상(10)이 계속해서 메인 디스플레이 영역(A)에 표시되도록 제어할 수 있다.
사용자는, 증강 현실 기능이 활성화된 상태에서는, 시청 중이던 라이브 방송을 계속해서 시청하면서, 동시에 증강 현실 그래픽 처리가 수행된 카메라 영상(20)을 통해 특정 라이브 방송에서 판매하는 상품을 체험할 수 있다. 나아가, 증강 현실 기능이 비활성화된 상태에서는, 시청 중이던 라이브 방송만을 계속해서 시청할 수 있다.
한편, 본 발명에서는, 라이브 방송을 시청하는 사용자가, 라이브 방송을 통해 판매하는 상품을 구매할 수 있도록, 상품을 구매하기 위한 상품 구매 페이지를 사용자 단말기(200)에 제공할 수 있다.
제어부(130)는, 사용자 단말기(200)의 디스플레이부에 방송 영상(10) 및 카메라 영상(20) 중 적어도 하나가 표시되고 있는 상태에서, 사용자 단말기(200)로부터 특정 아이템 정보에 대한 기 설정된 입력을 수신할 수 있다.
도 14의 (a)에 도시된 것과 같이, 상기 특정 아이템 정보에 대한 기 설정된 입력을 수신하는 것은, 사용자 단말기(200)로부터 특정 아이템의 아이템 정보(ex: 특정 아이템의 대표 이미지 또는 썸네일, 1410)가 표시되는 영역에 대한 기 설정된 입력이 가해지는 것에 근거하여 수신될 수 있다. 상기 특정 아이템의 아이템 정보에는, 도 14의 (b)에 도시된 것과 같이, 특정 아이템을 판매하는 상품 구매 페이지(1400)가 링크되어 있을 수 있다.
도 14의 (b)에 도시된 것과 같이, 제어부(130)는, 사용자 단말기(200)로부터 특정 아이템의 아이템 정보(1410)에 대한 기 설정된 입력을 수신한 것에 근거하여, 상기 특정 아이템에 대응되는 상품을 구매하기 위한 상품 구매 페이지(1400)를, 사용자 단말(200) 상에 제공할 수 있다. 이 때, 상품 구매 페이지(1400)는, 사용자 단말기(200)의 디스플레이부의 일 영역에 모달 윈도(Modal Window) 방식으로 제공될 수 있다.
한편, 상품 구매 페이지(1400)는, 증강 현실 기능이 비활성화 된 상태에서는 방송 영상(10)에 오버랩되어 표시되어 있는 아이템 정보에 링크되어 있을 수 있다.
나아가, 상품 구매 페이지(1400)는 증강 현실 기능이 활성화된 상태에서는 카메라 영상(20)에 오버랩 되어 표시되어 있는 아이템 정보에 링크되어 있을 수 있다. 즉, 본 발명에서 사용자 단말기 (200)의 디스플레이부 상에 표시되는 특정 아이템 정보에는, 상기 특정 아이템 정보에 대응되는 상품을 구매할 수 있는 상품 구매 페이지(1400)가 링크되어 있을 수 있다.
한편, 도 14의 (b)에 도시된 것과 같이, 상기 상품 구매 페이지(1400)는, 사용자 단말기(200)에서 라이브 방송의 방송 영상(10)을 수신하고 있는 상태에서 사용자 단말기 (200)의 디스플레이부 상에 제공될 수 있다.
상기 상품 구매 페이지(1400)를 포함한 모달 윈도(Modal Window)의 백그라운드(Background) 영역(또는 화면)에서는 상기 라이브 방송의 방송 영상(10)이 계속해서 표시될 수 있다.
상기 모달 윈도(Modal Window)에 의해 상기 방송 영상(10)이 가려지는 경우에는, 제어부(130)는 방송 영상(10)에서 제공하는 방송 사운드가, 사용자 단말기(200)을 통해 계속해서 출력되도록 제어할 수 있다.
나아가, 제어부(130)는 상품 구매 페이지(1400)를 통한 사용자 단말기(200)로부터 결제 요청이 수신되는 것에 근거하여, 상품 판매 페이지에서 판매하는 특정 아이템에 대응되는 상품 결제 프로세스가 진행되도록 제어할 수 있다.
이러한 결제 프로세스의 수행은 본 발명에 따른 전자 결제 시스템에 의해서 이루어질 수 있다. 제어부(130)는 통신부(110)가 금융 기관(은행 또는 신용카드)서버와 통신을 수행하도록 통신부(110)를 제어할 수 있다. 제어부(130)는 통신부(110)를 통하여 금융 기관에 사용자 계정과 연계된 계좌로부터 특정 아이템에 대응되는 결제 대상 금액을 요청할 수 있다. 다만, 상술한 절차는 실시예에 불과하며, 전자 결제 프로세스를 위해 처음 수행되는 절차는 이에 제한되지 않는다.
한편, 사용자는 사용자 단말기(200)의 카메라를 활성화할 수 없거나, 자신의 사용자 단말기(200)에 구비된 카메라로부터 수신한 카메라 영상(20)이 아닌, 방송 영상(10)을 이용하여, 특정 아이템에 대한 체험을 제공받고자 하는 니즈가 존재할 수 있다. 예를 들어, 사용자는 자신의 얼굴이 아닌 판매자의 얼굴에 입술 메이크업에 대한 아이템을 적용하여 아이템을 체험하고 싶을 수 있다. 또한, 라이브 방송을 진행하는 진행자 역시, 자신의 얼굴에 입술 메이크업에 대한 아이템을 적용하여 소비자들에게 아이템을 소개할 수 있다.
이에, 본 발명에서는 방송 영상(10)에 증강 현실 그래픽 처리를 수행하는 증간 현실 기능을 제공할 수 있다.
도 15의 (a)에 도시된 것과 같이, 제어부(130)는, 사용자 단말기(200)의 디스플레이부 상에 방송 영상(10)이 제공되고 있는 상태에서, 사용자 단말기(200)로부터 방송 영상(10)을 이용한 증강 현실 기능에 대한 활성화 요청을 수신할 수 있다.
방송 영상(10)을 이용한 증강 현실 기능에 대한 활성화 요청은, 사용자 단말(200)로부터 방송 영상(10)을 이용한 증강 현실 기능에 링크된 아이콘(1500)이 선택되는 것에 근거하여 수신될 수 있다.
도 15의 (b)에 도시된 것과 같이, 제어부(130)는 방송 영상(10)을 이용한 증강 현실 기능에 대한 활성화 요청에 근거하여, 라이브 방송 서버(300)로부터 수신하는 방송 영상(20)에 대한 증강 현실 그래픽 처리를 수행할 수 있다.
그래픽 처리가 수행된 방송 영상(10)은, 증강 현실 기능에 대한 활성화 요청에 있더라도, 계속해서 메인 디스플레이 영역(A)을 통해 제공될 수 있다. 또한, 이 경우, 사용자 단말기(200) 상에 서브 디스플레이 영역(B)은 표시되지 않을 수 있다.
한편, 비록 도시되지는 않았지만, 사용자 단말기(200)의 디스플레이부 상에는, 증강 현실 기능에 링크된 제1 아이콘 및 제2 아이콘이 표시될 수 있다. 제1 아이콘은, 사용자 단말기(200)의 카메라로부터 수신되는 카메라 영상(20)을 이용한 증강 현실 기능에 링크되어 있는 아이콘(410, 도 4a의 (a) 참조)이고, 제2 아이콘은, 방송 영상(20)을 이용한 증강 현실 기능에 링크되어 있는 아이콘(1610, 도 16의 (a) 참조)일 수 있다.
제어부(130)는 제1 아이콘(410) 및 제2 아이콘(1610) 중 상기 제2 아이콘(1610)이 선택되어, 증강 현실 기능에 대한 활성화 요청을 수신한 근거하여, 카메라 영상(20)에 대해 증강 현실 그래픽 처리를 수행할 수 있다.
또한, 비록 도시되지는 않았지만, 제어부(130)는, 사용자 단말기(200)로부터 방송 영상(10)을 이용한 증강 현실 기능에 링크된 아이콘이 선택되는 것에 근거하여 증강 현실 기능에 대한 활성화 요청을 수신하면, 방송 영상(10) 및 카메라 영상(20) 중 어느 하나의 영상을 선택할 수 있는 화면(예를 들어, 방송 영상에 대응되는 제1 그래픽 객체 및 카메라 영상에 대응되는 제2 그래픽 객체를 포함하는 화면)을 제공할 수 있다.
제어부(130)는 사용자 단말(200)로부터 방송 영상(10) 및 카메라 영상(20) 중 어느 하나가 선택되는 것에 근거하여, 선택된 영상에 대해 증간 현실 그래픽 처리를 수행할 수 있다.
또한, 비록 도시되지는 않았지만, 제어부(130)는, 판매자의 사용자 단말기(또는 판매자 단말기)에서 방송 영상(10)에 대해 증강 현실 그래픽 처리가 수행된 경우, 소비자의 사용자 단말기(200)에, 증강 현실 그래픽 처리가 수행된 방송 영상(10)을 제공할 수 있다.
또한, 비록 도시되지는 않았지만. 라이브 방송의 방송 영상(10)이 제1 사용자 단말기 및 제2 사용자 단말기 상에 각각 표시되고 있는 상태에서, 제1 사용자 단말기로부터 방송 영상(10)을 이용한 증강 현실 기능에 대한 활성화 요청을 수신하였다고 가정하자. 제어부(130)는 상기 증강 현실 기능에 대한 활성화 요청에 근거하여, 상기 제1 사용자 단말기 상에는 그래픽 처리가 수행된 방송 영상(10)을 표시할 수 있다. 이와 달리, 제2 사용자 단말기 상에는 그래픽 처리가 수행된 카메라 영상이 표시되는 것을 제한할 수 있다.
즉, 본 발명에서는 판매자 단말기로부터 방송 영상(10)을 이용한 증강 현실 기능에 대한 활성화 요청을 수신한 경우, 라이브 방송을 시청하는 제1 사용자 단말기 및 제2 사용자 단말기에 각각 그래픽 처리가 수행된 방송 영상(10)을 표시할 수 있다.
반면에, 라이브 방송을 시청하는 제1 사용자 단말기로부터 방송 영상(10)을 이용한 증강 현실 기능에 대한 활성화 요청을 수신한 경우, 제1 사용자 단말기에는 그래픽 처리가 수행된 방송 영상(10)을 표시하고, 제2 사용자 단말기에는 그래픽 처리가 수행된 방송 영상(20)의 표시를 제한할 수 있다.
또한, 비록 도시되지는 않았지만, 사용자 단말기(200)의 메인 디스플레이 영역(A)에, 그래픽 처리가 수행된 방송 영상(10)이 표시되고 있는 상태에서, 사용자 단말기(200)로부터 증강 현실 기능에 대한 활성화 요청을 수신할 수 있다. 이 경우, 상기 증강 현실 기능에 대한 활성화 요청은, 사용자 단말기(200)의 카메라 영상을 이용한 증강 현실 기능에 대한 활성화 요청일 수 있다.
제어부(130)는, 상기 증강 현실 기능에 대한 활성화 요청에 근거하여, 사용자 단말기(200)의 메인 디스플레이 영역(A)에는, 증강 현실 그래픽 처리가 수행된 카메라 영상(20)을 표시하고, 서브 디스플레이 영역(B)에는 증강 현실 그래픽 처리가 수행된 방송 영상(10)을 표시할 수 있다.
예를 들어, 메인 디스플레이 영역(A)에는, 사용자의 얼굴에 메이크업이 된 카메라 영상이 표시되고, 서브 디스플레이 영역(B)에는, 라이브 방송 진행자의 얼굴에 메이크업이 된 카메라 영상이 표시될 수 있다.
한편, 위에서 설명되는 라이브 방송의 방송 영상은, 실시간 스트리밍되는 영상일 수 있고, 라이브 방송이 종료되어 라이브 방송 서버(200)에 저장된 방송 영상일 수 있다. 이러한 방송 영상은 녹화 방송 영상이라고도 표현될 수 있다. 본 발명에서는 녹화 방송 영상이 사용자 단말기(200) 상에서 제공되고 있는 상태에서도, 증강 현실 기능에 링크된 아이콘을 녹화 방송 영상과 함께 제공할 수 있다. 이 경우, 제어부(130)는 상기 아이콘이 선택되는 것에 근거하여, 위에서 살펴본 방법과 마찬가지로, 사용자 단말기에 구비된 카메라의 카메라 영상을 이용하여 증강 현실 그래픽 처리된 카메라 영상을 제공할 수 있다. 이에, 녹화 방송 영상에 대하여 증강 현실 관련 기능을 제공하는 방법은, 위에서 살펴본 설명으로 대체하도록 한다.
이상에서 살펴본 것과 같이, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 증강현실 기능을 활용하여, 사용자가 라이브 방송을 시청하면서, 라이브 방송에서 소개되는 상품을 체험할 수 있는 사용자 경험을 제공할 수 있다.
이와 같은, 본 발명에 따른 라이브 방송 제공 방법 및 시스템에 의하면, 소비자는, 직접 매장을 방문하지 않더라도, 상품에 대한 체험을 할 수 있어, 매장을 방문하는 시간을 절약함은 물론, 상품의 구매를 보다 신중하게 할 수 있다.
나아가, 본 발명에 따른 라이브 방송 제공 방법 및 시스템에 의하면, 판매자는, 소비자들에게 상품을 다양하게 체험할 수 있는 기회를 제공함으로써, 소비자들의 보다 적극적인 상품 구매를 유도할 수 있다. 나아가, 판매자는 직접 매장을 운영하지 않더라도 라이브 방송을 통하여 다양한 소비자를 만나고, 상품을 체험시킴으로써, 매장을 운영하는 운영비를 절약함은 물론, 상품 판매의 기회를 다양하게 가질 수 있다.
한편, 본 발명에 따른 라이브 방송 제공 방법 및 시스템은, 라이브 방송의 제공, 상품에 대한 체험, 상품에 대한 구매 프로세스 제공을, 라이브 방송이 진행중인 상황에서 일원화하여 제공할 수 있다. 이를 통해, 소비자는 본 발명에 따른 라이브 방송을 시청하는 것 만으로도, 상품에 대한 체험과 구매를 보다 편리하게 수행할 수 있다. 한편, 위에서 살펴본 본 발명은, 컴퓨터에서 하나 이상의 프로세스에 의하여 실행되며, 이러한 컴퓨터로 판독될 수 있는 매체에 저장 가능한 프로그램으로서 구현될 수 있다.
나아가, 위에서 살펴본 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드 또는 명령어로서 구현하는 것이 가능하다. 즉, 본 발명에 따른 다양한 제어방법은 통합하여 또는 개별적으로 프로그램의 형태로 제공될 수 있다.
한편, 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다.
나아가, 컴퓨터가 읽을 수 있는 매체는, 저장소를 포함하며 전자기기가 통신을 통하여 접근할 수 있는 서버 또는 클라우드 저장소일 수 있다. 이 경우, 컴퓨터는 유선 또는 무선 통신을 통하여, 서버 또는 클라우드 저장소로부터 본 발명에 따른 프로그램을 다운로드 받을 수 있다.
나아가, 본 발명에서는 위에서 설명한 컴퓨터는 프로세서, 즉 CPU(Central Processing Unit, 중앙처리장치)가 탑재된 전자기기로서, 그 종류에 대하여 특별한 한정을 두지 않는다.
한편, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (20)

  1. 라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 단계;
    상기 수신에 근거하여, 사용자 단말기의 디스플레이부 상에 상기 방송 영상을 제공하는 단계;
    상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하는 단계;
    상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 단계; 및
    상기 사용자 단말기에서 상기 방송 영상을 수신하고 있는 상태에서, 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 상기 디스플레이부 상에 표시하는 단계를 포함하는 것을 특징으로 하는 라이브 방송 제공 방법.
  2. 제1항에 있어서,
    상기 디스플레이부 상에 표시하는 단계에서는,
    상기 디스플레이부 상에 상기 방송 영상과 함께 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 표시하는 것을 특징으로 하는 라이브 방송 제공 방법.
  3. 제2항에 있어서,
    상기 디스플레이부는, 메인 디스플레이 영역 및 서브 디스플레이 영역 중 적어도 하나를 포함하고,
    상기 방송 영상은, 상기 증강 현실 기능의 활성화 여부에 따라,
    상기 메인 디스플레이 영역 및 상기 서브 디스플레이 영역 중 어느 하나에 표시되는 것을 특징으로 하는 라이브 방송 제공 방법.
  4. 제1항에 있어서,
    상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 디스플레이부의 일 영역에는, 상기 증강 현실 기능에 링크된 아이콘이 표시되고,
    상기 증강 현실 기능에 대한 활성화 요청은, 상기 사용자 단말기로부터 상기 아이콘이 선택되는 것에 근거하여 수신되는 것을 특징으로 하는 라이브 방송 제공 방법.
  5. 제4항에 있어서,
    상기 아이콘의 선택에 근거하여 상기 증강 현실 기능이 활성화되는 경우,
    상기 카메라 영상이 수신되도록, 상기 증강 현실 기능의 활성화에 연동하여 상기 사용자 단말기의 카메라가 활성화되는 것을 특징으로 하는 라이브 방송 제공 방법.
  6. 제4항에 있어서,
    상기 증강 현실 기능에 링크된 아이콘은, 상기 아이템이 증강 현실 기능에 매칭되어 있는지 여부에 근거하여, 상기 디스플레이부 상에 표시되는 것을 특징으로 하는 라이브 방송 제공 방법.
  7. 제6항에 있어서,
    상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 디스플레이 영역의 일 영역에는, 상기 아이템과 관련된 아이템 정보가 포함되고,
    상기 증강 현실 기능에 링크된 아이콘은,
    상기 아이템이 상기 증강 현실 기능에 매칭된 경우, 상기 아이템 정보와 함께, 상기 디스플레이부 상에 표시되는 것을 특징으로 하는 라이브 방송 제공 방법.
  8. 제7항에 있어서,
    상기 디스플레이부 상에서,
    상기 증강 현실 기능에 링크된 아이콘 주변에는, 상기 증강 현실 기능의 활성화를 유도하는 안내 메시지가 표시되는 것을 특징으로 하는 라이브 방송 제공 방법.
  9. 제7항에 있어서,
    상기 사용자 단말기로부터 상기 아이템 정보에 대한 기 설정된 입력이 수신되는 경우, 상기 사용자 단말기에는 상기 아이템에 대응되는 상품을 구매하기 위한 상품 구매 페이지가 제공되는 것을 특징으로 하는 라이브 방송 제공 방법.
  10. 제9항에 있어서,
    상기 상품 구매 페이지는, 상기 사용자 단말기에서 상기 라이브 방송을 수신하고 있는 상태에서 상기 디스플레이부 상에 제공되며,
    상기 상품 구매 페이지를 통한 상기 사용자 단말기로부터 수신되는 결제 요청에 근거하여, 상기 아이템에 대응되는 상품 결제 프로세스가 진행되는 것을 특징으로 하는 라이브 방송 제공 방법.
  11. 제3항에 있어서,
    상기 증강 현실 기능이 비활성화된 상태에서는, 상기 메인 디스플레이 영역 상에 상기 방송 영상이 표시되고,
    상기 증강 현실 기능이 활성화된 상태에서는, 상기 메인 디스플레이 영역 상에 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 표시되고, 상기 서브 디스플레이 영역 상에 상기 방송 영상이 표시되는 것을 특징으로 하는 라이브 방송 제공 방법.
  12. 제11항에 있어서,
    상기 메인 디스플레이 영역 상의 일 영역에는, 상기 증강 현실 기능의 활성화 여부와 독립적으로 상기 아이템과 관련된 아이템 정보가 계속하여 제공되는 것을 특징으로 하는 라이브 방송 제공 방법.
  13. 제1항에 있어서,
    상기 라이브 방송에는,
    증강 현실 기능에 매칭된 제1 타입의 아이템 및 증강 현실 기능에 매칭되지 않은 제2 타입의 아이템 중 적어도 하나가 연계되고,
    상기 제1 타입의 아이템 및 상기 제2 타입의 아이템은,
    상기 라이브 방송에서 판매의 되는 상품(商品)에 해당하는 것을 특징으로 하는 라이브 방송 제공 방법.
  14. 제13항에 있어서,
    상기 증강 현실 그래픽 처리를 수행하는 단계에서는,
    상기 증강 현실 기능에 매칭된 제1 타입의 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 것을 특징으로 하는 라이브 방송 제공 방법.
  15. 제1항에 있어서,
    상기 아이템에는, 적어도 하나의 색상 정보가 매칭되어 존재하고,
    상기 증강 현실 그래픽 처리를 수행하는 단계에서는,
    상기 카메라 영상에 상기 색상 정보에 대응되는 색상이 보여지도록, 상기 카메라 영상의 적어도 일부분의 색상을 변환하는 것을 특징으로 하는 라이브 방송 제공 방법.
  16. 제15항에 있어서,
    상기 증강 현실 그래픽 처리를 수행하는 단계에서는,
    상기 아이템의 종류에 근거하여, 상기 카메라 영상에서 색상을 변환할 특정 부분을 특정하고,
    상기 카메라 영상에서 상기 특정 부분의 색상을 상기 색상 정보에 대응되도록 변환하는 것을 특징으로 하는 라이브 방송 제공 방법.
  17. 제16항에 있어서,
    상기 증강 현실 그래픽 처리를 수행하는 단계는,
    상기 카메라 영상에서 사용자 얼굴을 인식하는 단계;
    상기 사용자 얼굴 중 상기 아이템의 종류에 대응되는 상기 특정 부분을 특정하는 단계; 및
    상기 특정 부분의 색상을 상기 색상 정보에 대응되도록 변환하는 단계를 포함하는 것을 특징으로 하는 라이브 방송 제공 방법.
  18. 제17항에 있어서,
    상기 아이템은,
    상기 라이브 방송에서 판매의 대상이되는 상품에 해당하고,
    상기 특정하는 단계에서는,
    상기 상품이 입술(lip) 메이크업(makeup)에 대한 상품인 경우, 상기 사용자 얼굴 중 입술 부분을 상기 특정 부분으로서 특정하고,
    상기 상품이 눈(eye) 메이크업에 대한 상품인 경우, 상기 사용자 얼굴 중 눈 부분을 상기 특정 부분으로서 특정하는 것을 특징으로 하는 라이브 방송 제공 방법.
  19. 통신부, 카메라 및 디스플레이부를 포함하는 사용자 단말과 연동하는 라이브 방송 제공 시스템에 있어서,
    상기 통신부를 통해, 라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 제어부를 포함하고,
    상기 제어부는, 상기 사용자 단말의 디스플레이부 상에 상기 방송 영상을 제공하고, 상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하며,
    상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하고,
    상기 사용자 단말기에서 상기 방송 영상을 수신하고 있는 상태에서, 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 상기 디스플레이부 상에 표시하는 것을 특징으로 하는 라이브 방송 제공 시스템.
  20. 전자기기에서 하나 이상의 프로세스에 의하여 실행되며, 컴퓨터로 판독될 수 있는 기록매체에 저장된 프로그램으로서,
    상기 프로그램은,
    라이브 방송 서버로부터, 라이브 방송의 방송 영상을 수신하는 단계;
    상기 수신에 근거하여, 사용자 단말기의 디스플레이부 상에 상기 방송 영상을 제공하는 단계;
    상기 디스플레이부 상에 상기 방송 영상이 제공되고 있는 상태에서, 상기 사용자 단말기로부터 상기 라이브 방송과 관련된 증강 현실 기능에 대한 활성화 요청을 수신하는 단계;
    상기 활성화 요청에 응답하여, 상기 사용자 단말기에 구비된 카메라로부터 수신되는 카메라 영상에 대해, 상기 라이브 방송에 연계된 아이템과 관련된 증강 현실 그래픽 처리를 수행하는 단계; 및
    상기 사용자 단말기에서 상기 방송 영상을 수신하고 있는 상태에서, 상기 증강 현실 그래픽 처리가 수행된 상기 카메라 영상을 상기 디스플레이부 상에 표시하는 단계를 수행하는 명령어들을 포함하는 것을 특징으로 하는 컴퓨터로 판독될 수 있는 기록매체에 저장된 프로그램.
KR1020220078544A 2022-06-27 2022-06-27 라이브 방송 제공 방법 및 시스템 KR102632812B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220078544A KR102632812B1 (ko) 2022-06-27 2022-06-27 라이브 방송 제공 방법 및 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220078544A KR102632812B1 (ko) 2022-06-27 2022-06-27 라이브 방송 제공 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20240001631A true KR20240001631A (ko) 2024-01-03
KR102632812B1 KR102632812B1 (ko) 2024-02-01

Family

ID=89539079

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220078544A KR102632812B1 (ko) 2022-06-27 2022-06-27 라이브 방송 제공 방법 및 시스템

Country Status (1)

Country Link
KR (1) KR102632812B1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160096546A (ko) * 2015-02-05 2016-08-16 김가임 쇼핑을 위한 증강현실 체험 시스템 및 방법
KR20200109219A (ko) * 2019-03-12 2020-09-22 주식회사 케이티 증강현실 서비스를 제공하는 단말 및 서버
KR20200144823A (ko) * 2019-06-19 2020-12-30 주식회사 이매지니어스 사용자 어플리케이션을 이용한 전자 상거래 중개 시스템 및 방법
KR102299565B1 (ko) * 2021-04-27 2021-09-08 (주)비코 실시간 방송 영상에서 실시간으로 인물 객체를 인식하고 영상 처리하는 방법 및 이러한 방법을 수행하는 장치
KR20210145891A (ko) * 2020-05-25 2021-12-03 주식회사 이매지니어스 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160096546A (ko) * 2015-02-05 2016-08-16 김가임 쇼핑을 위한 증강현실 체험 시스템 및 방법
KR20200109219A (ko) * 2019-03-12 2020-09-22 주식회사 케이티 증강현실 서비스를 제공하는 단말 및 서버
KR20200144823A (ko) * 2019-06-19 2020-12-30 주식회사 이매지니어스 사용자 어플리케이션을 이용한 전자 상거래 중개 시스템 및 방법
KR20210145891A (ko) * 2020-05-25 2021-12-03 주식회사 이매지니어스 생체정보를 이용한 인증 수단 및 증강현실 가상피팅 서비스를 제공하는 전자 상거래 시스템 및 방법
KR102299565B1 (ko) * 2021-04-27 2021-09-08 (주)비코 실시간 방송 영상에서 실시간으로 인물 객체를 인식하고 영상 처리하는 방법 및 이러한 방법을 수행하는 장치

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Perfect Corp: Beauty Tech AI & AR, "Beauty Tech: AR Beauty Live Casting on Web | Virtual Makeup Try On | Beauty Trends", 2021.07.27.* *

Also Published As

Publication number Publication date
KR102632812B1 (ko) 2024-02-01

Similar Documents

Publication Publication Date Title
US20210073899A1 (en) Augmented Reality System and Method for Visualizing an Item
US10895961B2 (en) Progressive information panels in a graphical user interface
US20210217055A1 (en) Three dimensional proximity recommendation system
US8311915B2 (en) Detail-in-context lenses for interacting with objects in digital image presentations
US10089680B2 (en) Automatically fitting a wearable object
US9535945B2 (en) Intent based search results associated with a modular search object framework
US10185976B2 (en) Shopping systems, user interfaces and methods
US20170220591A1 (en) Modular search object framework
US20160189268A1 (en) Wearable device for interacting with media-integrated vendors
EP2940607A1 (en) Enhanced search results associated with a modular search object framework
US11087390B1 (en) Method and system for displaying items provided by a merchant
US20150363872A1 (en) Virtual bundles
EP3299935A1 (en) Method for providing demonstration information in simulation environment, and associated simulation system
US10282904B1 (en) Providing augmented reality view of objects
KR102632812B1 (ko) 라이브 방송 제공 방법 및 시스템
KR102638455B1 (ko) 라이브 방송 제공 방법 및 시스템
KR102659455B1 (ko) 라이브 방송 제공 방법 및 시스템
KR102659456B1 (ko) 라이브 방송 제공 방법 및 시스템
JP2023065322A (ja) オンラインショッピング情報提供方法、コンピュータプログラム及びユーザ端末
JP6938562B2 (ja) オンライン販売システム、オンライン販売方法、コンピュータプログラム
KR101700525B1 (ko) 모바일 단말 원격 체험 시스템을 활용한 온라인 모바일 단말 판매 방법 및 시스템
KR101981228B1 (ko) 이미지 스크롤에 적합한 시퀀스 이차원 이미지의 태그정보 처리 장치
Patel et al. Immersive Interior Design: Exploring Enhanced Visualization Through Augmented Reality Technologies
Govindharajan Study of Factors in Implementation of Virtual Reality for Developing Microenterprise Level Customizable Products Shopping Applications

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant