KR20240007541A - 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법 - Google Patents

인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법 Download PDF

Info

Publication number
KR20240007541A
KR20240007541A KR1020220084610A KR20220084610A KR20240007541A KR 20240007541 A KR20240007541 A KR 20240007541A KR 1020220084610 A KR1020220084610 A KR 1020220084610A KR 20220084610 A KR20220084610 A KR 20220084610A KR 20240007541 A KR20240007541 A KR 20240007541A
Authority
KR
South Korea
Prior art keywords
object information
video content
product
character
unit
Prior art date
Application number
KR1020220084610A
Other languages
English (en)
Inventor
이승헌
Original Assignee
주식회사 슈퍼셀
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 슈퍼셀 filed Critical 주식회사 슈퍼셀
Priority to KR1020220084610A priority Critical patent/KR20240007541A/ko
Publication of KR20240007541A publication Critical patent/KR20240007541A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4662—Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Accounting & Taxation (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Development Economics (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템은, 동영상 컨텐츠를 구성하는 복수개의 동영상 컨텐츠 프레임을 분리하여 추출하는 동영상 컨텐츠 프레임 추출부; 상기 동영상 컨텐츠 프레임 추출부를 통해 추출된 동영상 컨텐츠 프레임에 존재하는 캐릭터를 나타내는 캐릭터 객체와 상기 캐릭터가 착용한 제품 객체를 인식하는 객체 인식부; 상기 객체 인식부에서 인식되는 객체를 나타내는 객체 정보를 판단하기 위한 기준이 되는 정보인 기준 객체 관련 정보가 적어도 하나 이상 기저장되도록 구비되는 기준 객체 정보 저장부; 상기 객체 정보를 추출하는 객체 정보 추출부; 상기 객체 정보와 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출하는 기계 학습부; 및 상기 기계 학습부를 통해 추출된 기준 객체 정보가 나타내는 객체를 판매하는 판매처를 검색하여 제공하는 검색부;를 포함하는 것을 특징으로 한다.

Description

인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법{A system for providing product recommendation service in video content based on artificial neural network and method for providing product recommendation service using the same}
본 발명은 시청자가 재생중인 동영상 컨텐츠 내에 노출되는 상품에 대한 구매를 진행하고자 하는 경우, 상기 동영상 컨텐츠를 통해 나타나는 제품에 대한 정보를 취득할 수 있도록 제공되는 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법에 관한 것이다.
최근 보편화된 스마트 폰으로 인해, 언제 어디서나 동영상 컨텐츠를 시청할 수 있는 유비쿼터스 스크린 시대가 도래하였다.
이와 같은 동영상 컨텐츠 스트리밍 시스템의 확장, 모바일 동영상 컨텐츠의 확장과 더불어 모바일 동영상 컨텐츠 광고시장도 급격하게 성장하고 있다.
특히, 5G 데이터 이동 통신이 본격적으로 상용화 됨에 따라, 상기 컨텐츠의 중요성이 부각되었으며, 그 중심에는 동영상 컨텐츠가 있다.
한편, TV 드라마, 웹, SNS 동영상 컨텐츠 시청 시, 시청자는 피사체가 입고 있는 제품이 무엇인지 궁금해하는 경우가 빈번하게 발생된다. 이때, 시청자는 상기 제품에 대한 제품 정보를 취득하고자, 인터넷을 통한 재검색을 진행하게 되는데, 일반적으로 상기 제품 정보 취득 시, 정확한 제품명을 알지 못하는 상태에서 진행하게 됨에 따라, 상기 제품에 대한 정보의 정확도가 낮아지는 문제점을 내포하고 있었다.
KR 10-0895293 B1, '영상 콘텐츠 내 디지털 객체의 정보 연동을 위한 사이버태그, 콘텐츠 재생 장치, 방법 및 시스템'
따라서, 본 발명은 상술한 문제점을 해결하기 위해 창출된 것으로, 종래기술의 문제점을 해결하는 동영상 컨텐츠 상의 제품 구매 보조 서비스 제공 방법에 관한 것이다.
구체적으로, 본 발명의 목적은 동영상 컨텐츠의 시청 도중에도, 사용자 측에서 동영상 컨텐츠를 통해 출력되는 임의의 제품을 선택할 수 있도록 구성되면서, 선택된 어느 하나의 특정 제품에 대한 대한 세부정보를 취득 가능하도록 함으로써, 동영상 컨텐츠 시청 이후, 별도의 제품 검색을 실시하지 않고도 제품에 대한 정보 파악 또는 구매를 가능하게 유도하여, 상기 제품에 대한 광고효과를 촉진할 수 있는 제품 검색 서비스를 제공하는 것을 목적으로 한다.
본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템은, 동영상 컨텐츠를 구성하는 복수개의 동영상 컨텐츠 프레임을 분리하여 추출하는 동영상 컨텐츠 프레임 추출부; 상기 동영상 컨텐츠 프레임 추출부를 통해 추출된 동영상 컨텐츠 프레임에 존재하는 캐릭터를 나타내는 캐릭터 객체와 상기 캐릭터가 착용한 제품 객체를 인식하는 객체 인식부; 상기 객체 인식부에서 인식되는 객체를 나타내는 객체 정보를 판단하기 위한 기준이 되는 정보인 기준 객체 관련 정보가 적어도 하나 이상 기저장되도록 구비되는 기준 객체 정보 저장부; 상기 객체 정보를 추출하는 객체 정보 추출부; 상기 객체 정보와 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출하는 기계 학습부; 및 상기 기계 학습부를 통해 추출된 기준 객체 정보가 나타내는 객체를 판매하는 판매처를 검색하여 제공하는 검색부;를 포함하는 것을 특징으로 한다.
보다 상세하게는, 상기 기계 학습부는, 상기 캐릭터를 이루는 관절 부분을 추출하여 상기 캐릭터의 상체 및 하체를 구분하도록 작동되는 상하체 구분 모듈; 상기 캐릭터의 상체에 해당되는 구역에 존재하는 제품 객체를 나타내는 정보인 제 1 제품 객체 정보와 유사한 기준 객체 정보를 추출하는 제 1 기준 객체 추출 모듈; 및 상기 캐릭터의 하체에 해당되는 구역에 존재하는 제품 객체를 나타내는 제 2 제품 객체 정보와 유사한 기준 객체 정보를 추출하는 제 2 제품 추출 모듈;을 포함하는 것을 특징으로 한다.
그리고, 본 발명의 일 실시예에 따른 제품 추천 서비스 제공 방법은, 동영상 컨텐츠 프레임 추출부, 객체 인식부, 기준 객체 정보 저장부, 객체 정보 추출부, 기계 학습부 및 검색부를 포함하는 제품 추천 서비스 제공 시스템을 통해 진행되는 제품 추천 서비스 제공 방법으로써, 상기 제품 추천 서비스 제공 방법은, 적어도 하나 이상의 동영상 컨텐츠를 저장하는 동영상 컨텐츠 저장 단계; 상기 동영상 컨텐츠 저장 단계 이후, 상기 동영상 컨텐츠를 구성하는 복수의 동영상 컨텐츠 프레임을 분리하여 추출하는 동영상 컨텐츠 프레임 추출 단계; 상기 동영상 컨텐츠 프레임 추출 단계 이후, 상기 동영상 컨텐츠 프레임 내의 캐릭터를 나타내는 캐릭터 객체를 인식하고, 상기 캐릭터 객체의 관절점을 복수개 추출하는 관절 추출 단계; 상기 관절 추출 단계를 통해 추출된 상기 관절점을 기반으로 상기 캐릭터 객체의 상하체를 구분하여 인식하는 상하체 인식 단계; 상기 상하체 인식 단계 이후, 상기 캐릭터 객체의 상체 및 하체 위치에 배치된 제품 객체를 나타내는 정보인 제품 객체 정보를 추출하는 제품 객체 정보 추출 단계; 상기 제품 객체 정보 추출 단계 이후, 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출하는 기준 객체 정보 추출 단계; 및 상기 기준 객체 정보 추출 단계를 통해 추출된 기준 객체 정보와 관련된 제품을 판매하는 판매처를 나타내는 판매처 정보를 출력하는 제품 추천 단계;를 포함하는 것을 특징으로 한다.
본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 방법은 동영상 컨텐츠의 시청을 진행하면서, 상기 동영상 컨텐츠에 등장하는 등장인물들이 사용하고 있는 제품에 대한 정보를 보다 신속하게 확보할 수 있는 효과를 제공할 수 있으며, 동영상 컨텐츠 시청 이후, 별도의 제품 검색을 실시하지 않고도 제품에 대한 정보 파악 또는 구매를 가능하게 유도함으로써, 상기 제품에 대한 광고효과를 촉진할 수 있는 효과를 제공할 수 있다.
또한, 사용자가 동영상 컨텐츠의 시청중에도 제품에 대한 정보를 신속하게 획득하도록 유도하여, 별도의 특정 제품에 대한 검색 절차를 진행하지 않고도 제품에 대한 구매 욕구를 유발할 수 있는 효과를 제공할 수 있다.
그리고, 상기 제품에 대한 정보의 취득을 보조할 수 있을 뿐만 아니라, 구매까지의 과정을 보조할 수 있어, 사용자에게 보다 향상된 사용 편의성을 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템에 대해 개략적으로 도시한 모식도이다.
도 2는 본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템을 구성하는 서비스 서버의 세부 구성을 도시한 블록선도이다.
도 3은 본 발명의 일 실시예에 따른 제품 추천 서비스 제공 방법의 진행 순서를 도식화한 진행 순서도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다.
그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
또한, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다.
본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 이외의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템에 대해 개략적으로 도시한 모식도이다.
도 1에 도시된 바와 같이, 본 발명의 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템은, 동영상 컨텐츠를 제공하도록 구축되는 미디어 서버(100), 인공 신경망이 구축되는 서비스 서버(200) 및 사용자 단말기(300)를 포함한다.
먼저, 상기 미디어 서버(100)는 동영상 컨텐츠를 제작하도록 구축되는 것으로, 예를 들어 상기 동영상 컨텐츠의 제작자인 방송국, 개인 컨텐츠 제작자, 인플루언서를 포함하는 상기 동영상 컨텐츠에 대한 저작권을 보유한 컨텐츠 제작자 측에서 운용되도록 구비된다.
그리고, 상기 서비스 서버(200)는 상기의 단말기들과 통신 연결가능하도록 마련되어 각 단말기간의 네트워크망을 구축할 수 있도록 구비됨과 동시에, 상기의 단말기에 의해 발생되는 각종 데이터에 대한 연산 및/또는 처리 및/또는 가공을 진행하도록 마련되며, 상기 데이터에 대한 연산, 처리, 가공 진행 시, 인공 신경망을 기반으로 진행할 수 있도록, 상기 서비스 서버(200)에 인공 신경망이 탑재될 수 있다.
다음으로 상기 사용자 단말기(300)는 휴대폰, 스마트폰, 노트북 컴퓨터, 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 슬레이트 PC, 태블릿 PC, 워치형 단말기, 글래스형 단말기(smart glass), HMD(head mounted display) 등을 포함할 수 있다.
다음으로, 도 2를 참조하여 상기 서비스 서버(200)에 대해 보다 상세히 설명하도록 한다.
도 2에 도시된 바와 같이, 상기 서비스 서버(200)는 동영상 컨텐츠 프레임 추출부(210), 객체 인식부(220), 기준 객체 정보 저장부(230), 객체 정보 추출부(240), 기계 학습부(250), 검색부(260) 및 제어부(270)를 포함하는 것을 특징으로 한다.
먼저, 상기 동영상 컨텐츠 프레임 추출부(210)는 동영상 컨텐츠를 구성하는 복수개의 동영상 컨텐츠 프레임을 분리하여 추출하도록 진행된다.
그리고, 상기 객체 인식부(220)는 상기 동영상 컨텐츠 프레임 추출부를 통해 추출된 동영상 컨텐츠 프레임에 존재하는 캐릭터를 나타내는 캐릭터 객체와 상기 캐릭터가 착용한 제품 객체를 인식하도록 진행된다.
다음으로, 상기 기준 객체 정보 저장부(230)는 상기 객체 인식부에서 인식되는 객체를 나타내는 객체 정보를 판단하기 위한 기준이 되는 정보인 기준 객체 관련 정보가 적어도 하나 이상 기저장되도록 구비된다.
그리고, 상기 객체 정보 추출부(240)는 상기 객체 정보를 추출하도록 구비된다.
또한, 상기 기계 학습부(250)는 상기 객체 정보와 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출한다.
특히, 상기 기계 학습부(260)는, 상하체 구분 모듈, 제 1 기준 객체 추출 모듈 및 제 2 제품 추출 모듈을 포함하는 것을 특징으로 한다.
여기서, 상기 상하체 구분 모듈은 상기 캐릭터를 이루는 관절 부분을 추출하여 상기 캐릭터의 상체 및 하체를 구분하도록 작동된다.
그리고, 상기 제 1 기준 객체 추출 모듈은 상기 캐릭터의 상체에 해당되는 구역에 존재하는 제품 객체를 나타내는 정보인 제 1 제품 객체 정보와 유사한 기준 객체 정보를 추출하게 된다.
또한, 상기 제 2 제품 추출 모듈은 상기 캐릭터의 하체에 해당되는 구역에 존재하는 제품 객체를 나타내는 제 2 제품 객체 정보와 유사한 기준 객체 정보를 추출하도록 구비된다.
다음으로, 상기 검색부(260)는 상기 기계 학습부를 통해 추출된 기준 객체 정보가 나타내는 객체를 판매하는 판매처를 검색하여 제공하도록 구비되며, 상기 판매처를 검색한 결과를 상술한 사용자 단말기 측으로 전송하게 된다.
이때, 상기 검색부(260)에서 상기 사용자 단말기로의 정보 전송을 진행하기 위해, 통신부(270)가 구비될 수 있다.
마지막으로, 상기 제어부(280)는 전술한 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(280)는 상기 서비스 서버(200)의 구동을 위하여, 상기 서비스 서버(200)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
도 3은 본 발명의 일 실시예에 따른 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 방법의 진행 순서를 도식화한 진행 순서도이다.
먼저, 상기 제품 추천 서비스 제공 방법은 동영상 컨텐츠 프레임 추출부, 객체 인식부, 기준 객체 정보 저장부, 객체 정보 추출부, 기계 학습부 및 검색부를 포함하는 제품 추천 서비스 제공 시스템을 통해 진행된다.
특히, 도 3에 도시된 바와 같이, 본 발명의 일 실시예에 따른 제품 추천 서비스 제공 방법은 동영상 컨텐츠 저장 단계(S100), 동영상 컨텐츠 프레임 추출 단계(S200), 관절 추출 단계(S300), 상하체 인식 단계(S400), 제품 객체 정보 추출 단계(S500), 기준 객체 정보 추출 단계(S600) 및 제품 추천 단계(S700)를 포함하는 것을 특징으로 한다.
먼저, 상기 동영상 컨텐츠 저장 단계(S100)는 적어도 하나 이상의 동영상 컨텐츠를 저장하도록 진행된다.
그리고, 상기 동영상 컨텐츠 프레임 추출 단계(S200)는 상기 동영상 컨텐츠 저장 단계 이후, 상기 동영상 컨텐츠를 구성하는 복수의 동영상 컨텐츠 프레임을 분리하여 추출하도록 진행된다.
또한, 관절 추출 단계(S300)는 상기 상기 동영상 컨텐츠 프레임 추출 단계 이후, 상기 동영상 컨텐츠 프레임 내의 캐릭터를 나타내는 캐릭터 객체를 인식하고, 상기 캐릭터 객체의 관절점을 복수개 추출하도록 진행된다.
다음으로, 상기 상하체 인식 단계(S400)는 상기 관절 추출 단계를 통해 추출된 상기 관절점을 기반으로 상기 캐릭터 객체의 상하체를 구분하여 인식하도록 진행된다.
이어서, 상기 제품 객체 정보 추출 단계(S500)는 상기 상하체 인식 단계 이후, 상기 캐릭터 객체의 상체 및 하체 위치에 배치된 제품 객체를 나타내는 정보인 제품 객체 정보를 추출하도록 진행된다.
다음으로, 상기 기준 객체 정보 추출 단계(S600)는 상기 제품 객체 정보 추출 단계 이후, 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출하도록 진행된다.
그리고, 상기 제품 추천 단계(S700)는 상기 기준 객체 정보 추출 단계를 통해 추출된 기준 객체 정보와 관련된 제품을 판매하는 판매처를 나타내는 판매처 정보를 사용자 단말기를 통해 출력하도록 진행된다.
이상에서 기술한 본 발명에 따른 각 단계는 필요에 따라 서로 순서가 바뀌어 실행될 수 있고, 이렇게 순서가 바뀌어 실행되는 실시예의 경우에도 본 발명의 권리범위에 속함은 당연하다.
이상과 같이 본 발명을 도면에 도시한 실시예를 참고하여 설명하였으나, 이는 발명을 설명하기 위한 것일 뿐이며, 본 발명이 속하는 기술 분야의 통상의 지식을 가진 자라면 발명의 상세한 설명으로부터 다양한 변형 또는 균등한 실시예가 가능하다는 것을 이해할 수 있을 것이다.
따라서 본 발명의 진정한 권리범위는 특허청구범위의 기술적 사상에 의해 결정되어야 한다.
100 : 미디어 서버
200 : 서비스 서버
210 : 동영상 컨텐츠 프레임 추출부
220 : 객체 인식부
230 : 기준 객체 정보 저장부
240 : 객체 정보 추출부
250 : 기계 학습부
260 : 검색부
270 : 통신부
280 : 제어부
300 : 사용자 단말기

Claims (3)

  1. 동영상 컨텐츠를 제공하도록 구축되는 미디어 서버(100), 인공 신경망이 구축되는 서비스 서버(200) 및 사용자 단말기(300)를 포함하는 서비스 제공 시스템으로써,
    동영상 컨텐츠를 구성하는 복수개의 동영상 컨텐츠 프레임을 분리하여 추출하는 동영상 컨텐츠 프레임 추출부(210);
    상기 동영상 컨텐츠 프레임 추출부를 통해 추출된 동영상 컨텐츠 프레임에 존재하는 캐릭터를 나타내는 캐릭터 객체와 상기 캐릭터가 착용한 제품 객체를 인식하는 객체 인식부(220);
    상기 객체 인식부에서 인식되는 객체를 나타내는 객체 정보를 판단하기 위한 기준이 되는 정보인 기준 객체 관련 정보가 적어도 하나 이상 기저장되도록 구비되는 기준 객체 정보 저장부(230);
    상기 객체 정보를 추출하는 객체 정보 추출부(240);
    상기 객체 정보와 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출하는 기계 학습부(250); 및
    상기 기계 학습부를 통해 추출된 기준 객체 정보가 나타내는 객체를 판매하는 판매처를 검색하여 제공하는 검색부(260);를 포함하는 것을 특징으로 하는 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템.
  2. 제 1 항에 있어서,
    상기 기계 학습부는,
    상기 캐릭터를 이루는 관절 부분을 추출하여 상기 캐릭터의 상체 및 하체를 구분하도록 작동되는 상하체 구분 모듈;
    상기 캐릭터의 상체에 해당되는 구역에 존재하는 제품 객체를 나타내는 정보인 제 1 제품 객체 정보와 유사한 기준 객체 정보를 추출하는 제 1 기준 객체 추출 모듈; 및
    상기 캐릭터의 하체에 해당되는 구역에 존재하는 제품 객체를 나타내는 제 2 제품 객체 정보와 유사한 기준 객체 정보를 추출하는 제 2 제품 추출 모듈;을 포함하는 것을 특징으로 하는 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템.
  3. 동영상 컨텐츠 프레임 추출부, 객체 인식부, 기준 객체 정보 저장부, 객체 정보 추출부, 기계 학습부 및 검색부를 포함하는 제품 추천 서비스 제공 시스템을 통해 진행되는 제품 추천 서비스 제공 방법으로써,
    상기 제품 추천 서비스 제공 방법은,
    적어도 하나 이상의 동영상 컨텐츠를 저장하는 동영상 컨텐츠 저장 단계;
    상기 동영상 컨텐츠 저장 단계 이후, 상기 동영상 컨텐츠를 구성하는 복수의 동영상 컨텐츠 프레임을 분리하여 추출하는 동영상 컨텐츠 프레임 추출 단계;
    상기 동영상 컨텐츠 프레임 추출 단계 이후, 상기 동영상 컨텐츠 프레임 내의 캐릭터를 나타내는 캐릭터 객체를 인식하고, 상기 캐릭터 객체의 관절점을 복수개 추출하는 관절 추출 단계;
    상기 관절 추출 단계를 통해 추출된 상기 관절점을 기반으로 상기 캐릭터 객체의 상하체를 구분하여 인식하는 상하체 인식 단계;
    상기 상하체 인식 단계 이후, 상기 캐릭터 객체의 상체 및 하체 위치에 배치된 제품 객체를 나타내는 정보인 제품 객체 정보를 추출하는 제품 객체 정보 추출 단계;
    상기 제품 객체 정보 추출 단계 이후, 상기 객체 정보 저장부에 기저장된 상태에 있는 기준 객체 정보간의 유사도를 판단하여, 상기 객체 정보와 가장 높은 유사도를 가지는 기준 객체 정보를 추출하는 기준 객체 정보 추출 단계; 및
    상기 기준 객체 정보 추출 단계를 통해 추출된 기준 객체 정보와 관련된 제품을 판매하는 판매처를 나타내는 판매처 정보를 출력하는 제품 추천 단계;를 포함하는 것을 특징으로 하는 제품 추천 서비스 제공 방법.
KR1020220084610A 2022-07-08 2022-07-08 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법 KR20240007541A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220084610A KR20240007541A (ko) 2022-07-08 2022-07-08 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220084610A KR20240007541A (ko) 2022-07-08 2022-07-08 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법

Publications (1)

Publication Number Publication Date
KR20240007541A true KR20240007541A (ko) 2024-01-16

Family

ID=89719637

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220084610A KR20240007541A (ko) 2022-07-08 2022-07-08 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법

Country Status (1)

Country Link
KR (1) KR20240007541A (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100895293B1 (ko) 2006-09-29 2009-04-29 한국전자통신연구원 영상 콘텐츠 내 디지털 객체의 정보 연동을 위한 사이버태그, 콘텐츠 재생 장치, 방법 및 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100895293B1 (ko) 2006-09-29 2009-04-29 한국전자통신연구원 영상 콘텐츠 내 디지털 객체의 정보 연동을 위한 사이버태그, 콘텐츠 재생 장치, 방법 및 시스템

Similar Documents

Publication Publication Date Title
CN111143610B (zh) 一种内容推荐方法、装置、电子设备和存储介质
US10839605B2 (en) Sharing links in an augmented reality environment
CN110134931B (zh) 媒介标题生成方法、装置、电子设备及可读介质
CN110781347A (zh) 一种视频处理方法、装置、设备以及可读存储介质
US20190333478A1 (en) Adaptive fiducials for image match recognition and tracking
KR102246305B1 (ko) 증강 미디어 서비스 제공 방법, 장치 및 시스템
US11934953B2 (en) Image detection apparatus and operation method thereof
CN103686344A (zh) 增强视频系统及方法
EP3451679A1 (en) Method for providing media-content related information, device, server, and computer-readable storage medium for executing the method
US11302361B2 (en) Apparatus for video searching using multi-modal criteria and method thereof
CN111177467A (zh) 对象推荐方法与装置、计算机可读存储介质、电子设备
CN111783508A (zh) 用于处理图像的方法和装置
KR20180093721A (ko) 디스플레이 장치와 방법 및 광고 서버
CN111738769A (zh) 视频处理方法及装置
CN115269913A (zh) 一种基于注意力片段提示的视频检索方法
US20220301312A1 (en) Electronic apparatus for identifying content based on an object included in the content and control method thereof
CN113869063A (zh) 数据推荐方法、装置、电子设备及存储介质
CN111542817A (zh) 信息处理装置、视频检索方法、生成方法及程序
KR20240007541A (ko) 인공 신경망 기반의 동영상 컨텐츠 내 제품 추천 서비스 제공 시스템 및 이를 이용한 제품 추천 서비스 제공 방법
KR20210110030A (ko) 멀티미디어 콘텐츠 내 상품 정보 제공 장치 및 방법
KR101526872B1 (ko) 문어체 변환단계를 포함하는 광고 제공방법
CN106778449B (zh) 动态影像的物件辨识方法及自动截取目标图像的互动式影片建立方法
KR102557178B1 (ko) 동영상 컨텐츠 융합형 상품 검색 서비스 제공 방법
US11917222B1 (en) Determining visual content of media programs from scripts
KR102494591B1 (ko) 전자 장치, 그 제어 방법 및 전자 시스템

Legal Events

Date Code Title Description
E902 Notification of reason for refusal