KR20230061780A - Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법 - Google Patents

Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법 Download PDF

Info

Publication number
KR20230061780A
KR20230061780A KR1020210146363A KR20210146363A KR20230061780A KR 20230061780 A KR20230061780 A KR 20230061780A KR 1020210146363 A KR1020210146363 A KR 1020210146363A KR 20210146363 A KR20210146363 A KR 20210146363A KR 20230061780 A KR20230061780 A KR 20230061780A
Authority
KR
South Korea
Prior art keywords
recommended
location
information
video data
image
Prior art date
Application number
KR1020210146363A
Other languages
English (en)
Inventor
구원용
박병규
Original Assignee
엠랩 주식회사
(주)댁스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠랩 주식회사, (주)댁스 filed Critical 엠랩 주식회사
Priority to KR1020210146363A priority Critical patent/KR20230061780A/ko
Priority to PCT/KR2021/015403 priority patent/WO2023074965A1/ko
Publication of KR20230061780A publication Critical patent/KR20230061780A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668—Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4524—Management of client data or end-user data involving the geographical location of the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 라이브 방송 및 스트리밍 컨텐츠를 제공하는 OTT 서비스를 이용하는 사용자 단말의 위치 정보 및 이동 경로에 기반하여 최적의 맞춤형 영상 데이터(동영상)를 추천 및 제공할 수 있도록 하는 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법에 관한 것이다.

Description

OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법{MODULE AND METHOD FOR RECOMMENDING VIDEO BASED ON LOCATION APPLIED TO MULTIMEDIA BOX FOR OTT}
본 발명은 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법에 관한 것으로서, 보다 구체적으로는, 라이브 방송 및 스트리밍 컨텐츠를 제공하는 OTT 서비스를 이용하는 사용자 단말의 위치 정보 및 이동 경로에 기반하여 최적의 맞춤형 영상 데이터(동영상)를 추천 및 제공할 수 있도록 하는 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법에 관한 것이다.
최근, 전세계적으로 한류 콘텐츠의 파급력 상승과 OTT 등 콘텐츠 선별 시청 시장의 확대됨에 따라, 아센 5개국 및 동남아 국가에서 한국 방송 콘텐츠 인기 상승 및 한류 콘텐츠를 한국어로 즐기고자 하는 니즈 증가되고 있다.
특히, 동남아에서 SVoD와 AVoD 시장이 경쟁 중에 있고, 광고형 서비스가 현재 높은 비율로 앞서고 있으며, 현지 브로드밴드 환경 향상으로 스마트폰과 TV 연동 플랫폼을 통해 편의성을 높인 서비스가 인기를 끌고 있음은 물론, 동남아시아 지역의 지상파 아날로그 방송에서 디지털로 전환 가속화도 진행되고 있다.
한편, 종래의 OTT 서비스의 경우, 서비스는 웹과 앱 등 온라인에만 집중하여, 실시간 방송을 대형 LCD TV 화면으로 시청하기 원하는 해외시청자들의 수요를 충족시키지 못하는 문제점을 가지고 있었다. 또한, 종래의 OTT 서비스에서 제공하는 한류 콘텐츠는 주로 대형 방송사, 스트리밍 서비스에서 제공되는 드라마, 예능 콘텐츠 위주로 제공되어 한류콘텐츠의 다양성을 홍보하는데 한계가 있었다.
뿐만 아니라, 종래의 OTT 서비스는 사용자 들의 취향에 따른 추천 동영상을 제공함에 있어서, 사용자가 현재 위치한 장소의 위치 정보를 적극 활용하지 못하고 사용자의 이전 시청 이력, 사용 이력 정보만을 활용하여 추천 영상을 파악한다는 점에서, 사용자에게 다양한 추천 영상을 제공하기에 한계가 있었다.
한국등록특허 10-2149343호
본 발명은 상술된 문제점을 해결하기 위해 도출된 것으로서, 본 발명은 라이브 방송 및 스트리밍 컨텐츠를 제공하는 OTT 서비스를 이용하는 사용자 단말의 위치 정보 및 이동 경로에 기반하여 영상 데이터(동영상)를 추천 및 제공할 수 있도록 하는 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법을 제공하고자 한다.
본 발명의 일 실시예에 따른 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)은 사용자 단말의 위치정보(GIS)를 획득하는 위치정보 획득부(110) 및 획득된 상기 위치정보를 기반으로 데이터베이스 내에서 초기 추천 영상 데이터를 추출 및 사용자 단말에서 재생 가능하도록 제공하며, 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 상기 데이터베이스 내에서 추출 후, 사용자 단말에서 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천하는 영상 추천부(120)를 포함할 수 있다.
일 실시예에서, 상기 영상 추천부(120)는 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악할 수 있다.
일 실시예에서, 상기 영상 추천부(120)는 상기 추천 영상 데이터의 전체 프레임에 대한 표지판 이미지를 인식한 후 인식된 표지판 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하고, 상기 추천 영상 데이터의 전체 프레임에 대한 랜드마크 이미지를 인식한 후 인식된 랜드마크 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하며, 상기 추천 영상 데이터에 포함된 음성 데이터 내에서 음성 정보를 획득하고, 획득된 음성 정보를 자연어 처리한 후 해당 음성 정보와 매핑된 프레임에 대한 시간 정보 및 위치 정보를 추출할 수 있다.
일 실시예에서, 상기 영상 추천부(120)는 상기 데이터베이스 내에 기 저장된 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하되, 상기 데이터베이스 내에 기 저장된 추천 영상 데이터에 대한 메타정보가 파악되지 않는 경우, 상기 데이터베이스 내에서 해당 추천 영상 데이터와 기 설정된 유사도 기준을 만족하는 유사 영상 데이터를 추출한 후, 해당 유사 영상 데이터에 대한 메타정보를 해당 추천 영상 데이터에 매핑하여 추천 영상 데이터에 대한 메타정보를 저장할 수 있다.
일 실시예에서, 상기 영상 추천부(120)는 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천한 상태에서 사용자 단말의 위치가 변경되는 경우, 해당 사용자 단말의 이동 경로를 실시간 반영하여 변경된 위치정보에 상응하는 추천 영상 데이터의 추출을 갱신할 수 있다.
본 발명의 다른 실시예에 따른 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 방법은 위치정보 획득부(110)에서, 사용자 단말의 위치정보(GIS)를 획득하는 단계 및 영상 추천부(120)에서, 획득된 상기 위치정보를 기반으로 데이터베이스 내에서 초기 추천 영상 데이터를 추출 및 사용자 단말에서 재생 가능하도록 제공하며, 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 상기 데이터베이스 내에서 추출 후, 사용자 단말에서 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천하는 단계를 포함할 수 있다.
일 실시예에서, 상기 추천하는 단계는 상기 영상 추천부(120)에서, 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하는 단계를 포함할 수 있다.
일 실시예에서, 상기 영상 추천부(120)에서, 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하는 단계는 상기 영상 추천부(120)에서, 상기 추천 영상 데이터의 전체 프레임에 대한 표지판 이미지를 인식한 후 인식된 표지판 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하는 단계, 상기 영상 추천부(120)에서, 상기 추천 영상 데이터의 전체 프레임에 대한 랜드마크 이미지를 인식한 후 인식된 랜드마크 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하는 단계 및 상기 영상 추천부(120)에서, 상기 추천 영상 데이터에 포함된 음성 데이터 내에서 음성 정보를 획득하고, 획득된 음성 정보를 자연어 처리한 후 해당 음성 정보와 매핑된 프레임에 대한 시간 정보 및 위치 정보를 추출하는 단계를 포함할 수 있다.
일 실시예에서, 상기 추천하는 단계는 상기 데이터베이스 내에 기 저장된 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하되, 상기 데이터베이스 내에 기 저장된 추천 영상 데이터에 대한 메타정보가 파악되지 않는 경우, 상기 영상 추천부(120)에서, 상기 데이터베이스 내에서 해당 추천 영상 데이터와 기 설정된 유사도 기준을 만족하는 유사 영상 데이터를 추출한 후, 해당 유사 영상 데이터에 대한 메타정보를 해당 추천 영상 데이터에 매핑하여 추천 영상 데이터에 대한 메타정보를 저장하는 단계를 더 포함할 수 있다.
일 실시예에서, 상기 추천하는 단계는 상기 영상 추천부(120)에서, 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천한 상태에서 사용자 단말의 위치가 변경되는 경우, 해당 사용자 단말의 이동 경로를 실시간 반영하여 변경된 위치정보에 상응하는 추천 영상 데이터의 추출을 갱신하는 단계를 포함할 수 있다.
본 발명의 일 측면에 따르면, 라이브 방송 및 스트리밍 컨텐츠를 제공하는 OTT 서비스를 이용하는 사용자 단말의 위치 정보 및 이동 경로에 기반하여 최적의 맞춤형 영상 데이터(동영상)를 추천 및 제공할 수 있는 이점을 가진다.
도 1은 본 발명의 일 실시예에 따른 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)의 구성을 도시한 도면이다.
도 2는 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)을 통해 사용자 단말의 위치 정보 및 이동 경로에 기반하여 최적의 맞춤형 영상 데이터(동영상)를 추천 및 제공하는 개념을 나타낸 도면이다.
도 3은 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)을 이용하여 위치 기반 영상을 추천하는 과정을 순서대로 도시한 도면이다.
이하, 본 발명의 이해를 돕기 위하여 바람직한 실시예를 제시한다. 그러나 하기의 실시예는 본 발명을 보다 쉽게 이해하기 위하여 제공되는 것일 뿐, 실시예에 의해 본 발명의 내용이 한정되는 것은 아니다.
도 1은 본 발명의 일 실시예에 따른 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)의 구성을 도시한 도면이고, 도 2는 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)을 통해 사용자 단말의 위치 정보 및 이동 경로에 기반하여 최적의 맞춤형 영상 데이터(동영상)를 추천 및 제공하는 개념을 나타낸 도면이다.
도 1 및 도 2를 살펴보면, 본 발명의 일 실시예에 따른 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)은 크게 위치정보 획득부(110) 및 영상 추천부(120)를 포함하여 구성된다.
위치정보 획득부(110)는 사용자 단말의 위치정보(GIS)를 획득하여 이를 영상 추천부(120)로 전달하게 되며, 이때 사용자 단말의 위치가 계속해서 변하더라도 변하는 위치정보 및 이동 경로를 실시간으로 파악하게 된다.
영상 추천부(120)는 위치정보 획득부(110)를 통해 획득된 위치정보를 기반으로 사용자가 위치한 현 장소와 관련된 초기 추천 영상을 데이터베이스 내에서 추출 후 사용자 단말에 제공하게 되고, 사용자 단말 상에 실행된 OTT 서비스용 어플리케이션을 통해 해당 초기 추천 영상이 재생된다.
이때, 위치정보 획득부(110)에서는 사용자 단말의 위치정보를 실시간으로 계속해서 파악하게 되며, 이는 사용자의 이동 경로 또한 파악 가능함을 의미한다.
따라서, 위치정보 획득부(110)는 사용자 단말이 특정 위치에서 전진 방향으로 예를 들어 100m 이동하여 교차점에 위치하는 것으로 판단되는 경우, 해당 교차점의 갈림길 별 방향과 관련된 추천 영상 데이터를 데이터베이스 내에서 추출 후 다음 추천 영상 데이터로 재생 가능하도록 추천하게 된다.
예를 들어, 도 2(a)를 살펴보면, 사용자가 현재 1번 위치에서 2번위치로 이동한 경우, 위치정보 획득부(110)는 사용자 단말의 위치가 현재 1번 위치에서 2번 위치로 이동한 것을 파악하게 되고, 도 2(b)와 같이 사용자 단말의 화면 상에 초기 추천 영상 데이터가 재생되도록 하되, 해당 초기 추천 영상 데이터의 가장자리에 3번 방향의 위치와 관련된 추천 영상 데이터, 7번 방향의 위치와 관련된 추천 영상 데이터, 4번 방향의 위치와 관련된 추천 영상 데이터가 각각 함께 표시되도록 한다.
즉, 사용자 단말의 이동 경로에 따라 현재 재생되고 있는 초기 추천 영상 데이터의 화면 가장자리 영역으로 추천 영상 데이터들이 네이게이션 형식으로 표시될 수 있는 것이다.
이를 위하여, 영상 추천부(120)는 데이터베이스 내에 저장된 추천 영상 데이터들의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하게 된다.
보다 구체적으로, 영상 추천부(120)에서 사용자 단말의 위치정보에 상응하는 정확한 추천 영상 데이터를 추천하기 위해서는, 사용자 단말의 위치정보 외에도, 해당 추천 영상 데이터에 포함된 메타정보를 정확히 파악하는 것이 무엇보다 중요하다.
따라서, 영상 추천부(120)에서는 데이터베이스 내에 추천 영상 데이터를 저장하거나, 또는 실시간 스트리밍 영상 데이터를 사용자 단말에 전송함에 있어서, 각 영상 데이터 별 메타정보를 정확히 파악하게 된다.
이때, 영상 데이터 전체에 대한 메타정보가 아닌, 영상 데이터의 타임라임 별 위치 및 경로 정보를 각 영상 데이터의 프레임에 매핑함으로써 영상 데이터에 대한 정확한 GIS 메타정보를 획득할 수 있다.
이러한 방법으로는, 추천 영상 데이터의 전체 프레임에 대한 표지판 이미지를 인식한 후 인식된 표지판 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하거나, 추천 영상 데이터의 전체 프레임에 대한 랜드마크 이미지를 인식한 후 인식된 랜드마크 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하거나, 또는 추천 영상 데이터에 포함된 음성 데이터 내에서 음성 정보를 획득하고, 획득된 음성 정보를 자연어 처리한 후 해당 음성 정보와 매핑된 프레임에 대한 시간 정보 및 위치 정보를 추출하는 방법이 이용될 수 있다.
이는, 추천 영상 데이터가 재생되고 있는 가운데 사용자가 방향을 갑자기 전환하거나 위치가 급하게 변경되는 경우, 영상 추천부(120)에서는 현재 재생되고 있는 추천 영상 데이터의 각 프레임 별 메타정보를 토대로 다음 추천할 영상 데이터를 보다 신속하고 정확하게 파악 및 추출하기 위함이다.
한편, 영상 추천부(120)는 만약 추천 영상 데이터의 타임라인 별 위치 및 경로 정보가 파악되지 않거나 해당 추천 영상 데이터의 메타정보가 파악되지 않는 경우, 해당 추천 영상 데이터와 기 설정된 유사도 기준을 만족하는 유사 영상 데이터를 추출하고, 해당 유사 영상 데이터의 GIS 메타정보를 추천 영상 데이터에 매핑함으로써 추천 영상 데이터의 GIS 메타정보를 획득할 수 있다.
다음으로는, 도 3을 통해 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)을 이용하여 위치 기반 영상을 추천하는 과정을 순서대로 살펴보도록 한다.
도 3은 OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈(100)을 이용하여 위치 기반 영상을 추천하는 과정을 순서대로 도시한 도면이다.
도 3을 살펴보면, 먼저 위치정보 획득부(110)에서 사용자 단말의 위치정보를 획득하고(S301), 영상 추천부(102)에서는 획득된 위치정보를 기반으로 사용자 단말에 초기 추천 영상 데이터를 전송 및 재생되도록 한다(S902).
사용자 단말의 위치가 변경되는 경우 위치정보 획득부(110)에서는 사용자 단말의 위치정보 변경을 파악하게 되며(S903), 영상 추천부(120)에서는 사용자 단말의 변경된 위치 및 이동 경로를 토대로 사용자 단말의 이동 방향을 예상하게 되며 예상된 이동 방향과 관련된 추천 영상 데이터를 추출 및 사용자 단말에 제공하여 다음으로 재생되도록 한다(S904).
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
100: OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈
110: 위치정보 획득부
120: 영상 추천부

Claims (10)

  1. 사용자 단말의 위치정보(GIS)를 획득하는 위치정보 획득부(110); 및
    획득된 상기 위치정보를 기반으로 데이터베이스 내에서 초기 추천 영상 데이터를 추출 및 사용자 단말에서 재생 가능하도록 제공하며, 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 상기 데이터베이스 내에서 추출 후, 사용자 단말에서 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천하는 영상 추천부(120);를 포함하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈.
  2. 제1항에 있어서,
    상기 영상 추천부(120)는,
    추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈.
  3. 제2항에 있어서,
    상기 영상 추천부(120)는,
    상기 추천 영상 데이터의 전체 프레임에 대한 표지판 이미지를 인식한 후 인식된 표지판 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하고, 상기 추천 영상 데이터의 전체 프레임에 대한 랜드마크 이미지를 인식한 후 인식된 랜드마크 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하며, 상기 추천 영상 데이터에 포함된 음성 데이터 내에서 음성 정보를 획득하고, 획득된 음성 정보를 자연어 처리한 후 해당 음성 정보와 매핑된 프레임에 대한 시간 정보 및 위치 정보를 추출하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈.
  4. 제2항에 있어서,
    상기 영상 추천부(120)는,
    상기 데이터베이스 내에 기 저장된 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하되, 상기 데이터베이스 내에 기 저장된 추천 영상 데이터에 대한 메타정보가 파악되지 않는 경우,
    상기 데이터베이스 내에서 해당 추천 영상 데이터와 기 설정된 유사도 기준을 만족하는 유사 영상 데이터를 추출한 후, 해당 유사 영상 데이터에 대한 메타정보를 해당 추천 영상 데이터에 매핑하여 추천 영상 데이터에 대한 메타정보를 저장하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈.
  5. 제1항에 있어서,
    상기 영상 추천부(120)는,
    사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천한 상태에서 사용자 단말의 위치가 변경되는 경우, 해당 사용자 단말의 이동 경로를 실시간 반영하여 변경된 위치정보에 상응하는 추천 영상 데이터의 추출을 갱신하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈.
  6. 위치정보 획득부(110)에서, 사용자 단말의 위치정보(GIS)를 획득하는 단계; 및
    영상 추천부(120)에서, 획득된 상기 위치정보를 기반으로 데이터베이스 내에서 초기 추천 영상 데이터를 추출 및 사용자 단말에서 재생 가능하도록 제공하며, 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 상기 데이터베이스 내에서 추출 후, 사용자 단말에서 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천하는 단계;를 포함하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 방법.
  7. 제6항에 있어서,
    상기 추천하는 단계는,
    상기 영상 추천부(120)에서, 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하는 단계;를 포함하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 방법.
  8. 제7항에 있어서,
    상기 영상 추천부(120)에서, 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하는 단계는,
    상기 영상 추천부(120)에서, 상기 추천 영상 데이터의 전체 프레임에 대한 표지판 이미지를 인식한 후 인식된 표지판 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하는 단계;
    상기 영상 추천부(120)에서, 상기 추천 영상 데이터의 전체 프레임에 대한 랜드마크 이미지를 인식한 후 인식된 랜드마크 이미지로부터 각 프레임 별 시간 정보 및 위치 정보를 추출하는 단계; 및
    상기 영상 추천부(120)에서, 상기 추천 영상 데이터에 포함된 음성 데이터 내에서 음성 정보를 획득하고, 획득된 음성 정보를 자연어 처리한 후 해당 음성 정보와 매핑된 프레임에 대한 시간 정보 및 위치 정보를 추출하는 단계;를 포함하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 방법.
  9. 제7항에 있어서,
    상기 추천하는 단계는,
    상기 데이터베이스 내에 기 저장된 추천 영상 데이터의 타임라인 별 위치 및 경로 정보를 해당 추천 영상 데이터의 각 프레임 별로 매핑하여 추천 영상 데이터에 대한 메타정보를 파악하되, 상기 데이터베이스 내에 기 저장된 추천 영상 데이터에 대한 메타정보가 파악되지 않는 경우,
    상기 영상 추천부(120)에서, 상기 데이터베이스 내에서 해당 추천 영상 데이터와 기 설정된 유사도 기준을 만족하는 유사 영상 데이터를 추출한 후, 해당 유사 영상 데이터에 대한 메타정보를 해당 추천 영상 데이터에 매핑하여 추천 영상 데이터에 대한 메타정보를 저장하는 단계;를 더 포함하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 방법.
  10. 제6항에 있어서,
    상기 추천하는 단계는,
    상기 영상 추천부(120)에서, 사용자 단말의 위치 이동에 따른 변경된 위치정보를 파악한 후 해당 파악된 위치정보에 상응하는 추천 영상 데이터를 현재 실행중인 추천 영상 데이터 다음으로 재생 가능하도록 추천한 상태에서 사용자 단말의 위치가 변경되는 경우, 해당 사용자 단말의 이동 경로를 실시간 반영하여 변경된 위치정보에 상응하는 추천 영상 데이터의 추출을 갱신하는 단계;를 포함하는 것을 특징으로 하는, OTT 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 방법.
KR1020210146363A 2021-10-29 2021-10-29 Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법 KR20230061780A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020210146363A KR20230061780A (ko) 2021-10-29 2021-10-29 Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법
PCT/KR2021/015403 WO2023074965A1 (ko) 2021-10-29 2021-10-29 Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210146363A KR20230061780A (ko) 2021-10-29 2021-10-29 Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법

Publications (1)

Publication Number Publication Date
KR20230061780A true KR20230061780A (ko) 2023-05-09

Family

ID=86158209

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210146363A KR20230061780A (ko) 2021-10-29 2021-10-29 Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법

Country Status (2)

Country Link
KR (1) KR20230061780A (ko)
WO (1) WO2023074965A1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102149343B1 (ko) 2018-10-04 2020-08-28 세종대학교산학협력단 모바일 ott 서비스와 iptv 서비스의 시청 시간대 분석을 통한 iptv 시청자 추론 서버 및 그 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100100180A (ko) * 2009-03-05 2010-09-15 삼성전자주식회사 컨텐츠 추천 방법 및 장치
KR101617649B1 (ko) * 2014-12-26 2016-05-03 세종대학교산학협력단 영상의 관심 구간 추천 시스템 및 방법
KR102615620B1 (ko) * 2015-09-14 2023-12-19 에스케이플래닛 주식회사 경로안내 기반 컨텐츠를 추천하기 위한 장치 및 방법
CN107735786B (zh) * 2016-05-18 2023-12-26 乐威指南公司 基于用户的轨迹推荐媒体内容
KR101967343B1 (ko) * 2017-03-28 2019-04-09 주식회사 리얼타임테크 대용량 영상 데이터 분석을 위한 객체 정보 저장 및 관리 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102149343B1 (ko) 2018-10-04 2020-08-28 세종대학교산학협력단 모바일 ott 서비스와 iptv 서비스의 시청 시간대 분석을 통한 iptv 시청자 추론 서버 및 그 방법

Also Published As

Publication number Publication date
WO2023074965A1 (ko) 2023-05-04

Similar Documents

Publication Publication Date Title
EP2656621B1 (en) Recognition of images within a video based on a stored representation
JP5395813B2 (ja) コンテンツおよびメタデータの消費技法
KR102246305B1 (ko) 증강 미디어 서비스 제공 방법, 장치 및 시스템
US20050253966A1 (en) System for processing video signals
US9185349B2 (en) Communication terminal, search server and communication system
US20150113558A1 (en) Receiver apparatus, broadcast/communication-cooperation system, and broadcast/communication-cooperation method
US20150341708A1 (en) Authoring system for iptv network
CN108293140B (zh) 公共媒体段的检测
EP2192506A2 (en) Modifying virtual item states in conjunction with digital broadcast
US20080133604A1 (en) Apparatus and method for linking basic device and extended devices
JP2007300270A (ja) デジタル放送受信装置及びその制御方法
KR20170040134A (ko) 헤테로그래프의 존재에서 자동 음성 인식을 수행하기 위한 시스템 및 방법
US20110138418A1 (en) Apparatus and method for generating program summary information regarding broadcasting content, method of providing program summary information regarding broadcasting content, and broadcasting receiver
JP2004056226A (ja) ディジタル放送受信装置
KR101010523B1 (ko) Ｔｖ 방송 중의 유해 컨텐츠 대체 방법 및 시스템
CN111757174A (zh) 用于视频音画质匹配的方法及装置、电子设备
JP2016005015A (ja) コンテンツ配信システム及びコンテンツ配信装置
US8826318B2 (en) Image based interactive ticker system in television signal
CN110099298B (zh) 多媒体内容处理方法及终端设备
US8989255B2 (en) Content reception apparatus and content reception apparatus control method
JP5110978B2 (ja) 送信装置、受信装置及び再生装置
KR20230061780A (ko) Ott 서비스용 멀티미디어 박스에 적용되는 위치 기반 영상 추천 모듈 및 영상 추천 방법
JP2016004064A (ja) コンテンツ配信装置及びコンテンツ配信システム
JP6401505B2 (ja) 手話ｃｇ生成装置及びそのプログラム
CN107547917B (zh) 频道的播放和处理方法及装置，频道的处理系统

Legal Events

Date Code Title Description
E902 Notification of reason for refusal