KR101181732B1 - 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템 - Google Patents

동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템 Download PDF

Info

Publication number
KR101181732B1
KR101181732B1 KR1020100115977A KR20100115977A KR101181732B1 KR 101181732 B1 KR101181732 B1 KR 101181732B1 KR 1020100115977 A KR1020100115977 A KR 1020100115977A KR 20100115977 A KR20100115977 A KR 20100115977A KR 101181732 B1 KR101181732 B1 KR 101181732B1
Authority
KR
South Korea
Prior art keywords
information
video
client terminal
providing
object information
Prior art date
Application number
KR1020100115977A
Other languages
English (en)
Other versions
KR20110010083A (ko
Inventor
이재형
김길연
Original Assignee
(주)엔써즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)엔써즈 filed Critical (주)엔써즈
Priority to KR1020100115977A priority Critical patent/KR101181732B1/ko
Publication of KR20110010083A publication Critical patent/KR20110010083A/ko
Priority to PCT/KR2011/007476 priority patent/WO2012070766A2/ko
Priority to US13/988,683 priority patent/US20130247085A1/en
Application granted granted Critical
Publication of KR101181732B1 publication Critical patent/KR101181732B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템에 관한 것으로서, 보다 상세하게는 동영상에 포함되는 객체들에 대한 객체 정보와 동영상의 핑거프린트 정보를 함께 고려하여 동영상 마크업 데이터를 생성하고, 이러한 동영상 마크업 데이터에 기초하여 객체와 연관된 광고 정보 등과 같은 여러 가지 다양한 정보를 사용자에게 간편하고 효율적으로 제공할 수 있는 방법 및 시스템에 관한 것이다.

Description

동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템{METHOD FOR GENERATING VIDEO MARKUP DATA BASED ON VIDEO FINGERPRINT DATA AND METHOD AND SYSTEM FOR PROVIDING INFORMATION USING THE SAME}
본 발명은 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템에 관한 것으로서, 보다 상세하게는 동영상에 포함되는 객체들에 대한 객체 정보와 동영상의 핑거프린트 정보를 함께 고려하여 동영상 마크업 데이터를 생성하고, 이러한 동영상 마크업 데이터에 기초하여 객체와 연관된 광고 정보 등과 같은 여러 가지 다양한 정보를 사용자에게 간편하고 효율적으로 제공할 수 있는 방법 및 시스템에 관한 것이다.
멀티미디어 기술의 발전에 따라, 오늘날에는 다양한 저작권자로부터 제작된 다수의 동영상 콘텐츠들이 인터넷을 통해 사용자에게 제공되고 있다. 또한, 기존에는 TV와 라디오가 전부였던 콘텐츠 재생 장치의 종류가 현재는 PC, MP3 플레이어, 넷북, PMP, 스마트폰 등의 다양한 기기로 확장되었으며, 사용자는 이동 중에도 이들 기기를 이용하여 다양한 동영상 콘텐츠를 이용할 수 있게 되었다. 이러한 동영상 콘텐츠를 소비하는 사용자는 갈수록 증가하는 추세이지만, 동영상 콘텐츠를 시청하는 방법은 크게 변하지 않아서 여전히 대부분의 사용자들은 동영상 콘텐츠에 대해 단방향성 재생 경험에서 벗어나지 못하고 있다. 이를 극복하기 위해 MPEG 7 표준 등에서는 영상의 각 프레임에 대해 물체 등을 표기하고 그 의미 정보를 포함하는 등의 노력을 기울이고 있지만, 다양한 경로와 포맷을 통하여 유통되는 동영상 콘텐츠상에 이와 같은 의미 정보를 부착하고 이에 기반하여 양방향성 시청 경험을 제공하는 방법은 아직 제시되지 못하고 있다.
한편, 텍스트에 기반하여 광고를 제공하는 방법은 널리 사용되고 또한 많은 수익을 올리고 있는 것과는 달리 인터넷상에서 제공되는 동영상 콘텐츠에 부착되는 광고는 아직까지는 수익원으로 인정받지 못하고 있는 상황이다. 동영상 콘텐츠에 광고를 삽입하기 위한 방법에는 크게 프리 롤, 포스트 롤, 미드 롤, 오버레이, 배너 방식 등이 있지만, 이들 동영상 광고는 텍스트의 경우와는 달리 정확히 사용자가 원하는 것을 파악하기 힘들고, 또한 사용자의 동영상 시청 경험을 방해하지 않는 순간에 광고를 보여주기 힘들다는 단점을 가지고 있다. 그 결과, 동영상 콘텐츠에 기반하여 광고를 제공하는 방법은, 그 단가는 원가가 높음에도 불구하고, 텍스트 광고의 경우보다 높게 책정되지 못하고 있으며 광고주의 수 역시 많지 않은 상황이다.
또한, 동영상 시청 중에 동영상에 포함된 객체에 대한 정보를 제공하는 방법은, 각각의 동영상별로 별도로 정보를 생성해야 하고 이렇게 생성된 정보는 기초가 되는 동영상에만 한정되어 사용되므로, 동영상의 편집본이나 수정본 등에는 사용할 수 없다는 한계점이 존재하였다.
본 발명은 상기한 바와 같은 한계점을 감안하여 안출된 것으로서, 동영상의 핑거프린트 정보와 동영상에 포함되는 풍경, 물체, 인물 등의 여러 가지 의미를 설명하는 객체 정보를 함께 동영상 마크업 데이터로써 생성할 수 있는 방법 및 장치를 제공하는 것을 목적으로 한다.
또한, 본 발명은 상기와 같은 동영상 마크업 데이터에 포함된 객체 정보에 광고 정보와 같은 부가적인 정보를 포함함으로써 사용자에게 동영상 데이터의 각 객체에 상응하도록 설정된 광고 정보 등과 같은 부가적인 정보를 효율적으로 제공할 수 있는 방법 및 시스템을 제공하는 것을 또 다른 목적으로 한다.
또한, 본 발명은 동영상 데이터에 고유한 핑거프린트 정보를 포함하는 동영상 마크업 데이터를 생성할 수 있으므로, 해당 동영상 데이터를 가공하거나 편집된 형태의 다양한 파생 동영상 데이터에 대해서도 동일한 객체 정보나 광고 정보를 간편하고 효율적으로 제공할 수 있는 방법 및 시스템을 제공하는 것을 또 다른 목적으로 한다.
또한 본 발명은 사용자가 동영상 데이터를 재생하여 시청하는 도중 특정 순간, 특정 영역에 마우스의 조작에 의한 터치 동작 등으로 관심을 표현할 경우 이 영역에 대한 정보를 링크와 함께 제공하고, 이와 관련된 광고 정보 등과 같은 부수적인 정보를 실시간으로 정확하게 제공할 수 있는 방법 및 시스템을 제공하는 것을 또 다른 목적으로 한다.
상기한 바와 같은 과제를 해결하기 위하여 본 발명은, 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법에 있어서, 동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대하여, 각 구간별로 각 구간에 포함된 객체들의 객체 정보를 생성하는 제1 단계; 상기 각 구간별로 각 구간에 관련되는 부분 핑거프린트 정보를 추출하는 제2 단계; 및 상기 각 구간별로 상기 객체 정보 및 부분 핑거프린트 정보를 포함하도록 동영상 데이터에 대한 동영상 마크업 데이터를 생성하는 제3 단계를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법을 제공한다.
여기에서, 상기 제1 단계의 객체 정보는 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나를 포함하고, 상기 제2 단계의 부분 핑거프린트 정보는 상기 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나에 기초하여 추출될 수 있다.
또한, 상기 제1 단계의 객체 정보는, 해당 동영상 데이터가 재생될 때 디스플레이 수단에서의 상대 위치 정보와 크기 정보를 나타내는 객체 공간 정보와, 객체의 특징을 나타내는 객체 특징 정보와, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다.
본 발명의 다른 측면에 의하면, 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법에 있어서, 동영상 데이터의 전체 구간에 대한 전체 핑거프린트 정보를 추출하는 제1 단계; 동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대하여 각 구간에 대한 구간 식별 정보와 각 구간별로 각 구간에 포함된 객체들의 객체 정보를 생성하는 제2 단계; 상기 구간 식별 정보를 전체 핑거프린트 정보에 식별 가능하도록 포함시키는 제3 단계; 및 상기 전체 핑거프린트 정보와, 상기 각 구간에 대한 구간 식별 정보 및 각 구간별 객체 정보를 포함하도록 동영상 데이터에 대한 동영상 마크업 데이터를 생성하는 제4 단계를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법을 제공한다.
여기에서, 상기 제2 단계의 객체 정보는 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나를 포함할 수 있다.
또한, 상기 제2 단계의 객체 정보는, 해당 동영상 데이터가 재생될 때 디스플레이 수단에서의 상대 위치 정보와 크기 정보를 나타내는 객체 공간 정보와, 객체의 특징을 나타내는 객체 특징 정보와, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하며 클라이언트 단말기와 네트워크로 연결된 정보 제공 시스템에서, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 방법에 있어서, 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하는 제1 단계; 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 제2 단계; 및 상기 조회된 객체 정보를 클라이언트 단말기로 전송하는 제3 단계를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법을 제공한다.
여기에서, 상기 제1 단계의 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에 나타나는 객체를 사용자가 입력 장치에 의해 선택함으로써 생성될 수 있다.
또한, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하고, 상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함하고, 상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 동영상의 식별 정보와 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 동영상의 식별 정보는, 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보일 수 있다.
또한, 상기 제2 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다.
또한, 상기 제2 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함할 수 있다.
또한, 상기 제3 단계 이후, 상기 주소 정보를 선택한 경우 상기 주소 정보에 상응하는 웹 페이지가 클라이언트 단말기에 제공될 수 있다.
또한, 상기 제3 단계 이후, 클라이언트 단말기는 전송된 객체 정보를 디스플레이 장치에 표시할 수 있다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하며 네트워크를 통해 연결된 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 시스템에 있어서, 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하고, 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 객체 정보 조회부; 및 상기 조회된 객체 정보를 클라이언트 단말기로 전송하는 객체 정보 전송부를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 시스템을 제공한다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 클라이언트 단말기와 네트워크로 연결되어 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하는 정보 제공 시스템에서, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 방법에 있어서, 상기 동영상 서비스 제공 서버가 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하는 제1 단계; 상기 동영상 서비스 제공 서버가 상기 객체 정보 요청 신호를 상기 정보 제공 서버측으로 전달하여 객체 정보를 요청하는 제2 단계; 상기 정보 제공 서버가 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 제3 단계; 및 상기 정보 제공 서버가 상기 조회된 객체 정보를 상기 클라이언트 단말기로 전송하거나 또는 상기 동영상 서비스 제공 서버로 전송하고 상기 동영상 서비스 제공 서버가 상기 수신한 객체 정보를 클라이언트 단말기로 전송하는 제4 단계를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법을 제공한다.
여기에서, 상기 제1 단계의 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에 나타나는 객체를 사용자가 입력 장치에 의해 선택함으로써 생성될 수 있다.
또한, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하고, 상기 제3 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함하고, 상기 제3 단계는, 상기 객체 정보 요청 신호에 포함된 동영상의 식별 정보와 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 동영상의 식별 정보는, 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보일 수 있다.
또한, 상기 제3 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다.
또한, 상기 제3 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함할 수 있다.
또한, 상기 제4 단계 이후, 상기 주소 정보를 선택한 경우 상기 주소 정보에 상응하는 웹 페이지가 클라이언트 단말기에 제공될 수 있다.
또한, 상기 제4 단계 이후, 클라이언트 단말기는 전송된 객체 정보를 디스플레이 장치에 표시할 수 있다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 네트워크를 통해 연결된 클라이언트 단말기로 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하며, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 시스템으로서, 상기 동영상 서비스 제공 서버는, 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하고, 수신된 객체 정보 요청 신호를 상기 정보 제공 서버측으로 전달하고 정보 제공 서버측으로부터 객체 정보가 수신된 경우 수신된 객체 정보를 클라이언트 단말기로 전송하고, 상기 정보 제공 서버는, 동영상 서비스 제공 서버로부터 전송된 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하고, 조회된 객체 정보를 상기 동영상 서비스 제공 서버 또는 클라이언트 단말기로 전송하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 시스템을 제공한다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 클라이언트 단말기와 네트워크로 연결되어 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하는 정보 제공 시스템에서, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 방법에 있어서, 상기 동영상 서비스 제공 서버가 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 상기 정보 제공 서버가 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하는 제1 단계; 상기 정보 제공 서버가 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 제2 단계; 및 상기 정보 제공 서버가 상기 조회된 객체 정보를 상기 클라이언트 단말기로 전송하는 제3 단계를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법을 제공한다.
여기에서, 상기 제1 단계의 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에 나타나는 객체를 사용자가 입력 장치에 의해 선택함으로써 생성될 수 있다.
또한, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하고, 상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함하고, 상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 동영상의 식별 정보와 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 동영상의 식별 정보는, 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보일 수 있다.
또한, 상기 제2 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다.
또한, 상기 제2 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함할 수 있다.
또한, 상기 제3 단계 이후, 상기 주소 정보를 선택한 경우 상기 주소 정보에 상응하는 웹 페이지가 클라이언트 단말기에 제공될 수 있다.
또한, 상기 제3 단계 이후, 클라이언트 단말기는 전송된 객체 정보를 디스플레이 장치에 표시할 수 있다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 네트워크를 통해 연결된 클라이언트 단말기로 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하며, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 시스템으로서, 상기 정보 제공 서버는, 상기 동영상 서비스 제공 서버에서 클라이언트 단말기로 동영상 재생 서비스가 제공되는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하고, 수신된 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하고, 조회된 객체 정보를 클라이언트 단말기로 전송하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 시스템을 제공한다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 갖는 클라이언트 단말기에서 정보를 제공하는 정보 제공 방법에 있어서, 동영상 재생 서비스를 제공하는 도중 사용자의 선택 동작에 의해 객체 정보 요청 신호를 수신하는 제1 단계; 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터로부터 객체 정보를 조회하는 제2 단계; 및 상기 조회된 객체 정보를 클라이언트 단말기의 디스플레이 장치에 표시하는 제3 단계를 포함하는 동영상 핑거프린트에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법을 제공한다.
여기에서, 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함할 수 있다.
또한, 상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회할 수 있다.
또한, 상기 제2 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다.
또한, 상기 제2 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함할 수 있다.
또한, 상기 제1 단계 이후, 클라이언트 단말기에서 동영상의 재생을 중지하고, 클라이언트 단말기에서의 선택 동작에 의해 동영상의 재생을 재개할 수 있다.
본 발명의 또 다른 측면에 의하면, 상기한 바와 같은 방법에 의해 생성된 동영상 마크업 데이터를 가지며, 상기 동영상 마크업 데이터를 이용하여 정보를 제공하는 클라이언트 단말기에 있어서, 동영상 재생 서비스를 제공하는 도중 사용자의 선택 동작에 의해 객체 정보 요청 신호를 수신하고, 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터로부터 객체 정보를 조회하고, 상기 조회된 객체 정보를 클라이언트 단말기의 디스플레이 장치에 표시하도록 하는 객체 정보 처리부를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용하여 정보를 제공하는 클라이언트 단말기를 제공한다.
본 발명에 의하면, 동영상의 핑거프린트 정보와 동영상에 포함되는 풍경, 물체, 인물 등의 여러 가지 의미를 설명하는 객체 정보를 함께 동영상 마크업 데이터로써 생성할 수 있는 방법 및 장치를 제공할 수 있다.
또한, 본 발명에 의하면, 상기와 같은 동영상 마크업 데이터에 포함된 객체 정보에 광고 정보와 같은 부가적인 정보를 포함함으로써 사용자에게 동영상의 각 객체에 상응하도록 설정된 광고 정보 등과 같은 부가적인 정보를 효율적으로 제공할 수 있는 방법 및 시스템을 제공할 수 있다.
또한, 본 발명은 동영상에 고유한 핑거프린트 정보를 포함하는 동영상 마크업 데이터를 생성할 수 있으므로, 해당 동영상 데이터를 가공하거나 편집된 형태의 다양한 파생 동영상 데이터에 대해서도 동일한 객체 정보나 광고 정보를 간편하고 효율적으로 제공할 수 있는 방법 및 시스템을 제공할 수 있는 효과가 있다.
또한 본 발명은 사용자가 동영상을 재생하여 시청하는 도중 특정 순간, 특정 영역에 마우스의 조작에 의한 터치 동작 등으로 관심을 표현할 경우 이 영역에 대한 정보를 링크와 함께 제공하고, 이와 관련된 광고 정보 등과 같은 부수적인 정보를 실시간으로 정확하게 제공할 수 있다.
따라서 사용자는 동영상을 시청하는 도중 자신이 관심 있는 대상에 대한 정보를 별도의 검색 없이도 얻을 수 있는 동시에 광고에 노출되게 되며, 이는 종래의 동영상 광고와는 달리 시청 경험을 방해하지 않으면서 정확히 사용자가 원하는 정보를 전달할 수 있게 된다. 나아가, 사용자는 기존의 단방향성 정보 전달에서 벗어나, 양방향성 동영상 시청을 경험할 수 있게 된다.
도 1은 본 발명에 의한 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 생성하기 위한 동영상 마크업 데이터 생성 장치의 일실시예의 구성을 나타낸 도면이다.
도 2는 동영상 마크업 데이터 생성부(13)에 의해 생성되는 동영상 마크업 데이터의 일예를 나타낸 도면이다.
도 3은 도 1 내지 도 2에서 설명한 바와 같은 동영상 마크업 데이터 생성 장치에 의해 이루어지는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법의 일실시예를 나타낸 흐름도이다.
도 4는 본 발명의 다른 실시예에 의한 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법을 나타낸 흐름도이다.
도 5는 도 4의 실시예에서 생성되는 동영상 마크업 데이터의 일예를 나타낸 도면이다.
도 6은 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법 및 장치에 의하여 생성되는 동영상 마크업 데이터를 이용하여 네트워크를 통해 연결된 클라이언트 단말기로 정보를 제공하는 정보 제공 시스템의 일실시예의 구성 및 연결 상태를 나타낸 구성도이다.
도 7은 도 6에서 설명한 바와 같은 정보 제공 시스템(20) 및 클라이언트 단말기(30)에서 이루어지는 정보 제공 방법의 일실시예를 나타낸 흐름도이다.
도 8 및 도 9는 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법에 의하여 생성되는 동영상 마크업 데이터를 이용하여 네트워크를 통해 연결된 클라이언트 단말기로 정보를 제공하는 정보 제공 시스템의 또 다른 실시예의 구성 및 연결 상태를 나타낸 구성도 및 흐름도이다.
도 10은 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법에 의하여 생성되는 동영상 마크업 데이터를 이용하여 네트워크를 통해 연결된 클라이언트 단말기로 정보를 제공하는 정보 제공 시스템에서 이루어지는 방법의 흐름도이다.
도 11은 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법 및 장치에 의하여 생성되는 동영상 마크업 데이터를 이용하여 클라이언트 단말기에서 정보를 제공하는 방법의 또 다른 실시예를 나타낸 흐름도이다.
이하, 첨부 도면을 참조하여 본 발명에 의한 실시예를 상세하게 설명하기로 한다.
도 1은 본 발명에 의한 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 생성하기 위한 동영상 마크업 데이터 생성 장치의 일실시예의 구성을 나타낸 도면이다.
도 1을 참조하면, 동영상 마크업 데이터 생성 장치(10)는, 객체 정보 생성부(11)와, 핑거프린트 정보 추출부(12) 및 동영상 마크업 데이터 생성부(13)를 포함한다. 동영상 마크업 데이터 생성 장치(100)는, 동영상 데이터의 적어도 하나 이상의 구간에 대하여 각각의 구간에 포함된 객체 정보를 구간별로 생성하고 각 구간에 상응하는 부분 핑거프린트 정보를 추출하고 각 구간별로 객체 정보와 부분 핑거프린트 정보를 포함하도록 함으로써 동영상 데이터 전체에 대한 동영상 마크업 데이터를 생성하게 된다.
상기 객체 정보 생성부(11)는 동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대해서 각 구간에 포함된 객체들의 객체 정보를 생성하는 기능을 수행한다. 여기서, 객체(objects)라 함은, 동영상 데이터가 재생되는 경우 디스플레이 장치에 표현되는 영상에 나타나는 인물, 물체, 풍경 등을 의미한다. 또한, 객체 정보라 함은, 이러한 객체들의 특징을 설명하기 위한 정보로서, 예컨대 객체가 출현하는 시점을 나타내는 출현 시점 정보, 객체가 소멸하는(없어지는) 시점을 나타내는 소멸 시점 정보, 동영상 데이터가 재생될 때 디스플레이 수단에서의 객체의 위치를 나타내는 상대 위치 정보와 객체의 크기를 나타내는 크기 정보와 같은 객체 공간 정보 등과 같은 정보 중 적어도 어느 하나 이상을 포함할 수 있다. 또한, 객체의 기타 특징을 나타내는 객체 특징 정보와, 각 객체에 대응하여 설정된 광고 정보를 포함하도록 구성할 수도 있다. 여기에서, 광고 정보라 함은, 문자 기반의 텍스트 데이터, 음성 기반의 음성 데이터 또는 음성/비디오 데이터로 구성된 동영상 데이터 등과 같은 각종 멀티미디어 콘텐츠 데이터일 수도 있다. 또한, 객체 정보는 각 객체에 대응하는 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함하는 연결 링크 정보를 포함할 수도 있다. 연결 링크 정보에 의하여 예컨대 사용자가 마우스를 이용하여 디스플레이 수단에 나타난 객체를 클릭하는 등의 동작에 의하여 선택한 경우 해당 연결 링크 정보에 의하여 별도의 웹 페이지로 이동하여 해당 객체를 구매하도록 하거나 기타 추가적인 정보를 제공할 수 있다.
객체 정보 생성부(11)는 동영상 데이터의 적어도 하나 이상의 구간 각각에 대해서, 각각의 구간에 포함되어 있는 객체들에 대해 상기와 같은 객체 정보를 생성하게 된다. 이러한 객체 정보의 생성은 사용자의 입력에 의하여 이루어질 수도 있으며, 영상 인식 방법을 이용하여 객체에 대응하여 자동적으로 생성되도록 구성할 수도 있다.
핑거프린트 정보 추출부(12)는 동영상 데이터의 적어도 하나 이상의 구간에 대하여 각 구간별로 각 구간에 상응하는 부분 핑거프린트 정보를 추출하는 기능을 수행한다. 여기에서, 핑거프린트(fingerprint) 정보라 함은, 해당 데이터의 특징을 나타내는 특징 데이터를 의미하는 것으로서, 지문 데이터, DNA 데이터 또는 유전자 데이터라고도 한다. 이러한 핑거프린트 정보와 관련해서는, 종래 기술에 의하여 여러 가지 방식이 제안되어 있으며, 이러한 핑거프린트 정보를 활용하면 데이터의 동일성 여부를 쉽게 판별할 수 있으므로 저작권 관리(DRM) 분야 등에서 최근 폭넓게 사용되고 있다. 예컨대, 오디오 데이터인 경우 오디오 데이터의 특징을 나타내는 각종 특징 데이터(예컨대, 주파수, 진폭 등)를 이용하여 핑거프린트 정보를 생성하며, 비디오 데이터인 경우 비디오 데이터의 여러 가지 특징 데이터(예컨대, 프레임의 모션 벡터 정보, 색상 정보 등)를 이용하여 핑거프린트 정보를 생성할 수 있다. 본 발명은 이러한 핑거프린트 정보를 생성하는 방법 자체를 목적으로 하는 것은 아니며 종래의 기술에 의한 어떠한 형태의 핑거프린트 생성/추출 방법을 그대로 사용할 수 있으므로 이에 대해서는 상세한 설명은 생략한다. 본 출원인이 출원한 특허출원번호 제10-2007-0044251호(오디오 핑거프린트 데이터 생성 방법 및 장치 및 이를 이용한 오디오 데이터 비교 방법 및 장치), 제10-2007-0054601호(동영상 데이터의 동일성 판단 및 동일 구간 검출 방법 및 장치), 제10-2007-0060978호(동영상 데이터들을 서로 동일성이 있는 동영상 데이터들끼리 클러스터링하는 방법 및 시스템), 제10-2007-0071633호(동영상 데이터 클러스터를 이용한 동영상 데이터 검색 서비스 제공 방법 및 장치), 제10-2007-0091587호(동영상 데이터 클러스터를 이용한 광고 데이터 설정 및 제공 방법 및 장치), 및 제10-2008-0051688호(동영상 처리 방법 및 그 장치)에 의하면, 오디오 또는 비디오 데이터의 핑거프린트 데이터를 생성하는 방법과 이러한 핑거프린트 데이터를 이용하여 클러스터링하는 방법에 대해서 기재되어 있으며, 이러한 본 출원인의 핑거프린트(DNA) 생성 및 추출 방법을 본 발명에 사용할 수도 있음은 물론이다. 요컨대, 본 발명은 동영상 데이터로부터 핑거프린트 정보를 추출하는 방식이 어떠한 것인가에 관계 없이 종래 알려져 있는 동영상 데이터의 핑거프린트 생성/추출 기술을 그대로 사용할 수 있으며, 본 발명과 관련하여 의미 있는 것은 동영상 데이터의 소정 구간에 대해 구간별로 각 구간과 관련되는 부분 핑거프린트 정보를 추출한다는 점이다.
각각의 구간과 관련되는 부분 핑거프린트 정보는 객체 정보에 기초하여 추출될 수 있다. 전술한 바와 같이, 객체 정보는 객체가 출현하는 시점을 나타내는 출현 시점 정보와 객체가 소멸하는(없어지는) 시점을 나타내는 소멸 시점 정보 등을 포함할 수 있는데, 예컨대 객체 출현 시점으로부터 일정 시간(예컨대 1분)까지의 구간에 대한 부분 핑거프린트 정보를 추출할 수 있다. 또한, 객체 소멸 시점으로부터 일정 시간(예컨대 1분) 이전까지의 구간에 대한 부분 핑거프린트 정보를 추출할 수도 있다. 또한, 객체 출현 시점으로부터 1분간, 객체 소멸 시점 이전까지 1분간의 부분 핑거프린트 정보를 함께 사용할 수도 있음은 물론이다. 이와 같이 해당 구간에 대한 부분 핑거프린트 정보를 추출하는 것은 해당 구간을 추후 변별력을 가지고 검색할 수 있도록 하기 위한 것이므로, 부분 핑거프린트 정보를 추출하는 시간 구간이 길어질수록 변별력은 높아지지만 데이터의 양이 많아지고 시간 구간이 짧아질수록 데이터의 양은 적어지지만 변별력이 낮아질 수 있으므로 적절한 범위 내에서 적당한 시간 간격을 설정할 필요가 있다.
동영상 마크업 데이터 생성부(13)는 전술한 바와 같이 객체 정보 생성부(11)에서 생성된 객체 정보와 핑거프린트 추출부(12)에서 생성된 각 구간별 부분 핑거프린트 정보를 포함하여 각 구간별로 동영상 마크업 데이터를 생성하는 기능을 수행한다.
도 2는 동영상 마크업 데이터 생성부(13)에 의해 생성되는 동영상 마크업 데이터의 일예를 나타낸 도면이다.
도 2를 참조하면, 우선 해당 동영상 데이터의 제목이 <title>에 포함되고, <total meta>에는 동영상 데이터 전체와 관련된 여러 가지 설명 자료가 포함된 메타 데이터가 포함된다.
객체 정보는 <object>~</object>에 의해 정의되는데, 첫번째 객체는 '핸드백'을 객체로 하고 있음을 알 수 있다. 이 '핸드백'의 출현 시점 정보(fade in time)는 5분 15초이고, 소멸 시점 정보(fade out time)는 5분 18초임을 알 수 있다. 그 아래에 <dnadata>에 의해 해당 구간에 관련된 부분 핑거프린트 정보가 예컨대 2진수 형태로 포함된다. 다음으로, <location>에 의해 동영상 데이터가 재생될 때 디스플레이 수단에서의 객체의 위치를 나타내는 상대 위치 정보와 객체의 크기를 나타내는 크기 정보와 같은 객체 공간 정보가 규정된다. 다음으로, <advertisement>에 의해 해당 객체에 상응하여 설정된 광고 정보로서 텍스트 형태로 된 "당신의 품격을 높여드리는 abcd 핸드백"과 같은 광고 정보가 포함된다. 또한, <link>에 의해 해당 객체에 대응하는 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보인 연결 링크 정보로서, "http://www.abcd.com"가 포함되어 있음을 알 수 있다. 또한, <object meta>에는 기타 해당 객체와 관련된 다양한 정보를 추가하여 나타내도록 할 수 있다.
두번째 객체는 '모자'에 대한 것으로서, 해당 객체의 출현 시점 정보 및 소멸 시점 정보와 함께 전술한 바와 같은 여러 가지의 객체 정보와 부분 핑거프린트 정보가 포함되어 있음을 알 수 있다.
도 2에서는 설명의 편의를 위하여 2개의 객체가 존재하는 것을 가정하여 설명하였으나, 동영상 데이터 전체에 대해서 도 2에서와 같이 각각의 객체와 객체가 출현 및 소멸하는 시점에 속하는 복수개의 구간 각각에 대하여 객체 정보 및 부분 핑거프린트 정보를 생성함으로써 동영상 데이터 전체에 대한 동영상 마크업 데이터를 생성할 수 있게 된다.
도 3은 도 1 내지 도 2에서 설명한 바와 같은 동영상 마크업 데이터 생성 장치에 의해 이루어지는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법의 일실시예를 나타낸 흐름도이다.
도 3을 참조하면, 우선 객체 정보 생성부(11)는 동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대해서 각 구간별로 각 구간에 포함된 객체들의 객체 정보를 생성한다(S100). 여기에서, 객체 정보는 전술한 바와 같이, 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나를 포함할 수 있다. 또한, 상기 객체 정보는, 해당 동영상 데이터가 재생될 때 디스플레이 수단에서의 상대 위치 정보와 크기 정보를 나타내는 객체 공간 정보와, 객체의 특징을 나타내는 객체 특징 정보와, 각 객체에 대응하여 설정된 광고 정보를 포함할 수 있다. 또한, 상기 객체 정보는 각 객체에 대응하여 설정된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함할 수도 있다.
다음으로, 핑거프린트 정보 추출부(12)는 각각의 구간에 대하여, 각 구간에 관련되는 부분 핑거프린트 정보를 추출한다(S110). 부분 핑거프린트 정보의 추출은 전술한 바와 같이, 객체 정보에 포함되는 객체의 출현 시점 정보 및/또는 소멸 시점 정보에 기초한 시간 구간에 대하여 추출할 수 있다.
이와 같이, 객체 정보와 부분 핑거프린트 정보의 추출이 완료되면, 동영상 마크업 데이터 생성부(13)는 도 2에 나타낸 바와 같이 각각의 구간에 대하여 객체 정보 및 부분 핑거프린트 정보를 포함하도록 동영상 데이터에 대한 동영상 마크업 데이터를 생성한다(S120).
도 4는 본 발명의 다른 실시예에 의한 동영상 핑거프린트에 기반한 동영상 마크업 데이터 생성 방법을 나타낸 흐름도이다. 도 4의 실시예는, 도 1 내지 도 3을 참조하여 설명한 실시예와 기본적으로 공통되지만 각 구간별로 부분 핑거프린트 정보를 추출하는 것이 아니라, 동영상 데이터 전체에 대한 전체 핑거프린트 정보를 생성해 두고, 객체가 포함되어 있는 각각의 구간별 구간 식별 정보를 전체 핑거프린트 정보에 식별 가능하도록 포함한다는 점에서 차이가 있다.
도 4를 참조하면, 우선 동영상 데이터의 전체 구간에 대한 전체 핑거프린트 정보를 추출한다(S200). 여기에서 전체 핑거프린트 정보의 추출은 동영상 데이터의 시간 정보에 대응하도록 추출하고 각각의 시간 정보에 매칭하도록 생성된다. 예컨대, 1초 단위로 구분하여 1초에서의 핑거프린트 정보, 2초에서의 핑거프린트 정보,...등과 같이 전체 시간 구간에 대해 각 시점에서의 핑거프린트 정보를 구분하여 추출 생성한다. 이 경우, 각 시점에서의 핑거프린트 정보는 전술한 바와 마찬가지로 변별력을 가질 수 있도록 해당 시점을 포함하여 일정 범위 내의 시간 구간에 대한 핑거프린트 정보를 추출하도록 하는 것이 바람직하다. 예컨대, 1초에서의 핑거프린트 정보는 1초~10초 사이의 구간에 대해 추출된 핑거프린트 정보, 2초에서의 핑거프린트 정보는 2초~11초 사이의 구간에 대해 추출된 핑거프린트 정보 등과 같이 구성하는 것이 바람직하다.
다음으로, 동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대하여 각 구간에 대한 구간 식별 정보와 각 구간별로 각 구간에 포함된 객체들의 객체 정보를 생성한다(S210). 여기에서 객체 정보의 생성은 도 1 내지 도 3에서 설명한 바와 마찬가지로 이루어지므로 상세 설명은 생략한다. 구간 식별 정보라 함은 각 구간이 전체 동영상 데이터에서 어디에 위치하는 것인가를 식별하기 위한 정보로서 예컨대 전체 동영상 데이터의 시간 중에서 해당 구간의 구간 시간 정보를 의미한다. 이는 예컨대 도 1 내지 도 3에서 설명한 객체 정보에 포함되는 객체 출현 시점 정보 및 객체 소멸 시점 정보에 의하여 정해질 수 있다.
다음으로, 상기 구간 식별 정보를 전체 핑거프린트 정보에 식별 가능하도록 포함시킨다(S220). 이는, 단계(S200)에서 시간 정보에 대응하여 생성된 전체 핑거프린트 정보에, 각각의 구간과 관련된 구간 식별 정보를 식별 가능하도록 포함시키는 것으로서, 각 구간을 전체 핑거프린트 정보의 시간 정보를 참조하여 마킹하는 것을 의미한다. 이와 같이 하면, 각각의 구간이 전체 핑거프리트 정보에서 어느 곳에 위치하는지를 파악할 수 있게 된다.
다음으로, 상기 전체 핑거프린트 정보와, 상기 각 구간에 대한 구간 식별 정보 및 각 구간별 객체 정보를 포함하도록 동영상 데이터에 대한 동영상 마크업 데이터를 생성한다(S230). 이는 도 2에서와 마찬가지로 이루어지지만, 전술한 바와 같이 전체 핑거프린트 정보가 포함되므로 부분 핑거프린트 정보가 필요없고, 각 구간 식별 정보가 포함된다는 점에서 차이가 있다.
도 5는 도 4의 실시예에서 생성되는 동영상 마크업 데이터의 일예를 나타낸 도면이다.
도 5는 도 2와 비교해 볼 때, 부분 핑거프린트 정보가 각 객체별로 빠져 있고, 전체 핑거프린트 정보가 포함되어 있으며, 각 객체별 정보에 <block info>에 의해 구간 식별 정보가 포함되어 있다는 점에서 차이가 있음을 알 수 있다. 도 5의 경우 전체 핑거프린트 정보는 <blcok info>에 의한 구간 식별 정보가 대응되는 위치를 참조할 수 있도록 하는 위치 정보를 포함한다. 이는 전수한 바와 같이 전체 핑거프린트 정보가 시간에 대응하도록 추출되어 있기 때문에 가능하다.
한편, 도 4 내지 도 5의 실시예는 도 1에서 설명한 장치에서 그대로 구현할 수 있다. 다만, 도 1의 핑거프린트 정보 추출부(12)는 부분 핑거프린트 정보를 추출하는 것이 아니라 동영상 데이터 전체에 대한 전체 핑거프린트 정보를 추출한다는 점에서 차이가 있다. 또한, 객체 정보 생성부(11)는 각 객체가 속한 구간의 구간 식별 정보를 포함하도록 객체 정보를 생성하고 또한 구간 식별 정보가 전체 핑거프린트 정보에 포함되도록 한다는 점에서 차이가 있다. 기타 부분은 도 1에서 설명한 바와 마찬가지이므로 상세 설명은 생략한다.
도 6은 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법 및 장치에 의하여 생성되는 동영상 마크업 데이터를 이용하여 네트워크를 통해 연결된 클라이언트 단말기로 정보를 제공하는 정보 제공 시스템의 일실시예의 구성 및 연결 상태를 나타낸 구성도이다.
도 6을 참조하면, 정보 제공 시스템(20)은 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스(21)를 구비하며, 네트워크를 통해 연결된 클라이언트 단말기(30)와 연결되어 클라이언트 단말기(30)로 정보를 제공한다.
여기에서, 동영상 마크업 데이터베이스(21)는 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법에 의하여 생성되는 동영상 마크업 데이터를 각각의 동영상 데이터에 상응하여 저장하고 있다. 또한, 이외에도 기타 동영상 제공 및 정보 제공과 관련하여 필요한 모든 기타 데이터와 사용자 정보 등과 같은 정보를 저장할 수 있다. 동영상 마크업 데이터베이스(21)는 정보 제공 시스템(20)에서 제공하는 모든 동영상 데이터 각각에 대해 도 1 내지 도 5에서 설명한 바와 같은 방식으로 미리 동영상 마크업 데이터를 각각 구축하여 이를 저장하고 있다.
또한, 정보 제공 시스템(20)은 객체 정보 조회부(22)와 객체 정보 전송부(23)를 포함한다. 객체 정보 조회부(22)는 클라이언트 단말기(30)로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기(30)로부터 객체 정보 요청 신호를 수신하고, 상기 수신한 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스(21)로부터 객체 정보를 조회하는 기능을 수행하고, 객체 정보 전송부(23)는 객체 정보 조회부(22)에 의하여 조회된 객체 정보를 클라이언트 단말기(30)로 전송하는 기능을 수행한다. 한편, 정보 제공 시스템(20)은 도 1 내지 도 5에서 설명한 바와 같은 동영상 마크업 데이터 생성 장치(미도시)를 포함할 수 있다.
클라이언트 단말기(30)는 인터넷이나 이동 통신망 등과 같은 네트워크를 통해 정보 제공 시스템(20)과 연결된다. 클라이언트 단말기(30)는 예컨대 컴퓨터, 이동 통신 단말기, PDA 등과 같은 장치일 수 있다. 클라이언트 단말기(30)는 네트워크를 통해 정보 제공 시스템(20)과 연결되어 정보 제공 시스템(20)에서 제공하는 동영상을 재생하여 시청하는 도중 재생되는 동영상의 디스플레이 장치의 화면상에서 관심이 가는 객체를 마우스 등과 같은 입력 장치로 클릭하는 등의 선택 동작을 수행함으로써 객체 정보 요청 신호를 생성하고 생성된 객체 정보 요청 신호는 네트워크를 통해 정보 제공 시스템(30)으로 전송된다. 이 때, 즉, 사용자가 객체를 선택하는 시점에서 동영상의 재생 동작을 중지할 수 있다.
상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함할 수 있다. 예컨대, 디스플레이 장치에서 재생되는 화면에서 사용자가 선택한 위치의 (x,y) 좌표값을 위치 정보로 할 수 있는데, 이 때의 (x,y) 좌표값은 디스플레이 장치 전체에서의 절대 좌표값이 아닌 재생되는 화면상에서의 상대 좌표값을 의미한다.
또한, 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함할 수 있다. 여기에서 동영상의 식별 정보라 함은, 예컨대 동영상의 제목 정보, 파일 이름 등과 같은 것일 수 있다. 물론, 정보 제공 시스템(20)에서 클라이언트 단말기(30)로 제공하고 있는 동영상이 어떤 것인지를 미리 알고 있을 수 있으므로 동영상의 식별 정보는 반드시 필요한 것은 아니다.
한편, 동영상의 식별 정보로서 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보를 사용할 수도 있다. 여기에서의 전체 또는 부분 핑거프린트 정보라 함은 도 1 내지 도 5를 참조하여 설명한 바와 같은 전체 또는 부분 핑거프린트 정보를 의미한다. 예컨대 사용자가 마우스의 클릭 동작에 의하여 특정 시점에서 특정 객체를 선택한 경우, 선택 시점으로부터 일정 기간(예컨대 10초) 동안의 시간 구간에 해당하는 부분 핑거프린트 정보를 추출하여 이를 객체 정보 요청 신호에 포함되도록 할 수 있다. 또한, 사용자가 특정 객체를 선택한 경우 해당하는 동영상 데이터의 전체 핑거프린트를 추출하여 이를 객체 정보 요청 신호에 포함되도록 할 수도 있다. 이는 정보 제공 시스템(30)에서 사용자가 선택한 동영상과 객체의 정보를 보다 정확하게 판별하도록 하기 위한 것이지만 필요에 따라 생략할 수 있는 구성이다.
이와 같이 클라이언트 단말기(30)로부터 객체 정보 요청 신호가 생성되어 네트워크를 통해 정보 제공 시스템(20)으로 전송되면, 정보 제공 시스템(20)의 객체 정보 조회부(22)는 수신된 객체 정보 요청 신호에 기초하여 객체 정보를 동영상 마크업 데이터베이스(21)로부터 조회한다.
이 때, 객체 정보 조회부(22)는 클라이언트 단말기(30)에서 재생되고 있는 동영상이 어떤 것인지를 알고 있으므로, 해당 동영상에 대한 식별 정보(예컨대, 파일 이름)에 상응하는 동영상 마크업 데이터를 동영상 마크업 데이터베이스(21)로부터 읽어 들이고, 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 사용자가 선택한 객체에 상응하여 저장되어 있는 객체 정보를 확인하고, 이를 객체 정보 전송부(23)를 통해 클라이언트 단말기(30)로 전송하게 된다.
도 2 및 도 5에서 설명한 바와 같이, 동영상 마크업 데이터는 하나의 동영상 데이터에 대해 각각의 구간별로 객체에 대한 객체 정보를 저장하고 있으므로, 상기 위치 정보는 객체가 어떠한 것인지를 확인하는데 사용된다. 물론, 이 때 객체 정보를 보다 정확히 확인하기 위하여 클라이언트 단말기(30)에서 사용자가 객체를 선택한 시점에 대한 시간 정보도 함께 이용할 수도 있다. 이러한 경우, 객체 정보 요청 신호는 이러한 시간 정보를 더 포함할 수 있다. 다만, 시간 정보만을 이용하는 경우, 동일한 시간대에 재생되는 화면 상에는 여러가지 객체가 포함되어 있을 수 있으므로 사용자가 선택한 객체를 정확히 식별하기 위해서는 위치 정보를 사용해야 한다.
한편, 객체 정보 요청 신호에 동영상의 식별 정보가 포함되고 이러한 식별 정보를 이용해야 하는 경우라면, 객체 정보 조회부(22)는 해당 동영상의 식별 정보를 이용하여 동영상 마크업 데이터베이스(21)로부터 해당하는 동영상 마크업 데이터를 조회하고 이로부터 객체 정보를 확인하게 된다. 물론, 이 때에서 위치 정보에 기초하여 또는 위치 정보와 시간 정보에 기초하여 객체 정보를 확인하게 된다.
이와 같이 객체 정보가 조회 및 확인되면, 정보 제공 시스템(20)은 객체 정보 전송부(23)를 통해 조회된 객체 정보를 클라이언트 단말기(30)로 전송하게 된다.
한편, 객체 정보는 도 1 내지 도 5에서 설명한 바와 같이, 객체의 이름, 출현 시점 정보, 소멸 시점 정보, 위치 정보, 광고 정보, 연결 링크 정보, 기타 메타 데이터 등이 포함될 수 있는데, 이들 모두를 클라이언트 단말기(30)로 전송할 필요는 없으며 필요에 따라 일부 정보만을 전송하는 것이 바람직하다. 예컨대, 사용자는 출현 시점 정보, 소멸 시점 정보, 위치 정보에는 큰 관심이 없을 것이므로, 객체의 이름, 광고 정보, 연결 링크 정보, 기타 객체의 특징을 기술한 메타 데이터 정도만을 전송하도록 하는 것이 바람직하다.
클라이언트 단말기(30)는 객체 정보가 정보 제공 시스템(20)으로부터 전송되면, 이러한 객체 정보를 디스플레이 장치에 표시하기에 적합한 형태로 적절히 가공하여 이를 디스플레이 장치에 표시하게 된다.
이와 같이 객체 정보가 클라이언트 단말기(30)의 디스플레이 장치에 표시되면 사용자는 디스플레이 장치에 표시되는 객체 정보를 확인할 수 있게 되므로 실시간으로 자신이 관심이 있는 객체에 대한 관련 정보를 제공받을 수 있게 된다. 이때, 객체 정보에 외부 연결 링크가 포함되어 있는 경우, 이러한 외부 연결 링크 정보는 연결된 웹 페이지의 주소 정보를 포함하므로 사용자가 이를 선택한 경우 해당 웹 페이지를 클라이언트 단말기의 디스플레이 장치에 제공하게 된다. 여기에서, 해당 웹 페이지는 객체와 관련되어 있는 웹 페이지인 것이 바람직하다. 예컨대, 객체가 "모자"인 경우, 해당 모자를 판매하는 전자 상거래 사이트, 해당 모자의 제조사 사이트, 해당 모자와 관련된 가격 비교 사이트 등과 같은 웹 페이지를 제공할 수 있도록 외부 연결 링크 정보를 생성해 둘 수 있다.
다음으로, 클라이언트 단말기(30)에서 사용자가 마우스를 이용하여 재생 버튼을 다시 누르는 등의 선택 동작에 의해 중지되었던 동영상의 재생을 재개하도록 할 수 있다.
도 7은 도 6에서 설명한 바와 같은 정보 제공 시스템(20) 및 클라이언트 단말기(30)에서 이루어지는 정보 제공 방법의 일실시예를 나타낸 흐름도이다.
도 7을 참조하면, 우선 클라이언트 단말기(30)는 정보 제공 시스템(20)으로부터 동영상을 제공받아 이를 재생(시청)하는 도중(S300) 특정 시점에서 관심이 가는 객체를 선택하게 된다(S310). 이 때, 객체의 선택은 전술한 바와 같이 화면상에 나타난 객체를 마우스 등에 의해 클릭하는 방식에 의해 이루어질 수 있다.
사용자가 객체를 선택하면 클라이언트 단말기(30)는 선택 동작이 이루어진 위치 정보, 즉 재생되는 화면상에서의 상대 위치 정보를 (x,y) 좌표값의 형태로 하여 객체 정보 요청 신호에 포함시켜 정보 제공 시스템(20)으로 전송한다(S320). 이 경우, 객체 정보 요청 신호에는 전술한 바와 같이 동영상의 식별 정보를 포함하도록 하거나 사용자가 선택 동작을 한 시점의 시간 정보를 포함하도록 할 수도 있다.
정보 제공 시스템(20)은 객체 정보 요청 신호가 수신되면, 객체 정보 요청 신호에 포함된 위치 정보, 시간 정보 및 식별 정보 등을 참조하여 동영상 마크업 데이터를 동영상 마크업 데이터베이스(21)로부터 읽어 들이고, 해당 객체에 상응하는 객체 정보를 조회 및 확인한다(S330).
그리고, 도 6에서 설명한 바와 같이 조회 및 확인된 객체 정보를 클라이언트 단말기(30)로 전송하고(S340), 클라이언트 단말기(30)는 수신된 객체 정보를 디스플레이 장치에서 표시하기에 적절한 형태로 가공하고 이를 디스플레이 장치에 표시하게 된다(S350)
이 후, 도 6에서 설명한 바와 같이, 클라이언트 단말기(30)의 사용자가 객체 정보에 포함된 외부 연결 링크 정보를 선택하게 되면 해당 웹 페이지를 클라이언트 단말기(30)에 제공하게 되고, 사용자가 동영상 재생을 재개하는 선택 동작을 수행하면 중지되었던 동영상의 재생을 재개하게 된다.
도 8 및 도 9는 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법에 의하여 생성되는 동영상 마크업 데이터를 이용하여 네트워크를 통해 연결된 클라이언트 단말기로 정보를 제공하는 정보 제공 시스템의 또 다른 실시예의 구성 및 연결 상태를 나타낸 구성도와, 이러한 정보 제공 시스템을 통해 이루어지는 정보 제공 방법의 또 다른 실시예를 나타낸 흐름도이다.
도 8 및 도 9의 실시예는, 도 6 및 도 7에서 설명한 실시예와 비교해 볼 때, 정보 제공 시스템(20)이 동영상 서비스 제공 서버(20a)와 정보 제공 서버(20b)로 분리되어 구성되어 있다는 점에서 차이가 있으며, 클라이언트 단말기(30)는 동영상 서비스 제공 서버(20a)로부터 동영상 재생 서비스를 제공받는 도중 객체 요청 신호를 생성하면 동영상 서비스 제공 서버(20a)를 거쳐서 정보 제공 서버(20b)로부터 객체 정보를 제공받는다는 점을 특징으로 한다.
도 8 및 도 9를 참조하면, 동영상 서비스 제공 서버(20a)는 클라이언트 단말기로 동영상 재생 서비스를 제공하고(S400), 이러한 도중 클라이언트 단말기(30)가 재생되는 동영상으로부터 관심있는 객체를 선택하면(S410) 전술한 바와 마찬가지 방식으로 객체 정보 요청 신호가 생성되어 동영상 서비스 제공 서버(20a)로 전송된다(S420).
동영상 서비스 제공 서버(20a)는 수신한 객체 정보 요청 신호를 정보 제공 서버(20b)측으로 전달하여 객체 정보를 요청하고(S430), 정보 제공 서버(20b)는 수신한 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스(21)로부터 객체 정보를 조회하고(S440), 조회된 객체 정보를 동영상 서비스 제공 서버(20a)로 전송한다(S450). 동영상 서비스 제공 서버(20a)는 수신된 객체 정보를 클라이언트 단말기(30)로 전송하고(S460), 클라이언트 단말기(30)는 수신된 객체 정보를 표시하게 된다(S470). 여기에서, 정보 제공 서버(20b)는 객체 정보를 동영상 서비스 제공 서버(20a)로 전송하는 대신 클라이언트 단말기(30)로 직접 전송할 수도 있다. 이를 위해서는 동영상 서비스 제공 서버(20a)가 객체 정보 요청 신호를 정보 제공 서버(20b)로 전송할 때 클라이언트 단말기(30)의 IP 주소 등의 정보를 전송하도록 하는 것이 바람직하다.
한편, 도 8 및 도 9의 실시예에서 전술한 차이점을 제외하고는 기타 구성 및 동작은 도 6 및 도 7을 참조하여 설명한 것과 마찬가지이므로 기타 구성 및 동작에 대한 상세 설명은 생략한다.
도 10은 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법에 의하여 생성되는 동영상 마크업 데이터를 이용하여 네트워크를 통해 연결된 클라이언트 단말기로 정보를 제공하는 정보 제공 방법의 또 다른 실시예를 나타낸 흐름도이다.
도 10의 실시예는, 도 9의 실시예와 비교해 볼 때, 도 8에서와 같이 동영상 서비스 제공 서버(20a)와 정보 제공 서버(20b)가 분리되어 구성된다는 점에서는 동일하지만, 클라이언트 단말기(30)에서 생성된 객체 정보 요청 신호가 동영상 서비스 제공 서버(20a)를 거치지 않고 정보 제공 서버(20b)로 전송되고 정보 제공 서버(20b)는 조회된 객체 정보를 동영상 서비스 제공 서버(20a)를 거치지 않고 직접 클라이언트 단말기(30)로 전송한다는 점에서 차이가 있다.
도 10을 참조하면, 동영상 서비스 제공 서버(20a)는 클라이언트 단말기로 동영상 재생 서비스를 제공하고(S500), 이러한 도중 클라이언트 단말기(30)가 재생되는 동영상으로부터 관심있는 객체를 선택하면(S510) 전술한 바와 마찬가지 방식으로 객체 정보 요청 신호가 생성되어 정보 제공 서버(20b)로 전송된다(S520).
정보 제공 서버(20b)는 수신한 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스(21)로부터 객체 정보를 조회하고(S530), 조회된 객체 정보를 클라이언트 단말기(30)로 전송한다(S540). 다음으로, 클라이언트 단말기(30)는 수신된 객체 정보를 표시하게 된다(S550). 본 실시예에서는, 동영상 서비스 제공 서버(20a)는 단순히 동영상 서비스를 제공할 뿐이고, 클라이언트 단말기(30)와 정보 제공 서버(20b) 사이에서 객체 정보 요청 신호 및 객체 정보 전송이 직접 이루어진다는 점을 특징으로 한다.
한편, 도 10의 실시예는, 전술한 차이점을 제외하고는 기타 구성 및 동작은 도 6 내지 도 9을 참조하여 설명한 것과 마찬가지이므로 기타 구성 및 동작에 대한 상세 설명은 생략한다.
도 11은 도 1 내지 도 5를 참조하여 설명한 바와 같은 방법 및 장치에 의하여 생성되는 동영상 마크업 데이터를 이용하여 클라이언트 단말기에서 정보를 제공하는 방법의 또 다른 실시예를 나타낸 흐름도이다.
도 11의 실시예는, 도 6 및 도 7을 참조하여 설명한 정보 제공 방법 및 시스템과 기본적으로 동일하지만, 동영상 데이터 및 동영상 마크업 데이터가 클라이언트 단말기에 저장되어 있어서 정보 제공 시스템의 구성이 필요없다는 점에서 차이가 있다.
도 11을 참조하면, 우선 클라이언트 단말기(30)는 자신이 저장하고 있는 동영상 데이터를 재생하는 도중(S600), 사용자가 객체를 선택하면(S610), 해당 객체에 상응하는 객체 정보를 조회한다(S620). 다음으로, 객체 정보가 조회되면, 조회된 객체 정보를 디스플레이 장치에 표시하게 된다(S630). 이 과정은, 동영상 데이터가 클라이언트 단말기(30)에 저장되어 있다는 점과, 객체 정보를 조회하는 동영상 마크업 데이터가 클라이언트 단말기(30)에 저장되어 있다는 점을 제외하고는, 도 6 및 도 7에서와 동일하므로, 상세 설명은 생략한다.
10...동영상 마크업 데이터 생성 장치,
11...객체 정보 생성부,
12...핑거프린트 정보 추출부,
13...동영상 마크업 데이터 생성부
20,,,정보 제공 시스템,
20a...동영상 서비스 제공 서버,
20b...정보 제공 서버,
21...동영상 마크업 데이터베이스,
22...객체 정보 조회부,
23...객체 정보 전송부,
30...클라이언트 단말기

Claims (43)

  1. 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법에 있어서,
    동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대하여, 각 구간별로 각 구간에 포함된 객체들의 객체 정보를 생성하는 제1 단계;
    상기 각 구간별로 각 구간에 관련되는 부분 핑거프린트 정보를 추출하는 제2 단계; 및
    상기 각 구간별로 상기 객체 정보 및 부분 핑거프린트 정보를 포함하도록 동영상 데이터에 대한 동영상 마크업 데이터를 생성하는 제3 단계
    를 포함하고,
    상기 제1 단계의 객체 정보는 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나를 포함하고,
    상기 제2 단계의 부분 핑거프린트 정보는 상기 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나에 기초하여 추출되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 제1 단계의 객체 정보는, 해당 동영상 데이터가 재생될 때 디스플레이 수단에서의 상대 위치 정보와 크기 정보를 나타내는 객체 공간 정보와, 객체의 특징을 나타내는 객체 특징 정보와, 각 객체에 대응하여 설정된 광고 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법.
  4. 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법에 있어서,
    동영상 데이터의 전체 구간에 대한 전체 핑거프린트 정보를 추출하는 제1 단계;
    동영상 마크업 데이터를 생성할 대상이 되는 동영상 데이터의 적어도 하나 이상의 구간에 대하여 각 구간에 대한 구간 식별 정보와 각 구간별로 각 구간에 포함된 객체들의 객체 정보를 생성하는 제2 단계;
    상기 구간 식별 정보를 전체 핑거프린트 정보에 식별 가능하도록 포함시키는 제3 단계; 및
    상기 전체 핑거프린트 정보와, 상기 각 구간에 대한 구간 식별 정보 및 각 구간별 객체 정보를 포함하도록 동영상 데이터에 대한 동영상 마크업 데이터를 생성하는 제4 단계
    를 포함하고,
    상기 제2 단계의 객체 정보는 객체의 출현 시점 정보와 객체의 소멸 시점 정보 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법.
  5. 삭제
  6. 제4항에 있어서,
    상기 제2 단계의 객체 정보는, 해당 동영상 데이터가 재생될 때 디스플레이 수단에서의 상대 위치 정보와 크기 정보를 나타내는 객체 공간 정보와, 객체의 특징을 나타내는 객체 특징 정보와, 각 객체에 대응하여 설정된 광고 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법.
  7. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하며 클라이언트 단말기와 네트워크로 연결된 정보 제공 시스템에서, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 방법에 있어서,
    클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하는 제1 단계;
    상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 제2 단계; 및
    상기 조회된 객체 정보를 클라이언트 단말기로 전송하는 제3 단계
    를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  8. 제7항에 있어서,
    상기 제1 단계의 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에 나타나는 객체를 사용자가 입력 장치에 의해 선택함으로써 생성되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  9. 제8항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하고,
    상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  10. 제9항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함하고,
    상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 동영상의 식별 정보와 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  11. 제10항에 있어서,
    상기 동영상의 식별 정보는, 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보인 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  12. 제7항에 있어서,
    상기 제2 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  13. 제7항에 있어서,
    상기 제2 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  14. 제13항에 있어서,
    상기 제3 단계 이후, 상기 주소 정보를 선택한 경우 상기 주소 정보에 상응하는 웹 페이지가 클라이언트 단말기에 제공되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  15. 제7항에 있어서,
    상기 제3 단계 이후, 클라이언트 단말기는 전송된 객체 정보를 디스플레이 장치에 표시하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  16. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하며 네트워크를 통해 연결된 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 시스템에 있어서,
    클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하고, 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 객체 정보 조회부; 및
    상기 조회된 객체 정보를 클라이언트 단말기로 전송하는 객체 정보 전송부
    를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 시스템.
  17. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 클라이언트 단말기와 네트워크로 연결되어 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하는 정보 제공 시스템에서, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 방법에 있어서,
    상기 동영상 서비스 제공 서버가 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하는 제1 단계;
    상기 동영상 서비스 제공 서버가 상기 객체 정보 요청 신호를 상기 정보 제공 서버측으로 전달하여 객체 정보를 요청하는 제2 단계;
    상기 정보 제공 서버가 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 제3 단계; 및
    상기 정보 제공 서버가 상기 조회된 객체 정보를 상기 클라이언트 단말기로 전송하거나 또는 상기 동영상 서비스 제공 서버로 전송하고 상기 동영상 서비스 제공 서버가 상기 수신한 객체 정보를 클라이언트 단말기로 전송하는 제4 단계
    를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  18. 제17항에 있어서,
    상기 제1 단계의 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에 나타나는 객체를 사용자가 입력 장치에 의해 선택함으로써 생성되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  19. 제18항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하고,
    상기 제3 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  20. 제19항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함하고,
    상기 제3 단계는, 상기 객체 정보 요청 신호에 포함된 동영상의 식별 정보와 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  21. 제20항에 있어서,
    상기 동영상의 식별 정보는, 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보인 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  22. 제17항에 있어서,
    상기 제3 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  23. 제17항에 있어서,
    상기 제3 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  24. 제23항에 있어서,
    상기 제4 단계 이후, 상기 주소 정보를 선택한 경우 상기 주소 정보에 상응하는 웹 페이지가 클라이언트 단말기에 제공되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  25. 제17항에 있어서,
    상기 제4 단계 이후, 클라이언트 단말기는 전송된 객체 정보를 디스플레이 장치에 표시하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  26. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 네트워크를 통해 연결된 클라이언트 단말기로 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하며, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 시스템으로서,
    상기 동영상 서비스 제공 서버는, 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하고, 수신된 객체 정보 요청 신호를 상기 정보 제공 서버측으로 전달하고 정보 제공 서버측으로부터 객체 정보가 수신된 경우 수신된 객체 정보를 클라이언트 단말기로 전송하고,
    상기 정보 제공 서버는, 동영상 서비스 제공 서버로부터 전송된 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하고, 조회된 객체 정보를 상기 동영상 서비스 제공 서버 또는 클라이언트 단말기로 전송하는 것
    을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 시스템.
  27. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 클라이언트 단말기와 네트워크로 연결되어 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하는 정보 제공 시스템에서, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 방법에 있어서,
    상기 동영상 서비스 제공 서버가 클라이언트 단말기로 동영상 재생 서비스를 제공하는 도중 상기 정보 제공 서버가 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하는 제1 단계;
    상기 정보 제공 서버가 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하는 제2 단계; 및
    상기 정보 제공 서버가 상기 조회된 객체 정보를 상기 클라이언트 단말기로 전송하는 제3 단계
    를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  28. 제27항에 있어서,
    상기 제1 단계의 상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에 나타나는 객체를 사용자가 입력 장치에 의해 선택함으로써 생성되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  29. 제28항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하고,
    상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  30. 제29항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 식별 정보를 더 포함하고,
    상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 동영상의 식별 정보와 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  31. 제30항에 있어서,
    상기 동영상의 식별 정보는, 클라이언트 단말기에서 재생되고 있는 동영상의 전체 또는 부분 핑거프린트 정보인 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  32. 제27항에 있어서,
    상기 제2 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  33. 제27항에 있어서,
    상기 제2 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  34. 제33항에 있어서,
    상기 제3 단계 이후, 상기 주소 정보를 선택한 경우 상기 주소 정보에 상응하는 웹 페이지가 클라이언트 단말기에 제공되는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  35. 제27항에 있어서,
    상기 제3 단계 이후, 클라이언트 단말기는 전송된 객체 정보를 디스플레이 장치에 표시하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  36. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 동영상 마크업 데이터베이스를 구비하는 정보 제공 서버와, 네트워크를 통해 연결된 클라이언트 단말기로 동영상 서비스를 제공하는 동영상 서비스 제공 서버를 포함하며, 클라이언트 단말기로 동영상 서비스를 제공하는 도중에 정보를 제공하는 정보 제공 시스템으로서,
    상기 정보 제공 서버는,
    상기 동영상 서비스 제공 서버에서 클라이언트 단말기로 동영상 재생 서비스가 제공되는 도중 클라이언트 단말기로부터 객체 정보 요청 신호를 수신하고, 수신된 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터베이스로부터 객체 정보를 조회하고, 조회된 객체 정보를 클라이언트 단말기로 전송하는 것
    을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 시스템.
  37. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 갖는 클라이언트 단말기에서 정보를 제공하는 정보 제공 방법에 있어서,
    동영상 재생 서비스를 제공하는 도중 사용자의 선택 동작에 의해 객체 정보 요청 신호를 수신하는 제1 단계;
    상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터로부터 객체 정보를 조회하는 제2 단계; 및
    상기 조회된 객체 정보를 클라이언트 단말기의 디스플레이 장치에 표시하는 제3 단계
    를 포함하는 동영상 핑거프린트에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  38. 제37항에 있어서,
    상기 객체 정보 요청 신호는, 클라이언트 단말기의 디스플레이 장치에서 재생되는 동영상의 화면에서 사용자가 선택한 위치 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  39. 제38항에 있어서,
    상기 제2 단계는, 상기 객체 정보 요청 신호에 포함된 위치 정보에 기초하여 객체 정보를 조회하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  40. 제37항에 있어서,
    상기 제2 단계의 객체 정보는, 각 객체에 대응하여 설정된 광고 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  41. 제37항에 있어서,
    상기 제2 단계의 객체 정보는 각 객체에 대응하여 연결된 인터넷 상에서의 웹 페이지의 위치를 나타내는 주소 정보를 포함하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  42. 제37항에 있어서,
    상기 제1 단계 이후, 클라이언트 단말기에서 동영상의 재생을 중지하고, 클라이언트 단말기에서의 선택 동작에 의해 동영상의 재생을 재개하는 것을 특징으로 하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용한 정보 제공 방법.
  43. 제1항, 제3항, 제4항 및 제6항 중 어느 한 항의 방법에 의해 생성된 동영상 마크업 데이터를 가지며, 상기 동영상 마크업 데이터를 이용하여 정보를 제공하는 클라이언트 단말기에 있어서,
    동영상 재생 서비스를 제공하는 도중 사용자의 선택 동작에 의해 객체 정보 요청 신호를 수신하고, 상기 객체 정보 요청 신호에 기초하여 동영상 마크업 데이터로부터 객체 정보를 조회하고, 상기 조회된 객체 정보를 클라이언트 단말기의 디스플레이 장치에 표시하도록 하는 객체 정보 처리부
    를 포함하는 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터를 이용하여 정보를 제공하는 클라이언트 단말기.
KR1020100115977A 2010-11-22 2010-11-22 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템 KR101181732B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020100115977A KR101181732B1 (ko) 2010-11-22 2010-11-22 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템
PCT/KR2011/007476 WO2012070766A2 (ko) 2010-11-22 2011-10-10 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템
US13/988,683 US20130247085A1 (en) 2010-11-22 2011-10-10 Method for generating video markup data on the basis of video fingerprint information, and method and system for providing information using same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100115977A KR101181732B1 (ko) 2010-11-22 2010-11-22 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20110010083A KR20110010083A (ko) 2011-01-31
KR101181732B1 true KR101181732B1 (ko) 2012-09-19

Family

ID=43615588

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100115977A KR101181732B1 (ko) 2010-11-22 2010-11-22 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템

Country Status (3)

Country Link
US (1) US20130247085A1 (ko)
KR (1) KR101181732B1 (ko)
WO (1) WO2012070766A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160053549A (ko) * 2014-11-05 2016-05-13 삼성전자주식회사 단말 장치 및 그 정보 제공 방법

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101456926B1 (ko) * 2013-06-14 2014-10-31 (주)엔써즈 핑거프린트에 기반한 광고 검출 시스템 및 방법
FR3010606A1 (fr) * 2013-12-27 2015-03-13 Thomson Licensing Procede de synchronisation de metadonnees avec un document audiovisuel en utilisant des parties de trames et dispositif de production de telles metadonnees
US10713495B2 (en) 2018-03-13 2020-07-14 Adobe Inc. Video signatures based on image feature extraction
US10506275B1 (en) * 2018-07-16 2019-12-10 Gracenote, Inc. Dynamic control of fingerprinting rate to facilitate time-accurate revision of media content

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100981125B1 (ko) 2008-06-02 2010-09-10 (주)엔써즈 동영상 처리 방법 및 그 장치

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020056136A1 (en) * 1995-09-29 2002-05-09 Wistendahl Douglass A. System for converting existing TV content to interactive TV programs operated with a standard remote control and TV set-top box
US9940626B2 (en) * 2006-06-23 2018-04-10 At&T Intellectual Property I, L.P. Methods and apparatus to provide an electronic agent
US8170392B2 (en) * 2007-11-21 2012-05-01 Shlomo Selim Rakib Method and apparatus for generation, distribution and display of interactive video content
US20090037947A1 (en) * 2007-07-30 2009-02-05 Yahoo! Inc. Textual and visual interactive advertisements in videos
KR100935390B1 (ko) * 2007-09-10 2010-01-06 (주)엔써즈 동영상 데이터 클러스터를 이용한 광고 데이터 설정 및제공 방법 및 장치
KR101111726B1 (ko) * 2007-10-31 2012-03-08 주식회사 소프닉스 양방향 광고 정보 파일 저작 서비스 제공방법 및, 양방향 광고 정보 파일 저작 프로그램이 기록된 기록매체
US9628811B2 (en) * 2007-12-17 2017-04-18 Qualcomm Incorporated Adaptive group of pictures (AGOP) structure determination

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100981125B1 (ko) 2008-06-02 2010-09-10 (주)엔써즈 동영상 처리 방법 및 그 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160053549A (ko) * 2014-11-05 2016-05-13 삼성전자주식회사 단말 장치 및 그 정보 제공 방법
US10219011B2 (en) 2014-11-05 2019-02-26 Samsung Electronics Co., Ltd. Terminal device and information providing method thereof
KR102217191B1 (ko) * 2014-11-05 2021-02-18 삼성전자주식회사 단말 장치 및 그 정보 제공 방법

Also Published As

Publication number Publication date
WO2012070766A3 (ko) 2012-07-19
KR20110010083A (ko) 2011-01-31
WO2012070766A2 (ko) 2012-05-31
US20130247085A1 (en) 2013-09-19

Similar Documents

Publication Publication Date Title
US20210382929A1 (en) Multimedia content tags
JP6877497B2 (ja) 広告タグを介したウェブベースのメディアにおけるコンテンツシンジケーション
US9930311B2 (en) System and method for annotating a video with advertising information
KR100985190B1 (ko) 워터마크를 이용한 정보 제공 방법 및 시스템
KR102114701B1 (ko) 미디어 데이터에 있는 아이템을 인식하고 이와 관련된 정보를 전달하기 위한 시스템 및 방법
JP5651231B2 (ja) コンテンツを決定し検索するためのメディアフィンガープリント
JP5711355B2 (ja) ソーシャルネットワーク用メディアフィンガープリント
CN102244807B (zh) 自适应视频变焦
US8707348B2 (en) Systems and methods for generating interactive video content
KR101492249B1 (ko) 사용자 맞춤형 광고 및 콘텐츠 제공 시스템
KR102370510B1 (ko) 타겟 콘텐트를 위한 비디오 프레임 선택
KR101181732B1 (ko) 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템
US20140344070A1 (en) Context-aware video platform systems and methods
JP2004185456A (ja) カスタマイズされたコンテンツの配信システム
CN104936034A (zh) 基于视频的信息录入方法及装置
KR20120103961A (ko) 사용자 맞춤형 연관광고 제공장치, 연관광고 재생용 휴대단말 및 사용자 맞춤형 연관광고 제공방법
KR20160027486A (ko) 광고 제공 장치, 광고 표시 장치, 광고 제공 방법, 및 광고 표시 방법
KR20100118896A (ko) 콘텐츠 내 객체 정보 및 객체 기반의 응용 콘텐츠를 제공하는 방법 및 장치
US8751475B2 (en) Providing additional information related to earmarks
JP4249673B2 (ja) コンテンツ再生と連動したネットワーク情報の提供方法
KR20090128251A (ko) 멀티미디어 콘텐츠의 내용에 기반하는 광고 제공 시스템 및그 광고 제공 방법
KR20110010084A (ko) 핑거프린트 정보를 이용한 콘텐츠 관련 서비스 제공 방법 및 시스템
KR20140076674A (ko) 동영상에 객체 증강을 이용한 광고 시스템 및 방법
WO2009002098A1 (en) Method for providing and searching information keyword and information contents related to contents and system thereof
KR20210142258A (ko) Ｅｃ 통합형 메타미디어의 제작 방법, 전송 시스템 및 전송 방법

Legal Events

Date Code Title Description
A201 Request for examination
G15R Request for early publication
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150731

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160826

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170828

Year of fee payment: 6