KR102148248B1 - 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅 - Google Patents

자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅 Download PDF

Info

Publication number
KR102148248B1
KR102148248B1 KR1020207008760A KR20207008760A KR102148248B1 KR 102148248 B1 KR102148248 B1 KR 102148248B1 KR 1020207008760 A KR1020207008760 A KR 1020207008760A KR 20207008760 A KR20207008760 A KR 20207008760A KR 102148248 B1 KR102148248 B1 KR 102148248B1
Authority
KR
South Korea
Prior art keywords
broadcast
scene
advertisement
fingerprint
frame
Prior art date
Application number
KR1020207008760A
Other languages
English (en)
Other versions
KR20200037423A (ko
Inventor
주이쿤 첸
Original Assignee
더 닐슨 컴퍼니 (유에스) 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 더 닐슨 컴퍼니 (유에스) 엘엘씨 filed Critical 더 닐슨 컴퍼니 (유에스) 엘엘씨
Priority to KR1020207023993A priority Critical patent/KR102272767B1/ko
Publication of KR20200037423A publication Critical patent/KR20200037423A/ko
Application granted granted Critical
Publication of KR102148248B1 publication Critical patent/KR102148248B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • G06K9/00744—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Systems (AREA)
  • Collating Specific Patterns (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)

Abstract

자동 콘텐츠 인식에 대해 광고 프레임들을 플래깅하기 위한 방법은 일련의 브로드캐스트 장면들(302b(1-n))을 포함하는 미디어 스트림(S)의 브로드캐스트 프레임들(FB(1-n))을 지시하는 브로드캐스트 핑거프린트들(222b)을 수신하는 것을 포함한다. 방법은 또한 광고 장면들(302a(1-n))의 광고 프레임들(Fad(1-n))을 지시하는 광고 핑거프린트들(222a)을 수신하는 것을 포함한다. 방법은 제1 브로드캐스트 장면(302b(1))과 제2 브로드캐스트 장면(302b(2)) 사이의 장면 변화(312)를 판정하는 것 및 제2 브로드캐스트 장면이 광고 장면들 중 하나인지의 여부를 판정하는 것을 더 포함한다. 장면 변화는 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임(FB(i))의 초기 브로드캐스트 핑거프린트(222b(i))와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임(FB(L))의 마지막 브로드캐스트 핑거프린트(222b(L)) 사이의 피어슨 상관 계수(PsΔ)에 의거한다. 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 방법은 식별(332)을 제2 브로드캐스트 장면과 연관짓는다.

Description

자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅
본 개시는 자동 콘텐츠 인식 동안 광고 프레임들을 플래깅하는 것에 관한 것이다.
오늘날, 미디어 디바이스들은 점점 더 일반화되고 있으며 텔레비전과 같은 가정의 고정물에서부터 미디어 소비자와 함께 이동하는 모바일 디바이스들에 이르기까지 다양할 수 있다. 텔레비전, 셋톱박스, 모바일 폰, 랩톱, 및 태블릿과 같은 미디어 디바이스들은 다양한 소스들로부터의 미디어 콘텐츠에 액세스하고 검색할 수 있다. 예를 들면, 미디어 디바이스는 유선 또는 무선 연결로부터 위성, 공중파 브로드캐스팅, 또는 스트리밍 시스템들을 통해 미디어 콘텐츠를 수신할 수 있다. 미디어 디바이스들의 사용이 계속 증가함에 따라, 미디어 콘텐츠에 대한 미디어 디바이스 연결이 또한 증가되었다. 이 성장과 함께, 새로운 미디어 콘텐츠 시장이 등장하였고 기존 미디어 콘텐츠 시장은 상황에 맞는 미디어 콘텐츠를 이해하고 이를 미디어 소비자에게 제공하도록 적응되었다.
본 개시의 일 태양은 자동 콘텐츠 인식에 대해 광고 프레임들을 플래깅하기 위한 방법을 제공한다. 방법은, 데이터 처리 하드웨어에서, 미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 것을 포함한다. 미디어 스트림은 일련의 브로드캐스트 장면들을 포함한다. 방법은 또한, 데이터 처리 하드웨어에서, 광고(ad) 장면들의 광고 프레임들을 지시하는 광고 핑거프린트들을 수신하는 것을 포함한다. 방법은, 데이터 처리 하드웨어에 의해, 제1 브로드캐스트 장면과 제2 브로드캐스트 장면 사이의 장면 변화를 판정하는 것을 포함한다. 장면 변화는, 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수에 의거한다. 방법은 또한, 데이터 처리 하드웨어에 의해, 제2 브로드캐스트 장면이 광고 장면들 중 하나인지의 여부를 판정한다. 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 방법은, 데이터 처리 하드웨어에 의해, 광고 장면들 중 하나로서 제2 브로드캐스트 장면의 식별을 연관짓는다.
본 개시의 구현들은 다음 선택적 특징들 중 하나 이상을 포함할 수 있다. 일부 구현들에서, 장면 변화는 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 것을 포함한다. 장면 변화는 또한, 데이터 처리 하드웨어에 의해, 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족함을 판정하는 것을 포함할 수 있다.
일부 예들에서, 방법은 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대한 장면 변화를 판정하는 것을 포함한다. 이 예에서, 방법은 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정할 수 있다. 방법은 또한, 데이터 처리 하드웨어에 의해, 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정할 수 있다. 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족할 경우, 방법은, 대응하는 브로드캐스트 장면의 마지막 브로드캐스트 프레임으로서 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임을 식별할 수 있다. 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족할 경우, 방법은 또한, 대응하는 순차적으로 인접한 브로드캐스트 장면의 초기 브로드캐스트 프레임으로서, 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임을 식별할 수 있다.
일부 구성들에서, 방법은, 제2 브로드캐스트 장면이 광고 장면들 중 하나인지의 여부를 판정하기 전에, 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 이후 임계 기간을 대기하는 것을 포함한다. 제2 브로드캐스트 장면이 각각의 광고 핑거프린트에 대한 광고 장면들 중 하나인지의 여부를 판정하는 것은, 데이터 처리 하드웨어에 의해, 각각의 광고 핑거프린트와 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 것을 포함할 수 있다. 방법은 또한, 데이터 처리 하드웨어에 의해, 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 것을 포함할 수 있다. 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족할 경우, 방법은, 데이터 처리 하드웨어에 의해, 각각의 광고 핑거프린트의 광고 장면에 대응하는 것으로서 제2 브로드캐스트 장면을 식별할 수 있다.
일부 구현들에서, 제2 브로드캐스트 장면은 광고 장면들 중 하나일 수 있다. 이들 구현들에서, 방법은, 데이터 처리 하드웨어에 의해, 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정할 수 있다. 방법은 또한, 데이터 처리 하드웨어에 의해, 광고 식별부를 제2 브로드캐스트 장면과 연관지을 수 있다.
일부 예들에서, 각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타낸다. 각각의 핑거프린트는 또한 대응하는 프레임의 그레이스케일값들의 합을 나타내는 평균 픽셀값을 포함할 수 있다. 추가적으로 또는 대안으로, 각각의 핑거프린트는 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타낼 수 있고, 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의한다.
본 개시의 또 다른 태양은 자동 콘텐츠 인식에 대해 광고 프레임들을 플래깅하기 위한 방법을 제공한다. 방법은, 데이터 처리 하드웨어에서, 미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 것을 포함한다. 방법은 또한, 데이터 처리 하드웨어에서, 광고(ad) 장면들의 광고 프레임들을 지시하는 광고 핑거프린트들을 수신하는 것을 포함한다. 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해, 방법은, 데이터 처리 하드웨어에 의해, 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 것을 포함한다. 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해, 방법은 또한, 데이터 처리 하드웨어에 의해, 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정한다. 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족할 경우, 방법은, 데이터 처리 하드웨어에 의해, 제1 브로드캐스트 프레임에서 끝나는 것으로서 제1 브로드캐스트 장면을 식별하고 제2 브로드캐스트 프레임에서 시작하는 것으로서 제2 브로드캐스트 장면을 식별한다. 각각의 광고 핑거프린트에 대해, 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족할 경우, 방법은, 데이터 처리 하드웨어에 의해, 각각의 광고 핑거프린트와 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하고 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정한다. 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족할 경우, 방법은, 데이터 처리 하드웨어에 의해, 각각의 광고 핑거프린트의 광고 장면으로서 제2 브로드캐스트 장면을 식별하는 것을 포함한다.
본 개시의 구현들은 다음 선택적 특징들 중 하나 이상을 포함할 수 있다. 일부 예들에서, 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 방법은, 데이터 처리 하드웨어에 의해, 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 것을 포함한다. 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 방법은, 데이터 처리 하드웨어에 의해, 광고 식별부를 제2 브로드캐스트 장면과 연관짓는 것을 더 포함할 수 있다.
일부 구현들에서, 각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타낸다. 추가적으로 또는 대안으로, 각각의 핑거프린트는 또한 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타낼 수 있고, 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의한다.
본 개시의 또 다른 태양은 자동 콘텐츠 인식에 대해 광고 프레임들을 플래깅하기 위한 시스템을 제공한다. 시스템은 데이터 처리 하드웨어 및 데이터 처리 하드웨어와 통신하는 메모리 하드웨어를 포함한다. 메모리 하드웨어는, 데이터 처리 하드웨어에서 실행 시 데이터 처리 하드웨어에게 동작들을 행하게 하는 명령어들을 저장한다. 동작들은 미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 것을 포함한다. 미디어 스트림은 일련의 브로드캐스트 장면들을 포함한다. 동작들은 또한 광고(ad) 장면들의 광고 핑거프린트들을 지시하는 광고 프레임들을 수신하는 것을 포함한다. 동작들은 장면 변화 피어슨 상관 계수에 의거하여 제1 브로드캐스트 장면과 제2 브로드캐스트 장면 사이의 장면 변화를 판정하는 것을 더 포함한다. 장면 변화 피어슨 상관 계수는 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이이다. 동작들은 또한 제2 브로드캐스트 장면이 광고 장면들 중 하나인지의 여부를 판정하는 것을 포함한다. 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 동작들은 광고 장면들 중 하나로서 제2 브로드캐스트 장면의 식별을 연관짓는 것을 포함한다.
본 개시의 구현들은 다음 선택적 특징들 중 하나 이상을 포함할 수 있다. 일부 예들에서, 시스템은 장면 변화를 판정하는 것을 포함한다. 이 예들에서, 장면 변화는 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 것을 포함할 수 있다. 시스템은 또한 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족함을 판정하는 것을 포함할 수 있다.
일부 구성들에서, 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해, 장면 변화를 판정하는 것은, 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 것을 포함한다. 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해, 장면 변화를 판정하는 것은 또한 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정하는 것을 포함할 수 있다. 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족할 경우, 시스템은 대응하는 브로드캐스트 장면의 마지막 브로드캐스트 프레임으로서 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임을 식별하는 것을 포함할 수 있다. 시스템은 또한 대응하는 순차적으로 인접한 브로드캐스트 장면의 초기 브로드캐스트 프레임으로서 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임을 식별하는 것을 포함할 수 있다. 동작들은, 제2 브로드캐스트 장면이 광고 장면들 중 하나인지의 여부를 판정하기 전에, 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 이후 임계 기간을 대기하는 것을 더 포함할 수 있다.
일부 구현들에서, 제2 브로드캐스트 장면이 각각의 광고 핑거프린트에 대해 광고 장면들 중 하나인지의 여부를 판정하는 것은 각각의 광고 핑거프린트와 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 것 및 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 것을 포함한다. 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족할 경우, 시스템은 각각의 광고 핑거프린트의 광고 장면에 대응하는 것으로서 제2 브로드캐스트 장면을 식별할 수 있다.
일부 예들에서, 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 동작들은 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 것을 더 포함한다. 추가적으로 또는 대안으로, 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 동작들은 광고 식별부를 제2 브로드캐스트 장면과 연관짓는 것을 포함할 수 있다. 시스템에서, 각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타낼 수 있다. 각각의 핑거프린트는 또한 대응하는 프레임의 그레이스케일값들의 합을 나타내는 평균 픽셀값을 포함할 수 있다. 각각의 핑거프린트는 또한 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타낼 수 있고, 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의한다.
본 개시의 또 다른 태양은 자동 콘텐츠 인식에 대해 광고 프레임들을 플래깅하기 위한 시스템에 대해 제공된다. 시스템은 데이터 처리 하드웨어 및 데이터 처리 하드웨어와 통신하는 메모리 하드웨어를 포함한다. 메모리 하드웨어는, 데이터 처리 하드웨어에서 실행 시 데이터 처리 하드웨어에게 동작들을 행하게 하는 명령어들을 저장한다. 동작들은 미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 것을 포함한다. 동작들은 광고(ad) 장면들의 광고 핑거프린트들을 지시하는 광고 프레임들을 수신하는 것을 더 포함한다. 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해, 동작들은 또한, 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 것을 포함한다. 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해, 동작들은 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정하는 것을 더 포함한다. 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족할 경우, 동작들은 제1 브로드캐스트 프레임에서 끝나는 것으로서 제1 브로드캐스트 장면을 식별하는 것 및 제2 브로드캐스트 프레임에서 시작하는 것으로서 제2 브로드캐스트 장면을 식별하는 것을 포함한다. 각각의 광고 핑거프린트에 대해, 동작들은 각각의 광고 핑거프린트와 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 것 및 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 것을 더 포함한다. 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족할 경우, 동작들은 각각의 광고 핑거프린트의 광고 장면으로서 제2 브로드캐스트 장면을 식별하는 것을 포함한다.
본 개시의 구현들은 다음 선택적 특징들 중 하나 이상을 포함할 수 있다. 일부 구현들에서, 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 동작들은 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 것을 더 포함한다. 제2 브로드캐스트 장면이 광고 장면들 중 하나일 경우, 동작들은 광고 식별부를 제2 브로드캐스트 장면과 연관짓는 것을 포함할 수 있다. 각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타낼 수 있다. 각각의 핑거프린트는 또한 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타낼 수 있고, 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의한다.
이하 첨부 도면 및 기재에서 하나 이상의 본 개시의 구현들의 세부사항이 제시된다. 다른 태양, 특징, 및 이점은 기재 및 도면, 및 특허청구범위로부터 명백해질 것이다.
도 1a 및 도 1b는 자동 콘텐츠 인식 환경의 예의 개략도.
도 2는 자동 콘텐츠 인식 환경의 예시적 서버의 개략도.
도 3a-도 3f는 예시적 광고 식별부들의 개략도.
도 4는 본원에 기술된 시스템 및 방법을 구현하는데 사용될 수 있는 예시적 컴퓨팅 디바이스의 개략도.
복수의 도면에서의 도일한 참조 부호는 동일한 요소를 나타낸다.
일반적으로, 자동 콘텐츠 인식(ACR)은 미디어 디바이스 상의 또는 미디어 파일 내의 미디어 콘텐츠를 자동적으로 식별하는 프로세스이다. ACR은 매일 사회에 의해 소비되는 방대한 양의 미디어 콘텐츠를 식별하는데 더욱더 유용해지고 있다. 상업적 관점에서, ACR은, 사업체 및 다른 엔티티들이 미디어 콘텐츠 소비를 이해하고, 아마도 보다 효과적으로는, 미디어 콘텐츠의 소비자들(즉, 미디어 디바이스 유저들)에게 마켓팅 또는 그들을 타겟팅 가능하게 할 수 있다. 예를 들면, 광고가 미디어 디바이스의 유저에게 개인화될 경우, 광고 또는 오퍼가 보다 효과적일 수 있다. 따라서, 브로드캐스터, 상업적 프로바이더, 광고주 및 다른 엔티티는 어떤 프로그램들이 시청되고 있는지, 또는, 특히 유저가 시청 중의 프로그램의 어디인지를 알기 원한다. 이 타입의 정보에 의해, 미디어 디바이스 유저는 보다 정밀하게 케이터링되는 미디어 콘텐츠를 수신할 수 있다.
미디어 콘텐츠를 이해하고 식별하기 위한 접근법에서, 시스템은, 프리커서(precursor)로서, 브로드캐스터 또는 다른 콘텐츠 프로바이더가 미디어 콘텐츠 소비자에게 배포하는 광고(ad)들을 식별할 수 있다. 미리 광고를 식별함으로써, 브로드캐스터 또는 다른 콘텐츠 프로바이더는 미디어 디바이스에서 보다 효율적으로 및 보다 효과적으로 ACR을 행할 수 있다. 이어서, 식별된 광고들은 ACR 기능의 일부 또는 결과로서 미디어 콘텐츠의 타겟 소비자들에 대해 교체, 오버레이, 또는 수정될 수 있다.
도 1a는 ACR 환경(10)의 예이다. ACR 환경(10)은 미디어 콘텐츠를 미디어 디바이스(30)의 유저(20)(즉, 시청자)에 배포하기 위한 복수의 레이어들을 포함할 수 있다. 도 1a는 미디어 콘텐츠 배포 프로세스를 4개의 레이어들(브로드캐스트 레이어(100); 추가적 콘텐츠 레이어(110); 네트워크 레이어(120); 및 디바이스 레이어(130))로 단순화한 것이다. 각각의 레이어(100, 110, 120, 130)는 미디어 스트림(S)에 영향을 미치는 엔티티들을 가질 수 있다. 브로드캐스트 레이어(100)는 브로드캐스트 미디어 스트림(SB)을 생성하는데 관련될 수 있는 브로드캐스트 엔티티들을 나타낸다. 이들 브로드캐스트 엔티티들은 브로드캐스터(102) 및 브로드캐스트 디스트리뷰터(104)를 포함할 수 있다. 브로드캐스터(102)는 로컬 브로드캐스터들, 다중 채널 네트워크들, 또는 다른 미디어 콘텐츠 소유자들과 같은 하나 이상의 미디어 콘텐츠 프로바이더들일 수 있다. 브로드캐스트 디스트리뷰터(104)는 미디어 콘텐츠를 배포하기 위한 인프라 또는 리소스들(예를 들면, 신호 와이어, 통신 타워, 통신 안테나, 서버 등)을 제공하는 브로드캐스트 엔티티이다. 브로드캐스터(102) 및 브로드캐스트 디스트리뷰터(104)는, 제공되는 미디어 콘텐츠의 타입 또는 미디어 콘텐츠를 수신하는 미디어 디바이스의 타입과 같은 브로드캐스팅 변수들에 따른, 동일한 브로드캐스트 엔티티 또는 서로 다른 브로드캐스트 엔티티일 수 있다.
일부 구현들에서, 미디어 스트림(S)은, 추가적 콘텐츠 레이어(110)로서 나타나는 콘텐츠 엔티티들로부터의 추가적 미디어 콘텐츠 스트림(SC)을 포함한다. 이들 콘텐츠 엔티티들은 상업적 프로바이더들(112), 광고주들(114), 또는 추가적 미디어 콘텐츠를 미디어 스트림(S)에 제공하는 다른 엔티티들을 포함한다. 일반적으로, 상업적 프로바이더들(112)은 추가적 미디어 콘텐츠 스트림(SC)을 조달 및/또는 호스팅하는 콘텐츠 엔티티들인 한편, 광고주들(114)은 광고, 오퍼, 거래, 할인, 혜택, 또는 상품 및/또는 서비스들의 다른 프로모션들과 같은 추가적 미디어 콘텐츠 스트림(SC)을 생성하는 콘텐츠 엔티티들이다. 추가적으로 또는 대안으로, 상업적 프로바이더들(112) 및 광고주들(114)은 동일한 콘텐츠 엔티티일 수 있다. 추가적 콘텐츠 레이어(110)는 추가적 미디어 콘텐츠 스트림(SC)을 브로드캐스트 레이어(100), 네트워크 레이어(120), 디바이스 레이어(130), 또는 그 임의의 조합에 통신할 수 있다. 선택적으로, 추가적 콘텐츠 레이어(110)는 추가적 미디어 콘텐츠 스트림(SC)과 브로드캐스트 미디어 스트림(SB)을 페어링하여 브로드캐스트 미디어 스트림(SB) 및 추가적 미디어 콘텐츠 스트림(SC)을 포함하는 미디어 스트림(S)을 형성할 수 있다.
또한 도 1a를 참조하면, 네트워크 레이어(120)는 브로드캐스트 레이어(100) 및/또는 추가적 콘텐츠 레이어(110)로부터 브로드캐스트 미디어 스트림(SB) 및 추가적 미디어 콘텐츠 스트림(SC)을 수신하도록 구성된다. 예를 들면, 네트워크 레이어(120)가 브로드캐스트 레이어(100)로부터 미디어 스트림(S)을 수신할 경우, 네트워크 레이어(120)는, 추가적 미디어 콘텐츠 스트림(SC)과 함께 또는 추가적 미디어 콘텐츠 스트림(SC)과 독립적으로 브로드캐스트 미디어 스트림(SB)을 수신할 수 있다. 마찬가지로, 네트워크 레이어(120)가 추가적 콘텐츠 레이어(110)로부터 미디어 스트림(S)을 수신할 경우, 네트워크 레이어(120)는, 추가적 미디어 콘텐츠 스트림(SC)과 함께 또는 추가적 미디어 콘텐츠 스트림(SC)과 독립적으로 브로드캐스트 미디어 스트림(SB)을 수신할 수 있다. 일부 구현들에서, 네트워크 레이어(120)는 브로드캐스트 레이어(100)로부터의 브로드캐스트 미디어 스트림(SB)과 추가적 콘텐츠 레이어(110)로부터의 추가적 미디어 콘텐츠 스트림(SC)을 페어링하여 추가적 미디어 콘텐츠 스트림(SC)이 포함된 브로드캐스트 미디어 스트림(SB)을 나타내는 네트워크 미디어 스트림(SN)을 생성할 수 있다.
네트워크 레이어(120)는 핑거프린터(200)를 포함한다. 핑거프린터(200)는 데이터 처리 하드웨어(212) 및 메모리 하드웨어(214)를 갖는 서버(210)에서 동작하도록 구성된다. 핑거프린터(200)는 핑거프린트 생성부(220)를 포함한다. 네트워크 레이어(120)는, 브로드캐스트 핑거프린트 데이터베이스 또는 광고 핑거프린트 데이터베이스와 같은 핑거프린트 데이터베이스(230) 및/또는 메타데이터 데이터베이스(240) 내에, 핑거프린트들(222) 및 핑거프린트들(222)에 관련된 메타데이터(224)를 저장하도록 구성될 수 있다. 네트워크 레이어(120)는 핑거프린트 생성부(220)를 통해 핑거프린트들(222)을 생성하거나 또는 ACR 환경(10) 내의 또 다른 콘텐츠 엔티티로부터 핑거프린트들(222)을 수신하도록 구성될 수 있다. 예를 들면, 네트워크 레이어(120)는 브로드캐스트 레이어(100) 및/또는 추가적 콘텐츠 레이어(110)로부터 광고 프레임들(Fad)을 지시하는 광고 핑거프린트들(222, 222a)을 수신한다. 일반적으로, 핑거프린트(222)는 미디어 스트림(S)의 적어도 하나의 프레임(Fn)에 대응하는 적어도 하나의 고유한 식별자이다. 예를 들면, 적어도 하나의 고유한 식별자는 오디오 비주얼 이미지의 값(예를 들면, 픽셀값), 영숫자 표현, 또는 압축 버전일 수 있다. 추가적으로 또는 대안으로, 네트워크 레이어(120)는 브로드캐스트 미디어 스트림(SB), 추가적 미디어 콘텐츠 스트림(SC), 또는 둘 다 모두를 저장하도록 구성된다.
네트워크 레이어(120)는 광고 식별부(300)를 더 포함한다. 도 1a는, 광고 식별부(300)가 네트워크 레이어(120) 이외의 다른 레이어들(즉, 브로드캐스트 레이어(100), 추가적 콘텐츠 레이어(110), 또는 디바이스 레이어(130))에 실제로 존재할 수 있음을 나타내도록, 점선 박스로 광고 식별부(300)를 나타낸다. 광고 식별부(300)는 핑거프린트들(222)을 수신하고 핑거프린트들(222)이 광고에 대응하는지의 여부를 판정하도록 구성된다. 일부 예들에서, 광고 식별부(300)는 광고 핑거프린트들(222, 222a)을 수신하고 브로드캐스트 핑거프린트들(222, 222b)이 광고 핑거프린트들(222, 222a)에 대응하는 경우를 지시한다. 브로드캐스터(102), 브로드캐스트 디스트리뷰터(104), 상업적 프로바이더들(112), 또는 광고주들(114)과 같은 다른 레이어들로부터의 콘텐츠 엔티티들은 광고 식별부(300)에 광고 프레임들(Fad) 및/또는 광고 핑거프린트들(222, 222a)을 제공할 수 있다. 광고 식별부(300)가 브로드캐스트 핑거프린트들(222, 222b)이 광고 핑거프린트들(222, 222a)에 대응함을 판정할 경우, 광고 식별부(300)는 식별(332)을 ACR 환경(10) 내의 하나 이상의 콘텐츠 엔티티들, ACR 모듈들(132), 및/또는 미디어 디바이스들(30)에 통신할 수 있다.
도 1a는 또한 임의의 레이어(즉, 브로드캐스트 레이어(100), 추가적 콘텐츠 레이어(110), 또는 네트워크 레이어(120))가 디바이스 레이어(130)와 통신할 수 있음을 나타낸다. 디바이스 레이어(130)에서, 텔레비전, 셋톱박스, PC, 랩톱, 태블릿, 또는 모바일 폰과 같은 미디어 디바이스들(30)은 미디어 디바이스 스트림(SD)(예를 들면, 브로드캐스트 미디어 스트림(SB), 추가적 콘텐츠 스트림(SC), 또는 네트워크 미디어 스트림(SN)의 임의의 조합)을 수신하고 대응하는 미디어 디바이스 스트림(SD)(예를 들면, 브로드캐스트 미디어 스트림(SB), 추가적 콘텐츠 스트림(SC), 또는 네트워크 미디어 스트림(SN)의 임의의 조합)의 모두 또는 일부를 유저(20)에게 전할 수 있다. 디바이스는 일부 형태의 미디어 콘텐츠를 수신하거나 통신하도록 구성된 미디어 디바이스(30)에 관련된 임의의 하드웨어 또는 임의의 소프트웨어를 의미할 수 있다. 또한, 디바이스는 데이터 처리 하드웨어 및/또는 메모리 하드웨어를 포함할 수 있다. 일부 구현들에서, 미디어 디바이스들(30)은 대응하는 미디어 스트림(예를 들면, 브로드캐스트 미디어 스트림(SB), 추가적 콘텐츠 스트림(SC), 또는 네트워크 미디어 스트림(SN)의 임의의 조합)을 해석하거는 그와 상호 작용하도록 구성될 수 있다. 예를 들면, 미디어 디바이스들(30)은 브로드캐스트 미디어 스트림(SB)으로부터 추가적 미디어 콘텐츠 스트림(SC)을 식별한다. 미디어 디바이스들(30)은 브로드캐스트 미디어 스트림(SB)의 추가적 미디어 콘텐츠 스트림(SC)을 대체 미디어 콘텐츠로 대체 또는 오버레이할 수 있다. 미디어 디바이스들(30)은 미리 정해진 콘텐츠에 대해 미디어 스트림(S)을 필터링할 수 있다. 추가적으로 또는 대안으로, 미디어 디바이스들(30)은 미디어 스트림(예를 들면, 브로드캐스트 미디어 스트림(SB), 추가적 콘텐츠 스트림(SC), 또는 네트워크 미디어 스트림(SN)의 임의의 조합)에 관련된 정보 또는 데이터를 브로드캐스트 레이어(100), 추가적 콘텐츠 레이어(110), 네트워크 레이어(120), 또는 디바이스 레이어(130)의 다른 미디어 디바이스들(30)과 통신하도록 구성될 수 있다. 미디어 디바이스(30)는 ACR 모듈(132)을 실행하거나 또는 ACR 모듈(132)을 실행하는 다른 데이터 처리 하드웨어와 통신할 수 있다. ACR 모듈(132)은, 미디어 스트림의 일부를 샘플링하고, 샘플을 처리하고, 오디오 또는 비디오 핑거프린트들 또는 워터마크들과 같은 고유한 특징에 의해 콘텐츠를 식별한 소스 서비스와 샘플을 비교함에 의거하여 미디어 스트림 내의 콘텐츠 요소(예를 들면, 오디오, 비디오, 또는 디지털 이미지)를 식별하도록 구성될 수 있다.
도 1b는 예시적 ACR 환경(10)을 나타낸다. ACR 환경(10)은 브로드캐스터(102), 광고 핑거프린터(200, 200a), 브로드캐스트 핑거프린터(200, 200b), 및 광고 식별부(300)를 포함한다. 일부 예들에서, 광고 핑거프린터(200, 200a) 및 브로드캐스트 핑거프린터(200, 200b)는 동일한 핑거프린터(200)이지만, 단순화를 위해, 도 1b의 ACR 환경(10)은 광고 프레임들(Fad)(광고 핑거프린터(200, 200a)) 및 브로드캐스트 프레임들(FB(1-n))(브로드캐스트 핑거프린터(200, 200b))의 각각에 대한 핑거프린트들(222)을 생성하는 핑거프린터(200)를 갖는다. 여기에서, 브로드캐스터(102)는 광고 프레임들(Fad(1-n))을 광고 핑거프린터(200, 200a)에 통신한다. 광고 프레임들(Fad(1-n))은 광고 장면들(302, 302a)로 분할될 수 있는 광고들에 대응한다. 각각의 광고 장면(302, 302a)은 광고의 일부 또는 전체에 관한 것일 수 있다. 일 예로서, 광고들은 길이가 다양하며(예를 들면, 1분 광고들, 30초 광고들, 15초 광고들, 10초 광고들 등); 이에 따라, 프레임 분석을 표준화하기 위해, 각각의 광고는 광고 장면(302, 302a)에 대응하는 광고 프레임들(Fad(1-n))의 이산 수로 감소된다. 광고 핑거프린터(200, 200a)는 광고 핑거프린트 생성부(220, 220a)에서 각각의 광고 프레임(Fad(1-n))에 대해 광고 핑거프린트들(222, 222a)을 생성하고 광고 장면들(302, 302a)에 따라 광고 장면 데이터베이스(250) 내에 광고 핑거프린트들(222, 222a)을 저장할 수 있다. 일반적으로, 광고 핑거프린트(222, 222a)는 적어도 광고 프레임(Fad(1-n))에 대응하는 적어도 하나의 고유한 식별자이다. 추가적으로 또는 대안으로, 브로드캐스터(102) 이외의 콘텐츠 엔티티가 광고 프레임들(Fad(1-n))을 광고 핑거프린터(200, 200a)에 통신할 수 있다. 광고 핑거프린트들(222, 222a)에 있어서, 광고 핑거프린터(200, 200a)는 광고 핑거프린트들(222, 222a)을 광고 식별부(300)에 송신할 수 있다. 광고 핑거프린트들(222, 222a)은 자동적으로 광고 식별부(300)에 송신될 수 있거나 또는 광고 식별부(300)는 광고 식별을 위해 적어도 하나의 광고 핑거프린트(222, 222a)를 질의하거나 검색할 수 있다.
또한 도 1b를 참조하면, 브로드캐스터(102)는 채널들(Ch1-n)에 의해 브로드캐스트 프레임 레이트(RB)로 브로드캐스트 핑거프린터(200, 200b)에 브로드캐스트 미디어 스트림(SB)을 브로드캐스팅한다. 브로드캐스트 프레임 레이트(RB)는, 각각의 브로드캐스트 프레임(FB(1-n))이 브로드캐스트 미디어 스트림(SB) 내에서 픽셀들로 나타나는 오디오 비주얼 이미지에 대응하도록, 브로드캐스트 미디어 스트림(SB)을 브로드캐스트 프레임들(FB(1-n))로 분할한다. 브로드캐스트 핑거프린터(200, 200b)는 브로드캐스트 핑거프린트 생성부(220, 220b)에서 각각의 브로드캐스트 프레임(FB(1-n))을 수신하도록 구성된다. 브로드캐스트 핑거프린트 생성부(220, 220b)는 각각의 브로드캐스트 프레임(FB(1-n))을 수신하고 각각의 브로드캐스트 프레임(FB(1-n))을 지시하는 브로드캐스트 핑거프린트들(222, 222b)을 생성하도록 구성된다. 일반적으로, 브로드캐스트 핑거프린트(222, 222b)는 적어도 하나의 브로드캐스트 프레임(FB(1-n))에 대응하는 적어도 하나의 고유한 식별자이다. 핑거프린터(200, 200b)는 각각의 브로드캐스트 핑거프린트(222, 222b)를 핑거프린트 데이터베이스(230)와 같은 데이터베이스 내에 저장할 수 있다. 일부 예들에서, 핑거프린터(200)는, 프레임 위치(예를 들면, 프레임 시간 코드), 프레임의 타입(예를 들면, 라이브 프로그램 또는 광고), 또는 핑거프린트 식별자 태그와 같은 프레임(F)에 대응하는 메타데이터(224)에 따라 또는 그와 함께 각각의 핑거프린트(222)를 저장한다. 다른 예에서, 핑거프린터(200)는 각각의 핑거프린트(222)의 메타데이터(224)에 대응하는 별개의 데이터베이스 또는 데이터베이스들을 갖는다. 메타데이터(224)를 위한 별개의 데이터베이스는 핑거프린터(200)가 더 많은 핑거프린트들(222)을 저장 가능하게 할 수 있다. 브로드캐스트 핑거프린터(200, 200b)는 브로드캐스트 핑거프린트들(222, 222b)을 광고 식별부(300)에 통신할 수 있다.
일부 예들에서, 광고 식별부(300)는 광고 핑거프린터(200, 200a)로부터의 광고 핑거프린트들(222, 222a) 및 브로드캐스트 핑거프린터(200, 200b)로부터의 브로드캐스트 핑거프린트들(222, 222b)을 수신한다. 광고 식별부(300)는, 브로드캐스트 핑거프린트(222, 222b)가 또한 광고 핑거프린트(222, 222a)인 경우를 식별하도록, 브로드캐스트 핑거프린트(222, 222b)를 광고 핑거프린트들(222, 222a)과 비교할 수 있다. 환언하면, 광고 식별부(300)는 브로드캐스트 프레임(FB(1-n))이 광고 프레임(Fad)에 매칭됨을 식별한다.
도 2는 핑거프린터(200)의 핑거프린트 생성부(220)의 예이다. 핑거프린트 생성부(220)는 브로드캐스트 미디어 스트림(SB)의 채널들(Ch1-n) 또는 광고들(Ad(1-n))에 대응하는 프레임들(F1-n)(브로드캐스트 프레임들(FB(1-n)) 또는 광고 프레임들(Fad(1-n)))을 수신한다. 핑거프린트 생성부(220)는 각각의 수신된 프레임(F1-n)에 대해 핑거프린트(222)를 생성하고 핑거프린트 데이터베이스(230) 또는 광고 장면 데이터베이스(250)와 같은 데이터베이스 내에 핑거프린트(222)를 저장할 수 있다. 일부 예들에서, 각각의 핑거프린트(222)는 대응하는 채널(Ch) 또는 광고(Ad)의 프레임(F1-n)의 적어도 하나의 픽셀값(VP)을 나타낸다. 적어도 하나의 픽셀값(VP)은 평균 픽셀값 또는 프레임(F1-n)의 색 공간값들의 합일 수 있다. 예를 들면, 핑거프린트 생성부(220)는 그레이-UV(YUV) 색 공간에 따른 핑거프린트(222)를 생성할 경우, 적어도 하나의 픽셀값(VP)은 대응하는 프레임(F1-n)의 그레이스케일값들의 합 및/또는 평균을 나타낼 수 있다. 환언하면, 대응하는 프레임(F1-n)의 각각의 픽셀은, 핑거프린트(222)가 픽셀 에어리어의 그레이스케일값들의 합 및/또는 평균을 나타내도록, 그레이스케일값으로 나타난다. 일부 구현들에서, 핑거프린트(222)(예를 들면, 광고 핑거프린트(222, 222a) 또는 브로드캐스트 핑거프린트(222, 222b))는 대응하는 프레임(F1-n)의 서브프레임들(Fsub)에 의거하는 고유한 식별자이다. 서브프레임(Fsub)마다의 픽셀들에 의존하여, 각각의 서브프레임(Fsub)은 대응하는 픽셀값(VP) 또는 대응하는 평균 픽셀값을 가질 수 있다.
도 2는 또한 핑거프린트(222)의 예를 나타내고, F1-n은 서브프레임들(Fsub)로 분할되는 프레임(F)(예를 들면, 브로드캐스트 프레임(FB(1-n)) 또는 광고 프레임(Fad))에 대응한다. 일부 예들에서, 핑거프린트 생성부(220)는, 프레임들(F1-n) 사이를 보다 정확하게 비교하거나 구별하도록, 각각의 프레임(F)을 서브프레임들(Fsub)로 분할한다. 서브프레임들(Fsub)에서, 각각의 핑거프린트(222)(예를 들면, 광고 핑거프린트(222, 222a) 또는 브로드캐스트 핑거프린트(222, 222b))는 대응하는 프레임(F1-n)의 하나의 평균 픽셀값(VP)보다 많은 값을 나타낼 수 있다. 각각의 프레임(F1-n)을 서브프레임들(Fsub)로 분할함으로써, 전체 프레임(F1-n)의 픽셀값(VP)(또는 평균 픽셀값)에 의거하는 핑거프린트들(222)보다 핑거프린트 생성 동안 더 많은 세부(예를 들면, 각각의 서브프레임(Fsub)의 픽셀들)가 고려된다. 이와 같이, 핑거프린트 생성부(220)가 각각의 프레임(F1-n)을 분할한 서브프레임들(Fsub)의 수는 원하는 정확도 레벨에 의존한다. 예를 들면, 도 2에 나타난 바와 같이, 핑거프린트 생성부(220)는 각각의 프레임(F1-n)을 4×4 어레이를 정의하는 16개의 서브프레임들(Fsub)로 분할한다. 16개의 서브프레임들(Fsub)의 각각의 서브프레임(Fsub)은, 각각의 핑거프린트(222)가 각각의 서브프레임(Fsub)과 연관된 정수값을 가지는 16개 값 정수 벡터에 의해 각각의 대응하는 프레임(F1-n)을 나타내도록, 평균 픽셀값(Vp11-44)을 갖는다. 도면은 각각의 프레임(F1-n) 또는 각각의 미디어 디바이스 프레임(FD1-n)을 4×4 어레이로서 나타낼 수 있지만, 임의의 서브프레임 분할이 가능하다.
전통적으로, 핑거프린트들(222) 사이(예를 들면, 광고 핑거프린트들(222, 222a)과 브로드캐스트 핑거프린트들(222, 222b) 사이)의 비교는, 분해능 문제를 겪는다. 예를 들면, 일부 시스템들은 전형적으로 각각의 프레임(F)에 대응하는 평균 픽셀값(VP)의 랭크에 따라 프레임들(F(1-n))을 인덱싱한다. 랭크에 따라 인덱싱함으로써, 랭크는 픽셀값 이상치(outlier)들에 의해 보다 치우칠(skewing) 수 있다. 추가적으로, 단일 픽셀값(VP)으로서의 랭크에서는, 시스템은 픽셀들의 변화에 덜 민감할 수 있다. 예시적 비유로서, 과학적 측정치들은 정확도의 정도를 지시하는 수의 자리인 유효 숫자를 포함한다. 예를 들면, 하나의 유효 숫자의 측정값 0.1은 10분의 1까지만 정확하며 0.10 내지 0.19 사이의 범위일 수 있고; 반면, 두 개의 유효 숫자의 측정값 0.12는 100분의 1까지 정확하며 0.120 내지 0.129 사이의 범위일 수 있다. 환언하면, 단일 픽셀값(VP)의 랭크에 따른 핑거프린트(222)는 하나의 유효 숫자와 마찬가지이만 복수의 픽셀값들(VP)의 벡터에 따른 핑거프린트(222)는 하나 초과의 유효 숫자와 마찬가지이다. 랭크에 따른 핑거프린트(222)는 보다 큰 픽셀 변동을 이 변동을 고려하지 않고 허용할 수 있고; 따라서, 랭크는, 프레임(F)의 다수의 픽셀들값들(VP)의 벡터 표현인 핑거프린트(222)와 비교할 경우, 프레임(F)의 픽셀들을 참으로(truly) 대표할 가능성이 적다. 광고 식별부(300)에 대해서, 이것은, 광고가 라이브 프로그래밍과 일부 유사한 픽셀값들(VP)을 가질 경우, 랭크의 핑거프린트(222)를 이용하는 장면 식별부(310)는 광고를 식별하는 것이 쉽지 않을 수 있음을 의미한다.
도 3a-도 3f는 광고 식별부(300)의 예를 나타낸다. 광고 식별부(300)는 장면 식별부(310), 매처(320) 및 광고 인디케이터(330)를 포함한다. 장면 식별부(310)는, 장면(302)이 또 다른 장면(302)으로 변화될 경우(즉 장면 변화(312))를 미디어 스트림(S)으로부터 판정하도록 구성된다. 일반적으로, 장면(302)은 유사한 픽셀값(Vp)을 갖는 일련의 순차적 프레임들(F1-n)이다. 장면(302)은 유사한 픽셀값들(Vp)을 갖고, 이는, 각각의 프레임(F)은 전형적으로 프레임 레이트(R)에 의거하여 1초의 몇 분의 1에 대응하기 때문이다. 1초의 몇 분의 1로서, 각각의 프레임(F)으로 나타나는 오디오 비주얼 이미지로서 캡처되는 대상은, 장면(302)이 변하지 않는다면, 빠르게 변할 수 없다. 따라서, 핑거프린트(222)로 나타나는 적어도 하나의 픽셀값(Vp)은 2개의 순차적으로 인접한 프레임들(Fadj, F1-n)에 대응하는 핑거프린트들(222) 사이의 픽셀값(VP)의 비유사성에 의해 장면 변화(312)를 판정할 수 있다. 장면 식별부(310)가 장면 변화(312)를 판정할 경우, 매처(320)는 장면 변화(312)의 후속 장면(304)이 광고(예를 들면, 광고 장면 데이터베이스(250) 내의 광고)에 대응하는지의 여부를 판정하도록 구성된다. 후속 장면(304)이 광고에 대응할 경우, 광고 인디케이터(330)는 후속 장면(304)에 대응하는 미디어 스트림(S)의 적어도 하나의 브로드캐스트 프레임(FB)에 대한 식별(332)을 제공하도록 구성된다.
도 3a-도 3f에 걸쳐 점선 박스는 일반적으로 광고 식별부(300)의 기능을 나타내는 요소 또는 요소들의 선택을 지시한다. 예를 들면, 일부 도시에서, 점선 박스는 광고 식별부(300)의 입력 또는 출력으로서 요소(들)의 선택을 지시한다. 다른 도시에서, 점선 박스는 광고 식별부(300)에 관련된 하드웨어 및/또는 소프트웨어의 로직 결정을 지시한다.
도 3a 및 도 3b는 광고 식별부(300)의 장면 식별부(310) 부분의 예를 나타낸다. 장면 식별부(310)는 미디어 스트림(S)의 브로드캐스트 프레임들(FB(1-n))을 지시하는 브로드캐스트 핑거프린트들(222, 222b)을 수신한다. 유사한 픽셀값들(Vp)을 갖는 브로드캐스트 프레임들(FB(1-n))의 시퀀스는, 미디어 스트림(S)이 일련의 브로드캐스트 장면들(302, 302b(1-n))을 포함하도록, 브로드캐스트 장면(302, 302b)을 정의한다. 장면 식별부(310)는 장면 변화 상관에 의거하여 제1 브로드캐스트 장면(302, 302b(1))과 제2 브로드캐스트 장면(302, 302b(2)) 사이의 장면 변화(312)를 판정한다. 장면 변화 상관은 프레임들(F) 및/또는 프레임들(F)에 대응하는 핑거프린트들(222) 사이의 유사성을 지시하는 유사성의 측도이다. 유사성의 측도는 2개의 변수들 사이의 연관성을 측정하는 통계적 상관과 같은 정량적 상관일 수 있다(예를 들면, 피어슨 상관, 켄달 상관, 또는 스피어만 상관). 일부 구현들에서, 장면 변화 상관은 서로 다른 유사성 레벨들을 갖고, 각각의 유사성 레벨은 프레임들(F) 및/또는 프레임들(F)에 대응하는 핑거프린트들(222) 사이의 서로 다른 유사성 정도를 지시한다. 도 3a는 장면 변화 상관이 장면 변화 피어슨 상관 계수(PsΔ)인 기본 예를 나타낸다. 이 예에서, 장면 변화 피어슨 상관 계수(PsΔ)는 2개의 유사성 레벨들(하이 유사성 및 로우 유사성)을 갖는다. 일 예로서, 하이 및 로우 유사성은 이산 정량적 측정 범위(예를 들면, 로우 = 0-0.50 및 하이 = 0.051-1.0)에 대응한다. 이들 이산 정량적 측정 범위는 장면 식별부(310)에 대해 사전-프로그램되거나 또는 장면 식별부(310)에서 측정된 장면 변화 상관에 의거하여 조정될 수 있다.
일부 예들에서, 장면 식별부(310)는, 미디어 스트림(S) 내의 각각의 순차적으로 인접한(즉 이웃하는) 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj) 사이의 장면 변화 피어슨 상관 계수(PsΔ)를 판정함으로써 장면 변화(312)를 식별한다. 이 예들에서, 장면 식별부(310)는 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제1 브로드캐스트 프레임(FB(1))의 제1 브로드캐스트 핑거프린트(222, 222b(1))와 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제2 브로드캐스트 프레임(FB(2))의 제2 브로드캐스트 핑거프린트(222, 222b(2)) 사이의 장면 변화 피어슨 상관 계수(PsΔ)를 판정한다. 일부 구현들에서, 도 3c 및 도 3d와 같이, 장면 식별부(310)가, 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj) 사이의 장면 변화 피어슨 상관 계수(PsΔ)가 장면 변화(312)에 대응함을 판정할 경우, 장면 식별부(310)는 제1 브로드캐스트 장면(302, 302b(1)) 및 제2 브로드캐스트 장면(302, 302b(2))을 식별한다. 환언하면, 장면 식별부(310)는 제1 브로드캐스트 장면(302, 302b(1))의 후속 장면(304)으로서 제2 브로드캐스트 장면(302, 302b(2))을 식별한다. 예를 들면, 장면 식별부(310)는 제1 브로드캐스트 장면(302, 302b(1))의 마지막 브로드캐스트 프레임(F(BL))의 마지막 브로드캐스트 핑거프린트(222, 222b(L))로서 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제1 브로드캐스트 핑거프린트(222, 222b(1))를 식별하고, 제2 브로드캐스트 장면(302, 302b(2))의 초기 브로드캐스트 프레임(FB(i))의 초기 브로드캐스트 핑거프린트(222, 222b(i))로서 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제2 브로드캐스트 핑거프린트(222, 222b(2))를 식별한다.
또한 도 3a를 참조하면, 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)에 대응하는 브로드캐스트 핑거프린트들(222, 222b) 사이의 장면 변화 피어슨 상관 계수(PsΔ)는 하이 측정값(예를 들면, 1.0 측) 또는 로우 측정값(예를 들면, 0 측)일 수 있다. 예를 들면, 장면 변화 피어슨 상관 계수(PsΔ)가 하이일 경우, 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제1 브로드캐스트 핑거프린트(222, 222b(1)) 및 제2 브로드캐스트 핑거프린트(222, 222b(2))는 장면 변화(312)가 일어나지 않았음을 지시하는 유사성을 갖는다. 반대로, 장면 변화 피어슨 상관 계수(PsΔ)가 로우일 경우, 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제1 브로드캐스트 핑거프린트(222, 222b(1)) 및 제2 브로드캐스트 핑거프린트(222, 222b(2))는 장면 변화(312)가 일어났음을 지시하는 비유사성을 갖는다. 일부 예들에서, 장면 식별부(310)는 장면 변화 피어슨 상관 계수(PsΔ)가 장면 변화 상관 임계값(TsΔ)을 만족하는지의 여부를 판정한다. 장면 변화 피어슨 상관 계수(PsΔ)가 장면 변화 상관 임계값(TsΔ)을 만족할 경우, 장면 식별부(310)는, 어떻게 장면 식별부(310)가 구성되는지에 의존하여, 장면 변화(312)가 일어났거나 일어나지 않았음을 판정할 수 있다. 일 예로서, 도 3b는, 장면 변화 피어슨 상관 계수(PsΔ)가 장면 변화 상관 임계값(TsΔ)을 만족할 경우, 장면 변화(312)가 일어났음을 식별하도록 구성된 장면 식별부(310)를 나타낸다. 도 3a 및 도 3b 모두에서는, 장면 식별부(310)는 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제1 브로드캐스트 핑거프린트(222, 222b(1))와 제2 브로드캐스트 핑거프린트(222, 222b(2)) 사이에서 장면 변화(312)가 일어나지 않았음을 판정했음을 나타낸다.
도 3c-도 3f에 나타난 바와 같이, 광고 식별부(300)는 매처(320)를 더 포함한다. 매처(320)는 광고 장면들(302, 302a(1-n))의 광고 프레임들(Fad(1-n))을 지시하는 광고 핑거프린트들(222, 222a)을 수신한다. 일부 예들에서, 매처(320)는, 장면 식별부(310)가 장면 변화(312)를 판정한다면, 광고 장면 데이터베이스(250)로부터 광고 핑거프린트들(222, 222a)을 검색할 수 있다. 다른 예에서, 콘텐츠 엔티티는 광고 핑거프린트들(222, 222a)을 매처(320)에 직접 제공할 수 있다. 추가적으로 또는 대안으로, 매처(320)는 광고 핑거프린트들(222, 222a) 및/또는 광고 프레임들(Fad(1-n))을 저장하도록 구성된 광고 장면 데이터베이스(250)를 포함할 수 있다. 장면 식별부(310)가 장면 변화(312)를 판정하고 제1 브로드캐스트 장면(302, 302b(1))이 제2 브로드캐스트 장면(302, 302b(2))으로 변경됨을 식별할 경우, 광고 식별부(300)는 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나인지의 여부를 판정한다. 일부 구현들에서, 각각의 광고 장면(302, 302a)에 대해, 매처(320)는 수신해서, 광고 장면(302, 302a)에 대응하는 각각의 광고 핑거프린트(222, 222a)와 제2 브로드캐스트 장면(302, 302b(2))의 적어도 하나의 브로드캐스트 핑거프린트(222, 222b) 사이의 매칭 상관을 판정한다. 일부 예들에서, 제2 브로드캐스트 장면(302, 302b(2))의 적어도 하나의 브로드캐스트 핑거프린트(222, 222b)는 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제2 브로드캐스트 핑거프린트(222, 222b(2))이다. 일부 예들에서, 장면 변화 상관과 매우 유사하게, 매칭 상관은 피어슨 상관, 켄달 상관, 또는 스피어만 상관과 같은 통계적 상관이다. 도 3c-도 3f는 매칭 피어슨 상관 계수(PM)로서 매칭 상관의 예를 나타낸다. 예를 들면, 매처(320)는 제2 브로드캐스트 장면(302, 302b)의 적어도 하나의 브로드캐스트 핑거프린트(222, 222b)와 각각의 광고 장면(302, 302a)에 대응하는 각각의 개개의 광고 핑거프린트(222, 222a) 사이의 매칭 피어슨 상관 계수(PM)를 판정한다.
일부 예들에서, 매처(320)는, 광고 장면(302, 302a)의 복수의 광고 핑거프린트들(222, 222a)에 대응하는 광고 핑거프린트 블록(222, 222a(block))(예를 들면, 각각의 광고 핑거프린트(222, 222a)를 포함함)과 제2 브로드캐스트 장면(302, 302b(2))의 복수의 브로드캐스트 핑거프린트들(222, 222b)에 대응하는 브로드캐스트 핑거프린트 블록(222, 222b(block)) 사이의 매칭 상관을 판정한다. 광고 핑거프린트 블록(222, 222a(block)) 및 브로드캐스트 핑거프린트 블록(222, 222b(block))의 각각의 블록은 미리 정해진 수의 핑거프린트들(222)을 포함할 수 있다. 일부 구현들에서, 각각의 블록은, 매처(320)에 의한 매칭 상관이 동일한 수의 광고 핑거프린트들(222, 222a)을 동일한 수의 브로드캐스트 핑거프린트들(222, 222b)과 비교하도록, 유사한 수의 핑거프린트들(222)을 포함한다. 예를 들면, 광고 핑거프린트 블록(222, 222a(block)) 및 브로드캐스트 핑거프린트 블록(222, 222b(block))의 각각의 블록은 2초의 핑거프린트들(222)에 대응해서, 프레임 레이트 초당 30 프레임에서, 각각의 블록은 60개의 핑거프린트들을 포함한다(예를 들면, 광고 핑거프린트들(222, 222a(1-60)) 및 브로드캐스트 핑거프린트들(222, 222b(1-60))). 예시적 예로서, 도 3c, 도 3d, 및 도 3f는, 4개의 광고 핑거프린트들(222, 222a)(각각의 광고 장면(302, 302a)에서 점선 선택 박스 내) 및 4개의 브로드캐스트 핑거프린트들(222, 222b)(브로드캐스트 장면들(302, 302b)에서 점선 선택 박스 내)에 대해 매칭 상관을 행하는 매처(320)를 나타낸다.
일부 예들에서, 광고 장면(302, 302a)은 광고 전체 또는 광고의 일부에 대응한다. 따라서, 광고 장면 데이터베이스(250)는 광고에 대한 모든 광고 프레임들(Fad(1-n)) 또는 광고와 관련된 임의의 수의 광고 프레임들(Fad(1-n))을 포함할 수 있다. 일부 예들에서, 각각의 광고 장면(302, 302a)은 광고 식별부(300)에 의한 일관성을 보장하기 위해 설정된 수의 프레임들(Fad(1-n))이다. 예를 들면, 각각의 광고가 광고의 처음 2초 동안 고유하다고 상정하면, 각각의 광고 장면(302, 302a)은 광고 프레임들(Fad(1-n))의 2초에 대응한다. 이 예에서, 프레임 레이트가 초당 30 프레임일 경우, 광고 프레임들(Fad(1-n))의 2초는 약 60 광고 프레임들(Fad(1-60))과 동일하다. 다른 예에서, 각각의 광고 장면(302, 302a)이 임의의 양의 광고 프레임들(Fad(1-n))이지만, 매처(320)는 설정된 수의 광고 프레임들(Fad(1-n))(예를 들면, 광고 프레임들(Fad(1-n))의 2초)과 제2 브로드캐스트 장면(302, 302b(2))(즉 후속 브로드캐스트 장면)의 유사한 수의 브로드캐스트 프레임들(FB(1-n)) 사이의 매칭 상관을 판정하도록 구성된다. 광고 프레임들(Fad(1-n))의 설정된 수는 광고 장면 데이터베이스(250)에 필요한 스토리지의 양을 줄일 수 있다. 일부 상황에서, 광고 장면 데이터베이스(250)에 필요한 스토리지의 양을 줄이는 것은 매처(320)가 처리 파워를 줄이는 것을 가능하게 한다. 예를 들면, 광고들은 종종 약 10초의 짧은 버전에서 약 1분의 긴 버전까지의 범위에 있다. 프레임 관점에서, 긴 버전은 짧은 버전보다 수천 넘게 더 많은 프레임들을 포함할 수 있다. 이 점에 있어서, 광고 장면 데이터베이스(250)는 각각의 광고에 대해 전체 광고의 수천 넘는 프레임들을 광고 프레임들(Fad(1-n))의 설정된 수로의 잠재적인 스토리지를 줄일 수 있고 스토리지의 감소를 이용하여 각각의 광고 핑거프린트(222, 222a)는 더 많은 서브프레임들(Fsub)을 포함하고, 이에 따라 더 많은 픽셀값들(VP)이 광고 프레임(Fad) 내에 포함할 수 있다. 환언하면, 광고들의 부분들(즉 이산 수의 광고 프레임들(Fad(1-n)))은 매처(320)가 브로드캐스트 장면(302, 302b)이 광고에 대응함을 정확하게 식별 가능하게 할 수 있으며, 이는, 핑거프린트(222)(예를 들면, 광고 핑거프린트(222, 222a) 또는 브로드캐스트 핑거프린트(222, 222b))가 단일 평균 픽셀값(VP)만의 핑거프린트(222)보다 픽셀값들(VP)의 보다 큰 벡터들(예를 들면, 16개 정수의 벡터들)을 나타낼 수 있기 때문이다.
또한, 도 3c 및 도 3d는 장면 식별부(310)가 장면 변화(312)를 판정하는 예들을 제공한다. 이 예들에서, 장면 식별부(310)는, 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들(FB(1), FB(2)) 사이의 장면 변화 피어슨 상관 계수(PsΔ)가 장면 변화(312)에 대응함을 판정할 경우, 장면 식별부(310)는 제1 브로드캐스트 장면(302, 302b(1))의 마지막 브로드캐스트 프레임(FB(L))의 마지막 브로드캐스트 핑거프린트(222, 222b(L))로서 쌍을 이루는 브로드캐스트 프레임들(FB(1), FB(2))의 제1 브로드캐스트 핑거프린트(222, 222b(1))를 식별하고 제2 브로드캐스트 장면(302, 302b(2))의 초기 브로드캐스트 프레임(FB(i))의 초기 브로드캐스트 핑거프린트(222, 222b(i))로서 쌍을 이루는 브로드캐스트 프레임들(FB(1), FB(2))의 제2 브로드캐스트 핑거프린트(222, 222b(2))를 식별한다. 장면 변화(312)의 판정은, 매처(320)가 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나인지의 여부를 판정하도록 트리거한다. 도 3c 및 도 3d에서, 매처(320)는 유사한 수의 프레임들(F(1-n))을 나타내는 광고 핑거프린트들(222, 222a) 및 브로드캐스트 핑거프린트들(222, 222b)을 수신한다. 일부 경우에, 매처(320)가 유사한 차원 또는 벡터들의 핑거프린트들(222)을 수신하는 것이, 광고 식별부(300)와 연관된 데이터 처리 하드웨어 및/또는 메모리 하드웨어를 스트림라인화하는데 유리할 수 있다. 일부 예들에서, 장면 식별부(310)는 후속 장면(304)의 브로드캐스트 핑거프린트들(222, 222b)을 매처(320)에 통신한다. 다른 예에서, 매처(320)는, 장면 식별부(310)가 장면 변화(312)를 판정할 경우, 후속 장면(304)의 브로드캐스트 핑거프린트들(222, 222b)을 검색할 수 있다. 도 3c 및 도 3d에서, 매처(320)는 제2 브로드캐스트 장면(302, 302b(2))(즉 후속 장면(304))의 4개의 브로드캐스트 프레임들(FB(2-5))에 관한 브로드캐스트 핑거프린트들(222, 222b) 및 각각의 광고 장면(302, 302a(1-n))의 4개의 광고 프레임들(Fad(1-4))에 관한 광고 핑거프린트들(222, 222a)을 수신한다. 예를 들면, 매처(320)는 광고 장면 데이터베이스(250)로부터 광고 핑거프린트들(222, 222a)을 수신한다.
도 3c 및 도 3d는, 매칭 피어슨 상관 계수(PM)에 의거하여 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나인지의 여부를 판정하는 매처(320)를 나타낸다. 장면 식별부(310)와 마찬가지로, 매처(320)는 매칭 피어슨 상관 계수(PM)에 대해 유사성 레벨들 또는 임계값들을 사용할 수 있다. 일부 예들에서, 도 3c와 같이, 매처(320)는, 매칭 피어슨 상관 계수(PM)가 유사성 레벨(예를 들면, 도 3a와 같이 하이 유사성 및 로우 유사성)에 대응할 경우, 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나임을 판정한다. 도 3c에서, 매처(320)는, 제2 브로드캐스트 장면(302, 302b(2))의 브로드캐스트 핑거프린트(222, 222b)가 광고 장면(302, 302a(1-n))의 적어도 하나의 광고 핑거프린트(222, 222a)와 하이 유사성을 가짐을 판정했다. 다른 예에서, 도 3d와 같이, 매처(320)는, 매칭 피어슨 상관 계수(PM)가 매칭 상관 임계값(TM)을 만족할 경우, 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나임을 판정할 수 있다. 장면 식별부(310)의 장면 변화 상관 임계값(TsΔ)과 마찬가지로, 매칭 상관 임계값(TM)은 매처(320)가 어떻게 구성되는지에 의존하여 후속 장면(304)이 광고 장면(302, 302a)과 매칭되는지의 여부를 판정할 수 있다. 일 예로서, 도 3d는, 매칭 피어슨 상관 계수(PM)가 매칭 상관 임계값(TM)을 만족할 경우, 후속 장면(304)이 광고 장면(302, 302a)에 매칭됨을 식별하도록 구성된 매처(320)를 나타낸다. 도 3c-도 3f는 매칭 상관으로서 매칭 피어슨 상관 계수(PM)를 나타내지만, 매처(320)는 유사성 레벨들 및/또는 임계값들과 함께 임의의 통계적 상관을 사용할 수 있다. 또한, 도 3a-도 3f는 장면 식별부들(310) 및 매처들(320)의 복수의 조합들을 나타내지만, 임의의 조합이 가능하다. 예를 들면, 도면들은 장면 식별부(310)를 갖는 광고 식별부(300)는 임계값을 이용하지만, 매처(320)는 유사성 레벨들을 사용하거나 또는 이와 반대에 대해 나타내지 못하고 있다. 도면들은 또한 장면 식별부(310)는 장면 변화(312)를 판정할 수 있지만, 매처(320)는 매칭 광고 장면(302, 302a)을 판정하지 않음을 나타내지 못하고 있다. 이것은 라이브 프로그래밍이 미디어 스트림(S)의 프로그램 동안 장면들을 변경하지만, 프로그램은 광고로 전환되지 않을 경우에 발생할 수 있다.
일부 구현들에서, 매처(320)는 제2 브로드캐스트 장면(302, 302b(2))의 적어도 하나의 브로드캐스트 핑거프린트(222, 222b)와 관련하여 각각의 광고 장면(302, 302a)에 대한 매칭 상관을 판정한다. 각각의 매칭 상관에 있어서, 매처(320)는 제2 브로드캐스트 장면(302, 302b(2))의 적어도 하나의 브로드캐스트 핑거프린트(222, 222b)에 매칭되는 광고 장면(302, 302a)으로서 가장 큰 매칭 상관을 갖는 광고 장면(302, 302a)을 식별하도록 구성될 수 있다. 예를 들면, 이 구성은 광고 장면들(302, 302a)이 유사한 광고들을 포함하지만 길이가 다양할 경우, 매처(320)가 정확하도록 도울 수 있다.
일부 예들에서, 장면 식별부(310)가 장면 변화들(312)을 판정할 경우, 매처(320)는, 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나인지의 여부를 판정하기 전에 장면 변화(312)에 대응하는 쌍을 이루는 브로드캐스트 프레임들(FB(1), FB(2))의 제1 브로드캐스트 핑거프린트(222, 222b(1)) 이후 임계 기간(PT)을 대기한다. 일부 구현들에서, 매처(320)는, 제1 브로드캐스트 장면(302, 302b(1))의 마지막 브로드캐스트 프레임(FB(L))의 마지막 브로드캐스트 핑거프린트(222, 222b(L)) 이후, 임계 기간(PT)을 대기한다. 예를 들면, 도 3c-도 3f에서, 제2 브로드캐스트 장면(302, 302b(2))의 브로드캐스트 핑거프린트(222, 222b)는 브로드캐스트 프레임들(FB(2-5))의 임계 기간(PT)에 대응한다. 환언하면, 매처(320)에 의해 분석되는 제2 브로드캐스트 장면(302, 302b(2))의 브로드캐스트 핑거프린트(222, 222b)는 하나 초과의 브로드캐스트 프레임(FB(1-n))에 대응할 수 있다. 일부 예들에서, 임계 기간(PT)은 각각의 광고 장면(302, 302a)에 대해 매처(320)에 의해 수신되는 설정된 수의 광고 프레임들(Fad(1-n))을 고려하도록 기능한다. 설정된 수의 광고 프레임들(Fad(1-n))을 고려함으로써, 임계 기간(PT)은 매처(320)에게 핑거프린트들(222)을 비교하기 위한 동등한 크기의 벡터 또는 픽셀값을 제공할 수 있다. 예를 들면, 각각의 광고 장면(302, 302a)이 광고 프레임들(Fad(1-n))의 2초에 대응할 경우, 임계 기간(PT)은 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a(1-n)) 중 하나인지의 여부를 판정하기 전에 적어도 2초이다. 2초는, 매처(320)가 2초의 브로드캐스트 프레임들(FB(1-n))에 의거하여 제2 브로드캐스트 장면(302, 302b(2))이 광고 장면들(302, 302a) 중 하나인지의 여부를 판정 가능하게 할 수 있다.
도 3c-도 3f는 또한 광고 식별부(300)의 광고 인디케이터(330)를 나타낸다. 광고 인디케이터(330)는, 매칭 상관이 매처(320)의 매칭 기준(예를 들면, 매칭 상관 임계값(TM) 또는 유사성 레벨들)을 만족할 경우, 광고 장면들 중 하나(302, 302a(1-n))로서 제2 브로드캐스트 장면(302, 302b(2))의 식별(332)을 연관지을 수 있다. 예를 들면, 광고 인디케이터(330)는, 매처(320)에 의해 수신되고 매처(320)에 의해, 제2 브로드캐스트 장면(302, 302b(2))의 브로드캐스트 핑거프린트(222, 222b)에 매칭되는 것으로 판정된 각각의 광고 핑거프린트(222, 222a)의 광고 장면(302, 302a)에 대응하는 것으로 제2 브로드캐스트 장면(302, 302b(2))을 식별한다. 일부 예들에서, 식별(332)은, 제2 브로드캐스트 장면(302, 302b(2))이 미디어 디바이스(30)에서 실시간 시청 동안 쉽게 구별 가능하도록, 콘텐츠 엔티티 또는 ACR 모듈(132)에 통신된다. 식별(332)에 따라, 광고에 대응하는 제2 브로드캐스트 장면(302, 302b(2))은 대안적 콘텐츠로 교체, 오버레이, 또는 수정될 수 있다. 제2 브로드캐스트 장면(302, 302b(2))이 광고인 식별(332)을 제공함으로써, 광고 식별부(300)는 ACR 모듈(132)이 보다 효율적으로 및 보다 효과적으로 미디어 디바이스(30)에서 기능 가능하게 할 수 있다. 추가적으로 또는 대안으로, 식별(332)은 제2 브로드캐스트 장면(302, 302b(2))과 연관된 메타데이터 태그와 같은 식별자이다. 식별자의 일부 예는 대응하는 광고 장면(302, 302a)에 관한 정보(예를 들면, 광고주, 제품, 서비스들, 광고 길이 등) 또는 브로드캐스트 프레임 데이터(예를 들면, 프레임 위치)를 포함한다. 환언하면, 식별자는, 미디어 디바이스(30)가 미디어 스트림(S)을 수신할 경우, 콘텐츠 엔티티 또는 ACR 모듈(132)이 대응하는 광고 장면(302, 302a)을 식별하는 것을 도울 수 있는 임의의 데이터일 수 있다. 광고 식별부(300)는 ACR 모듈(132)에서 일부 광고 식별 에러를 제거할 수 있고, 이는, 광고 식별부(300)는 광고의 식별(332)을 제공하기 때문이다. 추가적으로 또는 대안으로, 광고 식별부(300)는 ACR 모듈(132)이 달리 광고 식별부(300)와 유사한 기능을 행하는데 소비할 처리 파워를 줄일 수 있다.
일부 광고들은 보다 복잡한 형태의 광고일 수 있다. 예들은 서로에 내포되는 광고들, 순차적으로 서로 인접한 광고들, 또는 또 다른 광고 이전의 정규 프로그래밍의 짧은 세그먼트가 뒤따르는 광고들을 포함한다. 예를 들면, 골프 클럽 제조사는 골프 클럽 및/또는 골프 스윙의 클로즈업을 갖는 표준 광고를 가질 수 있을 뿐만 아니라, 럭셔리 카 제조사와 제휴할 수 있다. 이 예에서, 다수의 서로 다른 광고 시퀀스가 있을 수 있어: 광고는 골프 코스에의 자동차 드라이빙으로 시작하고 표준 골프 클럽 광고 및 골프 클럽 클로즈업으로 끝날 수 있거나; 광고는 골프 클럽으로 시작하고 골프 클럽이 자동차 내에 놓여 드라이빙되어 가게 끝날 수 있거나; 또는 광고는 자동차로 시작하여 끝나며 중간 부분에 골프 클럽 표준 광고를 포함할 수 있다. 이들 광고 시퀀스의 임의의 것에 대해, 광고 식별부(300)는, 제2 브로드캐스트 장면(302, 302b(2))이 또 다른 광고 장면(302, 302a) 내인지 또는 또 다른 광고 장면(302, 302a)에 순차적으로 인접하는지의 여부를 판정하도록 구성된다.
도 3e 및 도 3f는, 제2 브로드캐스트 장면(302, 302b(2))이 또 다른 광고 장면(302, 302a) 내인지 또는 또 다른 광고 장면(302, 302a)에 순차적으로 인접하는지의 여부를 판정하는 광고 식별부(300)를 나타낸다. 광고 인디케이터(330)가 제2 브로드캐스트 장면(302, 302b(2))에 대한 식별(332) 및/또는 식별자를 제공할 경우, 식별(332)은, 제2 브로드캐스트 프레임(302, 302b(2))의 브로드캐스트 핑거프린트(222, 222b) 후속으로 브로드캐스트 프레임(FB)에 제3 브로드캐스트 장면(302, 302b(3))이 있는지의 여부를 판정하도록 장면 식별부(310)를 트리거할 수 있다. 환언하면, 장면 식별부(310)는 후속 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj) 사이의 장면 변화 상관을 판정할 수 있다. 일부 예들에서, 장면 식별부(310)는 미디어 스트림(S)의 각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj) 사이의 장면 변화 상관을 반복적으로(recursively) 행한다. 다른 예에서, 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제2 반복은 제1 반복에서 매처(320)에 의해 분석되는 브로드캐스트 프레임들(FB(1-n))의 임계 기간(PT)의 최종 브로드캐스트 프레임(FB(f))에서 개시된다. 예를 들면, 도 3e 및 도 3f는 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제2 반복이 브로드캐스트 프레임들(FB(1-n))의 임계 기간(PT)의 최종 브로드캐스트 프레임(FB(f))(즉 도 3c 및 도 3d의 브로드캐스트 프레임(FB(5)))에서 개시됨을 나타낸다. 이 예들에서, 제2 반복에 대해 브로드캐스트 프레임들(FB(1-n))의 임계 기간(PT)의 최종 브로드캐스트 프레임(FB(f))은 쌍을 이루는 브로드캐스트 프레임들(FB(1-n), FBadj)의 제1 브로드캐스트 프레임(FB(1))이 된다. 도 3e는, 장면 식별부(310)는 제2 브로드캐스트 장면(302, 302b(2)) 내에 장면 변화(312)가 있지 않음을 판정하는 것을 제외하고, 도 3b와 유사한 장면 식별부(310)의 프로세스를 나타낸다.
한편, 도 3f는, 광고 식별부(300)가 광고가 제2 브로드캐스트 장면(302, 302b(2))의 광고 장면(302, 302a) 내이거나 또는 광고 장면(302, 302a)에 순차적으로 인접함을 판정하는 것의 예이다. 여기에서 장면 식별부(310)는 제2 브로드캐스트 장면(302, 302b(2))과 제3 브로드캐스트 장면(302, 302b(3)) 사이의 장면 변화(312)를 식별한다. 매처(320)는 임계 기간(PT)(예를 들면, 4개의 브로드캐스트 프레임들(FB(2-5)))을 대기하고 제3 브로드캐스트 장면(302, 302b(3))이 또 다른 광고 장면(302, 302a)에 대응함을 판정한다. 매처(320)에 의한 이 판정에 의거하여, 광고 인디케이터(330)는 식별(332)을 제3 브로드캐스트 장면(302, 302b(3))과 연관짓는다.
소프트웨어 애플리케이션(즉, 소프트웨어 리소스)은 컴퓨팅 디바이스에게 태스크를 행하게 하는 컴퓨터 소프트웨어를 지칭할 수 있다. 일부 예들에서, 소프트웨어 애플리케이션은 "애플리케이션", "app", 또는 "프로그램"이라고 할 수 있다. 예시적 애플리케이션은, 제한이 아닌 예시로서, 시스템 진단 애플리케이션들, 시스템 관리 애플리케이션들, 시스템 메인터넌스 애플리케이션들, 워드 프로세싱 애플리케이션들, 스프레드시트 애플리케이션들, 메시징 애플리케이션들, 미디어 스트리밍 애플리케이션들, 소셜 네트워킹 애플리케이션들, 및 게이밍 애플리케이션들을 포함한다.
도 4는 본 문서에 기재된 시스템들 및 방법을 구현하는데 사용될 수 있는 예시적 컴퓨팅 디바이스(400)의 개략도이다. 컴퓨팅 디바이스(400)는, 랩톱, 데스크톱, 워크스테이션, 퍼스널 디지털 어시스턴트, 서버, 블레이드 서버, 메인프레임, 및 기타 적절한 컴퓨터와 같은 다양한 형태의 디지털 컴퓨터를 나타내는 것이 의도된다. 여기에 나타난 컴포넌트들, 그들의 연결 및 관계, 및 그들의 기능은 예시일 뿐이며 본 문서에서 설명 및/또는 청구되는 본 발명의 구현을 제한하고자 하는 것은 아니다.
컴퓨팅 디바이스(400)는 프로세서(410), 메모리(420), 스토리지 디바이스(430), 메모리(420) 및 고속 확장 포트들(450)에 연결되는 고속 인터페이스/컨트롤러(440), 및 저속 버스(470) 및 스토리지 디바이스(430)에 연결되는 저속 인터페이스/컨트롤러(460)를 포함한다. 컴포넌트들(410, 420, 430, 440, 450, 및 460)의 각각은 다양한 버스들을 이용하여 상호연결되고, 공통 마더보드 상에 또는 다른 방식들로 적절하게 장착될 수 있다. 프로세서(410)는, 고속 인터페이스(440)에 연결된 디스플레이(480)와 같은 외부 입력/출력 디바이스에서의 그래픽 유저 인터페이스(GUI)에 대해 그래픽 정보를 표시하도록 메모리(420) 또는 스토리지 디바이스(430)에 저장된 명령어들을 포함하는 컴퓨팅 디바이스(400) 내에서의 실행을 위한 명령어들을 처리할 수 있다. 다른 구현들에서, 다수의 프로세서들 및/또는 다수의 버스들이 다수의 메모리 및 메모리의 타입들과 함께 적절하게 사용될 수 있다. 또한, 다수의 컴퓨팅 디바이스들(400)이 필요한 동작들의 부분들을 제공하는 각각의 디바이스와 연결될 수 있다(예를 들면, 서버 뱅크, 블레이드 서버들의 그룹, 또는 다중 프로세서 시스템).
메모리(420)는 컴퓨팅 디바이스(400) 내에 비일시적으로 정보를 저장한다. 메모리(420)는 컴퓨터-판독 가능한 매체, 휘발성 메모리 유닛(들), 또는 비휘발성 메모리 유닛(들)일 수 있다. 비일시적인 메모리(420)는 컴퓨팅 디바이스(400)에 의한 사용을 위해 임시로 또는 영구적으로 프로그램들(예를 들면, 명령어들의 시퀀스들) 또는 데이터(예를 들면, 프로그램 상태 정보)를 저장하는데 사용되는 물리적 디바이스들일 수 있다. 비휘발성 메모리의 예는, 제한이 아닌 예시로서, 플래시 메모리 및 판독-전용 메모리(ROM)/프로그래머블 판독-전용 메모리(PROM)/소거 가능한 프로그래머블 판독-전용 메모리(EPROM)/전자적으로 소거 가능한 프로그래머블 판독-전용 메모리(EEPROM)(예를 들면, 부트 프로그램들과 같이 전형적으로 펌웨어에 사용됨)를 포함한다. 휘발성 메모리의 예는, 제한이 아닌 예시로서, 랜덤 액세스 메모리(RAM), 동적 랜덤 액세스 메모리(DRAM), 정적 랜덤 액세스 메모리(SRAM), PCM(phase change memory)뿐만 아니라 디스크 또는 테이프를 포함한다.
스토리지 디바이스(430)는 컴퓨팅 디바이스(400)에 대한 대용량 스토리지를 제공할 수 있다. 일부 구현들에서, 스토리지 디바이스(430)는 컴퓨터-판독 가능한 매체이다. 다양한 서로 다른 구현들에서, 스토리지 디바이스(430)는 플로피 디스크 디바이스, 하드 디스크 디바이스, 광학 디스크 디바이스, 또는 테이프 디바이스, 플래시 메모리 또는 다른 유사한 고체 상태 메모리 디바이스, 또는 스토리지 에어리어 네트워크 또는 다른 구성들에 디바이스들을 포함하는 디바이스들의 어레이일 수 있다. 추가적 구현들에서, 컴퓨터 프로그램 제품은 정보 캐리어에 유형적으로 구현된다. 컴퓨터 프로그램 제품은, 실행 시, 상술한 바와 같은 하나 이상의 방법을 행하는 명령어들을 포함한다. 정보 캐리어는, 메모리(420), 스토리지 디바이스(430), 또는 프로세서(410) 상의 메모리와 같은 컴퓨터- 또는 머신-판독 가능한 매체이다.
고속 컨트롤러(440)는 컴퓨팅 디바이스(400)에 대한 대역폭-집중 동작들을 관리하는 한편, 저속 컨트롤러(460)는 낮은 대역폭-집중 동작들을 관리한다. 이러한 임무의 할당은 예시일뿐이다. 일부 구현들에서, 고속 컨트롤러(440)는 메모리(420), 디스플레이(480)(예를 들면, 그래픽 프로세서 또는 가속기를 통함), 및 고속 확장 포트들(450)(다양한 확장 카드들(도시 생략)을 수용할 수 있음)에 연결된다. 일부 구현들에서, 저속 컨트롤러(460)는 스토리지 디바이스(430) 및 저속 확장 포트(490)에 연결된다. 다양한 통신 포트들(예를 들면, USB, 블루투스, 이더넷, 무선 이더넷)을 포함할 수 있는 저속 확장 포트(490)는 키보드, 포인팅 디바이스, 스캐너와 같은 하나 이상의 입력/출력 디바이스들, 또는 예를 들면 네트워크 어댑터를 통한 스위치 또는 라우터와 같은 네트워킹 디바이스에 연결될 수 있다.
컴퓨팅 디바이스(400)는 도면에 나타난 바와 같이 여러 서로 다른 형태들로 실시될 수 있다. 예를 들면, 표준 서버(400a) 또는 이러한 서버들(400a)의 복수의 그룹으로서, 랩톱 컴퓨터(400b)로서, 또는 랙(rack) 서버 시스템(400c)의 일부로서 구현될 수 있다.
본원에 기술된 시스템들 및 기술의 다양한 구현들은 디지털 전자 및/또는 광학 회로, 집적 회로, 특수 설계된 ASIC(application specific integrated circuit), 컴퓨터 하드웨어, 펌웨어, 소프트웨어, 및/또는 그 조합으로 실현될 수 있다. 이들 다양한 구현들은, 스토리지 시스템, 적어도 하나의 입력 디바이스, 및 적어도 하나의 출력 디바이스에 대해 데이터 및 명령어들을 수신 및 전송하도록 연결된 특수 또는 범용일 수 있는 적어도 하나의 프로그래머블 프로세서를 포함하는 프로그래머블 시스템에서 실행 및/또는 해석 가능한 하나 이상의 컴퓨터 프로그램들에서의 구현을 포함할 수 있다.
이들 컴퓨터 프로그램들(또한 프로그램들, 소프트웨어, 소프트웨어 애플리케이션들 또는 코드로서 공지됨)은 프로그래머블 프로세서에 대한 머신 명령어들을 포함하고, 하이-레벨 프로시저 및/또는 객체 지향 프로그래밍 언어, 및/또는 어셈블리/머신 언어로 구현될 수 있다. 본원에서 사용하는 용어들 "머신-판독 가능한 매체" 및 "컴퓨터-판독 가능한 매체"는 머신 명령어들 및/또는 데이터를 프로그래머블 프로세서에 제공하는데 사용되는 임의의 컴퓨터 프로그램 제품, 비일시적인 컴퓨터 판독 가능한 매체, 장치 및/또는 디바이스(예를 들면, 자기 디스크, 광학 디스크, 메모리, 프로그래머블 로직 디바이스(PLD))를 지칭하고, 머신-판독 가능한 신호로서 머신 명령어들을 수신하는 머신-판독 가능한 매체를 포함한다. 용어 "머신-판독 가능한 신호"는 머신 명령어들 및/또는 데이터를 프로그래머블 프로세서에 제공하는데 사용되는 임의의 신호를 말한다.
본 명세서에 기재된 프로세스 및 로직 플로우는 입력 데이터에 대해 연산하여 출력을 생성함으로써 기능들을 행하는 하나 이상의 컴퓨터 프로그램들을 실행하는 하나 이상의 프로그래머블 프로세서들에 의해 행해질 수 있다. 프로세스 및 로직 플로우는 또한 특수 목적 로직 회로, 예를 들면, FPGA(Field Programmable Gate Array) 또는 ASIC(Application Specific Integrated Circuit)에 의해 행해질 수 있다. 컴퓨터 프로그램의 실행에 적절한 프로세서들은, 예를 들어, 범용 및 특수 목적 마이크로프로세서들, 및 임의의 종류의 디지털 컴퓨터의 임의의 하나 이상의 프로세서들을 포함한다. 일반적으로, 프로세서는 판독 전용 메모리 또는 랜덤 액세스 메모리 또는 둘 다 모두로부터 명령어들 및 데이터를 수신할 것이다. 컴퓨터의 본질적 요소들은 명령어들을 행하기 위한 프로세서, 및 명령어들 및 데이터를 저장하기 위한 하나 이상의 메모리 디바이스들이다. 일반적으로, 컴퓨터는 또한, 데이터를 저장하기 위한 하나 이상의 대용량 스토리지 디바이스들, 예를 들면, 자기, 광자기 디스크, 또는 광학 디스크를 포함하거나, 이들에 대해 데이터를 수신하거나 송신하거나 또는 이 두 가지를 행하도록 동작되게 연결될 것이다. 그러나, 컴퓨터는 이러한 디바이스들을 갖지 않아도 된다. 컴퓨터 프로그램 명령어들 및 데이터를 저장하는데 적절한 컴퓨터 판독 가능한 미디어는 모든 형태의 비휘발성 메모리, 미디어 및 메모리 디바이스들을 포함하고, 예를 들어 반도체 메모리 디바이스들(예를 들면, EPROM, EEPROM, 및 플래시 메모리 디바이스들); 자기 디스크(예를 들면, 내부 하드 디스크 또는 리무버블 디스크); 광자기 디스크; 및 CD ROM 및 DVD-ROM 디스크를 포함한다. 프로세서 및 메모리는 특수 목적 로직 회로에 의해 공급되거나 또는 그 내부에 통합될 수 있다.
유저와의 상호작용에 위해 마련되도록, 본 개시의 하나 이상의 태양들은 디스플레이 디바이스(예를 들면, 정보를 유저에게 표시하기 위한 CRT(음극선관), LCD(liquid crystal display) 모니터, 또는 터치 스크린) 및 선택적으로 키보드 및 포인팅 디바이스(예를 들면, 유저가 입력을 컴퓨터에 제공할 수 있는 마우스 또는 트랙볼)를 가지는 컴퓨터 상에서 구현될 수 있다. 또한 다른 종류의 디바이스들이 유저와의 상호작용을 제공하도록 사용될 수 있고; 예를 들면, 유저에게 제공되는 피드백은 임의의 형태의 감각 피드백, 예를 들면, 비주얼 피드백, 청각 피드백, 또는 촉각 피드백일 수 있고; 유저로부터의 입력은 음향, 음성, 또는 촉각 입력을 포함하는 임의의 형태로 수신될 수 있다. 또한, 컴퓨터는 유저에 의해 사용되는 디바이스에 대해 문서들을 송신하고 문서들을 수신함으로써(예를 들면, 웹 브라우저로부터 수신된 요청들에 응답하여 웹 페이지들을 유저의 클라이언트 디바이스 상의 웹 브라우저에 송신함으로써) 유저와 상호 작용할 수 있다.
많은 구현들이 설명되었다. 그렇지만, 본 개시의 사상 및 범주에서 벗어나지 않고 다양한 변형이 이루어질 수 있음이 이해될 것이다. 따라서, 다른 구현들이 다음 특허청구범위의 범주 내에 있다.

Claims (30)

  1. 데이터 처리 하드웨어에서, 미디어 스트림의 브로드캐스트 프레임들을 지시(indication)하는 브로드캐스트 핑거프린트들을 수신하는 단계 ― 상기 미디어 스트림은 일련의 브로드캐스트 장면들을 포함함 ―;
    상기 데이터 처리 하드웨어에서, 광고(ad) 장면들의 광고 프레임들을 지시하는 광고 핑거프린트들을 수신하는 단계;
    상기 데이터 처리 하드웨어에 의해, 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수에 의거하여, 상기 제1 브로드캐스트 장면과 상기 제2 브로드캐스트 장면 사이의 장면 변화를 판정하는 단계;
    상기 데이터 처리 하드웨어에 의해, 상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나인지의 여부를 판정하는 단계; 및
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 데이터 처리 하드웨어에 의해, 상기 광고 장면들 중 하나로서 상기 제2 브로드캐스트 장면의 식별을 연관짓는 단계를 포함하는 방법.
  2. 제1항에 있어서,
    상기 장면 변화를 판정하는 단계는,
    상기 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 상기 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 단계; 및
    상기 데이터 처리 하드웨어에 의해, 상기 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족함을 판정하는 단계를 포함하는 방법.
  3. 제1항에 있어서,
    상기 장면 변화를 판정하는 단계는,
    각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해,
    상기 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 상기 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 단계;
    상기 데이터 처리 하드웨어에 의해, 상기 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정하는 단계; 및
    상기 장면 변화 피어슨 상관 계수가 상기 장면 변화 상관 임계값을 만족할 경우,
    대응하는 브로드캐스트 장면의 마지막 브로드캐스트 프레임으로서 상기 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임을 식별하는 단계; 및
    대응하는 순차적으로 인접한 브로드캐스트 장면의 초기 브로드캐스트 프레임으로서 상기 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임을 식별하는 단계를 포함하는 방법.
  4. 제1항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나인지의 여부를 판정하는 단계 전에, 상기 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 이후 임계 기간을 대기하는 단계를 더 포함하는 방법.
  5. 제1항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나인지의 여부를 판정하는 단계는,
    각각의 광고 핑거프린트에 대해,
    상기 데이터 처리 하드웨어에 의해, 상기 각각의 광고 핑거프린트와 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 단계;
    상기 데이터 처리 하드웨어에 의해, 상기 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 단계; 및
    상기 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족할 경우, 상기 데이터 처리 하드웨어에 의해, 상기 각각의 광고 핑거프린트의 광고 장면에 대응하는 것으로서 상기 제2 브로드캐스트 장면을 식별하는 단계를 포함하는 방법.
  6. 제1항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 데이터 처리 하드웨어에 의해, 상기 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 상기 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 단계를 더 포함하는 방법.
  7. 제1항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 데이터 처리 하드웨어에 의해, 광고 식별자를 상기 제2 브로드캐스트 장면과 연관짓는 단계를 더 포함하는 방법.
  8. 제1항에 있어서,
    각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타내는 방법.
  9. 제1항에 있어서,
    각각의 핑거프린트는 대응하는 프레임의 그레이스케일값들의 합을 나타내는 평균 픽셀값을 포함하는 방법.
  10. 제1항에 있어서,
    각각의 핑거프린트는 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타내고, 상기 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의하는 방법.
  11. 데이터 처리 하드웨어에서, 미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 단계;
    상기 데이터 처리 하드웨어에서, 광고(ad) 장면들의 광고 프레임들을 지시하는 광고 핑거프린트들을 수신하는 단계; 및
    각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해,
    상기 데이터 처리 하드웨어에 의해, 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 상기 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 단계;
    상기 데이터 처리 하드웨어에 의해, 상기 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정하는 단계; 및
    상기 장면 변화 피어슨 상관 계수가 상기 장면 변화 상관 임계값을 만족할 경우,
    상기 데이터 처리 하드웨어에 의해, 상기 제1 브로드캐스트 프레임에서 끝나는 것으로서 제1 브로드캐스트 장면을 식별하는 단계;
    상기 데이터 처리 하드웨어에 의해, 상기 제2 브로드캐스트 프레임에서 시작하는 것으로서 제2 브로드캐스트 장면을 식별하는 단계; 및
    각각의 광고 핑거프린트에 대해,
    상기 데이터 처리 하드웨어에 의해, 상기 각각의 광고 핑거프린트와 상기 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 단계;
    상기 데이터 처리 하드웨어에 의해, 상기 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 단계; 및
    상기 매칭 피어슨 상관 계수가 상기 매칭 상관 임계값을 만족할 경우, 상기 데이터 처리 하드웨어에 의해, 상기 각각의 광고 핑거프린트의 광고 장면으로서 상기 제2 브로드캐스트 장면을 식별하는 단계를 포함하는 방법.
  12. 제11항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 데이터 처리 하드웨어에 의해, 상기 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 상기 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 단계를 더 포함하는 방법.
  13. 제11항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 데이터 처리 하드웨어에 의해, 광고 식별자를 상기 제2 브로드캐스트 장면과 연관짓는 단계를 더 포함하는 방법.
  14. 제11항에 있어서,
    각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타내는 방법.
  15. 제11항에 있어서,
    각각의 핑거프린트는 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타내고, 상기 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의하는 방법.
  16. 데이터 처리 하드웨어; 및
    상기 데이터 처리 하드웨어와 통신하는 메모리 하드웨어 ― 상기 메모리 하드웨어는, 상기 데이터 처리 하드웨어 상에서 실행 시 상기 데이터 처리 하드웨어에게 동작들을 행하게 하는 명령어들을 저장함 ― 를 포함하고,
    상기 동작들은,
    미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 동작 ― 상기 미디어 스트림은 일련의 브로드캐스트 장면들을 포함함 ― ;
    광고(ad) 장면들의 광고 프레임들을 지시하는 광고 핑거프린트들을 수신하는 동작;
    제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수에 의거하여, 상기 제1 브로드캐스트 장면과 상기 제2 브로드캐스트 장면 사이의 장면 변화를 판정하는 동작;
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나인지의 여부를 판정하는 동작; 및
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 광고 장면들 중 하나로서 상기 제2 브로드캐스트 장면의 식별을 연관짓는 동작을 포함하는 시스템.
  17. 제16항에 있어서,
    상기 장면 변화를 판정하는 동작은,
    상기 제2 브로드캐스트 장면의 초기 브로드캐스트 프레임의 초기 브로드캐스트 핑거프린트와 상기 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 동작; 및
    상기 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족함을 판정하는 동작을 포함하는 시스템.
  18. 제16항에 있어서,
    상기 장면 변화를 판정하는 동작은,
    각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해,
    상기 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 상기 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 동작;
    상기 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정하는 동작; 및
    상기 장면 변화 피어슨 상관 계수가 상기 장면 변화 상관 임계값을 만족할 경우,
    대응하는 브로드캐스트 장면의 마지막 브로드캐스트 프레임으로서 상기 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임을 식별하는 동작; 및
    대응하는 순차적으로 인접한 브로드캐스트 장면의 초기 브로드캐스트 프레임으로서 상기 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임을 식별하는 동작을 포함하는 시스템.
  19. 제16항에 있어서,
    상기 동작들은, 상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나인지의 여부를 판정하는 동작 전에, 상기 제1 브로드캐스트 장면의 마지막 브로드캐스트 프레임의 마지막 브로드캐스트 핑거프린트 이후 임계 기간을 대기하는 동작을 더 포함하는 시스템.
  20. 제16항에 있어서,
    상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나인지의 여부를 판정하는 동작은,
    각각의 광고 핑거프린트에 대해,
    상기 각각의 광고 핑거프린트와 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 동작;
    상기 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 동작; 및
    상기 매칭 피어슨 상관 계수가 상기 매칭 상관 임계값을 만족할 경우, 상기 각각의 광고 핑거프린트의 광고 장면에 대응하는 것으로서 상기 제2 브로드캐스트 장면을 식별하는 동작을 포함하는 시스템.
  21. 제16항에 있어서,
    상기 동작들은, 상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 상기 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 동작을 더 포함하는 시스템.
  22. 제16항에 있어서,
    상기 동작들은, 상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 광고 식별자를 상기 제2 브로드캐스트 장면과 연관짓는 동작을 더 포함하는 시스템.
  23. 제16항에 있어서,
    각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타내는 시스템.
  24. 제16항에 있어서,
    각각의 핑거프린트는 대응하는 프레임의 그레이스케일값들의 합을 나타내는 평균 픽셀값을 포함하는 시스템.
  25. 제16항에 있어서,
    각각의 핑거프린트는 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타내고, 상기 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의하는 시스템.
  26. 데이터 처리 하드웨어; 및
    상기 데이터 처리 하드웨어와 통신하는 메모리 하드웨어 ― 상기 메모리 하드웨어는, 상기 데이터 처리 하드웨어 상에서 실행 시 상기 데이터 처리 하드웨어에게 동작들을 행하게 하는 명령어들을 저장함 ― 를 포함하고:
    상기 동작들은,
    미디어 스트림의 브로드캐스트 프레임들을 지시하는 브로드캐스트 핑거프린트들을 수신하는 동작;
    광고(ad) 장면들의 광고 프레임들을 지시하는 광고 핑거프린트들을 수신하는 동작; 및
    각각의 순차적으로 인접한 쌍을 이루는 브로드캐스트 프레임들에 대해,
    상기 쌍을 이루는 브로드캐스트 프레임들의 제1 브로드캐스트 프레임의 제1 브로드캐스트 핑거프린트와 상기 쌍을 이루는 브로드캐스트 프레임들의 제2 브로드캐스트 프레임의 제2 브로드캐스트 핑거프린트 사이의 장면 변화 피어슨 상관 계수를 판정하는 동작;
    상기 장면 변화 피어슨 상관 계수가 장면 변화 상관 임계값을 만족하는지의 여부를 판정하는 동작; 및
    상기 장면 변화 피어슨 상관 계수가 상기 장면 변화 상관 임계값을 만족할 경우,
    상기 제1 브로드캐스트 프레임에서 끝나는 것으로서 제1 브로드캐스트 장면을 식별하는 동작;
    상기 제2 브로드캐스트 프레임에서 시작하는 것으로서 제2 브로드캐스트 장면을 식별하는 동작; 및
    각각의 광고 핑거프린트에 대해,
    상기 각각의 광고 핑거프린트와 상기 제2 브로드캐스트 핑거프린트 사이의 매칭 피어슨 상관 계수를 판정하는 동작;
    상기 매칭 피어슨 상관 계수가 매칭 상관 임계값을 만족하는지의 여부를 판정하는 동작; 및
    상기 매칭 피어슨 상관 계수가 상기 매칭 상관 임계값을 만족할 경우, 상기 각각의 광고 핑거프린트의 광고 장면으로서 상기 제2 브로드캐스트 장면을 식별하는 동작을 포함하는 시스템.
  27. 제26항에 있어서,
    상기 동작들은, 상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 상기 제2 브로드캐스트 장면이 또 다른 광고 장면 내에 있는지 또는 상기 또 다른 광고 장면에 순차적으로 인접하는지의 여부를 판정하는 동작을 더 포함하는 시스템.
  28. 제26항에 있어서,
    상기 동작들은, 상기 제2 브로드캐스트 장면이 상기 광고 장면들 중 하나일 경우, 광고 식별자를 상기 제2 브로드캐스트 장면과 연관짓는 동작을 더 포함하는 시스템.
  29. 제26항에 있어서,
    각각의 핑거프린트는 대응하는 프레임의 적어도 하나의 픽셀을 나타내는 시스템.
  30. 제26항에 있어서,
    각각의 핑거프린트는 16개의 서브프레임들의 평균 픽셀값들에 대응하는 16개 정수의 벡터를 나타내고, 상기 16개의 서브프레임들은 4×4 어레이의 대응하는 프레임을 정의하는 시스템.
KR1020207008760A 2017-09-13 2018-09-10 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅 KR102148248B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020207023993A KR102272767B1 (ko) 2017-09-13 2018-09-10 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/703,391 US10306333B2 (en) 2017-09-13 2017-09-13 Flagging advertisement frames for automatic content recognition
US15/703,391 2017-09-13
PCT/US2018/050184 WO2019055338A1 (en) 2017-09-13 2018-09-10 MARKING ADVERTISING FRAMES FOR AUTOMATIC RECOGNITION OF CONTENT

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020207023993A Division KR102272767B1 (ko) 2017-09-13 2018-09-10 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅

Publications (2)

Publication Number Publication Date
KR20200037423A KR20200037423A (ko) 2020-04-08
KR102148248B1 true KR102148248B1 (ko) 2020-08-27

Family

ID=63722769

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020207008760A KR102148248B1 (ko) 2017-09-13 2018-09-10 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅
KR1020207023993A KR102272767B1 (ko) 2017-09-13 2018-09-10 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020207023993A KR102272767B1 (ko) 2017-09-13 2018-09-10 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅

Country Status (9)

Country Link
US (3) US10306333B2 (ko)
EP (1) EP3682643A1 (ko)
JP (3) JP6873321B2 (ko)
KR (2) KR102148248B1 (ko)
CN (2) CN111095940B (ko)
AU (2) AU2018331308B2 (ko)
BR (1) BR112020005086B1 (ko)
CA (1) CA3075620C (ko)
WO (1) WO2019055338A1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11917240B2 (en) * 2018-08-14 2024-02-27 Inscape Data, Inc. Dynamic content serving using automated content recognition (ACR) and digital media watermarks
US20200275168A1 (en) * 2019-02-22 2020-08-27 The Nielsen Company (Us), Llc Use of Watermarking to Trigger Fingerprint-Related Action
KR20200142787A (ko) 2019-06-13 2020-12-23 네이버 주식회사 멀티미디어 신호 인식을 위한 전자 장치 및 그의 동작 방법
CN110636330B (zh) * 2019-09-20 2021-10-26 深圳市梦网视讯有限公司 基于压缩信息的片源场景复杂度分析方法和系统
CN111182303A (zh) * 2019-10-08 2020-05-19 腾讯科技（深圳）有限公司 共享屏幕的编码方法、装置、计算机可读介质及电子设备
CN110956648A (zh) * 2019-11-15 2020-04-03 深圳市宏电技术股份有限公司 一种视频图像处理方法、装置、设备及存储介质
CN111970559B (zh) * 2020-07-09 2022-07-22 北京百度网讯科技有限公司 视频获取方法、装置、电子设备及存储介质
US11974024B2 (en) * 2020-09-11 2024-04-30 Sling TV L.L.C. Automated program promotion detection in a video streaming system
US20220264171A1 (en) * 2021-02-12 2022-08-18 Roku, Inc. Use of In-Band Data to Facilitate Ad Harvesting for Dynamic Ad Replacement
US11770566B1 (en) * 2022-03-16 2023-09-26 Roku, Inc. Automatically determining an optimal supplemental content spot in a media stream

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170118538A1 (en) 2015-10-27 2017-04-27 Sorenson Media, Inc. Media content matching and indexing

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1236350B1 (en) * 1999-11-10 2004-08-11 Thomson Licensing S.A. Digital video recording with full screen sub-picture and associated transparency control data recording for effecting fading between successive video segments at reproduction
US6714594B2 (en) * 2001-05-14 2004-03-30 Koninklijke Philips Electronics N.V. Video content detection method and system leveraging data-compression constructs
US20040237102A1 (en) * 2003-03-07 2004-11-25 Richard Konig Advertisement substitution
US7809154B2 (en) 2003-03-07 2010-10-05 Technology, Patents & Licensing, Inc. Video entity recognition in compressed digital video streams
JP4296503B2 (ja) * 2004-10-04 2009-07-15 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP2008011316A (ja) * 2006-06-30 2008-01-17 Casio Comput Co Ltd カメラ装置及びカメラ装置制御プログラム
US8358381B1 (en) * 2007-04-10 2013-01-22 Nvidia Corporation Real-time video segmentation on a GPU for scene and take indexing
US8195689B2 (en) * 2009-06-10 2012-06-05 Zeitera, Llc Media fingerprinting and identification system
US8300884B2 (en) 2009-05-21 2012-10-30 Digimarc Corporation Combined watermarking and fingerprinting
EP2437498A1 (en) * 2010-09-30 2012-04-04 British Telecommunications Public Limited Company Digital video fingerprinting
US8786785B2 (en) * 2011-04-05 2014-07-22 Microsoft Corporation Video signature
EP3534615B1 (en) 2013-03-15 2024-01-17 Inscape Data, Inc. Systems and methods for real-time television ad detection using an automated content recognition database
CN105190618B (zh) * 2013-04-05 2019-01-25 杜比实验室特许公司 用于自动文件检测的对来自基于文件的媒体的特有信息的获取、恢复和匹配
KR101456926B1 (ko) * 2013-06-14 2014-10-31 (주)엔써즈 핑거프린트에 기반한 광고 검출 시스템 및 방법
CN104023251B (zh) * 2014-06-13 2015-08-19 腾讯科技（深圳）有限公司 基于视频的互动方法和系统
US10200765B2 (en) * 2014-08-21 2019-02-05 Panasonic Intellectual Property Management Co., Ltd. Content identification apparatus and content identification method
KR20170047267A (ko) 2014-08-29 2017-05-04 도쿠리츠다이가쿠호징 가나자와다이가쿠 폴리올레핀계 수지 조성물, 성형체 및 폴리올레핀계 수지 필름
CN104581222A (zh) * 2015-01-05 2015-04-29 李伟贤 一种在视频中快速识别广告位并嵌入广告的方法
US9578394B2 (en) * 2015-03-25 2017-02-21 Cisco Technology, Inc. Video signature creation and matching
US9516377B1 (en) 2015-06-12 2016-12-06 Sorenson Media, Inc. Detecting channel change in automatic content recognition fingerprint matching
US9854326B1 (en) 2015-09-09 2017-12-26 Sorenson Media, Inc. Creating and fulfilling dynamic advertisement replacement inventory

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170118538A1 (en) 2015-10-27 2017-04-27 Sorenson Media, Inc. Media content matching and indexing

Also Published As

Publication number Publication date
US20190268670A1 (en) 2019-08-29
US10887667B2 (en) 2021-01-05
CA3075620A1 (en) 2019-03-21
BR112020005086A2 (pt) 2020-08-18
CA3075620C (en) 2022-01-11
KR20200037423A (ko) 2020-04-08
WO2019055338A1 (en) 2019-03-21
EP3682643A1 (en) 2020-07-22
US10306333B2 (en) 2019-05-28
JP6873321B2 (ja) 2021-05-19
KR20200103117A (ko) 2020-09-01
US20210084386A1 (en) 2021-03-18
JP7240437B2 (ja) 2023-03-15
JP2021122117A (ja) 2021-08-26
CN111095940A (zh) 2020-05-01
BR112020005086B1 (pt) 2022-07-12
AU2020289863A1 (en) 2021-01-28
US11303974B2 (en) 2022-04-12
KR102272767B1 (ko) 2021-07-06
AU2018331308A1 (en) 2020-04-02
JP2023078202A (ja) 2023-06-06
US20190082231A1 (en) 2019-03-14
AU2018331308B2 (en) 2020-09-24
CN111095940B (zh) 2021-05-25
CN113283321A (zh) 2021-08-20
AU2020289863B2 (en) 2021-09-23
JP2020533920A (ja) 2020-11-19

Similar Documents

Publication Publication Date Title
KR102148248B1 (ko) 자동 콘텐츠 인식에 대한 광고 프레임들의 플래깅
US11144765B2 (en) Scene frame matching for automatic content recognition
AU2021201776B2 (en) Cold matching by automatic content recognition

Legal Events

Date Code Title Description
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant