KR20100019482A - 비디오 세그먼트들 사이의 트랜지션을 검출하는 방법 및 장치 - Google Patents

비디오 세그먼트들 사이의 트랜지션을 검출하는 방법 및 장치 Download PDF

Info

Publication number
KR20100019482A
KR20100019482A KR1020097025485A KR20097025485A KR20100019482A KR 20100019482 A KR20100019482 A KR 20100019482A KR 1020097025485 A KR1020097025485 A KR 1020097025485A KR 20097025485 A KR20097025485 A KR 20097025485A KR 20100019482 A KR20100019482 A KR 20100019482A
Authority
KR
South Korea
Prior art keywords
transition
video segment
detector
detection method
determined
Prior art date
Application number
KR1020097025485A
Other languages
English (en)
Inventor
게릿 씨. 랑겔라
Original Assignee
코닌클리케 필립스 일렉트로닉스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코닌클리케 필립스 일렉트로닉스 엔.브이. filed Critical 코닌클리케 필립스 일렉트로닉스 엔.브이.
Publication of KR20100019482A publication Critical patent/KR20100019482A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Television Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Circuits (AREA)
  • Color Television Image Signal Generators (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 제 1 트랜지션이 제 1 검출기(105)에 의해 검출된다. 제 2 트랜지션은 제 2 검출기(107)에 의해 검출된다. 제 1 및 제 2 검출기들(105, 107)은 상이하다. 제 1 및 제 2 검출기들(105, 107)의 출력들이 비교된다(109). 제 2 방법의 신뢰성은 제 1 검출기(105)에 의해 검출된 트랜지션을 제 2 검출기(107)에 의해 검출된 트랜지션과 비교함으로써 결정된다. 적어도 제 2 트랜지션은 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 최종적인 트랜지션을 결정하는데 사용된다. 제 2 트랜지션은 제 2 방법이 신뢰할 수 없다고 결정되는 경우에 최종적인 트랜지션을 결정하는데 사용되지 않는다.
비디오 세그먼트, 트랜지션, 검출기, 신뢰성, 비교기.

Description

비디오 세그먼트들 사이의 트랜지션을 검출하는 방법 및 장치{METHOD AND APPARATUS FOR DETECTING A TRANSITION BETWEEN VIDEO SEGMENTS}
본 발명은 비디오 세그먼트(video segment)들 사이의 트랜지션(transition)을 검출하는 방법 및 장치에 관한 것이다. 특히, 그러나, 배타적이지는 않게, 본 발명은 프로그램(program) 및 광고방송 블록(commercial block) 사이의 트랜지션(또는 경계)을 검출 및 검증하는 것에 관한 것이다.
간단한 광고방송 검출 알고리즘들, 예를 들어, TV 프로그램 및 광고방송 블록 사이의 트랜지션들을 검출하기 위하여 블랙-프레임(black-frame) 및 오디오 압축 피처(audio-pressure feature)들을 사용하는 것들이 널리 공지되어 있다. 이들이 종종 부정확하다는 것이 발견되었는데, 예를 들어, 새로운 아이템(item)들 또는 프로그램 인트로(program intro)들이 틀릴 수 있고 광고방송들 내로 통합될 수 있다. 그러므로, 광고방송들 뿐만 아니라, 프로그램의 부분들이 스킵(skip)될 수 있다.
많은 채널(channel)들은 TV 프로그램 동안 스크린(screen)의 코너(corner)에 디스플레이되는 로고(logo)를 포함한다. 이러한 로고들은 광고방송들 동안 나타나지 않는다. 그러므로, 일부의 공지된 광고방송 블록 검출기들은 프로그램 및 광고 방송 블록 사이의 트랜지션을 확립하기 위하여 로고 검출을 사용한다. 로고들이 항상 생방송(live event)들 동안 적절하게 오버레이(overlay)되지는 않고, 경계들이 공지되어 있지 않고, 일부 채널들이 로고들을 사용하지 않고, 투명한 로고들이 또한 백색 배경(white background), 등에서 검출될 수 없기 때문에, 상기 광고방송 블록 검출기들이 또한 부정확한 것으로 판명되었다.
이와 같은 광고방송 블록 검출기들의 성능을 개선시키기 위하여, 어떤 사용 로고 존재 검출이 예를 들어, 자신들 상에 로고들을 갖는 블랙-프레임 또는 레터박스 검출(black-frame or letterbox detection)들을 억제하는데 사용된다. 그러나, 이들은 브로드캐스터(broadcaster)들에 의해 부적절하게 오버레이된 로고들 및 로고 자체의 오검출(misdetection)을 처리할 수 없다.
본 발명의 목적은 비디오 세그먼트들 사이의 트랜지션을 정확하게 검출하므로 비디오 세그먼트들 사이의 트랜지션을 검증하는 기술을 제공하는 것이다.
이것은 제 1 검출 방법에 의해 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 제 1 트랜지션을 검출하는 단계; 제 2 검출 방법에 의해 상기 제 1 비디오 세그먼트 및 상기 제 2 비디오 세그먼트 사이의 제 2 트랜지션을 검출하는 단계로서, 상기 제 1 검출 방법은 상기 제 2 검출 방법과 상이한, 상기 제 2 트랜지션 검출 단계; 상기 제 1 트랜지션을 상기 제 2 트랜지션과 비교함으로써 상기 제 2 방법이 신뢰할 수 있는지를 결정하는 단계; 및 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 최종적인 트랜지션을 결정하는데 적어도 상기 제 2 트랜지션을 사용하고 상기 제 2 방법이 신뢰할 수 없다고 결정되는 경우에 상기 최종적인 트랜지션을 결정하는데 상기 제 2 트랜지션을 사용하지 않는 단계를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션을 검출하는 방법에 의하여 본 발명의 제 1 양상에 따라 성취된다.
이것은 또한 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 제 1 트랜지션을 검출하는 제 1 검출기; 상기 제 1 비디오 세그먼트 및 상기 제 2 비디오 세그먼트 사이의 제 2 트랜지션을 검출하는 제 2 검출기로서, 상기 제 1 검출기는 상기 제 2 검출기와 상이한, 상기 제 2 검출기; 및 상기 제 1 트랜지션을 상기 제 2 트랜지션과 비교함으로써 상기 제 2 방법이 신뢰할 수 있는지를 결정하고, 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 최종적인 트랜지션을 결정하는데 적어도 상기 제 2 트랜지션을 사용하고 상기 제 2 방법이 신뢰할 수 없다고 결정되는 경우에 상기 최종적인 트랜지션을 결정하는데 상기 제 2 트랜지션을 사용하지 않는 비교기를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션을 검출하는 장치에 의하여 본 발명의 제 2 양상에 따라 성취된다.
어떤 방법들, 예를 들어, 로고 검출기들은 어떤 콘텐트에서 트랜지션들을 매우 잘 검출하거나 전혀 검출하지 못한다. 이와 같은 방법으로 검출된 트랜지션들을 또 다른 방법으로 검출된 트랜지션들과 비교함으로써, 최종적인 트랜지션들을 결정하는데 제 2 방법을 사용하는 것이 타당한지의 여부가 결정될 수 있다.
본 발명의 실시예에서, 제 2 검출 방법은 간단한 로고 검출기를 포함하며, 제 1 검출 방법의 통합으로, 시스템을 브로드캐스터들에 의해 부적절하게 오버레이된 로고들 또는 로고 검출기의 오검출들에 대해 용이하게 수정할 수 있다. 로고 검출들이 신뢰할 수 있는 경우에, 경계들은 로고 및 더 정확한 경계들을 획득하기 위한 제 1 검출 방법으로부터의 다른 정보를 사용하여 조정될 수 있다.
상기 최종적인 트랜지션은 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 단지 또는 주로 상기 제 2 방법을 기반으로 할 수 있다.
상기 최종적인 트랜지션은 상기 제 1 트랜지션을 개량하기 위해 상기 제 2 트랜지션을 사용함으로써 결정될 수 있다.
본 발명의 실시예에서, 상기 제 2 검출 방법은 상기 제 1 및 제 2 검출 방법들에 의해 결정된 상기 제 1 및/또는 제 2 비디오 세그먼트들의 시작 및/또는 종료 시간들을 비교하고; 상기 제 1 및 제 2 비디오 세그먼트들의 대응하는 시작 및/또는 종료 시간들 사이의 차이들의 비율을 결정하고; 차이들의 결정된 비율이 임계값 아래인 경우에 상기 제 2 검출 방법을 신뢰할 수 있다고 결정함으로써 신뢰할 수 있는 것으로 결정된다.
대안적으로, 상기 제 2 검출 방법은 제 1 및 제 2 비디오 세그먼트들의 비디오 스트림의 총 지속기간에 대한 상기 제 2 검출 방법에 의해 검출된 제 1 비디오 세그먼트들의 수정된 지속기간의 비율을 결정하고; 상기 결정된 비율이 제 2 임계값 위인 경우에 상기 제 2 검출 방법을 신뢰할 수 있다고 결정함으로써 신뢰할 수 있는 것으로 결정된다. 대안적으로, 상기 제 2 검출 방법은 상기 제 1 검출 방법에 의해 검출된 대응하는 제 1 비디오 세그먼트들의 지속기간에 대한 상기 제 2 검출 방법에 의해 검출된 제 1 비디오 세그먼트들의 수정된 지속기간의 비율을 결정하고; 상기 결정된 비율이 제 3 임계값 위인 경우에 상기 제 2 검출 방법을 신뢰할 수 있다고 결정함으로써 신뢰할 수 있는 것으로 결정된다.
상기 제 2 검출 방법의 신뢰성은 상기의 비율들 중 어느 하나 또는 이의 임의의 조합에 의해 결정될 수 있다.
본 발명의 더 완전한 이해를 위하여, 첨부 도면들과 함께 다음의 설명이 참조된다.
도 1은 본 발명의 실시예에 따른 장치의 간소화된 개략도.
도 2는 본 발명의 실시예에 따른 비교기의 흐름도.
도 3(a), 도 3(b) 및 도 3(c)는 도 1의 장치의 검출기들 및 비교기의 출력의 예의 도식적 표현들.
도 1을 참조하면, 장치(100)는 디멀티플렉서(demultiplexer)(103)의 입력에 접속된 입력 단자(101)를 포함한다. 디멀티플렉서(103)의 출력들은 제 1 검출기(105) 및 제 2 검출기(107)에 접속된다. 제 1 및 제 2 검출기들(105, 107)의 출력들은 비교기(109)의 각각의 입력들에 접속된다. 비교기(109)의 출력은 장치(100)의 출력 단자(111)에 접속된다. 검출기들(105, 107)의 출력들은 나중의 비교 및/또는 프로세싱을 위하여 메모리 디바이스(memory device) 또는 데이터베이스(database)(본원에 도시되지 않음)에 저장될 수 있다.
도 2를 참조하면, 상기 장치의 동작이 설명될 것이다. 시청각 데이터 스트 림(audiovisual data stream)이 장치(100)의 입력 단자(101) 상에 제공된다. 상기 데이터 스트림은 디멀티플렉서(103)에 의해 디멀티플렉싱된다. 오디오 및/또는 비디오 출력이 제 1 검출기(105)에 공급된다. 제 1 검출기(105)는 오디오 컷-사일런스 검출기(audio cut-silence detector)를 포함할 수 있고, 이 경우에, 오디오 피처 데이터(audio feature data)를 제공하기 위하여 오디오의 전력 신호 및 오디오 프리젠테이션 시간 시탬프(audio presentation time stamp)들이 프로세싱된다. 비디오 피처 데이터가 또한 추출된다. 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션들은 추출된 오디오 및 비디오 피처 데이터를 기반으로 하여 검출된다. 블랙-프레임 검출, 레터박스 변화, 모노크롬 프레임(monochrome frame), 오디오 전력 드롭(audio power drop), 등과 같은, 트랜지션을 검출하는 다른 공지된 기술들이 사용될 수 있다. 이 방식으로, 제 1 검출기(105)는 블랙 프레임들, 오디오 드롭들, 등을 기반으로 하여 분리 포인트들을 검출한다. 이러한 포인트들은 정상적인 프로그램 동안 뿐만 아니라, 정상적인 프로그램 및 광고방송 블록 사이의 트랜지션에서 발생할 수 있다. 그러므로, 이러한 분리 포인트들이 실제로 정상적인 프로그램 및 광고방송 블록 사이의 트랜지션인지를 결정하기 위하여, 분리 포인트들의 세트가 어떤 요건들을 충족시켜야 한다. 이 분리 포인트들의 세트가 통합되고, 2개의 트랜지션 포인트들, 광고방송 블록의 시점 및 종점을 나타내는 이 세트의 최초 및 최종 분리 포인트, 즉, 정상적인 프로그램 및 광고방송 블록 사이의 트랜지션을 발생시킨다. 제 1 검출기(105)는 입력 데이터 스트림에 대하여, 비디오 세그먼트들 사이의 복수의 후보 트랜지션들, 즉, 프로그램들 및 광고방송들 사이의 트랜지션들을 발생시킨다.
제 2 검출기(107)는 디멀티플렉싱된 비디오 프리젠테이션 시간 스탬프들을 수신한다. 제 2 검출기(107)는 이것을 복수의 프레임들로 분할한다. 각각의 프레임은 로고 또는 인식된 텍스트, 등과 같은 그래픽 오브젝트(graphical object)를 검출하기 위하여 분석된다. 제 2 검출기(107)는 복수의 로고가 없는 에피소드(logo free episode)들, 즉, 그래픽 오브젝트(로고)의 나타남 및/또는 사라짐 사이의 트랜지션의 표시를 출력한다(단계 201).
데이터 스트림의 종점이 검출될 때(단계 203), 비교기는 검출기(105, 107)의 출력을 결합하고, 각각의 비디오 세그먼트의 시작 및 종료 시간들(트랜지션들), 즉 광고방송 블록 시작 및 종료 시간들의 최종 리스트를 발생시킨다.
이것은 제 2 검출기(107)의 신뢰성을 확립함으로써 성취된다(단계 205). 제 2 검출기가 신뢰할 수 있다고 결정되는 경우에(단계 207), 제 2 검출기(107)에 의해 발견된 트랜지션들이 프로세싱되어 출력되며(단계 209, 211, 215), 제 1 검출기(105)에 의해 검출된 트랜지션들과 결합된다.
제 2 검출기(107)가 신뢰할 수 없다고 결정되는 경우에(단계 207), 제 1 검출기(105)에 의해 발견된 트랜지션들만이 프로세싱되어(단계 213), 출력된다(단계 215).
제 2 검출기(107)의 신뢰성의 결정이 이제 도 3(a), (b) 및 (c)를 참조하여 더 상세히 설명될 것이다.
도 3(a)는 제 1 검출기(105)의 출력의 도식적 표현이고;
도 3(b)는 제 2 검출기(107)의 출력의 도식적 표현이며;
도 3(c)는 도 3(a) 및 도 3(b)에 도시된 출력의 비교의 도식적 표현이다.
상술된 바와 같이, 비교기가 우선 제 2 검출기(107)(로고 검출기)를 신뢰할 수 있는지 또는 아닌지를 검사한다. 이와 같은 검사를 수행할 시에, 일부 브로드캐스터들이 특히, 생방송들 동안, 광고방송 시간(commercial break) 이후에 로고를 오버레이하는 것을 잊은 경우에, 그리고, 일부 채널들이 또한 광고방송 시간 동안 (거의) 항상 로고를 오버레이하는 경우에, 로고 데이터는 광고방송 블록 검출들에 유용하지 않다.
제 1 및 제 2 검출기들(105, 107)에 의해 출력된 도 3(a) 및 도 3(b)의 트랜지션들(t11, t12, t13, t14, t21, t22, t23, t24)이 제 1 및 제 2 비디오 세그먼트들 사이에서 검출된 트랜지션들이다. 예를 들어, 트랜지션들(t11, t13)은 제 1 검출기(105)에 의해 검출된 광고방송 블록의 시점을 나타내고; 트랜지션들(t12, t14)은 제 1 검출기(105)에 의해 검출된 광고방송 블록의 종점을 나타내며; 트랜지션들(t21, t23)은 제 2 검출기(107)에 의해 검출된 로고가 없는 에피소드의 시점을 나타내고; 트랜지션들(t22, t24)은 제 2 검출기(107)에 의해 검출된 로고가 없는 에피소드의 종점을 나타낸다.
검출된 광고방송 블록들 외부의 로고가 없는 에피소드들(t21 내지 t22 및 t23 내지 t24)의 지속기간 및 비디오 지속기간 사이의 비율이 다음과 같이 계산된다:
Ratio_A = V1LogoFreeNoOverlap*100%/VideoDuration (1)
즉, 비디오 스트림의 지속기간에 대한 제 2 검출기에 의해 검출된 것(로고가 없는 에피소드들)과의 오버랩(overlap)을 갖지 않는 제 1 검출기에 의해 검출된 광고방송 블록들의 비율.
일반적으로, 이 비율은 로고가 통상적으로 광고방송 블록의 시점의 단지 20초 전에 사라지고 광고방송 블록의 종점 20초 후에 나타나기 때문에 작다(<5%). 그러나, 정적인 콘텐트 또는 "화이트 배경 상의 보이지 않는 투명한 로고들" 때문에 로고 검출기가 짧은 기간들 동안 실패한 경우에, 이 퍼센티지(percentage)는 다소 더 높아질 수 있다. 이 비율이 15%를 초과하는 경우에, 브로드캐스터는 아마도 더 긴 기간 동안 로고들을 오버레이하는 것을 잊는다.
다음으로, 비디오 지속기간에 대한 수정된 로고가 없는 에피소드들의 총 지속기간 사이의 비율이 계산된다:
Ratio_B = CorrLogoFreeDuration*100%/VideoDuration (2)
여기서, CorrLogoFreeDuration은 너무 짧거나 너무 긴 것으로 간주되는 지속기간들이 폐기되는 수정된 로고가 없는 에피소드 지속기간이다.
이 비율이 매우 작은(3%보다 더 작은) 경우에, 로고는 아마도 항상 보이게 되는데, 즉, 로고는 광고방송들 상에서도 또한 보이게 된다. 또는, 레코딩(recording)/브로드캐스트가 어떠한 광고방송들도 포함하지 않는다.
제 1 검출기의 검출들의 총 지속기간에 대한 수정된 로고가 없는 에피소드들(제 2 검출기)의 총 지속기간이 비교된다:
Ratio_C = CorrLogoFreeDuration*100%/CBV1Duration (3)
여기서, CorrLogoFreeDuration은 너무 짧거나 너무 긴 것으로 간주되는 지속기간들이 폐기되는 수정된 로고가 없는 에피소드 지속기간이며, CBV1Duration은 제 1 검출기에 의해 검출된 광고방송 블록의 지속기간이다(도 3(a)).
이 비율이 45%보다 더 작은 경우에, 로고가 없는 에피소드들은 제 1 검출기에 의해 검출된 광고방송 블록들보다 상당히 더 짧다. 이것은 로고들이 광고방송들 중 일부 상에 오버레이되거나 또는 자신들 상에 로고들을 갖는 다수의 트레일러(trailer)들과 광고방송들이 인터리빙(interleaving)될 때, 발생한다.
그러므로, 로고가 없는 에피소드들은:
(Ratio_A > NOOVERLAPRATIO) OR (Ratio_B < VIDDURATIONRATIO) OR (Ratio_C < CBV1RATIO) (4)
인 경우에, 신뢰할 수 없는 것으로 간주되며,
여기서, 상기의 특정 예에서, NOOVERLAPRATIO는 15%이고, VIDDURATIONRATIO은 3%이며, CBV1RATIO는 45%이다. 이러한 임계 퍼센티지들이 단지 예들이고 적절하게 가변될 수 있다는 점이 인식될 수 있다. 그렇지 않은 경우에, 검출된 로고가 없는 에피소드들은 신뢰할 수 있다고 가정되고, 제 1 검출기에 의해 검출된 트랜지션들을 미세-조정하거나 또는 적어도 트랜지션들을 검증하는데 사용된다.
제 1 검출기에 의해 검출된 후보 광고방송 블록들은 로고 검출들의 신뢰성을 검증하는데 사용될 수 있다. 예를 들어, 후보 광고방송 블록의 총 지속기간에 대한 로고가 없는 에피소드들의 총 지속기간은 제 1 검출기에 의해 검출되고/또는 로고 가 없는 에피소드 및 제 1 검출기에 의해 검출된 후보 광고방송 블록들 사이의 오버랩이 존재하지 않는 경우에 에피소드들의 총 지속기간에 대해 프로그램 지속기간을 비교한다.
제 2 검출기의 로고 검출들이 신뢰할 수 없는 것으로 간주되는 경우에, 제 1 검출기에 의해 검출된 후보 광고방송 블록들이 최종적인 트랜지션 및 장치의 출력이 된다. 제 2 검출기의 로고 검출들이 신뢰할 수 있는 것으로 간주되는 경우에, 제 1 검출기에 의해 검출된 트랜지션들은 제 2 검출기의 로고 검출을 사용하여 조정된다.
본 발명의 실시예가 첨부 도면들에 도시되어 있고 상기의 상세한 설명에서 설명되었을지라도, 본 발명이 개시된 실시예에 제한되는 것이 아니라, 다음의 청구항들에서 설명된 바와 같은 본 발명의 범위를 벗어남이 없이 다수의 변경들을 행할 수 있다는 점이 이해될 것이다. 본 발명은 각각 및 모든 신규한 독특한 특징 및 독특한 특징의 각각 및 모든 조합에 귀속된다. 청구항들에서의 참조 번호들은 본 발명의 보호 범위를 제한하지 않는다. 동사 "포함하는" 및 이의 활용형들의 사용은 청구항들에서 진술된 것들 이외의 요소들의 존재를 배제하지 않는다. 요소 앞의 관사 "a" 또는 "an"의 사용은 복수의 이와 같은 요소들의 존재를 배제하지 않는다.
'수단'은 당업자들에게 명백한 바와 같이, 지정된 기능을 동작 중에 재생하거나 재생하도록 디자인되고, 단독이거나 다른 기능들과 함께, 다른 요소들과 분리되거나 협동하는 (개별적이거나 통합된 회로들 또는 전자 요소들과 같은) 임의의 하드웨어 또는 (프로그램들 또는 프로그램들의 부분들과 같은) 소프트웨어를 포함 하게 된다. 본 발명은 여러 별개의 요소들을 포함하는 하드웨어, 및 적절하게 프로그래밍된 컴퓨터에 의하여 구현될 수 있다. 여러 수단들을 열거하는 장치 청구항에서, 여러 개의 이러한 수단들은 하드웨어의 하나 및 동일한 아이템에 의해 구현될 수 있다. '컴퓨터 프로그램 제품'은 인터넷과 같은 네트워크를 통하여 다운로딩 가능하거나 임의의 다른 방식으로 시판 가능한 플로피 디스크와 같은 컴퓨터-판독 가능한 매체 상에 저장된 임의의 소프트웨어 제품을 의미하는 것으로 이해되어야 한다.

Claims (14)

  1. 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션을 검출하는 방법에 있어서:
    제 1 검출 방법에 의해 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 제 1 트랜지션을 검출하는 단계;
    제 2 검출 방법에 의해 상기 제 1 비디오 세그먼트 및 상기 제 2 비디오 세그먼트 사이의 제 2 트랜지션을 검출하는 단계로서, 상기 제 1 검출 방법은 상기 제 2 검출 방법과 상이한, 상기 제 2 트랜지션 검출 단계;
    상기 제 1 트랜지션을 상기 제 2 트랜지션과 비교함으로써 상기 제 2 방법이 신뢰할 수 있는지를 결정하는 단계; 및
    상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 최종적인 트랜지션을 결정하는데 적어도 상기 제 2 트랜지션을 사용하고 상기 제 2 방법이 신뢰할 수 없다고 결정되는 경우에 상기 최종적인 트랜지션을 결정하는데 상기 제 2 트랜지션을 사용하지 않는 단계를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  2. 제 1 항에 있어서, 상기 최종적인 트랜지션은 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 단지 또는 주로 상기 제 2 트랜지션을 기반으로 하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  3. 제 2 항에 있어서, 상기 최종적인 트랜지션은 상기 제 1 트랜지션을 개량하기 위해 상기 제 2 트랜지션을 사용함으로써 결정되는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  4. 제 1 항에 있어서, 상기 제 2 검출 방법은 미리결정된 아이템의 검출 시에 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 상기 트랜지션을 검출하는 단계를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  5. 제 4 항에 있어서, 상기 미리결정된 아이템은 그래픽 오브젝트인, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  6. 제 1 항에 있어서, 상기 제 1 검출 방법은 제 1 세트의 복수의 후보 제 1 비디오 세그먼트들을 발생시키고; 상기 제 2 검출 방법은 제 2 세트의 복수의 후보 제 1 비디오 세그먼트들을 발생시키는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  7. 제 6 항에 있어서, 상기 제 2 검출 방법의 신뢰성을 결정하는 단계는:
    상기 제 1 및 제 2 검출 방법들에 의해 결정된 상기 제 1 및/또는 제 2 비디 오 세그먼트들의 시작 및/또는 종료 시간들을 비교하는 단계;
    상기 제 1 및 제 2 비디오 세그먼트들의 대응하는 상기 시작 및/또는 종료 시간들 사이의 차이들의 비율을 결정하는 단계;
    상기 차이들의 결정된 비율이 임계값 아래인 경우에 상기 제 2 검출 방법을 신뢰할 수 있다고 결정하는 단계를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  8. 제 6 항 또는 제 7 항에 있어서, 상기 제 2 검출 방법의 신뢰성을 결정하는 단계는:
    상기 제 1 및 제 2 비디오 세그먼트들의 비디오 스트림의 총 지속기간에 대한 상기 제 2 검출 방법에 의해 검출된 상기 제 1 비디오 세그먼트들의 수정된 지속기간의 비율을 결정하는 단계; 및
    상기 결정된 비율이 제 2 임계값 위인 경우에 상기 제 2 검출 방법을 신뢰할 수 있다고 결정하는 단계를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  9. 제 6 항 내지 제 8 항 중 어느 한 항에 있어서, 상기 제 2 검출 방법의 신뢰성을 결정하는 단계는:
    상기 제 1 검출 방법에 의해 검출된 상기 대응하는 제 1 비디오 세그먼트들의 지속기간에 대한 상기 제 2 검출 방법에 의해 검출된 상기 제 1 비디오 세그먼 트들의 수정된 지속기간의 비율을 결정하는 단계; 및
    상기 결정된 비율이 제 3 임계값 위인 경우에 상기 제 2 검출 방법이 신뢰할 수 있다고 결정하는 단계를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법.
  10. 제 1 항 내지 제 9 항 중 어느 한 항에 따른 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 방법을 수행하는 복수의 프로그램 코드 부분들을 포함하는, 컴퓨터 프로그램 제품.
  11. 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션을 검출하는 장치에 있어서:
    제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 제 1 트랜지션을 검출하는 제 1 검출기;
    상기 제 1 비디오 세그먼트 및 상기 제 2 비디오 세그먼트 사이의 제 2 트랜지션을 검출하는 제 2 검출기로서, 상기 제 1 검출기는 상기 제 2 검출기와 상이한, 상기 제 2 검출기; 및
    상기 제 1 트랜지션을 상기 제 2 트랜지션과 비교함으로써 상기 제 2 방법이 신뢰할 수 있는지를 결정하고, 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 최종적인 트랜지션을 결정하는데 적어도 상기 제 2 트랜지션을 사용하고 상기 제 2 방법이 신뢰할 수 없다고 결정되는 경우에 상기 최종적인 트랜지션을 결정하 는데 상기 제 2 트랜지션을 사용하지 않는 비교기를 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 장치.
  12. 제 11 항에 있어서, 상기 제 2 검출기는 미리결정된 아이템의 검출 시에 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 상기 트랜지션을 검출하는 수단을 포함하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 장치.
  13. 제 11 항에 있어서, 상기 비교기는 상기 제 2 방법이 신뢰할 수 있다고 결정되는 경우에 단지 또는 주로 상기 제 2 트랜지션을 기반으로 하여 상기 최종적인 트랜지션을 결정하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 장치.
  14. 제 13 항에 있어서, 상기 비교기는 상기 제 1 트랜지션을 개량하기 위해 상기 제 2 트랜지션을 사용함으로써 상기 최종적인 트랜지션을 결정하는, 제 1 비디오 세그먼트 및 제 2 비디오 세그먼트 사이의 트랜지션 검출 장치.
KR1020097025485A 2007-05-08 2008-05-05 비디오 세그먼트들 사이의 트랜지션을 검출하는 방법 및 장치 KR20100019482A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP07107666.5 2007-05-08
EP07107666 2007-05-08

Publications (1)

Publication Number Publication Date
KR20100019482A true KR20100019482A (ko) 2010-02-18

Family

ID=39618809

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020097025485A KR20100019482A (ko) 2007-05-08 2008-05-05 비디오 세그먼트들 사이의 트랜지션을 검출하는 방법 및 장치

Country Status (8)

Country Link
US (1) US20100302452A1 (ko)
EP (1) EP2147546B1 (ko)
JP (1) JP2010526504A (ko)
KR (1) KR20100019482A (ko)
CN (1) CN101682685A (ko)
AT (1) ATE483326T1 (ko)
DE (1) DE602008002834D1 (ko)
WO (1) WO2008135945A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009053471B4 (de) 2009-11-16 2018-08-02 Siemens Healthcare Gmbh Verfahren und Vorrichtung zur Identifizierung und Zuordnung von Koronarkalk zu einem Herzkranzgefäß sowie Computerprogrammprodukt
US9516365B2 (en) * 2012-03-05 2016-12-06 Lg Electronics Inc. Video display apparatus and operating method thereof
US11166054B2 (en) 2018-04-06 2021-11-02 The Nielsen Company (Us), Llc Methods and apparatus for identification of local commercial insertion opportunities
JP6966707B2 (ja) * 2018-06-05 2021-11-17 日本電信電話株式会社 提供クレジット表示検出装置、提供クレジット表示検出方法、及びプログラム
US11082730B2 (en) * 2019-09-30 2021-08-03 The Nielsen Company (Us), Llc Methods and apparatus for affiliate interrupt detection

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5999688A (en) * 1993-01-08 1999-12-07 Srt, Inc. Method and apparatus for controlling a video player to automatically locate a segment of a recorded program
EP0735754B1 (en) * 1995-03-30 2008-05-07 THOMSON Licensing Method and apparatus for the classification of television signals
WO1999020052A1 (fr) * 1997-10-09 1999-04-22 Mitsubishi Denki Kabushiki Kaisha Dispositif numerique de correction de convergence et dispositif d'affichage
US6100941A (en) * 1998-07-28 2000-08-08 U.S. Philips Corporation Apparatus and method for locating a commercial disposed within a video data stream
JP4026100B2 (ja) * 1998-11-30 2007-12-26 ソニー株式会社 情報処理装置および方法、並びに記録媒体
US6493042B1 (en) * 1999-03-18 2002-12-10 Xerox Corporation Feature based hierarchical video segmentation
DE19925387A1 (de) * 1999-06-02 2000-12-14 Clemente Spehr Verfahren und Vorrichtung zur Unterdrückung unerwünschter Programmteile für Geräte der Unterhaltungselektronik
US7123769B2 (en) * 2001-11-09 2006-10-17 Arcsoft, Inc. Shot boundary detection
US7738704B2 (en) * 2003-03-07 2010-06-15 Technology, Patents And Licensing, Inc. Detecting known video entities utilizing fingerprints
JP2004336507A (ja) * 2003-05-09 2004-11-25 Sony Corp 映像処理装置および方法、記録媒体、並びにプログラム

Also Published As

Publication number Publication date
EP2147546B1 (en) 2010-09-29
EP2147546A1 (en) 2010-01-27
CN101682685A (zh) 2010-03-24
WO2008135945A1 (en) 2008-11-13
ATE483326T1 (de) 2010-10-15
JP2010526504A (ja) 2010-07-29
DE602008002834D1 (de) 2010-11-11
US20100302452A1 (en) 2010-12-02

Similar Documents

Publication Publication Date Title
US11223854B2 (en) Broadcasting an information signal having special content for triggering an appropriate action in a user device
US7327885B2 (en) Method for detecting short term unusual events in videos
KR101237229B1 (ko) 콘텐츠 처리 장치 및 콘텐츠 처리 방법
US20050108745A1 (en) Commercial detector with a start of active video detector
US8682132B2 (en) Method and device for detecting music segment, and method and device for recording data
CN107306342B (zh) 一种监视视听内容的方法和系统
US20050264703A1 (en) Moving image processing apparatus and method
US20050190965A1 (en) Apparatus and method for determining anchor shots
KR20100019482A (ko) 비디오 세그먼트들 사이의 트랜지션을 검출하는 방법 및 장치
US20100259688A1 (en) method of determining a starting point of a semantic unit in an audiovisual signal
CN101553814A (zh) 用于产生视频数据流摘要的方法和设备
US20110243526A1 (en) Video/Audio Player
CN104853244A (zh) 用于管理音视频、音频或视频内容的方法和装置
WO2019235405A1 (ja) Ｃｍ区間検出装置、ｃｍ区間検出方法、及びプログラム
JP4749139B2 (ja) 危険映像検出方法、映像相違検出方法及び装置
US20140101683A1 (en) Methods and apparatus for detecting a television channel change event
KR101193549B1 (ko) 티브이 프로그램의 에피소드 자동분할 시스템 및 그 방법
JP3785068B2 (ja) 映像解析装置，映像解析方法，映像解析プログラムおよびそのプログラム記録媒体
US20080298598A1 (en) Music detecting apparatus and music detecting method
US20100050203A1 (en) Advertisement-section detecting apparatus and advertisement-section detecting program
US8542983B2 (en) Method and apparatus for generating a summary of an audio/visual data stream
JPH11331761A (ja) 映像の自動要約方法およびその装置およびその方法を記録した記録媒体
US20210241324A1 (en) Device and method for detecting display of provided credit, and program
US20070256091A1 (en) Monochrome frame detection method
WO2024034401A1 (ja) 映像編集装置、映像編集プログラム、及び映像編集方法

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid