KR20050012784A - 사용자 스펙에 따른 비트스트림 필터링 방법 - Google Patents

사용자 스펙에 따른 비트스트림 필터링 방법

Info

Publication number
KR20050012784A
KR20050012784A KR10-2004-7020089A KR20047020089A KR20050012784A KR 20050012784 A KR20050012784 A KR 20050012784A KR 20047020089 A KR20047020089 A KR 20047020089A KR 20050012784 A KR20050012784 A KR 20050012784A
Authority
KR
South Korea
Prior art keywords
bitstream
description
timing data
filtered
time positions
Prior art date
Application number
KR10-2004-7020089A
Other languages
English (en)
Other versions
KR100994949B1 (ko
Inventor
미리암 아미에르카프리오글리오
실바인 데빌러스
패트리스 미룩스
Original Assignee
코닌클리케 필립스 일렉트로닉스 엔.브이.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 코닌클리케 필립스 일렉트로닉스 엔.브이. filed Critical 코닌클리케 필립스 일렉트로닉스 엔.브이.
Publication of KR20050012784A publication Critical patent/KR20050012784A/ko
Application granted granted Critical
Publication of KR100994949B1 publication Critical patent/KR100994949B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4385—Multiplex stream processing, e.g. multiplex stream decrypting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Information Transfer Between Computers (AREA)
  • Oscillators With Electromechanical Resonators (AREA)
  • Machine Translation (AREA)
  • Storage Device Security (AREA)

Abstract

본 발명은 사용자 스펙들(user specifications)에 따라 비트스트림을 필터링하는 방법을 제안한다. 제안된 방법은 비트스트림의 의미 디스크립션(semantic description) 및 구문 디스크립션(syntactical description)을 사용한다. 의미 디스크립션은 사용자 스펙에 일치하는 기본 유닛들(elementary units)을 선택하기 위해 스캐닝된다. 시간은 의미 디스크립션과 구문 디스크립션 사이에서 제거될 구문 디스크립션의 구성요소들의 위치를 파악하기 위해 연결 메커니즘(linking mechanism)으로서 사용된다. 필터링된 구문 디스크립션은 위치된 구성요소들을 제거함으로써 발생된다. 최종적으로, 필터링된 비트스트림은 필터링된 구문 디스크립션으로부터 발생한다.

Description

사용자 스펙에 따른 비트스트림 필터링 방법{METHOD OF FILTERING A BITSTREAM ACCORDING TO USER SPECIFICATIONS}
상기 필터링 방법은 J.Heuer, A.Hutter, G.Panis, H.Hellwagner, H.Kosch, 및 C.Timmerer의 ISO 문서 "Proposal of a Generic Bitstream Syntax Description Language"(ISO/IEC JTC1/SC29/WG11 MPEG02/M8291 Fairfax/May2002 참조)에 기술되어있다.
상기 ISO 문서에서는, 비트스트림 그 자체보다는 비트스트림의 구문 디스크립션으로 작용하도록 제안한다. 구문 디스크립션은 비트스트림의 하이-레벨 구조를 설명하는 XML 문서로서 규정된다. 제안된 구문 디스크립션은 의미적으로 중요한 데이터로 표시되는 구성요소들을 포함한다. 제안된 방법은, 구문 디스크립션으로부터 특정 마커(marker)로 표시되는 구성요소들을 제거하기 위해 의도된 변환들(transformations)을 규정하는 것으로 이루어진다. 이후 필터링된 비트스트림은 변환된 구문 디스크립션으로부터 발생한다.
상기 해결방안의 이점은, 금지된 부분들(passages)이 제거된 필터링된 비트스트림을 발생한다는 것이다.
상기 해결방안은 특정 마커들 및 상기 특정 마커들과 연관하는 특정 변환들을 사용한다.
본 발명은 미리 결정된 마커들로 제한되는 문제점을 피할 수 있는 대안적 해결방안을 제안한다.
본 발명은 적어도 사용자 스펙(user specification)과 비트스트림의 구문 디스크립션(syntactical description)을 이용하여 비트스트림을 필터링하는 방법에 관한 것이다.
본 발명은 또한 상기 필터링 방법을 구현하는 수단을 포함하는 장치에 관한 것이다.
본 발명은 또한 서버 장치, 전송 채널 및 사용자 장치를 포함하는 시스템에 관한 것이고, 상기 서버 및/또는 사용자 장치들은 상기의 필터링 방법을 구현하기 위한 수단을 포함한다.
본 발명은 또한 프로그램이 프로세서에 의해 실행될 때 상기 필터링 방법을 구현하기 위한 명령어들을 포함하는 프로그램에 관한 것이다.
본 발명은 또한 상기 필터링 방법을 적용함으로써 획득되는 필터링된 비트스트림에 관한 것이다.
본 발명은 예를 들어 인터넷을 통해 스트리밍되거나 또는 케이블 네트워크나 다른 어떠한 유형의 네트워크를 통해 전송된 비디오 내의 원하지 않는 장면들(scenes)을 제거(filter out)할 수 있도록 한다. 그것은, 예를 들어 폭력적이거나선정적인 의미를 갖는 장면들(scenes)을 건너뛰기 위한 시청제한 제어(parental control)를 수행하기 위해 사용될 수 있다.
도 1은 본 발명에 따른 필터링 방법을 도시하는 블록도.
도 2는 본 발명에 따른 시스템의 제 1 실시예를 도시하는 블록도.
도 3은 본 발명에 따른 시스템의 제 2 실시예를 도시하는 블록도.
본 발명에 따라, 시간 위치를 갖는 기본 유닛들 및 상기 시간 위치들을 나타내는 제 1 타이밍 데이터를 포함하는 비트스트림의 필터링 방법은:
- 상기 기본 유닛들을 기술하고 상기 제 1 타이밍 데이터를 포함하는 구성요소들을 포함하는, 상기 비트스트림의 구문 디스크립션(syntactical description),
- 하나 이상의 기본 유닛들에 관한 특징 데이터 및 상기 기본 유닛들의 상기 시간 위치들을 나타내는 제 2 타이밍 데이터를 포함하는, 상기 비트스트림의 의미 디스크립션(semantic description),
- 적어도 사용자 스펙을 이용하며,
상기 방법은:
- 일치 기본 유닛들을 식별하기 위해 상기 사용자 스펙에 일치하는 특징 데이터를 상기 의미 디스크립션에서 검색하는 단계,
- 상기 제 2 타이밍 데이터로부터 상기 일치 기본 유닛들에 대한 시간 위치들을 유도(derive)하는 단계,
- 상기 시간 위치들에 대응하는 구성요소들을 상기 구문 디스크립션에 위치시키기 위해 상기 제 1 타이밍 데이터를 사용하는 단계,
- 위치된 구성요소들이 제거된 필터링된 구문 디스크립션을 발생하는 단계,
- 상기 필터링된 구문 디스크립션으로부터 필터링된 비트스트림을 발생하는 단계를 포함하는, 비트스트림 필터링 방법.
특정 마커들을 구문 디스크립션에 추가하는 대신에, 본 발명은 비트스트림의분리된 의미 디스크립션을 사용한다. 바람직하게, 상기 의미 디스크립션은 MPEG-7 표준에 부합한다. 기본 유닛들의 시간 위치는 의미 디스크립션과 구문 디스크립션 사이의 연결 메커니즘(linking mechanism)으로서 사용된다: 사용자 스펙에 일치하는 상기 기본 유닛들은 의미 디스크립션을 검색함으로써 식별된다; 이후 일치 기본 유닛들의 시간 위치들이 결정된다; 그리고 마지막으로 결정된 시간 위치들은 대응하는 구성요소들을 구문 디스크립션에 위치시키는데 사용된다.
상기와 같이 함으로써, 사용자는 필터링 스펙을 규정하는데 특정 마커들에 제한되지 않는다. 이는 사용자에게 더욱 편리하다.
의미 디스크립션에 포함된 모든 메타데이터(metadata)는 더 나은 유연성(flexibility)을 가져오는 필터링을 위해 사용된다.
많은 어플리케이션들에서, 오디오/비디오 비트스트림들은 MPEG-7 디스크립션에 연관한다. 특정 마커들로 구문 디스크립션을 향상시키는 대신 상기 현재하고 표준화된 디스크립션을 사용하는 것이 유리하다.
바람직한 실시예에서, 상기 구문 디스크립션은 XML 문서(확장 마크업 언어)이고, 상기 필터링된 구문 디스크립션은 상기 시간 위치들을 입력 파라미터로서 갖는 XSL 스타일 시트(확장가능 스타일 시트)에 규정된 파라메트릭 변환(parametric transformation)을 상기 구문 디스크립션에 적용함으로써 발생한다. XML 및 XSL은 W3C 컨소시엄에 의해 규정되었다.
XSL 스타일 시트는 문서 파일이고, XML 마크업 언어로 기록되었다. 특히, XSL 스타일 시트들은 XML 문서들을 변환하도록 설계되었다: 이들은 입력 XML 문서로부터 변환된 XML 문서를 출력하도록 XSL 프로세서들에 의해 적용되는 명령들을 포함한다.
본 발명은 또한 참조 도면들을 참조하여 설명된다.
사용자 스펙에 따른 비트스트림의 필터링 방법이 설명된다. 상기 방법은:
- 비트스트림의 의미 디스크립션(semantic description),
- 비트스트림의 구문 디스크립션(syntactical description)을 사용한다.
비트스트림의 의미 디스크립션은 비트스트림의 컨텐트에 연관하고 상기 컨텐트의 중요한 디스크립션을 제공하는 메타데이터를 포함한다. MPEG-7은 오디오/비디오 컨텐트의 의미 디스크립션들에 대한 널리 공지된 표준이다. 상기 의미 디스크립션의 생성은 인간의 참여(human participation)를 포함한다. 일반적으로 의미 디스크립션은 비트스트림의 발생 단계에서 한 번 생성되고, 이후 비트스트림에 추가된다.
MPEG-7 의미 디스크립션은 컨텐트에 대한 제작자-생성 정보(author-generated information)를 전달하는 <CreationInformation>라고 불리는 구성요소를 포함할 수 있다. 상기 정보는 컨텐트에 명시적으로 묘사되지 않고, 일반적으로 컨텐트에서 추출될 수 없다. 상기 <CreationInformation> 구성요소들은 <classification>라고 불리는 하위-구성요소를 명백히 포함한다. 상기 <CreationInformation> 구성요소의 목적은 컨텐트의 분류를 허용하는 디스크립션들을 제공하기 위한 것이다. 이를테면, 다음의 디스크립션들은 MPEG-7에서 제안되었다:
-<Genre>: 컨텐트에 적용하는 하나의 장르(genre)를 기술,
-<Subject>: 문자 주석(textual annotation)으로 컨텐트의 주제를 기술,
-<MarketClassification>: 컨텐트에 대한 하나의 목표되는 시장을 기술,
-<AgeClassfication>: 컨텐트에 대한 목표 연령대를 기술,
-<ParentalGuidance>: 컨텐트에 대한 하나의 시청제한 안내(parental guidance)를 기술,
-<Media review>: 컨텐트의 리뷰를 기술.
바람직하게 상기 모든 구성요소들의 컨텐트들은 특징 데이터로서 사용된다.
MPEG-7 의미 디스크립션은 또한 비트스트림에 연관된 타이밍 데이터를 전달하는 <MediaTime>으로 불리는 요소들을 포함한다. 상기 타이밍 데이터는 본 발명의 제 2 타이밍 데이터이다. MPEG-7는 상기 제 2 타이밍 데이터를 규정하기 위한 여러 가지 포맷들을 제안한다. 하나의 예가 다음에 주어진다.
비트스트림의 구문 디스크립션은 비트스트림의 구조를 기술한다. 바람직하게, 상기 구문 디스크립션은 비트스트림으로부터 그리고 비트스트림 포맷의 구문(syntax)을 서술하는 모델로부터 자동적으로 발생된다. 상기 구문 디스크립션은한 번 발생되어 비트스트림에 추가될 수 있다. 필요할 경우에 그것은 또한 어플리케이션에 의해 발생될 수도 있다. Sylvain Devillers, Myriam Amielh, 및 Thierry Planterose의 ISO 문서 "Bitstream Syntax Description Language"(ISO/IEC JTC1/SC29/WG11 MPEG/M8273, Fairfax, May 2002 참조)에서는 비트스트림 포맷의 구문을 설명하는 모델로부터 비트스트림의 구문 디스크립션을 발생하는 (그리고 상반되게 상기 비트스트림의 구문 디스크립션으로부터 그리고 비트스트림 포맷의 구문을 기술하는 모델로부터 비트스트림을 발생하는) 방법을 설명한다.
디스크립션의 연속에서, 비트스트림의 구문 디스크립션의 발생은 필터링 방법의 단계로 간주된다. 이것은 제한적이지 않다. 구문 디스크립션은 또한 필터링되는 비트스트림에 추가될 수 있다.
도 1은 사용자 스펙(UP)에 따른 비트스트림(BTS)의 필터링 방법을 블록들로 설명한다. 사용자 스펙(UP)은 하나 이상의 키워드들로 설정된다. 비트스트림(BTS)은 기본 유닛들 및 제 1 타이밍 데이터를 포함하며, 상기 제 1 타이밍 데이터로부터 각각의 기본 유닛에 대한 시간 위치들이 유도될 수 있다.
비트스트림(BTS)은 의미 디스크립션(SEM)에 의미적으로 기술되고, 구문 디스크립션(SYN)에 구문적으로 기술된다.
의미 디스크립션(SEM)은 제 2 타이밍 데이터 및 하나 이상의 기본 유닛들에 관한 특징 데이터를 포함한다. 제 2 타이밍 데이터는 기본 유닛들의 시간 위치들을 나타낸다. 구문 디스크립션은 기본 유닛들을 설명하고 제 1 타이밍 데이터를 포함하는 구성요소들을 포함한다.
도 1에 도시된 바와 같이, 본 발명의 필터링 방법은 네 단계들(S1, S2, S3, 및 S4)을 포함한다.
단계(S1)에서, 구문 디스크립션(SYN)은 비트스트림(BTS)으로부터 발생된다.
단계(S2)에서, 의미 디스크립션(SEM)은 사용자 스펙(UP)과 일치하는 특징 데이터에 대해 검색된다. 일치 특징 데이터에 연관되는 기본 유닛들(MEi)은 일치 기본 유닛들로 불린다. 일치 기본 유닛들에 연관되는 제 2 타이밍 데이터(D2(MEi))는 각각의 일치 기본 유닛에 대한 시간 위치(TP(i))를 유도하기 위해 사용된다. 상기 시간 위치들은 단계(S3)에서 입력 파라미터들로서 사용된다.
단계(S3)에서, 구문 디스크립션(SYN)은 단계(S2)에서 유도된 시간 위치들(TP(i))에 대응하는 제 1 타이밍 데이터(D1(ETi))를 갖는 구성요소들(ETj)을 검출하기 위해 스캐닝된다. 필터링된 구문 디스크립션(FSYN)은 제거되는 상기 구성요소들에서 발생된다.
단계(S4)에서, 필터링된 비트스트림(FBST)은 필터링된 구문 디스크립션(FSYN)으로부터 발생한다. 예를 들면, 필터링된 비트스트림(FBST)은 상기한 문서에서 나타낸 바와 같이 발생한다.
하나의 예가 예시적 목적들(illustrative purposes)로 주어진다. 해당 예에서, 비트스트림은 MPEG-4 표준에 부합한다. 이것은 제한적이지 않다. 본 발명은 다른 부호화 포맷들에도 적용가능하다.
MPEG-4 비디오의 기본 유닛들은 비디오 객체 면(Video Object Plane: VOP)으로 불린다. 설명적 비트스트림의 구문 디스크립션이 다음에 주어진다.
상기 예시적인 구문 디스크립션은 기본적 유닛들을 나타내는 <VOP> 구성요소들 및 제 1 타이밍 데이터를 포함한다. 제 1 타이밍 데이터는:
- <VOP_time_increment_resolution> 구성요소,
- <fixed_VOP_rate> 구성요소,
- <fixed_VOP_time_increment> 구성요소에 포함된다.
<VOP_time_increment_resolution>는 1초 내에서의 틱(tick)들의 수를 나타낸다. 따라서, 상기 예에서는 1초가 40 틱들로 나누어진다.
<fixed_VOP_rate>는 모든 VOP들이 고정된 VOP 비율로 부호화되었는지를 나타내는 1-비트 플래그이다. 이것이 "1"과 같을 때, 디스플레이 순서(display order)에서의 어떠한 연속적인 두 VOP들의 디스플레이 시간 사이의 모든 거리들은 일정하다.
<fixed_VOP_time_increment>는 디스플레이 순서에서의 연속적인 두 VOP들 사이의 틱들의 수를 나타낸다. 상기 예에서, 하나의 VOP는 매 25ms(1/40초)마다 디스플레이된다.
예시적인 비트스트림의 의미 디스크립션은 다음에 주어진다. 상기 의미 디스크립션은 MPEG-7 표준에 부합한다.
상기 예시적인 의미 디스크립션은 두 비디오 세그먼트들(S1 및 S2)를 포함하고, 그들 각각은 다수의 VOP들에 대응한다. 각각의 비디오 세그먼트(video segment)는:
- <MediaRelTimePoint> 구성요소 및
- <MediaDuration> 구성요소에 포함된 제 2 타이밍 데이터를 포함한다.
<MediaRelTimePoint> 구성요소는 시간 기준(time base)에 대한 비디오 세그먼트의 시작 시간을 나타낸다. 상기 시간 기준은 비디오의 시작 시간이다. 제 1 비디오 세그먼트(S1)는 시간 PT0S(0초)에서 시작한다. 제 2 비디오 세그먼트(S2)는 시간 PT15M20S(15분 20초, 또는 920초)에서 시작한다.
<MediaRelTimePoint> 구성요소는 비디오 세그먼트의 기간을 나타낸다. 제 1 비디오 세그먼트(S1)의 기간은 PT15M20S과 같다. 제 2 비디오 세그먼트(S2)의 기간은 PT1M30S이다.
제 2 비디오 세그먼트(S2)는 <MinimumAge> 구성요소에 특징 데이터를 포함한다. 이러한 특징 데이터에 따라, 상기 제 2 비디오 세그먼트(S2)의 시청을 위한 최소 추천 연령은 18세이다.
18세 이하에게 추천하지 않는 장면들은 삭제되어야만 한다는 것을 사용자 스펙이라 가정하자. 우선 의미 디스크립션이 스캐닝된다. 각각의 비디오 세그먼터에 대해서, 최소 연령이 18세보다 높거나 같은 경우, 비디오 세그먼트의 시간 위치는 제 2 타이밍 데이터로부터 유도된다. 예시적인 예에서, 제 2 비디오 세그먼트(S2)에 포함된 모든 VOP들은 기본 유닛들에 일치된다. 그들의 시간 위치들(의미 디스크립션에 포함된 제 2 타이밍 데이터로부터 유도된, 비디오 세그먼트의 기간 및 시작 시간)은 시간 간격[920 내지 1010]에 대응한다. 이후 구문 디스크립션에 포함된 제 1 타이밍 데이터는 삭제될 VOP들을 식별하기위해 사용된다. 상기한 바와 같이, 상기 예에서, 제 1 타이밍 데이터는 일 VOP가 매 25ms마다 디스플레이됨을 나타낸다. 그러므로, 시간 위치들[920 내지 1010]은 VOP 번호 36800부터 VOP 번호 40400까지 대응한다.
이제 일치하는 VOP들을 제거하기 위해 적용될 수 있는 파라메트릭 XSL 스타일 시트(parametric XSL style sheet)의 예가 기술된다. 다음의 스타일 시트는 firstVOPNumber 및 lastVOPNumber의 두 파라미터들을 규정한다. 시간 위치가 firstVOPNumber 및 lastVOPNumber의 값들 사이에 있는 모든 VOP들을 제거하기 위해 적용된다. 상기 기술된 예에서, 두 파라미터들의 값은:
- firstVOPNumber = 920 / 0.025 = 36 800
- lastVOPNumber = 1010 / 0.025 = 40 400
본 발명에 따른 시스템의 제 1 실시예는 도 2에 개략적으로 도시되었다. 상기 시스템은 서버 장치(SX), 전송 채널(CX), 및 사용자 장치(TX)를 포함한다. 상기 실시예에서, 사용자 장치(TX)는 컨텐트에 대한 요구를 전송 채널(CX)을 통해 서버 장치(SX)에 송신한다. 요구(DX)는 사용자 스펙(UP)을 포함한다. 상기 요구(DX)의 수신에 따라, 서버 장치(SX)는 요구된 컨텐트에 대응하는 비트스트림을 복구하고, 상기한 사용자 스펙에 따라 복구된 비트스트림을 필터링하며, 상기 필터링된 비트스트림(FBST)를 상기 전송 채널(CX)을 통해 사용자 장치(TX)에 송신한다. 따라서, 필터링은 서버 끝에서 완료된다.
본 발명의 제 2 실시예는 도 3에 개괄적으로 도시된다. 이 시스템은 서버 장치(SX), 전송 채널(CX), 및 사용자 장치(TX)를 포함한다. 상기 실시예에서, 사용자 장치(TX)는 전송 채널(CX)을 통해 서버 장치(SX)로부터 비트스트림(BST) 및 비트스트림(BST)의 의미 디스크립션(SEM)을 수신한다. 부분적으로, 사용자 스펙(UP)은 캡처링되고 비트스트림(BST)의 구문 디스크립션(SYN)이 발생된다. 이후 비트스트림(BST)은 상기한 바와 같이 필터링되고, 대응하는 필터링된 비트스트림(FBST)가 발생된다. 따라서 필터링은 사용자 끝에서 완료된다.
다른 실시예(본 명세서에 도시되지 않음)에서, 사용자 장치는 비트스트림 자체를 대신하여 미리 비트스트림의 구문 디스크립션(SYN)을 수신한다. 따라서 비트스트림의 구문 디스크립션을 발생할 필요가 없다.
바람직하게, 상기한 단계들은 하나 이상의 컴퓨터들 또는 디지털 프로세서들의 제어 하에 수행되는 일련의 명령들에 의해 구현된다.
상기한 장치들 및 필터링 방법에 관련하여, 변형들 및 개선들이 본 발명의 범위를 벗어남 없이 제안될 수 있음을 유의해야한다. 이와 같이 본 발명은 제공된 예들에 제한하지 않는다. 본 발명은 어떤 특별한 포맷, 표준, 또는 언어의 사용에 제한적이지 않다. 비디오 컨텐트에도 제한적이지 않다.
특히, 상기한 예에서, 특정한 상관관계의 유형이 제 1 타이밍 데이터, 시간 위치, 및 제 2 타이밍 데이터 사이에 기술되었다. 이것은 제한적이지 않다. 제 1 타이밍 데이터는 비트스트림의 부호화 포맷에 의해 변화한다. 상기한 제 2 타이밍 데이터는 MPEG-7 표준에서 제안되었던 포맷의 한가지이다. 그러나, 다른 포맷들이 동일한 표준에서 이용가능하고, 다른 표준들 또는 디스크립션 유형들이 사용될 수도 있다. 유일하게 필요한 조건은 시간 위치가 제 1 타이밍 데이터와 제 2 타이밍 데이터의 양측으로부터 유도될 수 있다는 것이다.
동사 "포함한다"의 사용과 활용은 청구항들에서 나타나는 구성요소들 또는 단계들 이외의 존재를 배제하지 않는다.

Claims (8)

  1. 시간 위치(time position)를 갖는 기본 유닛들(elementary units) 및 상기 시간 위치들을 나타내는 제 1 타이밍 데이터를 포함하는 비트스트림의 필터링 방법에 있어서,
    - 상기 기본 유닛들을 기술하고 상기 제 1 타이밍 데이터를 포함하는 구성요소들을 포함하는, 상기 비트스트림의 구문 디스크립션(syntactical description),
    - 하나 이상의 기본 유닛들에 관한 특징 데이터 및 상기 기본 유닛들의 상기 시간 위치들을 나타내는 제 2 타이밍 데이터를 포함하는, 상기 비트스트림의 의미 디스크립션(semantic description), 및
    - 적어도 사용자 스펙(specification)을 이용하며,
    상기 방법은:
    - 일치 기본 유닛들을 식별하기 위해 상기 사용자 스펙에 일치하는 특징 데이터를 상기 의미 디스크립션에서 검색하는 단계,
    - 상기 제 2 타이밍 데이터로부터 상기 일치 기본 유닛들에 대한 시간 위치들을 유도(derive)하는 단계,
    - 상기 시간 위치들에 대응하는 상기 구성요소들을 상기 구문 디스크립션에서 위치를 파악하기 위해 상기 제 1 타이밍 데이터를 사용하는 단계,
    - 상기 파악된 구성요소들이 제거된 필터링된 구문 디스크립션을 발생하는 단계, 및
    - 상기 필터링된 구문 디스크립션으로부터 필터링된 비트스트림을 발생하는 단계를 포함하는, 비트스트림 필터링 방법.
  2. 제 1 항에 있어서, 상기 구문 디스크립션은 XML 문서이고, 상기 필터링된 구문 디스크립션은 상기 시간 위치들을 입력 파라미터로서 갖는 XSL 스타일 시트(XSL style sheet)에서 규정된 파라메트릭 변환(parametric transformation)을 상기 구문 디스크립션에 적용함으로써 발생되는, 비트스트림 필터링 방법.
  3. 제 1 항에 있어서, 상기 의미 디스크립션은 MPEG-7 표준에 부합(compliant)하고, 상기 제 2 타이밍 데이터는 <MediaTime> 구성요소에 포함되는, 비트스트림 필터링 방법.
  4. 시간 위치를 갖는 기본 유닛들 및 상기 시간 위치들을 나타내는 제 1 타이밍 데이터를 포함하는 비트스트림을 필터링하기 위한 장치에 있어서,
    - 상기 기본 유닛들을 기술하고 상기 제 1 타이밍 데이터를 포함하는 구성요소들을 포함하는, 상기 비트스트림의 구문 디스크립션(syntactical description),
    - 하나 이상의 기본 유닛들에 관한 특징 데이터 및 상기 기본 유닛들의 상기 시간 위치들을 나타내는 제 2 타이밍 데이터를 포함하는, 상기 비트스트림의 의미 디스크립션, 및
    - 적어도 사용자 스펙(specification)을 이용하며,
    상기 장치는:
    - 일치 기본 유닛들을 식별하기 위해 상기 사용자 스펙에 일치하는 특징 데이터를 상기 의미 디스크립션에서 검색하는 수단,
    - 상기 제 2 타이밍 데이터로부터 상기 일치 기본 유닛들에 대한 시간 위치들을 유도하는 수단,
    - 상기 시간 위치들에 대응하는 상기 구성요소들을 상기 구문 디스크립션에서 위치를 파악하기 위해 상기 제 1 타이밍 데이터를 사용하는 수단,
    - 상기 파악된 구성요소들이 제거된 필터링된 구문 디스크립션을 발생하는 수단, 및
    - 상기 필터링된 구문 디스크립션으로부터 필터링된 비트스트림을 발생하는 수단을 포함하는, 비트스트림 필터링 장치.
  5. 서버 장치, 전송 채널 및 사용자 장치를 포함하는 전송 시스템에 있어서,
    상기 사용자 장치는, 상기 전송 채널을 통해 상기 서버 장치로부터:
    - 시간 위치를 갖는 기본 유닛들 및 상기 시간 위치들을 나타내는 제 1 타이밍 데이터를 포함하는 비트스트림, 및
    - 하나 이상의 기본 유닛들에 관한 특징 데이터 및 상기 기본 유닛들의 상기 시간 위치들을 나타내는 제 2 타이밍 데이터를 포함하는, 상기 비트스트림의 의미 디스크립션을 수신하며,
    상기 사용자 장치는:
    - 적어도 사용자 스펙을 캡처링하고,
    - 상기 기본 유닛들을 기술하고 상기 제 1 타이밍 데이터를 포함하는 구성요소들을 포함하는, 상기 비트스트림의 구문 디스크립션을 발생하고,
    - 일치 기본 유닛들을 식별하기 위해 상기 사용자 스펙에 일치하는 특징 데이터를 상기 의미 디스크립션에서 검색하고,
    - 상기 제 2 타이밍 데이터로부터 상기 일치 기본 유닛들에 대한 시간 위치들을 유도하고,
    - 상기 시간 위치들에 대응하는 상기 구성요소들을 상기 구문 디스크립션에서 위치를 파악하기 위해 상기 제 1 타이밍 데이터를 사용하고,
    - 상기 파악된 구성요소들이 제거된 필터링된 구문 디스크립션을 발생하고,
    - 상기 필터링된 구문 디스크립션으로부터 필터링된 비트스트림을 발생하기 위한 수단을 포함하는, 전송 시스템.
  6. 서버 장치, 전송 채널 및 사용자 장치를 포함하는 전송 시스템으로서, 상기 사용자 장치는 상기 전송 채널을 통해 상기 서버 장치로 컨텐트에 대한 요구를 송신하는 수단을 갖고, 상기 요구는 사용자 스펙을 포함하며, 상기 서버 장치는 상기 사용자 스펙에 따라 상기 요구된 컨텐트에 대응하는 비트스트림을 필터링하고 상기 전송 채널을 통해 상기 사용자 장치로 상기 필터링된 비트스트림을 송신하는 수단을 갖는 상기 전송 시스템에 있어서,
    상기 비트스트림은:
    - 시간 위치를 갖는 기본 유닛들 및 상기 시간 위치들을 나타내는 제 1 타이밍 데이터를 포함하고,
    - 하나 이상의 기본 유닛들에 관한 특징 데이터 및 상기 기본 유닛들의 상기 시간 위치들을 나타내는 제 2 타이밍 데이터를 포함하는 의미 디스크립션에 의미적으로 기술되고,
    - 상기 기본 유닛들을 기술하고 상기 제 1 타이밍 데이터를 포함하는 구성요소들을 포함하는 구문 디스크립션에 구문적으로 기술되며,
    상기 요구된 컨텐트에 대응하는 상기 비트스트림을 필터링하기 위한 상기 수단은:
    - 일치 기본 유닛들을 식별하기 위해 상기 사용자 스펙에 일치하는 특징 데이터를 상기 의미 디스크립션에서 검색하고,
    - 상기 제 2 타이밍 데이터로부터 상기 일치 기본 유닛들에 대한 시간 위치들을 유도하고,
    - 상기 시간 위치들에 대응하는 상기 구성요소들을 상기 구문 디스크립션에서 위치를 파악하기 위해 상기 제 1 타이밍 데이터를 사용하고,
    - 상기 파악된 구성요소들이 제거된 필터링된 구문 디스크립션을 발생하고,
    - 상기 필터링된 구문 디스크립션으로부터 필터링된 비트스트림을 발생하기 위한 수단을 포함하는, 전송 시스템.
  7. 제 1 항에 청구된 비트스트림 필터링 방법을 구현하기 위한 명령들을 포함하는 프로그램에 있어서, 상기 프로그램은 프로세서에 의해 수행되는, 프로그램.
  8. 제 1 항 또는 제 2 항에 청구된 필터링 방법을 구현함으로써 획득되는 필터링된 비트스트림.
KR1020047020089A 2002-06-11 2003-06-04 사용자 사양에 따른 비트스트림 필터링 방법 KR100994949B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP02291452.7 2002-06-11
EP02291452 2002-06-11
PCT/IB2003/002462 WO2003105441A2 (en) 2002-06-11 2003-06-04 Method of filtering a bitstream according to user specifications

Publications (2)

Publication Number Publication Date
KR20050012784A true KR20050012784A (ko) 2005-02-02
KR100994949B1 KR100994949B1 (ko) 2010-11-18

Family

ID=29724569

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020047020089A KR100994949B1 (ko) 2002-06-11 2003-06-04 사용자 사양에 따른 비트스트림 필터링 방법

Country Status (8)

Country Link
US (1) US7640487B2 (ko)
EP (1) EP1516492B1 (ko)
JP (1) JP4933044B2 (ko)
KR (1) KR100994949B1 (ko)
CN (1) CN100584002C (ko)
AT (1) ATE555605T1 (ko)
AU (1) AU2003231883A1 (ko)
WO (1) WO2003105441A2 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8042132B2 (en) 2002-03-15 2011-10-18 Tvworks, Llc System and method for construction, delivery and display of iTV content
US11388451B2 (en) 2001-11-27 2022-07-12 Comcast Cable Communications Management, Llc Method and system for enabling data-rich interactive television using broadcast database
US8365230B2 (en) 2001-09-19 2013-01-29 Tvworks, Llc Interactive user interface for television applications
US8413205B2 (en) 2001-09-19 2013-04-02 Tvworks, Llc System and method for construction, delivery and display of iTV content
US7703116B1 (en) 2003-07-11 2010-04-20 Tvworks, Llc System and method for construction, delivery and display of iTV applications that blend programming information of on-demand and broadcast service offerings
US8707354B1 (en) 2002-06-12 2014-04-22 Tvworks, Llc Graphically rich, modular, promotional tile interface for interactive television
US8352983B1 (en) 2002-07-11 2013-01-08 Tvworks, Llc Programming contextual interactive user interface for television
US11070890B2 (en) 2002-08-06 2021-07-20 Comcast Cable Communications Management, Llc User customization of user interfaces for interactive television
US8220018B2 (en) 2002-09-19 2012-07-10 Tvworks, Llc System and method for preferred placement programming of iTV content
US11381875B2 (en) 2003-03-14 2022-07-05 Comcast Cable Communications Management, Llc Causing display of user-selectable content types
US8578411B1 (en) 2003-03-14 2013-11-05 Tvworks, Llc System and method for controlling iTV application behaviors through the use of application profile filters
US10664138B2 (en) 2003-03-14 2020-05-26 Comcast Cable Communications, Llc Providing supplemental content for a second screen experience
US8416952B1 (en) 2003-07-11 2013-04-09 Tvworks, Llc Channel family surf control
US8819734B2 (en) 2003-09-16 2014-08-26 Tvworks, Llc Contextual navigational control for digital television
US7751632B2 (en) * 2005-02-15 2010-07-06 Panasonic Corporation Intelligent, dynamic, long-term digital surveilance media storage system
US7818667B2 (en) 2005-05-03 2010-10-19 Tv Works Llc Verification of semantic constraints in multimedia data and in its announcement, signaling and interchange
WO2007006090A1 (en) * 2005-07-08 2007-01-18 Smart Internet Technology Crc Pty Ltd Systems and methods for use in transforming electronic information into a format
US20080065693A1 (en) * 2006-09-11 2008-03-13 Bellsouth Intellectual Property Corporation Presenting and linking segments of tagged media files in a media services network
US8645400B1 (en) 2008-08-01 2014-02-04 Marvell International Ltd. Flexible bit field search method
US11832024B2 (en) 2008-11-20 2023-11-28 Comcast Cable Communications, Llc Method and apparatus for delivering video and video-related content at sub-asset level
US9112623B2 (en) 2011-06-06 2015-08-18 Comcast Cable Communications, Llc Asynchronous interaction at specific points in content
US11115722B2 (en) 2012-11-08 2021-09-07 Comcast Cable Communications, Llc Crowdsourcing supplemental content
US9553927B2 (en) 2013-03-13 2017-01-24 Comcast Cable Communications, Llc Synchronizing multiple transmissions of content
US10880609B2 (en) 2013-03-14 2020-12-29 Comcast Cable Communications, Llc Content event messaging
US11783382B2 (en) 2014-10-22 2023-10-10 Comcast Cable Communications, Llc Systems and methods for curating content metadata

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9100732D0 (en) * 1991-01-14 1991-02-27 Xerox Corp A data access system
US5778135A (en) * 1994-12-30 1998-07-07 International Business Machines Corporation Real-time edit control for video program material
US6360234B2 (en) * 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
US6564263B1 (en) * 1998-12-04 2003-05-13 International Business Machines Corporation Multimedia content description framework
US6922845B2 (en) * 2000-04-25 2005-07-26 The Directtv Group, Inc. Multi-processor DVR
AU2001263464A1 (en) * 2000-06-21 2002-01-02 Bellsouth Intellectual Property Corporation System and method for formulating, delivering and managing data concerning programming content and portions thereof
US7421729B2 (en) * 2000-08-25 2008-09-02 Intellocity Usa Inc. Generation and insertion of indicators using an address signal applied to a database
JP2002189801A (ja) * 2000-12-21 2002-07-05 Sony Corp サービス提供システム、管理サーバ、サービスプロバイダ、端末装置、記録媒体発行装置、サービス提供方法、記録媒体
US7203692B2 (en) * 2001-07-16 2007-04-10 Sony Corporation Transcoding between content data and description data

Also Published As

Publication number Publication date
WO2003105441A3 (en) 2004-05-06
EP1516492B1 (en) 2012-04-25
US7640487B2 (en) 2009-12-29
ATE555605T1 (de) 2012-05-15
JP4933044B2 (ja) 2012-05-16
KR100994949B1 (ko) 2010-11-18
CN100584002C (zh) 2010-01-20
WO2003105441A2 (en) 2003-12-18
AU2003231883A8 (en) 2003-12-22
CN1659884A (zh) 2005-08-24
AU2003231883A1 (en) 2003-12-22
EP1516492A2 (en) 2005-03-23
US20050229234A1 (en) 2005-10-13
JP2005529553A (ja) 2005-09-29

Similar Documents

Publication Publication Date Title
KR100994949B1 (ko) 사용자 사양에 따른 비트스트림 필터링 방법
US9560411B2 (en) Method and apparatus for generating meta data of content
KR100330470B1 (ko) 인증 장치, 인증 방법, 인증 시스템, 및 기억 매체
US7536706B1 (en) Information enhanced audio video encoding system
US9113178B2 (en) Streaming distributing device and method, streaming receiving device and method, streaming system, program, and recording medium
US20020129156A1 (en) Plural media data synchronizing system
US20030110297A1 (en) Transforming multimedia data for delivery to multiple heterogeneous devices
US20080195924A1 (en) Method and apparatus for encoding multimedia contents and method and system for applying encoded multimedia contents
WO2011108900A2 (en) Method and apparatus for generating bookmark information
EP1917811A1 (en) Method and apparatus for encoding multimedia contents and method and system for applying encoded multimedia contents
KR20150083355A (ko) 증강 미디어 서비스 제공 방법, 장치 및 시스템
EP1921628A1 (en) Multimedia contents editing apparatus and multimedia contents playback apparatus
KR20070043372A (ko) 홈단말에서 실시간 필터링된 방송 비디오 관리 시스템 및그 방법
EP1244309A1 (en) A method and microprocessor system for forming an output data stream comprising metadata
EP2533536A2 (en) Method and apparatus for encoding multimedia contents and method and system for applying encoded multimedia contents
US20150370875A1 (en) Content creation method, content registration method, devices and corresponding programs
KR101710452B1 (ko) 멀티미디어 전송 시스템에서 서비스 발견 정보를 송수신하는 방법 및 장치와 이를 위한 파일 구조
Gruhne et al. Distributed cross-modal search within the mpeg query format
JP2004282634A (ja) コンテンツのメタデータ記述方法、伝送方法およびコンテンツ受信再生装置
Yoon et al. Universal video adaptation model for contents delivery in ubiquitous computing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee