KR101143063B1 - 미디어 스트림 오브젝트에 대한 정보 추정 - Google Patents

미디어 스트림 오브젝트에 대한 정보 추정 Download PDF

Info

Publication number
KR101143063B1
KR101143063B1 KR1020040067796A KR20040067796A KR101143063B1 KR 101143063 B1 KR101143063 B1 KR 101143063B1 KR 1020040067796 A KR1020040067796 A KR 1020040067796A KR 20040067796 A KR20040067796 A KR 20040067796A KR 101143063 B1 KR101143063 B1 KR 101143063B1
Authority
KR
South Korea
Prior art keywords
media
media object
objects
information
request
Prior art date
Application number
KR1020040067796A
Other languages
English (en)
Other versions
KR20050036699A (ko
Inventor
크리스토퍼제이.씨. 버그스
코르맥이. 헬리
Original Assignee
마이크로소프트 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마이크로소프트 코포레이션 filed Critical 마이크로소프트 코포레이션
Publication of KR20050036699A publication Critical patent/KR20050036699A/ko
Application granted granted Critical
Publication of KR101143063B1 publication Critical patent/KR101143063B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/16Arrangements for broadcast or for distribution of identical information repeatedly
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25891Management of end-user data being end-user preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/26603Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel for automatically generating descriptors from content, e.g. when it is not made available by its provider, using content analysis techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/278Content descriptor database or directory service for end-user access
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/12Arrangements for observation, testing or troubleshooting
    • H04H20/14Arrangements for observation, testing or troubleshooting for monitoring programmes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/38Arrangements for distribution where lower stations, e.g. receivers, interact with the broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/65Arrangements characterised by transmission systems for broadcast
    • H04H20/76Wired systems
    • H04H20/82Wired systems using signals not modulated onto a carrier
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H2201/00Aspects of broadcast communication
    • H04H2201/90Aspects of broadcast communication characterised by the use of signatures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/38Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space
    • H04H60/41Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space for identifying broadcast space, i.e. broadcast channels, broadcast stations or broadcast areas
    • H04H60/44Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for identifying broadcast time or space for identifying broadcast space, i.e. broadcast channels, broadcast stations or broadcast areas for identifying broadcast stations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/68Systems specially adapted for using specific information, e.g. geographical or meteorological information
    • H04H60/73Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Evolutionary Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

미디어 스트림내의 미디어 오브젝트의 반복 인스턴스에 기하여 미디어 스트림내의 미디어 오브젝트에 관한 정보가 추정된다. 시스템 및 방법은 하나 이상의 미디어 스트림의 모니터링 및 미디어 스트림내의 미디어 오브젝트(예를 들면 오디오 및/또는 비디오 오브젝트)의 반복 인스턴스의 식별을 가능하게 한다. 모니터링 및 오브젝트 반복 식별은 네트워크상의 하나 이상의 서버 컴퓨터에 의하여 수행된다. 미디어 오브젝트의 반복 인스턴스 및 관련된 미디어 오브젝트의 반복 인스턴스에 기하여 미디어 오브젝트에 관한 정보가 추정될 수 있다. 상호작용 유저 인터페이스를 통하여 클라이언트에서 입력된 유저 질의(query)에 응하여 서버로부터 클라이언트로 상기 정보가 전송된다.
클라이언트 미디어 장치, 서버, 미디어 아울렛, 추정모듈, 오브젝트 식별기

Description

미디어 스트림 오브젝트에 대한 정보 추정{INFERRING INFORMATION ABOUT MEDIA STREAM OBJECTS}
도 1은 미디어 스트림으로부터 미디어 오브젝트에 대한 정보를 추정하는데 적절한 전형적인 환경을 도시하는 도면.
도 2는 미디어 아웃렛에 의하여 제공된 미디어 스트림내에서 미디어 오브젝트에 대한 정보를 추정하는데 적절한 컴퓨터 및 서버의 전형적인 일 실시예를 도시하는 도면.
도 3은 유저 인터페이스 모듈에 의하여 지원될 수 있는 상호작용 유저 인터페이스의 일 예를 도시하는 도면.
도 4는 미디어 스트림내에서 미디어 오브젝트에 대한 정보를 추정하는 전형적인 방법의 블럭도.
도 5는 도 2에 도시된 바와 같은 컴퓨터 및 서버를 실행하는데 적절한 전형적인 계산 환경을 도시하는 도면.
<도면의 주요부분에 대한 부호의 설명>
102: 클라이언트 미디어 장치 104: 서버
106: 미디어 아웃렛 108: 네트워크
200: 미디어 스트림 202: 오브젝트 추출기
204: 데이터 베이스 206: 추정 모듈
208: 미디어 어플리케이션 212: 오브젝트 식별기
본 발명의 명세서는 미디어 스트림내의 미디어 오브젝트에 대한 정보 추정에 대한 것이며, 특히, 하나 이상의 미디어 스트림내에서 식별된 오디오 및/또는 비디오 오브젝트의 반복적인 인스턴스로부터 미디어 오브젝트에 대한 정보를 추정하는 것에 관한 것이다.
본 출원은 참고로 여기에 포함되고, 발명의 명칭이 "A System And Method For Providing User Control Over Repeating Objects Embedded In A Stream"이며, 5/2/03에 출원된, 미국특허출원 10/428812에 관련된 것이다.
예를 들면, NBC, ABC, CBS, FOX, CNN, ESPN, 등과 관계된 방송 텔레비젼 및 라디오 스테이션과 같은 미디어 아웃렛은 일반적으로 미디어 스트림의 형태로 미디어를 전달한다. 그런 미디어 스트림은 다양한 길이를 갖고 다양한 토픽에 관한 정보를 전달하는 다수의 미디어 오브젝트들을 연결한다. 예를 들면, CNN 스테이션(라디오 또는 텔레비젼)은 다양한 뉴스클립, 이어지는 다양한 광고클립, 이어지는 다양한 기상관련 뉴스 클립, 다시 이어지는 다양한 광고클립, 이어지는 다양한 스포츠관련 뉴스클립, 등을 포함하는 30분 짜리 프로그램(예를 들면, 미디어 스트림)을 가질 수 있다.
상이한 미디어 아웃렛들로부터의 그런 미디어 스트림에서 이용 가능한 정보는 일반적으로 종합적이다. 즉, 충분한 시간이 주어진 경우, 노래 또는 특정의 뉴스클립과 같은, 미디어 스트림내의 특정 미디어 오브젝트는 미디어 스트림내에서 반복하기 시작할 것이다. 예를 들면, CNN 스테이션의 중요한 뉴스 스토리는 브레이킹 뉴스클립으로서 시작할 수 있다. 브레이킹 스토리는 그 후 CNN 스테이션에서 각각의 30분 뉴스 세그먼트 방송동안 하루에 걸쳐 다양한 형태로 반복될 수 있다. 따라서, 중요한 뉴스 스토리가 처음으로 나오는 경우, 그 스토리를 커버하는 브레이킹 뉴스클립이 전체적으로 재생될 수 있는 한편, 동일한 스토리의 후속하는 커버리지는 오리지날 브레이킹 뉴스클립의 반복되지만, 더 적은 버전만을 포함할 수 있다.
미디어 스트림내의 미디어 오브젝트가 미디어 스트림내에서 반복되는 패턴을 보이는 다양한 다른 시나리오가 설명될 수 있다. 예를 들면, 어떤 뉴스는 중요도가 적은 상태로 개시하지만, 그 후 매우 중요한 스토리로 계속된다. 따라서, 그런 스토리의 초기 커버리지는 짧은 뉴스클립을 포함할 수 있는 한편, 후속하는 커버리지는 그 스토리의 다양한 측면에 관한 추가적인 정보를 포함하는 더 길고 더 깊이 있는 뉴스클립을 포함할 수 있다. 스토리가 중요도를 잃기 시작함에 따라 그 스토리를 커버하는 뉴스클립의 길이 및 넓이는 다시 감소한다. 그러나, 그 스토리의 커버리지를 통하여, 다양한 뉴스클립은 이전 뉴스클립의 반복되는 부분을 포함하기 쉽다. 그런 반복되는 부분은 미디어 스트림내에서 반복 미디어 오브젝트로서 인식될 수 있으며, 이는 일반적으로 전술된 관련출원 "A System And Method For Providing User Control Over Repeating Objects Embedded In A Stream"에서 기술된 바와 같다.
또 다른 유사한 예에서는, 음악 미디어 아웃렛(예를 들면, 라디오 스테이션)은 비교적 빈번하지 않게 신인가수의 데뷰송을 방송할 수 있다. 그러나, 그 노래는 빠르게 대중적인 히트곡이 될 수 있고, 그 미디어 아웃렛은 그 신곡을 방송하는 빈도를 급격히 증가시킬 수 있다. 그 신곡의 인기가 감소함에 따라 그 방송하는 빈도도 또한 감소될 것이다. 다시, 미디어 아웃렛의 미디어 스트림내의 반복되는 노래는 반복 미디어 오브젝트로서 인식될 수 있다.
그러나, 종합적인 것 이외에, 다양한 미디어 아웃렛으로부터의 미디어 스트림내에서 이용가능한 정보는 흩어져 있다. 전술된 바와 같이, 그런 미디어 스트림내의 정보의 유형은 매우 광범위하게 다양한 토픽을 커버할 수 있다. 미디어 스트림내에서 이용 가능한 다양한 정보는 그 스트림내에서 특정의 미디어 오브젝트를 찾고자 할 때 문제를 보인다. 또한, 미디어 스트림내에서 특정의 미디어 오브젝트에 관한 추가적인 정보를 발견하고자 하는 것은 더욱 큰 도전이다. 미디어 스트림내에서 미디어 오브젝트를 식별하는 현재의 방법은 미디어 스트림의 샘플링된 부분과 비교될 수 있는(예를 들면, 오디오 핑거프린팅 이용) 알려진 오브젝트의 데이터 베이스의 생성을 포함한다. 그러나, 알려진 오브젝트의 데이터 베이스가 생성되지 않거나 이미 비교에 이용 가능하지 않다면, 그런 방법은 가능하지 않은 것이다. 대안은 방대한 양의 데이터를 "수동으로" 조사하여 미디어 스트림내에서 원하는 미디어 오브젝트의 위치를 지정하는 것이며, 이는 실용적이지 못하다.
전술된, 관련출원, "A System And Method For Providing User Control Over Repeating Objects Embedded In A Stream"은 미디어 스트림으로부터 반복 미디어 오브젝트를 식별하고 추출하거나 분할하는 것에 대한 논의를 포함한다.
미디어 스트림내의 미디어 오브젝트에 대한 정보의 추정이 이하에서 기술된다.
일 실시예에 따르면, 미디어 스트림내에서 미디어 오브젝트의 반복 인스턴스가 식별된다. 그 후 미디어 스트림내의 미디어 오브젝트의 반복 인스턴스에 기하여 미디어 오브젝트에 대한 정보가 추정된다.
또 다른 실시예에 따르면, 복수의 미디어 스트림내에서 미디어 오브젝트의 반복 인스턴스가 식별된다. 그 후 복수의 미디어 스트림내에서 미디어 오브젝트의 반복 인스턴스에 기하여 미디어 오브젝트에 대한 정보가 추정된다.
또 다른 실시예에 따르면, 미디어 오브젝트에 관한 정보에 대한 요청이 수신된다. 상기 정보는 하나 이상의 미디어 스트림내에서 발생하는 미디어 오브젝트의 반복 인스턴스로부터 추정된다. 상기 정보는 그 후 복귀된다.
또 다른 실시예에 따르면, 미디어 스트림을 모니터링하고 상기 미디어 스트림내의 미디어 오브젝트의 반복 인스턴스를 식별 및 기록하도록 하는 서버가 구성된다. 상기 서버는 또한 반복 인스턴스로부터 정보를 추정함으로써 미디어 오브젝트에 관한 정보에 대한 요청에 응답하도록 구성된다.
또 다른 실시예에 따르면, 복수의 미디어 스트림을 모니터링하고 상기 미디 어 스트림내의 미디어 오브젝트의 반복 인스턴스를 식별 및 기록하도록 하는 서버가 구성된다. 상기 서버는 또한 반복 인스턴스로부터 정보를 추정함으로써 미디어 오브젝트에 관한 정보에 대한 요청에 응답하도록 구성된다.
개요
이하의 논의는 미디어 스트림내의 미디어 오브젝트에 대한 정보를 추론하는 것 및 그 정보에 유저가 액세스하는 것을 가능하게 하는 것을 목적으로 한다. 하나 이상의 미디어 스트림의 모니터링 및 미디어 스트림내의 미디어 오브젝트(예를 들면, 오디오 및/또는 비디오 오브젝트)의 반복 인스턴스의 식별을 가능하게 하는 시스템 및 방법이 기술된다. 모니터링 및 오브젝트 반복 식별은 네트워크상의 하나 이상의 서버 컴퓨터에 의하여 수행된다. 미디어 오브젝트의 반복 인스턴스, 관련 미디어 오브젝트의 반복 인스턴스, 및 폐쇄형 캡셔닝(closed captioning)과 같이, 그런 오브젝트에 일반적으로 연관된 메타데이터에 기하여 미디어 오브젝트에 대한 정보가 추정될 수 있다. 상기 정보는 상호작용 유저 인터페이스를 통하여 클라이언트에서 입력된 유저 질의(query)에 응하여 서버로부터 클라이언트로 전달된다.
상기 시스템 및 방법은 일반적으로, 다양한 미디어 아웃렛으로부터의 미디어 스트림에 대한 액세스를 제공하고 현재 경험되는 미디어에 관련된 적절한 추가적인 미디어로 유저가 신속히 액세스하는 것을 가능하게 해주는 미디어 서비스의 관점에서 기술된다. 예를 들면, 뉴스클립을 보고있는 유저는 현재의 뉴스클립에 관련된 상이한(예를 들면, 더 긴) 버전의 뉴스클립 또는 추가적인 뉴스클립을 요청할 수 있다. 또한, 상기 시스템 및 방법은 유저가 하나 이상의 미디어 스트림으로부터 더 높은 관련 중요도를 갖는 미디어 오브젝트를 요청하고 액세스하는 것을 가능하게 해준다. 예를 들면, 유저는 하나 또는 다수의 상이한 미디어 스트림에서 주어진 하루동안 발생한 상위 3 뉴스 스토리를 요청할 수 있다.
전형적 환경
도 1은 미디어 스트림내에서 미디어 오브젝트에 대한 정보를 추정하는데 적절한 전형적인 환경(100)을 도시한다. 전형적인 환경(100)은 다양한 형태의 클라이언트 미디어 장치(들)(102), 서버(들)(106), 및 미디어 아웃렛(들)(106)을 포함 할 수 있다. 클라이언트 미디어 장치(102)는 네트워크(108)를 통하여 서버(들)(104) 및 미디어 아웃렛(들)(106)으로 다양한 시간에 작용적으로 결합된다. 네트워크(108)는 특정한 시스템 구성에 따라 로컬 및 원격 접속 모두를 포함할 수 있다. 따라서, 네트워크(108)는 예를 들면, 모뎀, 케이블 모뎀, LAN(local area network), WAN(wide area network), 인트라넷, 인터넷, 또는 임의의 다른 적절한 통신링크중 어느 하나 또는 그 조합을 포함할 수 있다.
또한, 네트워크(108)는 미디어 아웃렛(106)에 의하여 제공된 다양한 디지탈 및/또는 아날로그 텔레비젼 및 라디오 신호 방송으로부터 미디어 스트림을 전달하는데 유용한 다양한 다른 구성요소들을 포함할 수 있다. 따라서, 네트워크(108)는 예를 들면, 클라이언트 미디어 장치(102) 및 서버(104)가 방송을 수신하도록 동작할 수 있는 분할된 영역내에서 라디오파를 송신하는 안테나, 클라이언트 미디어 장 치(102) 및 서버(104)로 방송신호를 송신하기 위하여 지구궤도를 도는 위성, 또는 케이블을 통하여 클라이언트 미디어 장치(102) 및 서버(104)로 직접 신호를 가져오는 케이블 TV 제공자를 포함할 수 있다. 그런 미디어 전달 시스템은 일반적으로 당업자에게 공지되어 있으므로 더 상세히 기술하지 않을 것이다.
클라이언트 미디어 장치(들)(102)는 일반적으로 미디어 아웃렛(106)에 의하여 제공된 다양한 디지털 및/또는 아날로그 텔레비젼 및 라디오 신호 방송으로부터 미디어 스트림을 수신하고 렌더링한다. 또한, 이하에서 상술하는 바와 같이, 클라이언트 미디어 장치(102)는 유저에게 미디어 아웃렛(106)으로부터의 미디어 스트림에 관한 추가적 정보 및 제어를 제공하는 방식으로 서버(들)(104)와 통신한다. 클라이언트 미디어 장치(102)는 보통 그 밖에 이메일, 캘린더링, 태스크 조직, 워드 프로세싱, 웹브라우징, 등과 같은 통상의 계산 기능들을 수행할 수 있다. 마이크로소프트®의 윈도우즈® 브랜드 오퍼레이팅 시스템과 같은 오픈 플랫폼 오퍼레이팅 시스템을 실행할 수 있다. 클라이언트 미디어 장치(102)는 예를 들면, 데스크탑 컴퓨터, 서버 컴퓨터, 텔레비젼 셋톱 박스, 랩탑 컴퓨터, 또는 PC의 다른 형태로서 실시될 수 있다. 또한, 클라이언트 미디어 장치(102)는 예를 들면, 셀폰 또는 PDA(personal digital assistant; 예를 들면, 마이크로소프트®의 포켓PC, 휴렛팩커드의 팸탑, 3콤의 팸파일럿, 등을 실행하는 장치)와 같은 휴대형 컴퓨터 장치로서 실시될 수 있다. 그런 휴대형 장치는 일반적으로는 윈도우즈 CE와 같은 오퍼레이팅 시스템의 일부 버전, 및 통상적인 퍼스널 컴퓨터보다 더 한정된 계산 능력을 제 공한다. 따라서, 그런 휴대형 장치는 이메일러, 전화, SMS(short message service), 조직기(organizer), 웹브라우저 등을 위한 어플리케이션의 한정된 버전을 제공하는 것이 보통이다. 클라이언트 미디어 장치(102)의 전형적인 일 실시예가 도 5를 참조하여 이하에서 상세히 기술된다.
서버(104)는 웹서버와 같은 하나 이상의 서버 컴퓨터로서 실시되는 것이 보통이다. 따라서, 서버(104)는 워크스테이션 컴퓨터와 같은 다양한 범용 계산 장치를 포함할 수 있고, 도 5를 참조하여 이하에서 기술되는 바와 같은 클라이언트 미디어 장치(102)의 전형적인 일 실시예와 유사한 방식으로 구성될 수 있다. 서버(104)는 일반적으로 네트워크(108)를 통하여 클라이언트 미디어 장치(102)와 같은 클라이언트 컴퓨터로 액세스 가능한 다양한 멀티 미디어 콘텐트를 포함하는 정보 및 전자문서를 위한 기억장치를 제공한다. 특히, 이하에서 상술되는 바와 같이, 서버(104)는 클라이언트 미디어 장치(102)의 유저에게 추가 정보를 제공하는 온라인 서비스를 제공한다. 추가 정보는 미디어 아웃렛 (106)으로부터 수신된 미디어 스트림 및 미디어 스트림내의 미디어 오브젝트와 관련되어 있다.
일반적으로 미디어 아웃렛(106)은 그 관련된 제공자를 통하여 클라이언트 미디어 장치(102) 및 서버(104)로 송신하기 위한 미디어 스트림을 개발하는 프로그래밍 소스를 포함한다. 따라서, 도 1의 미디어 아웃렛(106)은 프로그래밍 소스 및 그 관련 제공자 모두를 나타내는 것이 일반적이다. 프로그래밍 소스는 NBC, ABC, CNN, ESPN, HBO, 등과 같은 라디오 및 TV 미디어 아웃렛을 포함할 수 있다. 이 소스의 관련 제공자는 예를 들면, DBS(direct broadcast satellite) 제공자, 로컬 케 이블 TV 제공자, 및 로컬 라디오 스테이션을 포함할 수 있다.
일반적으로, 미디어 스트림내에서 반복하는 미디어 오브젝트에 대한 정보의 추정 및 액세스를 용이하게 하는 관련 구성요소들 및 멀티미디어 아키텍쳐가 본 명세서에서 기술된다. 그런 구성요소들은 퍼스널 컴퓨터에 의하여 실행되는 프로그램 모듈과 같은 컴퓨터/프로세서 실행가능 명령의 일반적인 관계에서 설명된다. 일반적으로 프로그램 모듈은 특정의 태스크를 수행하거나 특정의 추상적 데이터형(abstract data type)을 실행하는 루틴, 프로그램, 오브젝트, 구성요소, 데이터 구조 등을 포함한다. 당업자는 그런 프로그램 모듈이 전술된 것들을 포함하는 다양한 컴퓨터 시스템 구성을 이용하여 실행될 수 있음을 이해할 것이다. 또한, 그런 프로그램 모듈은 네트워크(108)와 같은 통신네트워크를 통하여 링크되는 원격 프로세싱 장치에 의하여 태스크가 수행되는 분산형 계산 환경에서 실행될 수도 있다. 분산형 계산 환경에서는, 로컬 및 원격 메모리 기억장치 모두에 프로그램 모듈이 위치될 수 있다.
미디어 스트림으로부터의 반복 오브젝트 식별 및 분할
미디어 스트림으로부터의 반복 오브젝트에 대한 식별 및 분할이 이하에서 일반적인 용어로 논의된다. 그러나, 더욱 상세한 설명은, 참고로 여기에 포함되고, 발명의 명칭이 "A System And Method For Providing User Control Over Repeating Objects Embedded In A Stream"이며, 5/2/03에 출원된, 관련 미국특허출원 10/428812에서 찾을 수 있다.
많은 미디어 스트림은 반복되는 미디어 "오브젝트"를 포함한다. 미디어 스 트림내의 반복 미디어 오브젝트는 뉴스클립, 노래, 비디오, 광고, 징글(jingle), 등과 같은 무시할 수 없는 지속시간을 갖는 스트림의 임의의 부분을 포함한다. 예를 들면, 전형적인 팝 라디오 스테이션으로부터 나온 오디오 스트림은, 예를 들면, 뉴스클립, 노래, 징글, 광고, 및 스테이션 식별기를 포함하는 동일한 오브젝트의 많은 반복부를 여러 차례 포함할 것이다. 유사하게, 전형저인 텔레비전 스테이션으로부터 나온 오디오/비디오 미디어 스트림은, 예를 들면, 상업광고, 뉴스클립, 스테이션 식별기, 프로그램 "테마음악", 또는 비상방송 신호를 포함하는, 동일한 오브젝트의 많은 반복부를 여러 차례 포함할 것이다. 그러나, 이 오브젝트들은 미디어 스트림내에서 예측하지 못한 시간에 발생하는 것이 보통이며, 그들은 종종 미디어 스트림을 캡쳐링하거나 기록하는데 이용된 포착 프로세스에 의하여 야기된 노이즈에 의하여 손상된다.
예를 들면, 라디오 방송과 같은, 전형적인 미디어 스트림내의 미디어 오브젝트는 각각의 오브젝트의 개시 및/또는 종료지점에서의 보이스-오버(voice-over)에 의하여 종종 손상된다. 또한, 그런 오브젝트는 종종 단축된다, 즉, 개시부터 또는 종료시까지 계속 완전하게 재생되지는 않는다. 이것은 특히 무삭제(full-length) 뉴스 스토리를 전달하는 오브젝트로서 개시하고 그 후 뉴스 스토리가 중요도가 떨어짐에 따라 길이가 수차례 감소될 수 있는 뉴스 관련 미디어 오브젝트의 경우에 적용된다. 다른 미디어 오브젝트는 다른 이유에서 의도적으로 왜곡될 수 있다. 예를 들면, 라디오 스테이션을 통한 오디오 방송은 종종, 컴프레서, 이퀄라이저, 또는 다수의 다른 시간/주파수 효과들중 어느 하나를 이용하여 프로세스된다. 또 한, 음악 또는 노래와 같은, 통상의 라디오 스테이션에서 방송되는 오디오 오브젝트는 선행하거나 후속하는 음악 또는 노래와 종종 크로스-페이드(cross-faded)되어, 오디오 오브젝트의 개시 및 종료지점을 모호하게 하고, 오브젝트에 왜곡이나 노이즈를 야기시킨다. 미디어 스트림의 그러한 조작은 당업자에게는 자명하다. 이러한 조작들은 개별적으로 또는 함께 발생할 수 있으며, 명백히 개별적인 것으로 지칭되지 않는 한, 일반적으로 여기에서는 "노이즈"로 지칭된다. 그런 오브젝트의 식별 및 그런 오브젝트에 대한 종료지점의 지정은 어려운 문제다.
도 2는 미디어 아웃렛(106)에 의하여 제공된 미디어 스트림(200)내에서 미디어 오브젝트에 대한 정보를 추정하는데 적절한 서버(104) 및 컴퓨터(102)의 전형적인 일 실시예를 도시한다. 서버(103)상의 "오브젝트 추출기"(202)는 반복되는 미디어 오브젝트 및 그들이 미디어 스트림(200)내에서 발생하는 경우 그들의 종료지점을 식별하고, 동적 미디어 오브젝트 데이터 베이스(204)에 미디어 오브젝트와 함께 그런 미디어 오브젝트의 반복기록 및 다른 정보를 기억시킬 수 있다. 일반적으로, 오브젝트 추출기(202)는 스트림(200)을 조사함으로써 반복 미디어 오브젝트를 식별하여 이전에 마주친 오브젝트가 발생하였는지 여부를 결정한다. 예를 들면, 미디어 스트림(200)으로부터의 오디오 데이터의 경우에, 오브젝트 추출기(202)는 뉴스클립 또는 노래를 이전에 스트림에서 발생한 오브젝트로서 식별한다. 유사하게, 텔레비전 스트림으로부터 나온 비디오 데이터의 경우에, 오브젝트 추출기(202)는 스테이션 "징글" 및 다른 빈번히 반복된 오브젝트뿐만 아니라, 특정의 광고도 식별할 수 있다. 텔레비전 뉴스 스테이션의 경우(즉, 미디어 아웃렛(106)), 예를 들면, 반복하는 부분을 갖지만 그 길이가 변하는 뉴스클립은 미디어 오브젝트의 반복 인스턴스로서 식별될 수 있다. 또한, 그런 오브젝트는 종종 미디어 스트림에 대한 중요한 동기화 정보를 전달한다. 예를 들면, 뉴스 스테이션의 테마음악은 시간 및 뉴스 리포트가 곧 시작할 것이라는 또는 방금 전에 종료되었다는 사실을 전달하는 것이 보통이다.
반복하는 오브젝트 및 반복하지 않는 오브젝트를 포함하는 오디오 스트림이 주어진 경우, 오브젝트 추출기(202)는 미디어 스트림(200)내의 반복 미디어 오브젝트를 자동으로 식별하고 분할하는 한편, 미디어 스트림의 매칭 부분들 또는 매칭하는 반복 오브젝트들을 비교함으로써 오브젝트 종료지점을 식별한다. 일 예로서 방송 오디오(즉, 라디오 또는 인터넷 방송)를 이용하여, 반복하는 미디어 오브젝트는 예를 들면, 라디오 음악 스테이션의 노래, 라디오 뉴스 스테이션의 뉴스클립, 호출신호, 징글, 및 광고를 포함할 수 있다.
반복하지 않는 미디어 오브젝트의 예들은 예를 들면, 디스크 자키들로부터의 실시간 이야기, 뉴스 스테이션의 뉴스 스토리들 사이의 논평자로부터의 실시간 논평, 교통속보, 및 단 한 번만 재생되는 프로그램 또는 노래를 포함할 수 있다. 이러한 상이한 형태의 오브젝트들은 미디어 스트림(200)으로부터 식별 및 분할을 고려하는 상이한 특성을 갖는다. 예를 들면, 라디오 스테이션의 라디오 광고는 일반적으로 약 30초의 길이를 가지며, 음성이 따르는 징글로 구성된다. 스테이션 징글은 일반적으로 2 내지 10초의 길이이며 대부분은 음악이나 음성이고, 하루동안 매우 자주 반복한다. 클래식, 재즈 또는 얼터너티브와는 반대로, "대중" 음악 스테 이션의 노래들은, 예를 들면 일반적으로 2내지 7분의 길이이며, 매우 종종 음악뿐 아니라 음성도 포함한다.
일반적으로, 오브젝트 추출기(202)는 스트림의 상이한 섹션들을 서로 비교함으로써 미디어 스트림(200)내의 반복 미디어 오브젝트들을 자동으로 식별 및 분할하여 미디어 콘텐트가 반복되고 있는 미디어 스트림내의 영역 또는 부분의 위치를 지정한다. 특히, 반복 미디어 오브젝트의 식별 및 분할은 미디어 스트림의 상이한 섹션들을 서로 직접 비교하여 스트림의 매칭 섹션들을 식별하고, 그 후 매칭 섹션들을 정렬시켜서 미디어 오브젝트의 종료지점을 식별함으로써 달성된다. 또한, 미디어 오브젝트 섹션들은 세그먼트에 찾고 있는 형태의 오브젝트가 존재할 확률이 있는지 여부를 추정하기 위하여 초기에 테스트된다. 만일 그렇다면, 미디어 스트림의 다른 세그먼트들과의 비교가 계속된다. 그러나, 그렇지 않다면, 효율을 향상시키기 위하여 문제되는 세그먼트의 더 이상의 프로세싱은 무시될 수 있다.
또한, 오브젝트 추출기(202)는 가능한 미디어 오브젝트를 식별하기 위한 오디오 및/또는 비디오 미디어의 상이한 측면들을 목표로 하기 위하여 한 조의 오브젝트 종속 알고리즘을 이용함으로써 반복하는 미디어 오브젝트의 자동적인 식별 및 분할을 달성할 수 있다. 미디어 스트림(200)내에서 가능한 미디어 오브젝트가 식별되는 경우, 반복 오브젝트로서 오브젝트의 확인은 자동적으로 설명된(initiated) 동적 미디어 오브젝트 데이터 베이스(204)내의 잠재적 매칭 오브젝트에 대한 자동적 검색(가능성 있는 오브젝트와 하나 이상의 잠재적 매칭 오브젝트 사이의 상세한 비교가 후속됨)에 의하여 이루어진다. 그 후, 오브젝트 종료지점은 그 미디어 오 브젝트의 다른 반복 카피에 대한 자동적인 정렬 및 비교에 의하여 자동적으로 결정된다.
오브젝트 추출기(202)가 미디어 스트림(200)내에서 반복 오브젝트를 식별하기 위하여 이용할 수 있는 또 다른 프로시저는 미디어 스트림(200)의 세그먼트로부터 오디오 및/또는 비디오 핑거프린트를 단순히 계산하고, 그 후 전술된 바와 같이, 핑거프린트 데이터 베이스(204)를 검색하여 현재 세그먼트가 알려진 것인지 여부(즉, "매치"인지 여부)를 결정하는 것이다. 핑거프린트 데이터 베이스(204)가 초기에 비어있는 경우, 핑거프린트가 단순히 계산되어 데이터 베이스를 채우는데 이용된다. 결국, 미디어 스트림에 반복 오브젝트가 나타나는 경우, 반복 오브젝트로서 식별될 것이다. 그런 핑거프린트 계산 및 비교 기술은 당업자에게 명백하며, 여기에서는 상세히 설명하지 않는다. 그러나, 알려진 오브젝트가 스트림내에서 반복하는 것을 나타내는데 그런 기술이 유용한 한편, 그런 기술은 통상적으로 실질적인 오브젝트 종료지점을 식별하는데는 유용하지 않다. 따라서, 미디어 스트림, 또는 미디어 스트림의 저차원의 버전은 보존되는 한편, 관련된 핑거프린트들은 핑거프린트 데이터 베이스로 기억된다. 보존된 스트림은 그 후 오브젝트 종료지점의 식별을 위해 이용된다.
매치가 식별되는 방법과 무관하게(예를 들면, 미디어 스트림의 부분들의 전술된 직접 비교, 또는 전술된 핑거프린트 비교 기술을 통하여), 오브젝트 추출기(202)는 그 후 미디어 스트림의 매칭 부분들을 정렬시켜 오브젝트 종료지점의 위치를 지정함으로써 반복 미디어 오브젝트의 식별 및 분할을 달성한다. 후술되는 바 와 같이, 종료지점 식별을 위한 이러한 정렬은 오리지날 미디어 스트림을 이용하거나, 또는 미디어 스트림의 저차원 버전을 이용하여 양호하게 동작한다.
단순한 패턴 매칭, 매칭 부분들 사이의 상호상관 피크(cross-correlation peaks)정렬, 또는 매칭 신호들을 정렬하기 위한 임의의 다른 종래기술과 같은 다수의 종래 기술들중 어느 하나를 이용하여 먼저 미디어 스트림(200)의 매칭 부분들을 정렬함으로써 근사적인 종료지점이 지정된다. 정렬된 후, 매칭 부분의 경계를 지나, 미디어 스트림내에서 전후로 추적하여 미디어 스트림의 두 부분이 갈라지는 지점들을 지정함으로써 종료지점들이 식별된다. 반복 미디어 오브젝트는 방송되는 때마다 정확히 동일한 순서로 재생되지 않는 것이 보통이므로, 미디어 스트림내에서 종료지점을 지정하기 위한 기술들이 미디어 스트림내의 미디어 오브젝트의 개시 및 종료지점을 만족스럽게 지정하는지 관찰되어 왔다. 그러나, 때때로, 반복 미디어 오브젝트는 동일한 순서로 발생할 것이다. 예를 들면, 오브젝트 A에 오브젝트 B가 후속한다. 이 경우, 알고리즘은 조합 AB가 실제적으로 단일의 오브젝트인 것으로 결정할 수 있다. 그러나 만일, 오브젝트 A 및 B가 1회 이상 분리되어 발생하였다면, 이 상황은 명확하게 될 수 있고 A는 B로부터 분리될 수 있다.
또한, 전술된 바와 같이, 한 조의 알고리즘이 이용되어 미디어 스트림(200)내에서 오브젝트를 식별하는데 유용한 파라메트릭(parametric) 정보를 계산하기 위한 오디오 및/또는 비디오 미디어의 상이한 측면들을 목표로 할 수 있다. 이 파라메트릭 정보는 특정의 오브젝트를 식별하는데 유용한 파라미터들을 포함하며, 따라서, 계산된 파라메트릭 정보의 형태는 찾고있는 오브젝트의 클래스에 종속된다. 분석되는 미디어 스트림(200)의 형태에 기하여, 미디어 오브젝트의 유사도(similarity)를 비교하기 위한 다수의 공지된 종래의 주파수, 시간, 이미지, 또는 에너지 기반의 기술들중 어느 하나가 이용되어 잠재적 오브젝트 매치를 식별할 수 있음을 주목한다. 예를 들면, 오디오 스트림내의 음악 또는 노래에 관하여, 이 알고리즘은 예를 들면, 짧은 윈도우내의 분당 비트, 스테레오 정보, 짧은 간격에 걸친 채널당 에너지비, 및 특정의 주파수대역의 주파수 콘텐트와 같은 미디어 스트림내에서 용이하게 컴퓨팅된 파라미터를 계산하는 단계; 그 스펙트럼에서 실질적인 유사도에 대한 미디어의 더 큰 세그먼트를 비교하는 단계; 가능한 후보 오브젝트의 샘플을 기억하는 단계; 및 임의의 반복 오브젝트 식별을 학습하는 단계를 포함한다.
오브젝트 추출기(202)가 미디어 스트림(200)을 획득하면, 기억된 미디어 스트림을 조사하여 찾고 있는 클래스의 미디어 오브젝트(예를 들면, 노래, 뉴스클립, 징글, 비디오, 광고, 등)가 조사되고 있는 스트림의 일 부분에 존재하는 확률을 결정한다. 찾고 있는 오브젝트가 존재하는 확률이 소정의 임계치에 도달하면, 스트림내의 가능성 있는 오브젝트의 위치는 자동적으로 데이터 베이스내에 기록된다. 이 검출 또는 유사도 임계치는 스트림내의 오브젝트 검출의 감도를 조정하기 위하여 원하는 대로 증감될 수 있다는 점을 주목한다.
미디어 스트림(200)내에서 가능성 있는 미디어 오브젝트가 식별된 후, 가능성 있는 오브젝트를 특징짓기 위한 파라메트릭 정보가 컴퓨팅되고 데이터 베이스 질의 또는 검색에 이용되어 이전에 식별된 가능성 있는 오브젝트로 잠재적인 오브 젝트 매치를 식별한다. 데이터 베이스 질의의 목적은 스트림의 두 부분이 근사적으로 동일한지 여부를 결정하는 것이다. 즉, 질의는 스트림내의 두 상이한 시간 위치에 지정된 오브젝트들이 근사적으로 동일한지 여부를 결정한다. 또한, 데이터 베이스는 초기에 비어 있으므로, 시간이 지나 더 많은 잠재적 오브젝트들이 식별되고 데이터 베이스에 추가됨에 따라 잠재적 매치를 식별하는 가능성은 자연스럽게 증가한다.
가능성 있는 미디어 오브젝트에 대한 잠재적 매치가 복귀되는 경우, 더욱 명확히 가능성 있는 오브젝트를 식별하기 위하여 가능성 있는 오브젝트와 하나 이상의 잠재적 매치 사이의 더욱 상세한 비교가 수행된다. 만일 가능성 있는 오브젝트가 잠재적인 매치들중 하나의 반복 인스턴스인 것으로 밝혀지면, 미디어 오브젝트의 반복 인스턴스로서 식별되며, 스트림내에서 그 위치는 데이터 베이스(204)에 기억된다. 역으로, 상세한 비교를 통하여 가능성 있는 오브젝트가 잠재적 매치들중 하나의 반복 인스턴스가 아닌 것으로 보여지면, 데이터 베이스(204)에서 새로운 미디어 오브젝트로서 식별되며, 스트림내에서 그 위치 및 파라메트릭 정보는 전술된 바와 같이 데이터 베이스로 기억된다.
반복 미디어 오브젝트의 다양한 인스턴스의 종료지점은 자동적으로 결정된다. 예를 들면, 특정의 미디어 오브젝트의 N개의 인스턴스가 있다면, 그들 모두가 정확히 동일한 길이를 갖는 것은 아닐 수 있다. 따라서, 종료지점의 결정은 하나의 인스턴스에 대하여 다양한 인스턴스를 정렬하는 단계 및 그 후 정렬된 미디어 오브젝트 각각에서 전후로 추적하여 각각의 인스턴스가 여전히 다른 인스턴스들과 근사적으로 동일한 최대의 정도를 결정하는 단계를 포함한다.
찾고 있는 클래스의 미디어 오브젝트가 조사되고 있는 미디어 스트림(200)의 일 부분에 존재하는 확률을 결정하고, 스트림의 두 부분이 근사적으로 동일한지 여부를 테스트하는 방법들은 모두 찾고 있는 오브젝트의 형태(예를 들면, 음악, 스피치, 광고, 징글, 스테이션 식별, 비디오, 등)에 의존하는 한편 스트림내의 종료지점 위치의 결정 및 데이터 베이스는 찾고 있는 오브젝트의 종류와 무관하게 매우 유사한 것을 주의해야 한다.
일반적으로, 미디어 스트림(200)내의 미디어 오브젝트 식별의 속도는 미디어 스트림(200)의 이전에 식별된 부분의 검색을 제한하거나, 미디어 스트림(200)을 검색하기 전에 이전에 식별된 미디어 오브젝트의 데이터 베이스를 먼저 질의함으로써 증가될 수 있다.
오브젝트 추출기(202)에 의한 미디어 스트림(200)내의 반복 미디어 오브젝트의 자동 식별 및 분할이 일반적으로 전술되었지만, 참고로 여기에 포함된, 관련출원 "A System And Method For Providing User Control Over Repeating Objects Embedded In A Stream"은 미디어 스트림으로부터 반복 미디어 오브젝트를 식별하고 추출하거나 분할하는 것에 대한 더 상세한 설명을 포함한다.
미디어 스트림 오브젝트에 대한 정보 추정 및 액세싱
미디어 스트림(200)내에서 반복 미디어 오브젝트를 자동으로 식별하고 분할하는 것 이외에, 도 2의 오브젝트 추출기(202)는 여분의 식별 정보와 함께, 미디어 오브젝트 및 미디어 오브젝트의 반복 인스턴스를 데이터 베이스(204)에 추가적으로 기억시킨다. 미디어 스트림내의 미디어 오브젝트의 반복 인스턴스의 위치 및 시간을 식별하는 추가적인 정보와 함께, 효율을 위하여, 미디어 스트림내에서 동일한 반복 인스턴스를 갖는 미디어 오브젝트는 데이터 베이스(204)에 한 번만 기억될 수 있다는 점을 유의한다. 데이터 베이스(204)에 미디어 오브젝트의 반복 인스턴스 및 미디어 오브젝트와 함께 기억된 추가적인 식별정보는 미디어 스트림내에서 오브젝트가 발생한 일자 및 시간을 나타내는 시간 스탬프, 미디어 오브젝트를 식별하는 핑거프린팅 정보, 및 미디어 오브젝트가 추출된 미디어 스트림을 식별하는 미디어 아웃렛 스테이션 정보(예를 들면 스테이션 코드)를 포함한다.
따라서, 서버(104) 또는 서버(104) 및 오브젝트 추출기(202)는 다양한 미디어 스트림(200)을 동시에 모니터링하고 다양한 미디어 스트림(200)으로부터 반복 미디어 오브젝트를 자동으로 식별하고 분할할 수 있음이 명백하다. 일 예로서, 서버(104)의 오브젝트 추출기(202)는 동시에 수 개의 주요 뉴스 미디어 아웃렛(106) 미디어 스트림(200)을 모니터링할 수 있으며, 데이터 베이스(204)에 미디어 오브젝트, 미디어오브젝트의 반복 인스턴스, 및 다양한 추가적으로 관련된 식별정보를 기억시킬 수 있다. 후술되는 바와 같이, 그런 구성은 다양한 미디어 스트림(200)에 걸쳐 반복 미디어 오브젝트의 상호참조 및 그런 상호참조에 의하여 가능한 유용한 정보의 추정을 용이하게 해준다.
전술된 바와 같이, 서버(104)의 데이터 베이스(204)는 하나 이상의 미디어 스트림(200)으로부터의 미디어 오브젝트 및 미디어 오브젝트의 반복 인스턴스를 포함한다. 데이터 베이스(204)내에 기억된 미디어 오브젝트의 반복 인스턴스는 미디 어 스트림(200)내에 나타난 오브젝트의 제1 인스턴스와 동일할 수 있거나, 미디어 스트림(200)내에 나타난 오브젝트의 제1 인스턴스의 더 짧거나 더 긴 버전일 수 있다. 예를 들면, 라디오 뉴스 스테이션(예를 들면, CNN)은 스토리에 대한 예비적인 정보를 포함하지만 아직 밝혀지지 않은 스토리의 상세사항들이 부족한 브레이킹 뉴스 스토리의 짧은 클립을 방송할 수 있다. 따라서, 미디어 스트림(200)은 이 뉴스 스토리의 제1 인스턴스를 나타내는 매우 짧은 초기 미디어 오브젝트를 포함할 수 있다. 그러나 뉴스 스토리가 발전함에 따라, 새로 나오는 스토리의 후속하는 뉴스클립은 더 길고 더 상세하게 될 수 있는 한편 초기 뉴스클립의 일 부분을 유지한다. 따라서, 미디어 스트림은 초기 미디어 오브젝트의 더 긴, 반복적인 버전인 새로 나오는 뉴스 스토리에 대한 후속하는 미디어 오브젝트를 포함할 수 있다. 뉴스 스토리의 관심이 감소함에 따라, 미디어 스트림은 초기 미디어 오브젝트의 더 짧은 버전을 나타내는 더 짧은 미디어 오브젝트를 포함할 수 있다. 본질적으로, 뉴스 스토리의 수명 또는 인기 및 중요성은 일반적으로 뉴스 스테이션의 미디어 스트림내의 관련 미디어 오브젝트의 반복 및 길이를 제어한다. 따라서, 오브젝트의 인기 및 중요성은 오브젝트의 빈도(frequency) 또는 반복 및 길이를 평가함으로써 추정될 수 있다.
또한, 이 개념은 일반적으로 유사한 방식으로 다른 미디어 형태에 적용될 수 있다. 예를 들면, 상위 40 팝송을 재생하는 라디오 음악 스테이션은 상위 40 리스트보다 낮은 특정의 곡을 더 적은 빈도로 재생할 수 있다. 그러나, 그 노래가 상위 40의 리스트에 오름에 따라, 라디오 스테이션은 그 곡을 더욱 빈번하게 재생하 는 것이 보통이다. 따라서, 라디오 스테이션의 미디어 스트림내에서 그 노래를 나타내는 미디어 오브젝트의 반복 패턴은 그 특정곡의 인기 또는 일반적인 수명을 반영할 것이다.
추정모듈(206)은 일반적으로 클라이언트 미디어 장치(102)로부터 수신된 정보에 대한 유저 요청에 응하여 데이터 베이스(204)내의 미디어 오브젝트의 반복 인스턴스로부터 정보를 추정하도록 구성된다. 추정모듈(206)은 데이터 베이스(204)에 기억된 미디어 오브젝트에 대한 추가적인 식별정보(예를 들면, 미디어 오브젝트 시간 스탬프, 근접성(proximity) 정보, 핑거프린트 정보, 및 미디어 아웃렛 스테이션 정보) 및 미디어 오브젝트의 반복 인스턴스에 기하여 미디어 오브젝트에 관한 정보를 결정한다. 클라이언트 미디어 장치(102)로부터 요청된 적절한 정보를 결정한 후, 추정모듈(206)은 그 정보를 클라이언트 미디어 장치(102)로 복귀시킨다. 추정모듈(206)에 의하여 추정되고 클라이언트 미디어 장치(102)로 복귀된 정보의 형태는 일반적으로 요청내에서 식별된 미디어 오브젝트에 관련된 추가적 미디어 오브젝트를 포함한다. 그런 정보는 클라이언트 미디어 장치(102)상에 도시된 유저 인터페이스 모듈(210)과 관련하여 더욱 상세하게 후술된다.
클라이언트 미디어 장치(102)는 일반적으로 미디어 아웃렛(106)으로부터의 미디어 스트림(200)을 렌더링하는데 적절한 미디어 어플리케이션(208)을 포함한다. 도시되지는 않았지만, 클라이언트 미디어 장치(102)는 일반적으로 미디어 아웃렛(106)으로부터 미디어 스트림(200)을 운반하는 신호를 수신할 수 있는 하나 이상의 사운드 및/또는 비디오 카드를 포함한다. 그런 사운드/비디오 카드는 일반적으로 인커밍 미디어 스트림(200)을 프로세스하고 그들을 미디어 애플리케이션(208)에 의한 렌더링에 적절한 형태로 변환한다. 미디어 어플리케이션(208)은 유저 인터페이스 모듈(210) 및 오브젝트 식별기(212)를 포함하는 것으로 도 2에 도시된다. 인터페이스 모듈(210) 및 오브젝트 식별기(212)는 미디어 어플리케이션(208)의 일부로서 도시되지만, 그들은 자립형 소프트웨어 구성요소일 수도 있다.
유저 인터페이스 모듈(210)은 클라이언트 미디어 장치(102)와 관련된 유저 인터페이스를 지원한다. 유저 인터페이스 모듈(210) 및 지원된 유저 인터페이스는 전술된 바와 같이 미디어 스트림(200)내에서 식별된(즉 서버(104)상에서) 반복 미디어 오브젝트에 관하여 미디어 스트림(200)에 대한 유저 상호작용 및 제어를 제공한다. 따라서, 일반적으로, 유저 인터페이스 모듈(210)은 클라이언트 미디어 장치(102)상의 미디어 어플리케이션(208)에 의하여 렌더링되는 미디어 스트림(20)내의 미디어 오브젝트에 관하여 서버(104)로부터 추가적인 정보를 유저가 요청할 수 있도록 해준다. 유저 인터페이스 모듈(210)을 통하여 입력된 요청은 네트워크(108)를 통하여 서버(104)로 보내진다.
도 3은 유저 인터페이스 모듈(210)에 의하여 지원될 수 있는 상호작용(interactive) 유저 인터페이스(300)의 일 예를 도시한다. 상호작용 유저 인터페이스(300)는 클라이언트 미디어 장치(102)의 디스플레이 스크린상에 디스플레이되고 그 입력 메커니즘은 인터페이스에 도시된 다양한 버튼들을 클릭하거나 누름(예를 들면, 마우스로)으로써 실시되는 유저 인터페이스를 나타내기 위한 것이다. 그러나, 도 3의 유저 인터페이스(300)는 유저 인터페이스 모듈(210)에 의하여 지원된 유저 인터페이스에 적절할 수 있는 사실상 무한한 수의 가능한 실시의 일 예만을 나타내는 것임을 유의한다. 따라서, 도 3에 도시된 유저 인터페이스(300)는, 예를 들면, 유저 인터페이스를 통한 입출력을 실시하는데 이용되는 하드웨어, 유저 인터페이스를 디스플레이하기 위한 디스플레이 메커니즘, 유저 인터페이스의 디자인, 외관, 느낌, 기능, 등에 대하여 임의의 유저 인터페이스의 임의의 측면을 지원하는데 있어서 유저 인터페이스 모듈(210)을 제한하려는 것이 아니다.
도 3의 예시적인 유저 인터페이스(300)의 간략한 설명은 서버(104)상의 추정모듈(206)에 의하여 추정되고 상호작용 유저 인터페이스 모듈(210)을 통하여 유저에게 이용 가능하게 될 수 있는 정보의 몇 가지 형태를 나타내는 기능을 할 것이다. 따라서, 전술된 바와 같이, 서버(104)상의 하나 이상의 미디어 스트림(200)으로부터의 미디어 오브젝트의 반복 인스턴스의 식별 및 분할에 의하여, 유저는 클라이언트 미디어 장치(102)상의 미디어 어플리케이션(208)에 의하여 렌더링되는 미디어 오브젝트에 관하여 상호작용 유저 인터페이스(300)를 통하여 추가적인 정보를 요청할 수 있다.
예시적인 유저 인터페이스(300)는 제어의 제1 행(304)에 미디어 아웃렛 스테이션 표시부(302)를 포함한다. 스테이션 표시부(302)는 클라이언트 미디어 장치(102)상에서 수신되고 렌더링되는 현재 스테이션(예를 들면, 텔레비젼 또는 라디오)을 나타낸다. 또한, 제1 행(304)은 이용 가능한 미디어 아웃렛 스테이션을 통하여 유저가 스크롤업 및 다운을 하고 원하는 스테이션을 선택하도록 해주는 한 세트의 스테이션 선택 제어버튼(306)을 포함한다. 제어버튼(306)을 누름으로써 이용 가능한 스테이션들이 스테이션 표시박스(302)내에서 스크롤업 및 다운된다. 유저가 미디어 아웃렛 스테이션(즉, 스테이션 표시박스(302)에 나타나는 스테이션)을 선택한 경우, 그 스테이션으로부터의 미디어 스트림(200)은 미디어 어플리케이션(208)을 통하여 클라이언트 미디어 장치(102)상에 렌더링된다.
미디어 아웃렛 스테이션(예를 들면, 스테이션 표시박스(302)에 표시된 바와 같음)으로부터의 미디어 스트림(200)의 렌더링 이전 또는 그 동안, 유저는 원하는 미디어에 대한 다양한 요청을 개시할 수 있다. 예를 들면, 제어의 제2 행(308)에서, "더 많은 동일한" 버튼(310)은 유저가 현재 렌더링되는 미디어 클립의 일부 부분을 포함하는 더 많은 미디어 클립(즉, 미디어 오브젝트)을 요청하도록 해준다. 유저는 "가장 긴 클립(들)" 버튼(312)을 토글링함으로써 현재 미디어 클립의 일부 부분을 포함하는 이용 가능한 가장 긴 클립을 선택할 수 있다. 또한 유저는 숫자 제어 버튼(316)을 이용하여 "클립의 최대 #" 박스(314)에 디스플레이된 숫자를 통하여 스크롤링함으로써 가장 긴 이용 가능한 클립의 최대 수를 요청할 수 있다. 도 3의 제어의 제2 행(308)에 도시된 현재 선택은 현재 렌더링되고 있는 미디어 클립의 일부 부분을 포함하는 이용 가능한 가장 긴 2개의 클립인 2개의 미디어 클립을 유저가 원하는 것을 나타낸다.
더 특별한 예로서, 유저는 대통령의 연방최고회의 연설(state-of-the-union speech)의 CNN 라디오 뉴스 방송으로부터의 짧은 뉴스클립을 청취할 수 있다. 도 3의 제2 행 제어에 도시된 현재의 선택은 현재의 미디어 오브젝트의 반복 인스턴스를 포함하는 2개의 추가적인 미디어 오브젝트에 대한 요청을 생성할 것이다. 요청 으로부터 복귀된 2개의 추가적인 미디어 오브젝트는 그 날동안 CNN 라디오 방송 미디어 스트림(200)에서 발생한 현재 미디어 오브젝트의 반복 인스턴스를 갖는 제1 및 제2의 가장 긴 클립일 것이다.
유저가 유저 인터페이스(300)를 통하여 원하는 정보를 입력하고 "더 많은 동일한" 버튼(310)을 누르면, 유저 인터페이스 모듈(210)은 정보에 대한 요청을 서버(104)로 보낸다. 그러나, 요청을 보내기에 앞서, 유저 인터페이스 모듈(210)은 현재 미디어 오브젝트를 식별한다. 이것은 다양한 방식으로 성취될 수 있다. 예를 들면, 유저 인터페이스 모듈(210)은 현재의 미디어 스테이션 아웃렛(106)을 식별하는 스테이션 코드 및 시간 스탬프를 보낼 수 있다. 이것은 서버(104)상의 추정모듈(206)이 현재 재생하는 미디어 오브젝트의 동일성을 결정하도록 해준다. 유저 인터페이스 모듈(210)이 현재 미디어 오브젝트를 식별하는 또 다른 방법은 오브젝트 식별기(212)가 현재 미디어 오브젝트에 대한 핑거프린트 또는 서명을 결정하도록 지시하는 것이다. 오브젝트 식별기(212)는 핑거프린팅에 관하여는 오브젝트 추출기(202)에 대하여 전술된 것과 유사한 방식으로 동작한다. 즉, 오브젝트 식별기(212)는 현재 미디어 오브젝트의 세그먼트로부터 오디오 및/또는 비디오 핑거프린트를 컴퓨팅하며 미디어 오브젝트의 핑거프린트를 유저 인터페이스 모듈(210)로 복귀시킨다. 오브젝트 식별기(212)는 현재 미디어 오브젝트내의 어느 곳으로부터도 핑거프린트를 추출할 수 있고, 데이터 베이스(204)는 미디어 오브젝트의 전체 지속시간동안으로부터 추출된 핑거프린트를 포함해야 하며, 오브젝트 식별기(212)로부터 추출된 핑거프린트는 각각 비교되어 매치를 확인하여야 한다.
클라이언트 미디어 장치(102)로부터 요청을 수신한 후, 서버(104)상의 추정모듈(206)은 데이터 베이스(204)에 질의하여 현재 미디어 오브젝트의 반복 인스턴스를 포함하는 가장 긴 2개의 추가적인 미디어 오브젝트를 결정한다. 따라서, 추정모듈(206)은 현재 미디어 오브젝트의 이전에 식별된 반복 인스턴스(데이터 베이스(204)에 지금 기억되어 있음)로부터 어느 반복 인스턴스들이 현재 미디어 오브젝트의 반복 인스턴스를 갖는 2개의 가장 긴 미디어 오브젝트인지 추정한다. 그 후, 추정모듈(206)은 유저에게 이용 가능하게 되는 클라이언트 미디어 장치(102)로 2개의 가장 긴 미디어 오브젝트를 다시 복귀시킨다.
또한, 제어의 제2 행(308)은 토글입력(318 및 320)을 포함한다. 토글입력(318)은 유저가 "유사한 스테이션에 걸침(across like station)"이라는 요청을 할 수 있도록 해준다. 따라서, 현재 렌더링되는 미디어 오브젝트의 일부 부분을 포함하는 추가적인 미디어 오브젝트에 대한 요청은 "유사한 스테이션에 걸침" 검색을 하는 명령을 포함할 것이다. 상기 요청은 현재 표시된 CNN 스테이션 이외에 추가적인 미디어 오브젝트에 대한 검색을 확장하는 서버(104)상의 추정모듈(206)로부터 데이터 베이스(204)까지 질의를 개시한다. 추정모듈(206)은 현재 표시된 CNN 뉴스 스테이션과 "유사한" 모든 미디어 아웃렛 스테이션으로 검색을 확장할 것이다. 예를 들면, 추정모듈(206)은 FOX 뉴스 스테이션, NBC 뉴스 스테이션, 등과 같은 유사한 스테이션들로부터의 미디어 스트림(200)에서 발생한 현재 미디어 오브젝트의 반복 인스턴스를 검색할 것이다. 서버(104)가 모니터링하는 어느 스테이션이라도 검색을 받는다. 그러나, 이 경우 토글입력(318)은 현재 선택되지 않았음(즉,체크마 크 "
Figure 112004038585096-pat00001
" 가 아니라, "X"로 마킹됨)을 주의한다. 따라서, 검색은 현재 표시된 CNN 뉴스 스테이션으로부터의 미디어 스트림(200)으로 제한될 것이다.
토글입력(320)은 서버(104)에 의하여 모니터링되는 모든 미디어 아웃렛 스테이션에 결쳐 확장하는 추정모듈(206)에 의한 검색을 개시하는 점을 제외하고는 토글입력(318)과 유사하다. 따라서, 요청은 모니터링되고 있는 "모든 스테이션에 걸침" 검색을 하는 명령을 포함한다. 그러나, 다시, 이 경우에 토글입력(320)은 현재 선택되지 않았으므로(즉, 체크마크 "
Figure 112004038585096-pat00002
" 가 아니라, "X"로 마킹됨), 검색은 현재 표시된 CNN 뉴스 스테이션으로부터의 미디어 스트림(200)으로 제한될 것이다.
도 3의 예시적인 유저 인터페이스(300)내의 제어의 제3행(322)은 유저에게 하나 이상의 미디어 스트림(200)으로부터의 관련된 미디어 오브젝트에 액세스하는 능력을 제공한다. "관련된 클립" 요청버튼(324)을 개시함으로써 복귀될 관련 미디어 오브젝트는 일반적으로 현재의 미디어 오브젝트에 이웃하여 발생하는 미디어 오브젝트, 또는 관련된 메타 데이터(예를 들면, 폐쇄형 캡셔닝으로부터 추출된 키워드)가 현재의 미디어 오브젝트와 매칭하는 미디어 오브젝트의 반복 인스턴스를 포함한다. 따라서, 유저가 현재 재생되는 미디어 오브젝트에 관련된 미디어 오브젝트를 원하면, 제어의 제3 행(322)은 그 요청을 개시하는 다양한 방법을 제공한다. 제어의 제2 행(308)에 대하여 전술된 것과 유사한 방식으로, 한 세트의 숫자 제어 버튼(328)을 이용하여 "관련된 클립"(324)에 대하여 "클립의 최대 #"(326)가 설정될 수 있다. 또 다른 실시예에서 예시적인 유저 인터페이스(300)에 의하여 도시하 지 않음), 유저는 관심있는 키워드 또는 단어를 타이핑함으로써 현재 재생하는 미디어 오브젝트, 또는 임의의 미디어 오브젝트에 관련되는 미디어 오브젝트의 검색을 개시할 수 있다. 예를 들면, 유저는 "지난 토요일 대통령의 연설"이란 단어를 타입할 수 있을 것이다. 서버(104)상의 추정모듈(206)은 단어를 분석하고 단순한 일자/시간 요청을 식별하며 검색단어의 주제인 미디어 오브젝트에 관련된 미디어 오브젝트에 대한 데이터 베이스(204)의 대응 부분을 액세스할 것이다.
"관련된 클립" 버튼(324)에 의하여 개시된 관련 미디어 오브젝트에 대한 정보 요청은 클라이언트 미디어 장치(102)상에 재생되는 현재 미디어 오브젝트의 모든 반복 인스턴스를 보는 서버(104)상에서 추정모듈(206)로부터 데이터 베이스(204)로 질의를 개시하며, 현재의 미디어 오브젝트에 시간적으로 인접하여 어떤 다른 미디어 오브젝트가 반복적으로 발생하는지를 결정한다. 추정모듈(206)은 그런 미디어 오브젝트가 현재 미디어 오브젝트에 관련되는 것을 추정하고, 제어의 제3 행(322)에서 설정된 "클립의 최대 #"(326)(즉, 도 3에서 표시된 바와 같이 10)에 의하여 제한된, 클라이언트 미디어 장치(102)로 이 클립들의 수를 복귀시킨다.
더욱 특별한 예로서, 유저는 국민들에 대한 대통령의 주간 라디오 연설의 CNN 라디오 뉴스 방송으로부터의 뉴스클립을 청취할 수 있을 것이다. 그런 연설은 통상 전달되는 하루동안 반복된다. 대통령의 주간 라디오 연설에 응하여, 상대 정당의 구성원은 답변 연설을 보내는 것이 보통이다. 그런 답변은 보통 대통령에 의한 초기 연설 바로 직후 또는 시간적으로 매우 인접하여 재생되는 것이다. 따라서, 유저가 대통령의 주간 라디오 연설동안 관련된 미디어 오브젝트를 요청하면, 서버(104)상의 추정모듈(206)은 예를 들면, 상대 정당의 답변 연설을 지정하고 그것을 상기 요청에 응하여 클라이언트 미디어 장치(102)로 복귀시킬 것이다.
또한, 제어의 제3 행(322)은 제어의 제2 행(308)에 관하여 전술된 토글 입력에 유사한 방식으로 기능하는 토글입력(330 및 332)을 포함한다. 따라서 토글입력(330)은 유저가 "유사한 스테이션에 걸침"이라는 요청을 할 수 있게 해준다. 상기 요청은 "유사한 스테이션에 걸침" 검색을 하는 명령을 포함할 것이고, 추정모듈(206)은 데이터 베이스(204)내에서의 검색을 현재 표시된 스테이션에 유사한 스테이션으로 확장할 것이다. 그러나, 제어의 제3 행(322)에 도시된 바와 같이, 토글입력(330)은 선택되지 않았으므로(즉, 체크마크 "
Figure 112004038585096-pat00003
" 가 아니라, "X"로 마킹됨), 검색은 유사한 스테이션으로 확장하지 않을 것이다. 그러나, 이 경우 토글입력(332)은 선택되었다(즉, "X"가 아니라 체크마크 "
Figure 112004038585096-pat00004
"로 마킹됨). 따라서, 상기 요청은 "모든 스테이션에 걸침" 검색을 하는 명령을 포함하므로, 관련된 미디어 오브젝트에 대한 검색은 데이터 베이스(204)내에서 확장하여 서버(104)에 의하여 모니터링된 모든 미디어 아웃렛 스테이션(106)으로 이를 것이다.
도 3의 예시적인 유저 인터페이스(300)내의 제어의 제4 행(334)은 하나 이상의 미디어 스트림(200)으로부터의 가장 인기있는 미디어 오브젝트에 액세스하는 능력을 유저에게 제공한다. "가장 인기있는 클립" 요청 버튼(336)을 개시함으로써 복귀될 가장 인기있는 미디어 오브젝트는 식별된 반복의 가장 높은 빈도를 갖는 미디어 스트림(200)내의 미디어 오브젝트를 포함한다. 상기 요청은 표시된 미디어 아웃렛 스테이션(106)에 대하여 이루어질 수 있거나, 유사한 미디어 아웃렛 스테이션에 걸쳐 또는 모든 미디어 아웃렛 스테이션에 걸쳐 이루어질 수 있다. 따라서, 유저가 현재 표시된 미디어 아웃렛 스테이션의 미디어 스트림(200)으로부터의 가장 인기있는 미디어 오브젝트를 원하면, 제어의 제4 행은 이 요청을 개시하기 위한 다양한 방식을 제공한다. 제어의 제2 및 제3 행(308, 322)에 대하여 전술된 것과 유사한 방식으로, "클립의 최대 #"(338)는 한 세트의 숫자 제어 버튼(340)을 이용하여 "가장 인기있는 클립"(336)에 대하여 설정될 수 있다. 도 다른 실시예에서(예시적인 유저 인터페이스(300)에 의하여 도시하지 않음), 유저는 유저 인터페이스를 통하여 복귀된 오브젝트에 대한 다양한 제한을 둘 수 있다. 예를 들면, 유저는 특정의 길이보다 더 크거나 작은 오브젝트, 최근 이틀내에 가장 먼저 나타난 오브젝트, 하나의 미디어 스트림 또는 미디어 스트림들내에서의 특정의 최소 빈도로 나타나는 오브젝트, 또는 특정의 최소 미디어 스트림 수에 걸쳐 나타나는 오브젝트와 같은 특정의 제약을 만족시키는 것들로 복귀된 오브젝트를 한정하기를 원할 수 있다.
"가장 인기있는 클립" 버튼(336)에 의하여 개시된 가장 인기있는 미디어 오브젝트에 대한 정보 요청은 클라이언트 미디어 장치(102)상에 현재 표시된 미디어 아웃렛 스테이션의 모든 반복 인스턴스를 관찰하는 서버(104)상의 추정모듈(206)로부터 데이터 베이스(204)로의 질의를 개시하며, 어느 미디어 오브젝트가 식별된 반복의 가장 높은 빈도를 갖는지를 결정한다. 추정모듈(206)은 그런 미디어 오브젝트가 가장 인기있는 미디어 오브젝트인 것으로 추정하며, 제어의 제4 행(334)에 설 정된 "클립의 최대 #"(338)에 의하여 한정된(즉, 도 4에 표시된 바와 같이, 4), 이 가장 인기있는 클립의 수를 클라이언트 미디어 장치(102)로 복귀시킨다.
더욱 특별한 예로서, 유저는 인기있는 음악 라디오 스테이션으로 설정된 미디어 아웃렛 스테이션 표시기(302)를 가질 수 있다. 유저가 "가장 인기있는 클립" 버튼(336)을 개시함으로써 가장 인기있는 미디어 오브젝트를 요청하면, 서버(104)상의 추정모듈(206)은 예를 들면, 표시된 라디오 스테이션상에서 하루에 가장 빈번하게 재생된 노래를 지정할 것이다.
또한, 제어의 제4 행(334)은 제어의 제2 및 제3 행(308, 322)에 관하여 전술된 토글입력에 유사한 방식으로 기능하는 토글입력(342 및 344)을 포함한다. 따라서, 추정모듈(206)이 데이터 베이스(204)내에서의 검색을 현재 표시된 스테이션에 유사한 스테이션으로 확장하는 경우, 유저가 "유사한 스테이션에 걸침"이라는 요청을 할 수 있도록 해준다. 제어의 제4 행(334)에 도시된 바와 같이, 토글입력(342)이 선택되므로(즉, "X"가 아니라 체크마크 "
Figure 112004038585096-pat00005
"로 마킹됨), 검색은 유사한 스테이션으로 확장될 것이다. 토글입력(344)은 선택되지 않으므로(즉, 체크마크 "
Figure 112004038585096-pat00006
" 가 아니라, "X"로 마킹됨), 관련 미디어 오브젝트에 대한 검색은 서버(104)에 의하여 모니터링되는 모든 미디어 아웃렛 스테이션(106)으로 확장되지 않을 것이다.
도 3의 예시적인 유저 인터페이스(300)내의 제어의 제5 행(334)은 미디어 스트림(200)의 상이한 형태로부터 가장 인기있는 미디어 오브젝트에 액세스하는 더욱 직접적인 방법을 유저에게 제공할 수 있다. 예를 들면, 제어의 제5 행(334)은 현 재 가장 인기있는 뉴스스토리(348), 현재 가장 인기있는 스포츠 스토리(350), 현재 연주되고 있는 가장 인기있는 노래(352), 현재 가장 인기있는 기상관련 스토리(354), 및 주요 주식지수(예를 들면, 다우존스, 나스닥, S&P 500)의 현재 가치에 대한 버튼들을 포함한다. 유저 인터페이스(300)에는 다양한 다른 정보에 대한 액세스를 제공하는 많은 추가적인 버튼들도 이용 가능할 수 있으며, 행(346)에 도시된 것들은 예로서만 도시된 것이지 한정을 위한 것은 아님을 주의한다. 행(346)내의 요청버튼들중 하나를 활성화시킴으로써, 유저로부터의 어떠한 추가적인 입력없이 표시된 오브젝트가 전달될 것이다. 각각의 요청버튼(348, 350, 352, 354, 356)은 표시된 미디어 오브젝트에 대한 정보 요청을 개시하도록 구성된다. 추정모듈(206)은 그런 정보 요청을 수신하고 요청의 형태에 기하여 서버(104)상의 데이터 베이스(204)로의 질의를 개시한다. 예를 들면, 현재 가장 인기있는 스포츠 스토리에 대한 요청(350)은 추정모듈(206)이 데이터 베이스(204)에서 ESPN 및 FOX 스포츠와 같은 알려진 스포츠 스테이션을 질의하도록 야기시킬 수 있다.
예시적인 방법
미디어 스트림내의 미디어 오브젝트에 대한 정보를 추정하기 위한 예시적인 방법은 이제 도 4의 흐름도를 먼저 참조하여 기술될 것이다. 상기 방법은 도 1-3에 관하여 전술된 실시예에 일반적으로 적용된다. 설명된 방법의 구성요소는 예를 들면, ASIC상의 하드웨어 로직 블럭에 의하는 것 또는 프로세서 판독가능 미디어상에 정의된 프로세서 판독가능 명령의 실행에 의하는 것을 포함하는 임의의 적절한 수단에 의하여 수행될 수 있다.
여기서 이용된 "프로세서 판독가능 미디어"는 프로세서에 의하여 이용되거나 실행되기 위한 명령을 포함하고, 기억하고, 통신하고, 전파하거나, 전달할 수 있는 임의의 수단일 수 있다. 프로세서 판독가능 미디어는 전자적, 자기적, 광학적, 전자기적, 적외선, 또는 반도체 시스템, 장치, 디바이스 또는 전파미디어(한정은 아님)일 수 있다. 프로세서 판독가능 미디어의 더욱 특별한 예는, 다른 것들 가운데, 하나 이상의 배선을 갖는 전기적 접속(전자적), 휴대용 컴퓨터 디스켓(자기적), RAM(random access memory)(자기적), ROM(read-only memory)(자기적), EPROM(erasable programmable-read-only memory)또는 플래시 메모리, 광화이버(광학적), 재기록가능 컴팩트 디스크(CD-RW)(광학적), 및 휴대용 CDROM(compact disc read-only memory)(광학적)을 포함한다.
도 4는 미디어 스트림내의 미디어 오브젝트에 대한 정보를 추정하는 예시적인 방법(400)을 도시한다. 블럭(402)에서, 미디어 오브젝트의 반복 인스턴스들은 하나의 미디어 스트림(200)내에서 식별된다. 미디어 스트림은 복수의 미디어 스트림(200)일 수 있으며, 그들은 미디어 아웃렛 스테이션(106)에 의하여 제공된다. 미디어 오브젝트의 반복 인스턴스는 서로의 정확한 복제일 수 있거나 오리지날 뉴스클립의 단축된 버전과 같이 가변하는 길이의 미디어 오브젝트일 수 있다. 미디어 오브젝트 및 그 반복 인스턴스는 복수의 미디어 스트림(200)을 모니터링하는 서버(104)에 의하여 미디어 스트림으로부터 식별되고 분할된다. 미디어 오브젝트 및 미디어 오브젝트의 반복 인스턴스는 서버(104)상의 데이터 베이스(204)에 기억된다.
블럭(404)에서, 특정의 미디어 오브젝트에 관한 정보에 대한 요청이 수신된다. 상기 요청은 미디어 오브젝트에 대한 미디어 스트림을 제공하는 스테이션을 나타내는 스테이션 코드 및 핑거프린트 또는 시간 스탬프와 같은 미디어 오브젝트의 식별을 포함할 수 있다. 또한, 상기 요청은 요청되는 정보의 특성에 의하여 특정 미디어 오브젝트를 식별할 수 있다. 일 예는 식별된 미디어 스트림으로부터 가장 인기있는 미디어 오브젝트에 대한 요청을 포함할 것이다. 미디어 오브젝트는 상기 요청내에서 특별히 식별되지 않고, 요청되는 정보의 특성에 의하여 식별된다. 서버(104)는 미디어 스트림을 렌더링하도록 구성된 미디어 어플리케이션 프로그램을 실행하는 클라이언트 미디어 장치(102)로부터 요청을 수신한다. 어플리케이션은 클라이언트 미디어 장치(102)상에 렌더링되는 미디어 오브젝트 및 미디어 스트림에 대한 요청을 유저가 할 수 있게 하는 유저 인터페이스를 지원한다.
블럭(406)에서, 요청된 정보는 서버(104)에 의하여 모니터링된 하나 이상의 미디어 스트림내에서 발생하는 미디어 오브젝트의 반복 인스턴스로부터 추정된다. 서버(104)상의 추정모듈은 요청을 수신하고 정보에 대하여 데이터 베이스(204)에 질의하도록 구성된다. 정보는 데이터 베이스(204)에 기억된 미디어 스트림으로부터의 미디어 오브젝트의 반복 인스턴스에 기하여 결정된다. 블럭(408)에서, 요청된 정보는 추정모듈(206)에 의하여 클라이언트 미디어 장치(102)로 복귀된다.
흐름도의 블럭들과 관련된 텍스트 및 흐름도에 의하여 하나 이상의 방법들이 개시되었지만, 블럭들은 그들이 제시된 순서로 수행되어야만 하는 것은 아니고, 다른 순서도 유사한 장점을 야기시킬 수 있음을 이해해야 한다. 또한, 상기 방법들 은 배타적이지 않으며 단독으로 또는 함께 조합으로 수행될 수 있다.
전형적인 컴퓨터
도 5는 클라이언트 미디어 장치(102) 및 서버(104)를 실시하는데 적절한 전형적인 컴퓨팅 환경(500)을 도시한다. 하나의 특정 구성이 도시되지만, 클라이언트 미디어 장치(102) 및 서버(104)는 다른 컴퓨팅 구성으로 실시될 수 있다.
컴퓨팅 환경(500)은 컴퓨터(502)의 형태인 범용 컴퓨팅 시스템을 포함한다. 컴퓨터(502)의 구성요소는 하나 이상의 프로세서 또는 프로세싱 유니트(504), 시스템 메모리(506), 및 프로세서(504)를 포함하는 다양한 시스템 구성요소들을 시스템 메모리(506)로 연결하는 시스템 버스(508)(이에 한정하는 것은 아님)를 포함할 수 있다.
시스템 버스(508)는 메모리버스 또는 메모리 컨트롤러, 주변장치 버스, 가속된 그래픽 포트, 및 프로세서 또는 다양한 버스 아키텍쳐중 어느 하나를 이용하는 로컬 버스를 포함하는, 몇 가지 형태의 버스구조들중 임의의 것중 하나 이상을 나타낸다. 시스템 버스(508)의 일 예는 메짜나인(Mezzanine) 버스로도 알려진 PCI(Peripheral Component Interconnects) 버스일 것이다.
컴퓨터(502)는 보통 다양한 컴퓨터 판독가능 미디어를 포함한다. 그런 미디어는 컴퓨터(502)에 의하여 액세스 가능한 임의의 이용 가능한 미디어일 수 있고 휘발성 및 비휘발성 미디어, 제거가능 및 비제거가능 미디어 모두를 포함한다. 시스템 메모리(506)는 RAM(random access memory, 510)과 같은 휘발성 메모리, 및/또는 ROM(read only memory, 512)과 같은 비휘발성 메모리의 형태인 컴퓨터 판독가능 미디어를 포함한다. 스타트업(start-up)동안과 같이, 컴퓨터(502)내의 구성요소들 사이에 정보를 전달하도록 돕는 기본 루틴을 포함하는 BIOS(basic input/output system, 514)가 ROM(512)에 기억된다. RAM(510)은 프로세싱 유니트(504)로 즉시 액세스 가능하고/거나 프로세싱 유니트(504)에 의하여 곧 동작되는 데이터 및/또는 프로그램 모듈을 포함하는 것이 보통이다.
또한, 컴퓨터(502)는 다른 제거가능/비제거가능, 휘발성/비휘발성 컴퓨터 기억 미디어를 포함할 수 있다. 예로서, 도 5는 비제거가능, 비휘발성 자기적 미디어(도시하지 않음)로부터 판독하고 그곳으로 기록하기 위한 하드 디스크 드라이브(516), 제거가능, 비휘발성 자기적 디스크(520)(예를 들면, "플로피 디스크")로부터 판독하고 그곳으로 기록하기 위한 자기적 디스크 드라이브(518), 및 CD-ROM, DVD-ROM, 또는 다른 광학적 미디어와 같은 제거가능, 비휘발성 광학적 디스크(524)로부터 판독하고/거나 그곳으로 기록하기 위한 광학적 디스크 드라이브(522)를 도시한다. 하드 디스크 드라이브(516), 자기적 디스크 드라이브(518), 및 광학적 디스크 드라이브(522)는 각각 하나 이상의 데이터 미디어 인터페이스(526)에 의하여 시스템 버스(508)로 접속된다. 또한, 하드 디스크 드라이브(516), 자기적 디스크 드라이브(518), 및 광학적 디스크 드라이브(522)는 SCSI 인터페이스(도시하지 않음)에 의하여 시스템 버스(508)로 접속될 수 있다.
디스크 드라이브 및 그 연관된 컴퓨터 판독가능 미디어는 컴퓨터 판독가능 명령, 데이터 구조, 프로그램 모듈, 및 컴퓨터(502)를 위한 다른 데이터의 비휘발성 기억장치를 제공한다. 상기 예가 하드 디스크(516), 제거가능 자기적 디스크 (520), 및 제거가능 광학적 디스크(524)를 도시하지만, 자기적 카세트 또는 다른 자기적 기억장치, 플래시 메모리 카드, CD-ROM, DVD(digital versatile disks) 또는 다른 광학적 기억장치, RAM(random access memories), ROM(read only memories), EEPROM(electrically erasable programmable read-only memory), 등과 같은, 컴퓨터에 의하여 액세스 가능한 데이터를 기억할 수 있는 다른 형태의 컴퓨터 판독가능 미디어도 이용되어 상기 전형적인 컴퓨팅 시스템 및 환경을 실시할 수 있다는 점이 이해되어야 한다.
임의의 수의 프로그램 모듈은, 예로서 오퍼레이팅 시스템(526), 하나 이상의 어플리케이션 프로그램(528), 다른 프로그램 모듈(530), 및 프로그램 데이터(532)를 포함하는 하드 디스크(516), 자기적 디스크(520), 광학적 디스크(524), ROM(512), 및/또는 RAM(510)에 기억될 수 있다. 그러한 오퍼레이팅 시스템(526), 하나 이상의 어플리케이션 프로그램(528), 다른 프로그램 모듈(530), 및 프로그램 데이터(532)의 각각(또는 그들의 일부 조합)은 유저 네트워크 액세스 정보에 대한 캐싱(caching) 구조의 일 실시를 포함할 수 있다.
컴퓨터(502)는 통신 미디어로서 식별된 다양한 컴퓨터/프로세서 판독가능 미디어를 포함할 수 있다. 통신 미디어는 보통 컴퓨터 판독가능 명령, 데이터 구조, 프로그램 모듈, 또는 반송파나 다른 전송 메커니즘과 같은 변조된 데이터 신호내의 다른 데이터를 구현하며 임의의 정보전달 미디어를 포함한다. 용어 "변조된 데이터 신호"는 신호에 정보를 인코딩하는 것과 같은 방식으로 설정 또는 변경된 하나 이상의 특성들을 갖는 신호를 의미한다. 예로서(한정이 아님), 통신 미디어는 유 선 네트워크 또는 직접연결(direct-wired) 접속과 같은 유선 미디어, 및 음향, RF, 적외선, 및 다른 무선 미디어와 같은 무선 미디어를 포함한다. 상기중 임의의 것의 조합도 컴퓨터 판독가능 미디어의 범위내에 포함된다.
유저는 키보드(534) 및 포인팅 장치(536)(예를 들면, "마우스")와 같은 입력장치를 통하여 컴퓨터 시스템(502)으로 명령 및 정보를 입력할 수 있다. 다른 입력장치(538)(특별히 도시하지 않음)는 마이크로폰, 조이스틱, 게임패드, 위성접시, 시리얼포트, 스캐너, 등을 포함할 수 있다. 이런 그리고 다른 입력장치들은 시스템버스(508)로 연결되는 입력/출력 인터페이스(540)를 통하여 프로세싱 유니트(504)로 접속되지만, 패러렐포트, 게임포트, 또는 USB(universal serial bus)와 같은, 다른 인터페이스 및 버스구조에 의하여 접속될 수 있다.
또한, 모니터(542) 또는 다른 형태의 디스플레이 장치는 비디오 어댑터(544)와 같은 인터페이스를 통하여 시스템버스(508)로 접속될 수 있다. 모니터(542) 이외에, 다른 출력 주변장치는 입력/출력 인터페이스(540)를 통하여 컴퓨터(502)로 접속될 수 있는 스피커(도시하지 않음) 및 프린터(546)와 같은 구성요소들을 포함할 수 있다.
컴퓨터(502)는 원격 컴퓨팅 장치(548)와 같은, 하나 이상의 원격 컴퓨터로의 논리 접속을 이용하여 네트워크된 환경에서 동작할 수 있다. 예로서, 원격 컴퓨팅 장치(548)는 퍼스널 컴퓨터, 휴대용 컴퓨터, 서버, 라우터, 네트워크 컴퓨터, 피어(peer)장치 또는 다른 공통 네트워크 노드, 등일 수 있다. 원격 컴퓨팅 장치(548)는 컴퓨터 시스템(502)과 관련하여 여기에 기술된 많은 또는 모든 구성요소 및 특 성을 포함할 수 있는 휴대용 컴퓨터로서 도시된다.
컴퓨터(502)와 원격 컴퓨터(548) 사이의 논리접속은 LAN(local area network, 550) 및 일반적인 WAN(wide area network, 552)로서 표현된다. 그러한 네트워킹 환경은 사무실, 기업전체 컴퓨터 네트워크, 인트라넷, 및 인터넷에서는 상투적인 것이다. LAN 네트워킹 환경에서 실시되는 경우, 컴퓨터(502)는 네트워크 인터페이스 또는 어댑터(554)를 통하여 로컬 네트워크(550)로 접속된다. WAN 네트워킹 환경에서 실시되는 경우, 컴퓨터(502)는 모뎀(556) 또는 광역 네트워크(552)를 통한 통신을 구축하는 다른 수단을 포함하는 것이 보통이다. 컴퓨터(502) 내부 또는 외부에 설치될 수 있는 모뎀(556)은 입력/출력 인터페이스(540) 또는 다른 적절한 메커니즘을 통하여 시스템버스(508)로 접속될 수 있다. 상기 도시된 네트워크 접속은 전형적인 것이며 컴퓨터(502) 및 컴퓨터(548) 사이의 통신링크(들)를 구축하는 다른 수단이 이용될 수 있는 점이 이해되어야 한다.
컴퓨팅 환경(500)으로 도시된 바와 같은, 네트워크된 환경에서, 컴퓨터(502)에 관련되어 표현된 프로그램 모듈, 또는 그 일부분은 원격 메모리 기억장치에 기억될 수 있다. 예로서, 원격 어플리케이션 프로그램(558)은 원격 컴퓨터(548)의 메모리장치에 존재한다. 도시를 목적으로, 오퍼레이팅 시스템과 같은 어플리케이션 프로그램 및 다른 실행가능 프로그램 구성요소는 여기에서는 개별 블럭으로 도시되지만, 그러한 프로그램 및 구성요소는 컴퓨터 시스템(502)의 상이한 기억 구성요소내에 다양한 시간에 존재하며, 컴퓨터의 데이터 프로세서에 의하여 실행되는 점이 인식된다.
결론
본 발명이 구조적 특성 및/또는 방법론적 행위에 특정된 언어로 설명되었지만, 첨부된 청구범위에서 정의된 본 발명은 반드시 설명된 특정의 특성 또는 행위로 한정되는 것은 아니라는 점이 이해될 것이다. 오히려, 특정의 특성 및 행위는 청구범위 발명을 실시하는 전형적인 형태로서 개시된다.
본 발명에 따르면, 하나 이상의 미디어 스트림의 모니터링 및 미디어 스트림 내의 미디어 오브젝트의 반복 인스턴스의 식별을 가능하게 하는 시스템 및 방법이 제공되어, 다양한 미디어 아웃렛으로부터의 미디어 스트림에 대한 액세스를 제공하고 현재 경험되는 미디어에 관련된 적절한 추가적인 미디어로 유저가 신속히 액세스하는 것을 가능하게 할 수 있다.

Claims (20)

  1. 프로세서 실행 가능 명령어들을 포함하는 컴퓨터 메모리로서,
    상기 프로세서 실행 가능 명령어들은
    미디어 오브젝트에 관한 정보를 위한 요청을 수신하는 단계;
    하나 이상의 미디어 스트림 내에서 발생하는 미디어 오브젝트들의 반복 인스턴스들로부터 상기 정보를 추정(infer)하는 단계; 및
    상기 정보를 복귀(return)시키는 단계
    를 수행하도록 구성되고,
    상기 추정하는 단계는 상기 미디어 오브젝트의 반복 인스턴스들의 시간적 길이들을 서로 비교하여 상기 미디어 오브젝트의 상이한 버전들을 결정하는 단계를 포함하며, 상기 미디어 오브젝트의 상이한 버전들은 비디오 클립들이고,
    상기 미디어 오브젝트의 상이한 버전들은
    상기 미디어 오브젝트의 가장 긴 버전;
    상기 미디어 오브젝트의 다수의 긴 버전;
    상기 미디어 오브젝트의 가장 짧은 버전; 및
    상기 미디어 오브젝트의 다수의 짧은 버전
    을 포함하는 그룹으로부터 선택되고,
    상기 추정하는 단계는 다수의 관련된 미디어 오브젝트를 결정하는 단계를 더 포함하며, (i) 상기 관련된 미디어 오브젝트들은 상기 요청과 관련된 미디어 오브젝트에 대한 미디어 오브젝트들의 시간 근접도들에 기초하여 결정되고, (ii) 상기 관련된 미디어 오브젝트들은 서로 관련된 반복 인스턴스들의 더 높은 빈도를 갖는
    컴퓨터 메모리.
  2. 제1항에 있어서,
    상기 추정하는 단계는 상기 정보를 찾기 위해 데이터베이스를 검색하는 단계를 포함하며, 상기 데이터베이스는 미디어 오브젝트들 및 상기 미디어 오브젝트들의 반복 인스턴스들의 기록들을 포함하는
    컴퓨터 메모리.
  3. 제1항에 있어서,
    상기 추정하는 단계는,
    상기 하나 이상의 미디어 스트림을 모니터링하는 단계;
    상기 반복 인스턴스들을 식별하는 단계; 및
    상기 반복 인스턴스들의 기록들을 데이터베이스에 기록하는 단계
    를 포함하는 컴퓨터 메모리.
  4. 제1항에 있어서,
    상기 추정하는 단계는 상기 요청으로부터의 키워드를 미디어 오브젝트로부터 추출된 메타데이터와 매칭시키는 단계를 포함하는
    컴퓨터 메모리.
  5. 제1항에 있어서,
    상기 추정하는 단계는 상기 요청으로부터의 일자 및 시간 정보를 데이터베이스에 기억된 미디어 오브젝트의 일자 및 시간 정보와 매칭시키는 단계를 포함하는
    컴퓨터 메모리.
  6. 제1항에 있어서,
    상기 추정하는 단계는 상기 요청 내에 포함된 제약들에 기초하여, 복귀되는 미디어 오브젝트들을 제한하는 단계를 포함하는
    컴퓨터 메모리.
  7. 제1항에 있어서,
    상기 추정하는 단계는 상기 미디어 오브젝트의 각각의 반복 인스턴스의 시간적 종료 지점을 식별하는 단계를 포함하는
    컴퓨터 메모리.
  8. 제7항에 있어서,
    상기 식별하는 단계는 상기 요청에 포함된 식별자에 기초하며, 상기 식별자는,
    상기 미디어 오브젝트의 핑거프린트(fingerprint); 및
    상기 미디어 오브젝트에 관련된 시간 스탬프 및 채널 코드
    를 포함하는 그룹으로부터 선택되는 컴퓨터 메모리.
  9. 제1항의 컴퓨터 메모리를 포함하는 서버 컴퓨터.
  10. 시스템으로서,
    하나 이상의 프로세서; 및
    상기 하나 이상의 프로세서 상에서 실행 가능한 프로세서 판독 가능 기록 매체
    를 포함하고,
    상기 프로세서 판독 가능 기록 매체에 포함된 프로세서 실행가능 명령어들은 상기 프로세서에 의해 실행될 때
    미디어 오브젝트에 관한 정보를 위한 요청을 수신하는 동작;
    하나 이상의 미디어 스트림 내에서 발생하는 미디어 오브젝트들의 반복 인스턴스들로부터 상기 정보를 추정하는 동작; 및
    상기 정보를 복귀시키는 동작
    을 수행하도록 구성되며,
    상기 정보를 추정하는 동작은 상기 미디어 오브젝트의 반복 인스턴스들의 시간적 길이들을 서로 비교하여 상기 미디어 오브젝트의 상이한 버전들을 결정하는 동작을 포함하며,
    상기 미디어 오브젝트의 상이한 버전들은
    상기 미디어 오브젝트의 가장 긴 버전;
    상기 미디어 오브젝트의 다수의 긴 버전;
    상기 미디어 오브젝트의 가장 짧은 버전; 및
    상기 미디어 오브젝트의 다수의 짧은 버전
    을 포함하는 그룹으로부터 선택되고,
    상기 추정하는 동작은 다수의 관련된 미디어 오브젝트를 결정하는 동작을 더 포함하며, (i) 상기 관련된 미디어 오브젝트들은 상기 요청과 관련된 미디어 오브젝트에 대한 미디어 오브젝트들의 시간 근접도들에 기초하여 결정되고, (ii) 상기 관련된 미디어 오브젝트들은 서로 관련된 반복 인스턴스들의 더 높은 빈도를 갖는
    시스템.
  11. 제10항에 있어서,
    상기 추정하는 동작은 상기 정보를 찾기 위해 데이터베이스를 검색하는 동작을 포함하며, 상기 데이터베이스는 미디어 오브젝트들 및 상기 미디어 오브젝트들의 반복 인스턴스들의 기록들을 포함하는 시스템.
  12. 제10항에 있어서,
    상기 추정하는 동작은,
    상기 하나 이상의 미디어 스트림을 모니터링하는 동작;
    상기 반복 인스턴스들을 식별하는 동작; 및
    상기 반복 인스턴스들의 기록들을 데이터베이스에 기록하는 동작
    을 포함하는 시스템.
  13. 제10항에 있어서,
    상기 추정하는 동작은 다수의 관련된 미디어 오브젝트를 결정하는 동작을 포함하며, 상기 관련된 미디어 오브젝트들은 상기 미디어 오브젝트에 시간적으로 매우 인접하여 발생하면서, 서로 관련된 반복 인스턴스들의 더 높은 빈도를 갖는 시스템.
  14. 제10항에 있어서,
    상기 추정하는 동작은 상기 요청으로부터의 키워드를 미디어 오브젝트로부터 추출된 메타데이터와 매칭시키는 동작을 포함하는
    시스템.
  15. 제10항에 있어서,
    상기 추정하는 동작은 상기 요청으로부터의 일자 및 시간 정보를 데이터베이스에 기억된 미디어 오브젝트의 일자 및 시간 정보와 매칭시키는 동작을 포함하는
    시스템.
  16. 제10항에 있어서,
    상기 추정하는 동작은 상기 요청 내에 포함된 제약들에 기초하여, 복귀되는 미디어 오브젝트들을 제한하는 동작을 포함하는
    시스템.
  17. 삭제
  18. 삭제
  19. 삭제
  20. 삭제
KR1020040067796A 2003-10-15 2004-08-27 미디어 스트림 오브젝트에 대한 정보 추정 KR101143063B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/686,240 2003-10-15
US10/686,240 US7788696B2 (en) 2003-10-15 2003-10-15 Inferring information about media stream objects

Publications (2)

Publication Number Publication Date
KR20050036699A KR20050036699A (ko) 2005-04-20
KR101143063B1 true KR101143063B1 (ko) 2012-05-24

Family

ID=34377637

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040067796A KR101143063B1 (ko) 2003-10-15 2004-08-27 미디어 스트림 오브젝트에 대한 정보 추정

Country Status (5)

Country Link
US (1) US7788696B2 (ko)
EP (1) EP1524857A3 (ko)
JP (1) JP4994584B2 (ko)
KR (1) KR101143063B1 (ko)
CN (1) CN1607832B (ko)

Families Citing this family (97)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6263507B1 (en) * 1996-12-05 2001-07-17 Interval Research Corporation Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data
US8266657B2 (en) 2001-03-15 2012-09-11 Sling Media Inc. Method for effectively implementing a multi-room television system
US6263503B1 (en) 1999-05-26 2001-07-17 Neal Margulis Method for effectively implementing a wireless television system
US7239981B2 (en) 2002-07-26 2007-07-03 Arbitron Inc. Systems and methods for gathering audience measurement data
US8959016B2 (en) 2002-09-27 2015-02-17 The Nielsen Company (Us), Llc Activating functions in processing devices using start codes embedded in audio
US9711153B2 (en) 2002-09-27 2017-07-18 The Nielsen Company (Us), Llc Activating functions in processing devices using encoded audio and detecting audio signatures
MXPA05007001A (es) 2002-12-27 2005-11-23 Nielsen Media Res Inc Metodos y aparatos para transcodificar metadatos.
US8285727B2 (en) * 2003-03-06 2012-10-09 Thomson Licensing S.A. Simplified searching for media services using a control device
US7809154B2 (en) 2003-03-07 2010-10-05 Technology, Patents & Licensing, Inc. Video entity recognition in compressed digital video streams
US7738704B2 (en) * 2003-03-07 2010-06-15 Technology, Patents And Licensing, Inc. Detecting known video entities utilizing fingerprints
US7694318B2 (en) 2003-03-07 2010-04-06 Technology, Patents & Licensing, Inc. Video detection and insertion
US7412203B2 (en) * 2004-01-20 2008-08-12 Excelsior Radio Networks, Llc Systems, methods and apparatus for operating a broadcast network
US20050246734A1 (en) * 2004-04-29 2005-11-03 Kover Arthur J Method and apparatus for obtaining research data over a communications network
US20050267750A1 (en) * 2004-05-27 2005-12-01 Anonymous Media, Llc Media usage monitoring and measurement system and method
US20150051967A1 (en) * 2004-05-27 2015-02-19 Anonymous Media Research, Llc Media usage monitoring and measurment system and method
US9998802B2 (en) 2004-06-07 2018-06-12 Sling Media LLC Systems and methods for creating variable length clips from a media stream
US7769756B2 (en) 2004-06-07 2010-08-03 Sling Media, Inc. Selection and presentation of context-relevant supplemental content and advertising
US7917932B2 (en) 2005-06-07 2011-03-29 Sling Media, Inc. Personal video recorder functionality for placeshifting systems
US7975062B2 (en) * 2004-06-07 2011-07-05 Sling Media, Inc. Capturing and sharing media content
WO2005122025A2 (en) 2004-06-07 2005-12-22 Sling Media, Inc. Personal media broadcasting system
US7409205B2 (en) * 2004-06-29 2008-08-05 Nokia Corporation Virtual radio
US20060026119A1 (en) * 2004-08-02 2006-02-02 Apple Computer, Inc. Method and system for sharing information about media items
US7623823B2 (en) * 2004-08-31 2009-11-24 Integrated Media Measurement, Inc. Detecting and measuring exposure to media content items
US20060224798A1 (en) * 2005-02-22 2006-10-05 Klein Mark D Personal music preference determination based on listening behavior
US20060195859A1 (en) * 2005-02-25 2006-08-31 Richard Konig Detecting known video entities taking into account regions of disinterest
US8909807B2 (en) * 2005-04-07 2014-12-09 Opanga Networks, Inc. System and method for progressive download using surplus network capacity
US7690011B2 (en) 2005-05-02 2010-03-30 Technology, Patents & Licensing, Inc. Video stream modification to defeat detection
US20070016918A1 (en) * 2005-05-20 2007-01-18 Alcorn Allan E Detecting and tracking advertisements
US20070078732A1 (en) * 2005-09-14 2007-04-05 Crolley C W Interactive information access system
WO2007064641A2 (en) 2005-11-29 2007-06-07 Google Inc. Social and interactive applications for mass media
US7831531B1 (en) 2006-06-22 2010-11-09 Google Inc. Approximate hashing functions for finding similar content
US8411977B1 (en) 2006-08-29 2013-04-02 Google Inc. Audio identification using wavelet-based signatures
US10489795B2 (en) * 2007-04-23 2019-11-26 The Nielsen Company (Us), Llc Determining relative effectiveness of media content items
US8526784B2 (en) * 2007-07-27 2013-09-03 Cisco Technology, Inc. Digital video recorder collaboration and similar media segment determination
CA2637975A1 (en) * 2007-08-16 2009-02-16 Radian6 Technologies Inc. Method and system for determining topical on-line influence of an entity
US8140953B1 (en) * 2007-10-26 2012-03-20 Adobe Systems Incorporated Flexible media catalog for multi-format project export
US8776244B2 (en) * 2007-12-24 2014-07-08 Intel Corporation System and method for the generation of a content fingerprint for content identification
US20100023499A1 (en) * 2007-12-24 2010-01-28 Brian David Johnson System and method for a content fingerprint filter
US9076144B2 (en) 2008-03-18 2015-07-07 At&T Intellectual Property I, Lp Method and system for providing set-top box remote access functions in a browser extension based on advertising metadata
US20090307061A1 (en) * 2008-06-10 2009-12-10 Integrated Media Measurement, Inc. Measuring Exposure To Media
US20090307084A1 (en) * 2008-06-10 2009-12-10 Integrated Media Measurement, Inc. Measuring Exposure To Media Across Multiple Media Delivery Mechanisms
US20090327334A1 (en) * 2008-06-30 2009-12-31 Rodriguez Arturo A Generating Measures of Video Sequences to Detect Unauthorized Use
US8259177B2 (en) * 2008-06-30 2012-09-04 Cisco Technology, Inc. Video fingerprint systems and methods
US7994410B2 (en) * 2008-10-22 2011-08-09 Classical Archives, LLC Music recording comparison engine
US9667365B2 (en) 2008-10-24 2017-05-30 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US8359205B2 (en) * 2008-10-24 2013-01-22 The Nielsen Company (Us), Llc Methods and apparatus to perform audio watermarking and watermark detection and extraction
US8121830B2 (en) * 2008-10-24 2012-02-21 The Nielsen Company (Us), Llc Methods and apparatus to extract data encoded in media content
US8508357B2 (en) * 2008-11-26 2013-08-13 The Nielsen Company (Us), Llc Methods and apparatus to encode and decode audio for shopper location and advertisement presentation tracking
US9838745B2 (en) * 2008-12-11 2017-12-05 At&T Intellectual Property I, L.P. Providing product information during multimedia programs
JP2012525655A (ja) 2009-05-01 2012-10-22 ザ ニールセン カンパニー (ユー エス) エルエルシー 一次ブロードキャストメディアコンテンツに関連する二次コンテンツを提供するための方法、機器、及び製造品
US20100281108A1 (en) * 2009-05-01 2010-11-04 Cohen Ronald H Provision of Content Correlated with Events
US20110041154A1 (en) * 2009-08-14 2011-02-17 All Media Guide, Llc Content Recognition and Synchronization on a Television or Consumer Electronics Device
US9521453B2 (en) * 2009-09-14 2016-12-13 Tivo Inc. Multifunction multimedia device
US8161071B2 (en) 2009-09-30 2012-04-17 United Video Properties, Inc. Systems and methods for audio asset storage and management
US8677400B2 (en) 2009-09-30 2014-03-18 United Video Properties, Inc. Systems and methods for identifying audio content using an interactive media guidance application
US8682145B2 (en) 2009-12-04 2014-03-25 Tivo Inc. Recording system based on multimedia content fingerprints
US8625033B1 (en) 2010-02-01 2014-01-07 Google Inc. Large-scale matching of audio and video
US8726305B2 (en) 2010-04-02 2014-05-13 Yahoo! Inc. Methods and systems for application rendering and management on internet television enabled displays
US9185458B2 (en) * 2010-04-02 2015-11-10 Yahoo! Inc. Signal-driven interactive television
WO2011140269A1 (en) * 2010-05-04 2011-11-10 Shazam Entertainment Ltd. Methods and systems for processing a sample of a media stream
KR101490576B1 (ko) * 2010-05-04 2015-02-11 샤잠 엔터테인먼트 리미티드 미디어의 동기화 방법 및 시스템
US20120137316A1 (en) * 2010-11-30 2012-05-31 Kirill Elizarov Media information system and method
US20140081954A1 (en) * 2010-11-30 2014-03-20 Kirill Elizarov Media information system and method
CN102611716B (zh) * 2011-01-19 2015-05-06 华为技术有限公司 一种传输媒体文件的方法、装置及系统
US20120240177A1 (en) * 2011-03-17 2012-09-20 Anthony Rose Content provision
GB201117514D0 (en) * 2011-03-17 2011-11-23 Zeebox Ltd Content provision
US9380356B2 (en) 2011-04-12 2016-06-28 The Nielsen Company (Us), Llc Methods and apparatus to generate a tag for media content
KR101799443B1 (ko) * 2011-05-02 2017-11-20 삼성전자주식회사 영상 컨텐츠 시청 확인 방법 및 이를 적용한 방송수신장치, 그리고 서버
US9210208B2 (en) 2011-06-21 2015-12-08 The Nielsen Company (Us), Llc Monitoring streaming media content
US9209978B2 (en) 2012-05-15 2015-12-08 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US8832764B2 (en) * 2011-11-10 2014-09-09 Verizon Patent And Licensing Inc. Block troubleshooting
EP2595399A1 (en) * 2011-11-16 2013-05-22 Thomson Licensing Method of digital content version switching and corresponding device
WO2013119171A2 (en) * 2012-02-09 2013-08-15 Ipxtend Ab Search for media material
US9301016B2 (en) 2012-04-05 2016-03-29 Facebook, Inc. Sharing television and video programming through social networking
US9418669B2 (en) * 2012-05-13 2016-08-16 Harry E. Emerson, III Discovery of music artist and title for syndicated content played by radio stations
US9699485B2 (en) 2012-08-31 2017-07-04 Facebook, Inc. Sharing television and video programming through social networking
US9661361B2 (en) * 2012-09-19 2017-05-23 Google Inc. Systems and methods for live media content matching
US9313544B2 (en) 2013-02-14 2016-04-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9451048B2 (en) 2013-03-12 2016-09-20 Shazam Investments Ltd. Methods and systems for identifying information of a broadcast station and information of broadcasted content
US9384242B1 (en) * 2013-03-14 2016-07-05 Google Inc. Discovery of news-related content
US9749253B2 (en) * 2013-03-14 2017-08-29 Silver Spring Networks, Inc. Technique for implementing a latency sensitive communication protocol in a wireless mesh network
US9390170B2 (en) 2013-03-15 2016-07-12 Shazam Investments Ltd. Methods and systems for arranging and searching a database of media content recordings
US9773058B2 (en) 2013-03-15 2017-09-26 Shazam Investments Ltd. Methods and systems for arranging and searching a database of media content recordings
US20140336797A1 (en) * 2013-05-12 2014-11-13 Harry E. Emerson, III Audio content monitoring and identification of broadcast radio stations
US9100718B2 (en) 2013-06-14 2015-08-04 Beamly Limited System for synchronising content with live television
US9711152B2 (en) 2013-07-31 2017-07-18 The Nielsen Company (Us), Llc Systems apparatus and methods for encoding/decoding persistent universal media codes to encoded audio
US20150039321A1 (en) 2013-07-31 2015-02-05 Arbitron Inc. Apparatus, System and Method for Reading Codes From Digital Audio on a Processing Device
CN105336335B (zh) * 2014-07-25 2020-12-08 杜比实验室特许公司 利用子带对象概率估计的音频对象提取
US9762965B2 (en) 2015-05-29 2017-09-12 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
US9836535B2 (en) * 2015-08-25 2017-12-05 TCL Research America Inc. Method and system for content retrieval based on rate-coverage optimization
US9924222B2 (en) 2016-02-29 2018-03-20 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on location
US10063918B2 (en) 2016-02-29 2018-08-28 Gracenote, Inc. Media channel identification with multi-match detection and disambiguation based on single-match
US9930406B2 (en) 2016-02-29 2018-03-27 Gracenote, Inc. Media channel identification with video multi-match detection and disambiguation based on audio fingerprint
US10909161B2 (en) * 2016-12-29 2021-02-02 Arris Enterprises Llc System to build advertisement database from unreliable sources
US11025998B2 (en) * 2017-11-27 2021-06-01 Rovi Guides, Inc. Systems and methods for dynamically extending or shortening segments in a playlist
CN108153882A (zh) * 2017-12-26 2018-06-12 中兴通讯股份有限公司 一种数据处理方法及装置
KR102504174B1 (ko) * 2018-05-11 2023-02-27 삼성전자주식회사 전자 장치 및 그의 제어방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000059600A (ko) * 1999-03-05 2000-10-05 구자홍 방송 상호 프로토콜 메시지 생성 장치 및 그를 이용한 방송 상호프로토콜 메시지 생성 방법
KR20030007915A (ko) * 2000-06-07 2003-01-23 휴렛-팩커드 컴퍼니(델라웨어주법인) 출판물 콘텐츠를 동적으로 선택하는 방법
WO2003021954A2 (en) 2001-09-04 2003-03-13 Koninklijke Philips Electronics N.V. Method of using transcript information to identify and learn commercial portions of a program
US20030101144A1 (en) * 2001-11-29 2003-05-29 Compaq Information Technologies Group, L.P. System and method for detecting repetitions in a multimedia stream

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7080392B1 (en) * 1991-12-02 2006-07-18 David Michael Geshwind Process and device for multi-level television program abstraction
US5436653A (en) * 1992-04-30 1995-07-25 The Arbitron Company Method and system for recognition of broadcast segments
US5668917A (en) * 1994-07-05 1997-09-16 Lewine; Donald A. Apparatus and method for detection of unwanted broadcast information
US5614940A (en) * 1994-10-21 1997-03-25 Intel Corporation Method and apparatus for providing broadcast information with indexing
US5737734A (en) * 1995-09-15 1998-04-07 Infonautics Corporation Query word relevance adjustment in a search of an information retrieval system
US6263507B1 (en) * 1996-12-05 2001-07-17 Interval Research Corporation Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data
US6014665A (en) * 1997-08-01 2000-01-11 Culliss; Gary Method for organizing information
US6400378B1 (en) * 1997-09-26 2002-06-04 Sony Corporation Home movie maker
US6961954B1 (en) * 1997-10-27 2005-11-01 The Mitre Corporation Automated segmentation, information extraction, summarization, and presentation of broadcast news
JP2000032405A (ja) * 1998-07-10 2000-01-28 Sharp Corp テレビジョン放送方法、テレビジョン放送システム、テレビジョン放送受信システム、及びテレビジョン放送送信システム
US6564263B1 (en) 1998-12-04 2003-05-13 International Business Machines Corporation Multimedia content description framework
US6774917B1 (en) * 1999-03-11 2004-08-10 Fuji Xerox Co., Ltd. Methods and apparatuses for interactive similarity searching, retrieval, and browsing of video
JP3617785B2 (ja) * 1999-03-30 2005-02-09 松下電器産業株式会社 放送システムと、その情報参照方法及び受信装置
US6434520B1 (en) * 1999-04-16 2002-08-13 International Business Machines Corporation System and method for indexing and querying audio archives
US6469749B1 (en) 1999-10-13 2002-10-22 Koninklijke Philips Electronics N.V. Automatic signature-based spotting, learning and extracting of commercials and other video content
US6675174B1 (en) * 2000-02-02 2004-01-06 International Business Machines Corp. System and method for measuring similarity between a set of known temporal media segments and a one or more temporal media streams
JP3989667B2 (ja) * 2000-05-09 2007-10-10 日立ソフトウエアエンジニアリング株式会社 分類情報付き放送信号の情報管理装置及び方法
JP2002010237A (ja) * 2000-06-22 2002-01-11 Sony Corp 情報送受信システム及び方法、情報処理装置及び方法
US6829778B1 (en) 2000-11-09 2004-12-07 Koninklijke Philips Electronics N.V. Method and system for limiting repetitive presentations based on content filtering
JP4320508B2 (ja) * 2000-11-28 2009-08-26 ソニー株式会社 記録再生装置および方法、並びに記録媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000059600A (ko) * 1999-03-05 2000-10-05 구자홍 방송 상호 프로토콜 메시지 생성 장치 및 그를 이용한 방송 상호프로토콜 메시지 생성 방법
KR20030007915A (ko) * 2000-06-07 2003-01-23 휴렛-팩커드 컴퍼니(델라웨어주법인) 출판물 콘텐츠를 동적으로 선택하는 방법
WO2003021954A2 (en) 2001-09-04 2003-03-13 Koninklijke Philips Electronics N.V. Method of using transcript information to identify and learn commercial portions of a program
US20030101144A1 (en) * 2001-11-29 2003-05-29 Compaq Information Technologies Group, L.P. System and method for detecting repetitions in a multimedia stream

Also Published As

Publication number Publication date
EP1524857A3 (en) 2005-12-14
CN1607832B (zh) 2010-06-02
KR20050036699A (ko) 2005-04-20
JP4994584B2 (ja) 2012-08-08
CN1607832A (zh) 2005-04-20
JP2005122713A (ja) 2005-05-12
US7788696B2 (en) 2010-08-31
US20050086682A1 (en) 2005-04-21
EP1524857A2 (en) 2005-04-20

Similar Documents

Publication Publication Date Title
KR101143063B1 (ko) 미디어 스트림 오브젝트에 대한 정보 추정
KR101371574B1 (ko) 매스 미디어를 위한 사회적 및 상호작용 애플리케이션
US7877438B2 (en) Method and apparatus for identifying new media content
JP4216190B2 (ja) 番組のコマーシャル部分を識別しかつ学習するために、トランスクリプト情報を用いる方法
TWI390924B (zh) 用於加速各多重同步資料流之資料庫檢視的系統以及方法
US20030093794A1 (en) Method and system for personal information retrieval, update and presentation
US20030093580A1 (en) Method and system for information alerts
CN101361301A (zh) 检测广播媒体中的重复内容
EP1307833A2 (en) Method for search in an audio database
TW200402654A (en) A system and method for providing user control over repeating objects embedded in a stream
EP1906404A1 (en) Device, method, and computer program product for structuring digital-content program
CN107484015B (zh) 节目处理方法及装置、终端
JP2003179907A (ja) 番組データ配信システム及びその方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170330

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180328

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190328

Year of fee payment: 8