JP4107811B2 - オーディオビジュアルシステムの使用方法 - Google Patents

オーディオビジュアルシステムの使用方法 Download PDF

Info

Publication number
JP4107811B2
JP4107811B2 JP2001137589A JP2001137589A JP4107811B2 JP 4107811 B2 JP4107811 B2 JP 4107811B2 JP 2001137589 A JP2001137589 A JP 2001137589A JP 2001137589 A JP2001137589 A JP 2001137589A JP 4107811 B2 JP4107811 B2 JP 4107811B2
Authority
JP
Japan
Prior art keywords
user
description
program
description scheme
preference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001137589A
Other languages
English (en)
Other versions
JP2002077786A (ja
Inventor
イブラヒム セザン ムハメド
バン ビーク ピートラス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of JP2002077786A publication Critical patent/JP2002077786A/ja
Application granted granted Critical
Publication of JP4107811B2 publication Critical patent/JP4107811B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/73Querying
    • G06F16/735Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/418External card to be used in combination with the client device, e.g. for conditional access
    • H04N21/4184External card to be used in combination with the client device, e.g. for conditional access providing storage capabilities, e.g. memory stick
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42684Client identification by a unique number or address, e.g. serial number, MAC address, socket ID
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • H04N21/44224Monitoring of user activity on external systems, e.g. Internet browsing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4516Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454Content or additional data filtering, e.g. blocking advertisements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/162Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing
    • H04N7/163Authorising the user terminal, e.g. by paying; Registering the use of a subscription channel, e.g. billing by receiver means only
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2562DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Power Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、オーディオビジュアルシステムの使用方法に関し、より詳細には、オーディオ,画像及び動画を伴うシステムにおいて、オーディオビジュアル情報を管理し、オーディオビジュアル情報のブラウジング,フィルタリング,サーチ,アーカイブ及びパーソナル化を行うためのオーディオビジュアルシステムの使用方法に関する。
【0002】
【従来の技術】
ビデオカセットレコーダ(VCR)又はビデオテープレコーダ(VTR)は、録画ボタンの押圧に応答して動画プログラムを録画したり、時刻に基づき動画プログラムを録画するようにプログラムすることができる。しかしながら、視聴者は録画する対応のプログラムを識別するのにテレビガイドからの情報に基づき、VCRをプログラムしなければならない。更に録画後、視聴者はVCRがもつ機能、例えば早送り又は高速巻き戻しの機能を使って、見るべきプログラムの対応する部分を選択するために、ビデオテープ全体を走査する。不幸なことにこのサーチ及び視聴はリニアサーチに基づくので、プログラムの所望する部分を探したり、テープの所望する部分まで早送りするのにかなりの時間がかかることがある。更に、所望するプログラムを録画するのにテレビガイドを参照してVCRをプログラムするのにも時間がかかる。更に視聴者がテレビガイドから望ましいプログラムを認識できなれば、視聴者は録画すべきプログラムを選択しにくい。
【0003】
RePlayTV及びTiVo社は、VCRと同じようにテレビ放送を受信し、録画し、再生するハードディスクを使ったシステムを開発した。これらシステムは視聴者の見る好みに従って、プログラムできる。これらシステムはテレビガイドから入手できる情報と同様なスケジュール情報を受信するのに、テレビ回線のインターフェースを使用している。システムのプログラム及びスケジュール情報に基づき、システムは視聴者にとって潜在的な関心のあるプログラムを自動的に録画する。不幸なことに、録画されたプログラムの視聴はリニア状には行われず、かなりの時間を必要とすることがある。更に、個人の好みに対しては、同じように異なる態様で各システムをプログラムしなければならない。
フリーマン(Freeman)他による米国特許第5,861,881号は、加入者が個人用のコンテンツを受信できるようなインタラクティブなコンピュータシステムを開示している。
【0004】
【発明が解決しようとする課題】
しかしながら、上述のシステムのいずれを用いる場合でも、各視聴者個人は自分の特定の視聴の好みに従って装置をプログラムしなければならない。好ましくないことに、異なる各タイプの装置はケーパビリティが異なり、視聴者の選択を制限するような制約がある。更に各装置は異なるインターフェースを含み、このインターフェースに視聴者が慣れていないことがある。更に、オペレーションマニュアルがなくなった場合、視聴者が装置を効率的にプログラムすることが困難となり得る。
【0005】
本発明は、上述のごとき実状に鑑みてなされたものであり、少なくともオーディオ,画像、及び複数のフレームを含む動画の中の1つを含むシステムを使用する方法を提供することにより、上述した先行装置の欠点を克服することをその目的とする。
【0008】
【課題を解決するための手段】
の技術手段は、オーディオ、画像及び複数のフレームを含む動画のうちの少なくとも1つを扱うシステムを使用する方法であって、前記オーディオ、画像及び動画の前記少なくとも1つの使用に関するユーザの複数の好みを記述する好み記述を提供するステップを含んでなり、前記システムは、前記オーディオ、画像及び動画の少なくとも1つについて、高速送り、高速巻き戻し、低速送り、低速巻き戻しあるいはスキップ再生を含む複数の再生形態により再生する機能を有し、前記好み記述、前記オーディオ、画像及び動画の前記少なくとも1つを再生する時のユーザの好みの再生形態に関する記述を含み、前記好み記述を再生時に用いることで、前記高速送り、高速巻き戻し、低速送り、低速巻き戻しあるいはスキップ再生を含む複数の再生形態のいずれか1つを選択可能であることを特徴としたものである。
【0011】
【発明の実施の形態】
本発明は、使用好み記述を利用して少なくともオーディオ,画像、及び複数のフレームを含む動画の中の1つを含むシステムを使用する方法を提供する。好み記述には、オーディオ,画像及び動画の中の少なくとも1つの利用に関するユーザの好み、通常は複数の好みを記述する。
本発明の前述及び他の目的、特徴及び利点は、添付図面を参照して以下の詳細説明を読めば容易に理解できよう。
【0012】
今日の多くの家庭では、オーディオ及び動画情報の情報ソースを多数有している。すなわち、例えば多数のテレビ,多数のVCR,ホームステレオ,ホーム娯楽センター,ケーブルテレビ,衛星テレビ,インターネット放送,ワールドワイドウェブ,データサービス,特殊なインターネットサービス,ポータブルラジオ装置及び自動車の各々に設けられたステレオなどの多くのソースを有する。これら装置の各々に対し、動画及び/又はオーディオコンテンツを入手し、選択し、記録し、再生するのに、通常、異なるインターフェースが使用されている。例えばVCRは録画時間の選択が可能であるが、ユーザはテレビガイドと所望する録画時間の相関をとらなければならない。別の例として、ユーザは自分のホームステレオ用に予めラジオ局の好ましいセットを選択して、更にユーザの自動車の各々に対し、予め選択された局の同じセットを選択することも仮定できる。家庭の別のメンバーが予め選択されたステレオ局の別のセットを望む場合、各オーディオ装置のプログラムをプログラムし直さなければならないのはかなり不便である。
【0013】
現在、ビジュアル情報,オーディオ情報、例えばラジオ,オーディオテープ,ビデオテープ,映画,ニュースの視聴者は、1つ以上の均一な方法で娯楽を楽しみ、情報を受けることを望んでいる。換言すれば、特定のユーザに提供されるオーディオビジュアル情報は、単一のフォーマットで表現され、かつユーザの特定の視聴の好みに合った内容を含むものに限られている。更に、そのフォーマットは、特定のオーディオビジュアル情報の内容に依存したものとなっている。視聴者に提供される情報量は特定の時間に特定の視聴者が望むような詳細度だけに限定されていなければならない。例えば、ユーザの視聴時間がますます限られてきた場合、ユーザはバスケットゲームの10分間だけ、すなわちハイライトだけを見たいことがある。
【0014】
更に、特定の視聴者の好みに従って多数のオーディオビジュアル装置をプログラムしなければならないことは、特に旅行中に不慣れな録画装置が提供された場合、負担の大きい作業である。旅行中、ユーザは自分の視聴の好みに従って効率的に、不慣れな装置、例えばホテルの部屋のオーディオビジュアル装置を容易に操作することを望んでいる。
【0015】
オーディオビジュアル情報を提供するのに頻繁に利用できる時間が限られていることを特に考慮すると、これら情報の提供は時間的に効率よく行わなければならないので、所望するオーディオビジュアル情報を単に録画するだけの便利な技術が十分でない。更に、ユーザは自分が関心のある利用可能なすべての情報部分だけにアクセスしながら、他の情報をスキップできなければならない。
【0016】
ユーザは、オーディオ動画情報のソースのすべて又はほんの一部を通して入手できる、潜在的に膨大な量の情報を視聴することはできない。更に、潜在的に利用できる情報量が増加している場合、ユーザは自分が関心のある情報の潜在的な内容にも気づきにくい。オーディオ,画像,動画の膨大な量を考慮して、一般にユーザ情報と称されるような、ユーザのこれまでの視聴の習慣、好み及び個人的な特徴に基づき、オーディオ及び動画情報を記録し、ユーザにこれら情報を提供するシステムが望ましい。さらに、システムは、システム装置の能力(ケーパビリティ)に基づいてこれらの情報を提供することができる。これにより、システムは望みの情報を記録し、ユーザ及び/又は視聴者に対し、自らを自動的にカスタマイズできることが望ましい。ユーザ、視聴者の条件を任意のタイプのコンテンツに対し相互交換可能に利用できることが望ましい。また、視聴情報の受信時に、特定のユーザの好みに対して他の装置を同じように自動的に合わせることができるように、ユーザ情報を異なるデバイス間で転送し、利用できるようになっている必要がある。
【0017】
図1は、本発明のオーディオビジュアルシステムのプログラム,システム及びユーザの実施形態を関連する記述スキームと共に示す図である。上述の要望を考慮して、代表的なオーディオビジュアル環境の重要な部分を判断するための代表的なオーディオ及び動画の提供された環境を解析する。まず第1に、図1を参照すると、ユーザ及び/又は(装置)システムに、動画,画像及び/又はオーディオ情報10が提供又は他の方法で利用できるようにされている。第2に、動画,画像及び/又はオーディオ(装置)システム12、例えばテレビ又はラジオからユーザに動画,画像及び/又はオーディオ情報が提供される。第3に、ユーザは、システム(装置)12と相互対話して情報10を好ましい方法で見て、ユーザ情報14に従って得られるオーディオ,画像及び/又は動画情報を定めるための好みを有するようになる。オーディオビジュアルシステムの主な異なる特徴を適当に識別し、オーディオビジュアルシステム16の各部分の情報コンテンツを記述するために必要な情報を説明する。
【0018】
識別されたオーディオビジュアルプレゼンテーションシステム16の3つの部分の機能は他の部分への相互関係と共に識別される。必要な相互関係を定めるために、各部分を記述するデータを含む1セットの記述スキームが定義される。これら記述スキームは、プログラム10,システム12,ユーザ情報14に補助的なデータを含み、人が読み取りできるテキストから符号化されたデータまでの1セットの情報を記録する。これら記述スキームは、ブラウジング,フィルタリング,サーチ,アーカイブ,個人化を可能にするのに使用できる。プログラム10,ユーザ14,システム12を記述する別個の記述スキームを設けることにより、3つの部分(プログラム,ユーザ,システム)を共に組み合わせてこれまで得られていない相互活動性を提供することができる。更に、コンパチビリティ及び機能性を完全に維持しながら、異なるプログラム10と、異なるユーザ14と、異なるシステム12とを共に組み合わせてもよい。記述スキームはデータ自体を含んでいてもよいし、必要な場合にはデータへのリンクを含んでいてもよいと理解すべきである。
【0019】
動画、静止画像及び/又はオーディオ情報10に関連するプログラム記述スキーム18は、2セットの情報、すなわちプログラムビューとプログラムプロフィルとを含むことが好ましい。プログラムビューは効率的なブラウジングを行うのに適当な動画フレームが潜在的にどのように見えるかを定める動画フレームの論理的構造を定める。例えば、このプログラムビューは、キーフレーム,ショット間のセグメントの定義,ハイライトの定義,動画要約(動画サマリー)の定義,異なる長さのハイライト,サムネイルのセットのフレーム,個々のショット又はシーン,動画の代表的なフレーム,異なるイベントのグルーピング及びクローズアップビューを識別するためのデータを含む1セットのフィールドを含むことができる。プログラムビューの記述は、サムネイル、スライド、キーフレーム、ハイライト及びクローズアップビューを含むことができるのでユーザがプログラムレベルだけでなく、特定のプログラムの内部でフィルタリング及びサーチを行うことができる。
【0020】
記述スキームは、粗いものから細かいものまでのマルチレベルの要約を提供するプログラムビューの一部としてキーフレームビューをサポートすることにより、詳細度が変化する際の情報にユーザがアクセスできるようにもする。プログラムプロフィルはプログラムのコンテンツの顕著な特徴を定める。すなわち、俳優,スター,レーティング,ディレクター,リリース日,時間スタンプ,キーワードの識別子,トリガプロフィル,スチールプロフィル,イベントプロフィル,キャラクタプロフィル,オブジェクトプロフィル,カラープロフィル,テクスチャプロフィル,シェイププロフィル,動きプロフィル,カテゴリ等を定める。プログラムプロフィルはオーディオ及び動画情報のフィルタリング及びサーチを容易にするのに特に適している。記述スキームによってユーザは、気づかない可能性のある関心のあるプログラムをユーザ記述スキーム20を提供することによって、発見する手段を有することができる。ユーザ記述スキーム20はソフトウェアエージェントに情報を提供し、次にソフトウェアエージェントは可能な場合にシステム記述スキーム22及びプログラム記述スキーム18の情報を使用することによって、ユーザのためのサーチ及びフィルタリングを実行する。本発明の実施形態の1つにはプログラム記述スキームが含まれると理解すべきである。
【0021】
プログラム記述スキーム18内に含まれるプログラムビューは、機能性、例えばクローズアップビューをサポートする特別ビューである。クローズアップビューでは所定の画像オブジェクト、例えば有名なバスケットボール選手、例えばマイケルジョーダンを、元のプログラムと別個のプログラムシーケンスを再生することによって、クローズアップで見ることができる。簡単に別のビューを組み込むことも可能である。他方のキャラクタプロフィルは、当該キャラクタの周りの長方形領域の空間−時間的位置及びサイズを含むことができる。この領域は、プレゼンテーションエンジンによって拡大したり、プレゼンテーションエンジンがこの領域外を暗くして、所定の数のフレームに広がるキャラクタにユーザの関心を集中させることができる。プログラム記述スキーム18内の情報は、領域の初期サイズ又はロケーション,フレームからフレームへの領域の移動,領域を特徴づけるフレームの時間及び数の条件に関するデータを含むことができる。キャラクタプロフィルは、キャラクタに関するテキストの表記及びオーディオ表記だけでなく、ウェブページ情報及び任意の他の適当な情報も含むための手段も提供する。かかるキャラクタプロフィルは動画の関連するオーディオトラックとは別で、かつそれに加えられるオーディオ表記を含むことができる。
【0022】
同じように、プログラム記述スキーム18は同様なオーディオ(例えばラジオ放送)に関する同じような情報、アナログ又はディジタル写真又は動画フレームのような画像を含むことができる。
【0023】
ユーザの記述スキーム20はユーザの個人的な好み及びユーザが見た履歴、例えばブラウジングの履歴,フィルタリングの履歴,サーチの履歴及び装置(デバイス)設定の履歴に関する情報及びユーザの個人的な好みを含むことが好ましい。このユーザの個人的な好みは、ユーザが見たい特定のプログラム及びプログラムのカテゴリに関する情報を含む。ユーザ記述スキーム20は特定のユーザに関する個人情報、例えば人口統計学的情報及び地理的情報、例えば郵便番号及び年齢等も含むことができる。これに関連する特定のプログラム又は属性の明示的定義によってシステム16はユーザに関係のある利用可能なプログラム記述スキーム18内に含まれる情報から、それらプログラムを選択することが可能となる。
【0024】
ユーザは装置のプログラムを習ったり、又は装置を明示的にプログラムすることは望まないことが多い。更にユーザ記述スキーム20は特定のユーザのための好ましいすべてのプログラムを記述する明示的定義を含むためには充分にロバストでないことがある。かかるケースでは、明示的に提供されていないか、又は記述が困難な異なる視聴特性に適合するように、ユーザの視聴習慣に合わせるユーザ記述スキーム20のケーパビリティ(能力)が有効である。かかるケースでは、ユーザ記述スキーム20を補強したり、又は任意の技術を使用して、ユーザ記述スキーム20に含まれる情報とプログラム記述スキーム18に含まれる利用可能な情報とを比較し、選択できるようにする。ユーザ記述スキーム20は、プログラムカテゴリからプログラムビューまで広がるユーザの好みだけでなく、利用の履歴を保持するための技術を提供する。ユーザの記述スキーム情報は永続性であるが、任意の時間にユーザのためにユーザ自身又はインテリジェントソフトウェアエージェントによって更新することができる。ユーザがユーザ記述スキーム20をディスエーブルすると判断した場合、任意の時にこれをユーザがディスエーブルすることもできる。
【0025】
更にハンドヘルドの電子デバイスは、スマートカードのように、ユーザがある装置から別の装置へユーザ記述スキーム20を持ち運ぶことができるように、独立性があって、かつポータブルであり、多数の装置を接続するネットワークを通してトランスポート可能とする。このユーザ記述スキーム20は異なる製品の間で標準化されれば、ユーザの好みもポータブルとなる。例えば、ユーザはホテルの部屋内のテレビ受像機をパーソナル化でき、よってユーザは任意の時間及び任意の場所で好きな情報にアクセスすることが可能である。ある意味でこのユーザ記述スキーム20は、永続的であり、時間をベースとしないものである。更に、プログラム記述スキーム18内の選択された情報は暗号化が可能である。その理由は、この情報の少なくとも一部はプライベート(すなわち人口統計学的)なものとみなすことができるからである。ユーザ記述スキーム20はオーディオビジュアルプログラム放送と関連づけでき、受信機の特定のユーザの記述スキーム20と比較し、プログラムが意図する視聴者のプロフィルが、ユーザのプロフィルと一致するかどうかを容易に判断できる。本発明の実施形態のうちの1つは、単にユーザ記述スキーム20のみが含まれるものであると理解すべきである。
【0026】
システム記述スキーム22は個々のプログラム及びその他のデータを管理することが好ましい。この管理としては、プログラムリスト,カテゴリ,チャネル,ユーザ,動画,オーディオ及び画像を維持することが含まれる。またこの管理にはオーディオ、動画及び/又は画像を提供するための装置の機能が含まれる。かかる機能には、例えばスクリーンのサイズ,ステレオ,AC3,DTS,カラー,白/黒などが含まれる。またこの管理にはプログラム記述スキーム18及びユーザ記述スキーム20のうちの1つ以上に対するユーザ,オーディオ,画像のうちの1つ以上の間の関係が含まれる。同様に、この管理にはプログラム記述スキーム18の1つ以上とユーザ記述スキーム20の1つ以上との間の関係が含まれる。本発明の実施形態のうちの1つは、単にシステム記述スキーム22のみが含まれるものであると理解すべきである。
【0027】
プログラム記述スキーム18の記述子とユーザ記述スキーム20の記述子とは、少なくとも一部が関連すべきであり、それにより同じ情報を示す記述子を比較することによってプログラムの潜在的な好ましさを判断可能となる。例えば、プログラム記述スキーム18とユーザ記述スキーム20とは、同じセットのカテゴリ及び俳優を含んでいるとする。プログラム記述スキーム18はユーザ記述スキーム20の知識がなく、この逆に、ユーザ記述スキーム20はプログラム記述スキーム18の知識がないので、互いに依存せずに各記述スキームは存在する。これら記述スキームを完全に充足させる必要はない。またユーザ記述スキーム20と共にプログラム記述スキーム18を含まないことが有利である。その理由は、関連する記述スキームを有するプログラムは何千個もある可能性があり、これら記述スキームをユーザ記述スキーム20と組み合わせた場合、その結果、ユーザ記述スキーム20が不必要に大きくなるからである。より容易に携帯できるように、ユーザ記述スキーム20を小さく維持することが好ましい。従って、プログラム記述スキーム18及びユーザ記述スキーム20しか含まないシステムが有利である。
【0028】
ユーザ記述スキーム20とシステム記述スキーム22とは少なくとも部分的に関連したフィールドを含む必要がある。フィールドが関連している場合、システムは所望する情報を捕捉することができ、フィールドが関連していない場合、所望するように情報を認識できない。システム記述スキーム22はユーザ及び利用できるプログラムのリストを含むことが好ましい。利用可能なプログラムのマスターリスト及び関連するプログラム記述スキーム18に基づき、システムは所望するプログラムを一致させることができる。ユーザ記述スキーム20と共にシステム記述スキーム22を含まないことが有利である。その理由は、システム記述スキーム22内では何千ものプログラムが記録される可能性があり、システム記述スキーム22とユーザ記述スキーム20を組み合わせた場合、その結果、ユーザ記述スキーム20は不必要に大きくなるからである。ユーザ記述スキーム20は小さく維持してこれをより容易に携帯できるようにすることが好ましい。例えば、ユーザ記述スキーム20は、ラジオ局の予め選択した周波数及び/又は局のタイプを含むことができるが、システムの記述スキーム22は、特定の町におけるラジオ局に対する利用可能な局を含む。別の町に旅行した場合、システム記述スキーム22とともにユーザ記述スキーム20によってラジオ局をプログラムし直すことが可能となる。従って、システム記述スキーム22及びユーザ記述スキーム20しか含まないシステムが有利である。
【0029】
プログラム記述スキーム18とシステム記述スキーム22とは少なくとも部分的に関連したフィールドを含む必要がある。フィールドが関連している場合、システム記述スキーム22はプログラム記述スキーム18内に含まれる情報を記録できるので、情報を正しくインデクシングできる。インデクシングが適当であれば、システムはかかる情報と入手できるユーザ情報とを一致させ、適当なプログラムを得て、これを記録できる。プログラム記述スキーム18とシステム記述スキーム22とが関連していない場合、プログラムから情報を抽出して記録することはできない。特定のビューシステムのシステム記述スキーム22内で指定されたシステム機能とプログラム記述スキーム18との相関をとることで、ビューシステムによってサポートできるビューを決定できる。例えばビュー装置が動画を再生できない場合、そのシステム記述スキーム22はそのビュー機能をキーフレームビュー及びスライドビューのみに限定されているものと記述できる。
【0030】
特定のプログラムのプログラム記述スキーム18及びビューシステムのシステム記述スキーム22を利用して、ビューシステムに適当なビューを提供できる。従って、プログラムのサーバは特定のビューシステムのケーパビリティに従って適当なビューを提供し、このビューはサーバとユーザのビュー装置とを接続するネットワーク又は通信チャネルを通して通信できる。コンテンツプロバイダはコンテンツ及び記述スキームを別のスタイル,時間,フォーマットでパッケージし直すので、システム記述スキーム22と別個のプログラム記述スキーム18を維持することが好ましい。更に、プログラムが別の時間にディスプレイされる場合でも、プログラム記述スキーム18とプログラムとを関連させることが好ましい。従って、システム記述スキーム22及びプログラム記述スキーム18しか含まないシステムも有利である。
【0031】
同一情報の相関をとるフィールドを有しながら、3つの記述スキームの各々の独立性を好ましく維持することにより、システム16の全体の機能を維持しながら、プログラム10と、ユーザ情報14と、システム12とを相互に交換することができる。
【0032】
図2は、図1の解析モジュールを含むオーディオビジュアルシステムの実施形態を示す図である。システム16によってオーディオ,ビジュアル又はオーディオビジュアルプログラム38が受信される。このプログラム38は適当なソース、例えば、放送テレビ,ケーブルテレビ,衛星テレビ,ディジタルテレビ,インターネット放送,ワールドワイドウェブ,ディジタル動画ディスク,静止画像,ビデオカメラ,レーザーディスク,磁気媒体,コンピュータ用ハードドライブ,ビデオテープ,オーディオテープ,データサービス,ラジオ放送及びマイクロウェーブ通信から発生可能である。プログラム記述スキーム18は任意の適当なソース、例えば、ディジタルテレビ放送,特殊なディジタルテレビデータサービス,特殊なインターネットサービス,ワールドワイドウェブ,データファイル,電話を通したデータ,コンピュータメモリのようなメモリにおけるPSIP/DVB−SI情報から発生可能である。
【0033】
プログラム記述スキーム18,ユーザ記述スキーム20及び/又はシステム記述スキーム22はネットワーク(通信チャネル)を通してトランスポートできる。例えば、システム記述スキーム22は、ソースへトランスポートしてビュー又は装置が使用できる他の機能をソースに提供できる。このトランスポートに応答し、ソースは装置にカスタマイズされた、又は特定の装置に適当な画像,オーディオ及び/又は動画コンテンツを提供する。システム16は1つ以上のかかるプログラム38を受信するのに適した任意の装置を含むことができる。オーディオビジュアルプログラム解析モジュール42は、受信したプログラム38を解析して、プログラムに関連した情報(記述子)を抽出し、これを記述スキーム(DS)発生モジュール44へ提供する。プログラムに関連する情報はプログラム38を含むデータストリームから抽出したり、又は他の任意のソース、例えば電話回線を通して転送されたデータ、過去にシステム16に既に転送されたデータ又は関連ファイルからのデータから得ることができる。プログラムに関連する情報は、特定のプログラム38に対して利用できるプログラムビュー及びプログラムプロフィルの双方を定義するデータを含むことが好ましい。解析モジュール42は、(i)プログラムから抽出される低レベルの特徴に基づいた自動オーディオ動画解析方法,(ii)イベント検出技術,(iii)データソース又は電子プログラムガイド(EPG,DVB−SI及びPSIP)から利用できる(又は抽出可能な)データ,(iv)プログラム記述スキームを定めるデータを提供するために、ユーザ記述スキーム20から得られるユーザ情報から得られる情報を使って、プログラム38の解析を実行する。
【0034】
図3は、図2の解析モジュールの実施形態を示す図である。プログラム解析技術のいずれを選択するかは、容易に入手できるデータの量及びユーザの好みに応じて決まる。例えば、ユーザが特定のプログラム、例えばバスケットボールゲームの5分間の動画ハイライトを見たい場合、解析モジュール42は知識をベースとするシステム90を呼び出して、最良の5分間の要約を形成するハイライトを決定する。知識ベースシステム90はコマーシャルを除去するためのコマーシャルフィルタ92及びスローモーション検出器54を呼び出して、動画要約を作成するのを助けることができる。また、解析モジュール42は、他のモジュールを呼び出して情報(例えばテクスチャ情報)をまとめ、特定のプログラムビューをオーサリングすることもできる。例えばプログラム38が更に情報を入手できないホームビデオである場合、解析モジュール42はマルチレベルの要約のキーフレームを識別し、プログラムビュー、特にキーフレームビューを発生するのに使用される情報を記述スキームへ送ることによってキーフレーム要約を作成できる。
【0035】
図3を参照すると、解析モジュール42は他のサブモジュール、例えば逆多重化器/復号器60,データ及びサービスコンテンツ解析器62,テキスト処理及びテキスト要約発生器64,クローズキャプション解析器66,タイトルフレーム発生器68,解析マネージャ70,オーディオビジュアル解析及び特徴抽出器72,イベント検出器74,キーフレームサマライザ76及びハイライトサマライザ78も含むことができる。
【0036】
発生モジュール44はシステム記述スキーム22のためのシステム情報46を受信する。このシステム情報46は発生モジュール44が発生したシステム記述スキーム22のためのデータを含むことが好ましい。発生モジュール44はユーザ記述スキームのためのデータを含むユーザ入力情報48も受信し、ユーザ入力情報48は発生モジュール44内で発生されたユーザ記述スキームのためのデータを含むことが好ましい。ユーザ入力情報48は、例えばプログラム記述スキーム18及びシステム記述スキーム22に含まれるべき、メタ情報を含むことができる。ユーザ記述スキーム20(又は対応する情報)はプログラム38を選択的に解析するために、解析モジュール42へ提供される。例えばユーザ記述スキーム20は特定のプログラムのためのハイライト発生機能をトリガし、好ましいビューを発生し、プログラム記述スキーム18内の関連するデータを記録するのに適している。発生モジュール44及び解析モジュール42は、データ記録ユニット50へデータを提供する。記録ユニット50は任意の記録デバイス、例えばメモリ又は磁気媒体でよい。
【0037】
サーチ,フィルタリング,ブラウジング(SFB)モジュール52は、記述スキーム内に含まれる情報を解析し、抽出することにより、記述スキーム技術を実行する。このSFBモジュール52は、記述スキームに含まれる情報に基づき、プログラム38のフィルタリング,サーチ,ブラウジングを実行できる。ユーザ固有の情報及び視聴履歴等を収集し、発生モジュール44を通してユーザ記述スキームをオーサリングし、更新する際に使用すべき発生モジュール44へ提供するインテリジェントソフトウェアエージェントがSFBモジュール52内に含まれることが好ましい。このように、ディスプレイ80を介し、ユーザへ望ましいコンテンツを提供できる。検索,記録,及び/又は視聴するべき望ましいプログラムの選択は、少なくとも一部をグラフィカルユーザインターフェースディスプレイ82を通してプログラムできる。このグラフィカルユーザインターフェース(GUI)は、GUIを介して、ユーザへ情報を提供するためのプレゼンテーションエンジンを含むか、これに接続することもできる。
【0038】
マルチパートの記述ストリーム装置を使用するオーディオ情報のインテリジェントマネージメント及び消費によって、情報がオーバーロード状態となる近年に適した次世代装置が得られる。この装置は、個人及び家族の変化するライフスタイルに応えるものであり、いつでもどこでも望む情報を誰もが得ることができるようにするものである。
【0039】
装置の使用例は次のとおりである。平日の仕事を終えたユーザは、ほっとしながら金曜日の夕方遅く、帰宅する。このユーザは世界の出来事をキャッチしたいと思い、その夜遅くにABC放送の20/20ショーを視聴する。この時は午後9時であり、20/20ショーは1時間後の午後10時にスタートする。ユーザは1週間のうちのスポーツイベント及びマイクロソフト社と司法省との係争に関するすべてのニュースに関心がある。ユーザ記述スキーム20は特定のユーザがマイクロソフト社の係争及び特定のチームが選択されたスポーツイベントに関して利用できるすべての情報を得たいとの要求を示すプロフィルを含むことができる。更に、システム記述スキーム22及びプログラム記述スキーム18は選択的に得て記録できる入手可能な情報のコンテンツに関する情報を提供する。
【0040】
システムは、3つの記述スキームに基づき、ユーザが関心を持つ、過去の1週間の間のオーディオビジュアル情報を自主的に、かつ周期的に得て、これを記録する。装置は1時間以上のオーディオビジュアル情報を記録している可能性が最も高いので、情報を所定の態様で凝縮しなければならない。ユーザは、ポインタ又は音声コマンドによってシステムとの相互対話を開始し、記録されたスポーツプログラムを見たいことを示す。ディスプレイ上でユーザにはバスケットボール及びサッカーを含む、記録されたスポーツイベントのリストが提示される。ユーザの好きなフットボールチームの試合は記録されていないので、明らかにユーザのフットボールチームはこの週に試合をしていない。ユーザはバスケットボールの試合に関心があるので、試合を見たいと表示する。各ゲームの重要な瞬間を捉えた一セットのタイトルフレームが提示される。ユーザはシカゴブルズの試合を選択し、このゲームの5分間のハイライトを見たいと表示する。すると、システムは自動的にハイライトを発生する。これらハイライトはオーディオ又は動画解析によって発生できるか、又はプログラム記述スキーム18は5分間のハイライトの間提示されるフレームを示すデータを含む。システムはユーザが見るために選択できる特定のシカゴブルズの試合に関するウェブに基づくテキストの情報も記録できる。所望すれば、要約された情報を記録デバイス、例えばラベル付きのDVDに記録してもよい。この記録情報は、後に探すことができるようにインデックスコードを含んでもよい。
【0041】
ユーザはスポーツイベントを視聴した後に、マイクロソフト社の係争に関するニュースを読むと決断できる。この時の時間は午後9時50分であり、ユーザはニュースを視聴している。実際には、ユーザはニュースを視聴後、記録されたニュースのアイテム全てを削除するように選択した。次に、午後10時前に、忘れずに今日最後にすべきことを行う。
【0042】
次の日、ユーザは、その日に自分の兄から受け取った、兄の生まれたばかりの女の子と去年のペルー旅行の場面を録画したVHSテープを見ると予定を企てる。2時間テープ全体を見たいが、ユーザは子供がどんな子か、また自分が前回ペルーを訪問した時になかったリマに建設された新しいスタジアムも見たい。ユーザはテープのビジュアル要約を流し見し、次の朝の午前10時に自分の娘をピアノのレッスンに連れて行く前に、数分間ブラウジングし、数セグメント見ようと予定をたてる。ユーザはテープをシステムに接続されている自分のVCRにテープを挿入し、システムの要約機能を呼び出し、テープをスキャンし、要約を作成する。次にユーザは次の朝、要約を見て、赤ちゃんの様子を短時間見て、要約のうちのキーフレームの間のセグメントを再生し、泣いている赤ちゃんを一目見ることができる。システムのハードドライブ(又は記録装置)にテープカウントを記録することもできるので、動画要約を迅速に見ることができる。この時、午後10時10分となっており、ユーザは10分後に20/20ショーを見るようである。幸運なことに、3つの記述スキームに基づき、システムは午後10時から20/20ショーを記録している。次に、ユーザは20/20ショーの記録が進行するにつれ、20/20ショーの記録された部分の視聴を開始できる。次にユーザは午後11時10分に20/20ショーの視聴を終えることになる。
【0043】
平均的ユーザが所有するマルチ媒体装置、例えばホームオーディオシステム,カーステレオ,数台のホームテレビセット,ウェブブラウザなどの数は次第に増加している。ユーザは現在、自分の装置の各々を最良の視聴の好みに合わせなければならない。取り外し可能な記録装置、例えばスマートカードにユーザの好みを記録することにより、ユーザはユーザの好みを含むカードを自動的なカスタム化を行うために、かかる媒体装置に挿入することができる。この結果、VTRに所望するプログラムが自動的に録画されたり、カーステレオ及びホームオーディオシステムに対し、ラジオ局をセットすることができる。このように、ユーザは単一の装置で自分の好みを1回だけ指定するだけでよく、その後、取り外し自在な記録装置によって装置に記述子が自動的にアップロードされる。有線又は無線ネットワーク接続、例えばホームネットワークの接続を使って、他の装置にユーザ記述スキームをロードすることもできる。これとは異なり、システムがユーザのオーディオ及び動画視聴の習慣に基づき、ユーザの履歴を記録して、ユーザ記述スキームに項目を作成することができる。
【0044】
上述のごとく、ユーザは所望する情報を得るためにビュー情報をプログラムする必要は全くない。ある意味で、ユーザ記述スキーム20はユーザの視聴、ブラウジングの好み及びユーザの行動ための中央記録装置を提供することにより、ユーザのモデル化を可能にするものである。これにより、装置を迅速にパーソナル化することができる。また、他の部品、例えばインテリジェントエージェントが標準化された記述フォーマットに基づいて、通信をしたり、ユーザの好みに関するスマート推論を行うことが可能となる。
【0045】
異なる部分を適当に、利用するか、又は必要に応じ、周辺部及び延長部を追加することにより、図2及び図3から多数の異なる実現例及び応用例を容易に誘導できる。図2はパーソナル化可能なオーディオビジュアルサーチ,フィルタリング,ブラウジング及び/又は記録装置を示している。下記に示す、より特定された応用例/実現例のリストは網羅的なものでなく、ある範囲をカバーするものである。
【0046】
ユーザ記述スキームはパーソナル化可能なオーディオビジュアル装置のための主要なイネーブラーである。多数の装置の間で記述スキームの構造(シンタックス及びセマンティックス(意味))が既知であれば、ユーザは恐らくスマートカードを介し、ある装置から別の装置へ自分のユーザ記述スキーム20内に含まれる情報を携帯(又はその他の方法で転送)することができ、これら装置は装置をパーソナル化するよう、スマートカードインターフェースをサポートする。パーソナル化は装置の設定、例えばディスプレイのコントラスト及びボリュームの制御からテレビチャネル,ラジオ局,ウェブ局,ウェブサイト,地理的情報及び人口統計学的情報(民生統計学的情報)、例えば年齢、郵便番号等の種々の範囲となり得る。パーソナル化できる装置は種々のソースからコンテンツにアクセスでき、これら装置はウェブ,地上又はケーブル放送などに接続でき、更に多数の、又は異なるタイプの単一媒体、例えば動画、音楽などにもアクセスできる。
【0047】
例えばスマートカードをホームシステムから抜き出し、カーステレオシステムに挿入し、所定の時間に好みの局にチューニングできるようにすることによって、カーステレオをパーソナル化できる。別の例として、例えばスマートカードをリモートコントローラ(リモコン)に挿入すると、リモコンは自律的にテレビ受像機に命令し、ユーザの好みに合った現在及び将来のプログラムに関するユーザ情報を提示させることによって、テレビの視聴をパーソナル化することもできる。家庭の異なるメンバーは自分のスマートカードを家族用のリモコンに挿入することによって、常に視聴経験をパーソナル化することができる。かかるリモコンがない場合、スマートカードを直接テレビシステムに挿入することによって、これと同じタイプのパーソナル化を行うことができる。このリモコンによって同じようにオーディオシステムを制御することもできる。別の実施例として、適当な入力インターフェース、例えばユーザの音声識別技術を使うインターフェースを使用することにより、テレビ受像機が局部的な記録装置内に多数のユーザに対するユーザ記述スキームを保持し、異なるユーザ(又はユーザグループ)を識別する。ネットワーク化されたシステムではネットワークを通してユーザ記述スキームをトランスポートできることに留意されたい。
【0048】
直接的なユーザ入力により、及びユーザが自分の使用パターン及び使用履歴を判断するのをウォッチングするソフトウェアを使用することにより、ユーザ記述スキームを発生する。このユーザ記述スキームはユーザによりダイナミックに、又は自動的に更新できる。良好に定義され、構造化された記述スキームの設計により、異なる装置は互いに相互に作動することが可能となる。モジュラ設計は、また、携帯を可能にする。
【0049】
記述スキームは現在のVCRの機能に新しい機能を追加する。進歩したVCRシステムは好みの直接入力を介し、又はユーザの使用パターン及び履歴をウォッチングすることによってユーザから学習できる。ユーザの記述スキーム20はユーザの好み、ユーザの使用パターン及び履歴を保持する。このユーザの記述スキームにインテリジェントエージェントがコンサルトし、ユーザのために行動するためにエージェントが必要とする情報を得ることができる。インテリジェントエージェントを通し、システムはユーザのために行動してユーザの好みに合ったプログラムを発見し、かかるプログラムに関し、ユーザに通知し、及び/又はこれらプログラムを自主的に記録することができる。エージェントはユーザの記述スキーム20に従ってシステムへの記録を管理することもできる。すなわちプログラムの削除を優先化(又は取り外し可能な媒体への転送をするためにユーザに通知すること)、又はユーザの好み及び履歴に従って、視覚的な品位に直接影響する圧縮率を決定することも管理できる。
【0050】
プログラム記述スキーム18とシステム記述スキーム22とは、あるタスクを実行する際にユーザ記述スキーム20と協力して作動する。更に、進歩したVCR、又は他のシステム内のプログラム記述スキーム18とシステム記述スキーム22とは、ユーザがオーディオビジュアルプログラムをブラウズし,サーチし,フィルタリングすることを可能にする。システムにおけるブラウジングは高速早送り及び巻き戻しを越える能力を提供するものである。例えば、ユーザはシステムに記録された異なるカテゴリのプログラムのサムネイルビューを見ることができる。次にユーザはビューの利用性及びユーザの好みに応じてフレームビュー,ショットビュー,キーフレームビュー又はハイライトビューを選択できる。プログラム記述スキーム18内、特にプログラムビュー内の対応する情報を使ってこれらビューを容易に呼び出すことができる。ユーザは任意の時間にプログラムの一部又は全体の視聴をスタートできる。
【0051】
このアプリケーションでは、多くのサービス、例えば(i)米国におけるATSC−PSIP(ATSC−プログラムサービス統合プロトコル)の一部として定義されたEPG、又は欧州におけるDVB−SI(ディジタル動画放送サービス情報)によって搬送される放送から、(ii)PSIP/DVB−SIの他に特殊なデータサービスから、(iii)特殊なウェブサイトから、(iv)オーディオビジュアルコンテンツを含む媒体記録ユニット(例えばDVD)から、(v)進歩したカメラ(後述する)から、プログラム記述スキーム18を容易に入手できるし、及び/又は解析モジュール42又はユーザ入力情報48によって、例えば記録されているプログラムに対し、プログラム記述スキーム18を容易に発生させることができる。
【0052】
記述スキームを実現するシステム、例えば図2に示されるようなシステムにより、ディジタルスチールカメラ及びビデオカメラのコンテンツを記録し、管理することができる。進歩したカメラは、例えばオーディオビジュアルコンテンツ自身の他にプログラム記述スキーム18を記録できる。このプログラム記述スキーム18は適当なユーザ入力インターフェース(例えば音声,ビジュアルメニュードライブ等)を通してカメラ自身で一部又は全体を発生できる。ユーザは、プログラム記述スキーム18の情報を、特に、システムによって自動的に抽出することが困難な高レベルの(又はセマンティックな)情報をカメラに入力することができる。プログラム記述スキーム18を発生する際に、一部のカメラの設定値及びパラメータ(すなわち日付及び時間)だけでなく、カメラで計算された量(例えばカラープロフィルに含まれるべきカラーヒストグラム)も使用できる。カメラを一旦接続すると、システムはカメラのコンテンツをブラウジングしたり、又はカメラのコンテンツ及びその記述スキームを将来使用するために局部的な記録装置に転送することができる。カメラで発生された記述スキームを更新したり、これに情報を追加することも可能である。
【0053】
IEEE1394及びHavi規格仕様は、デバイス間でのこのタイプの“オーディオビジュアルコンテンツ”中心の通信を可能にするものである。Haviのコンテキストでは、記述スキームAPIを使用して、コンテンツに関連する記述スキームも含むカメラ又はDVDのコンテンツをブラウジングしたり及び/又はサーチすることが可能である。すなわち、PLAY APIを単に呼び出して媒体を再生してリニアに見る以上のことを行う。
【0054】
データベース内でAVプログラムをアーカイブするのに、記述スキームを使用できる。サーチエンジンはプログラム記述スキーム18内に含まれる情報を使用し、これらのコンテンツに基づきプログラムを検索する。プログラム記述スキーム18はデータベースのコンテンツ又は問い合わせの結果を通してナビゲートする際にも使用できる。プレゼンテーション中のユーザの問い合わせの結果を優先づける際に、ユーザの記述スキーム20を使用できる。当然ながら、特定のアプリケーションの性質に応じてプログラム記述スキーム18をより理解できるようにすることが可能である。
【0055】
記述スキームはアプリケーションが注意を払うようにするというユーザの要求を満たし、ユーザの視聴及び利用の習癖、好み及び個人の人口統計に応答できる。提案されているユーザの記述スキーム20はフィールド及びその他の記述スキームに対する相互の関係を選択する際に、この要求を直接解決する。記述スキームは性質がモジュラ式であるので、ユーザは自分のユーザ記述スキーム20をある装置から別の装置に移動させ、装置を“パーソナル化”できる。
【0056】
TiVo及びReplayTV社からの製品に類似した現在の製品に、提案されている記述スキームを組み込んで娯楽情報値を拡張することができる。特に、記述スキームはプログラムのオーディオビジュアルブラウジング及びサーチを可能とし、更にハイライトビューのような多数のプログラムビューをサポートすることにより、特定のプログラム内でのフィルタリングを可能にする。更に、記述スキームはTiVo及びReplayTVが取り扱いを予定していないテレビ放送以外のソースからのプログラムを処理する。更に、TiVo及びReplayTVタイプの装置の規格化によって、機能を拡張するためにかかる装置、例えばMPEG−7記述をサポートする装置に他の製品を相互接続することができる。MPEG−7とは、オーディオビジュアル情報のための記述及び記述スキームを標準化するように働くディジタル放送の将来を担う動画符号化技術−7の仕様である。装置は所望するように、多数のユーザによってパーソナル化するように拡張することも可能である。
【0057】
記述スキームは定義されているので、インテリジェントソフトウェアエージェントはそれらの間で通信して、ユーザの好みに関するインテリジェント推論を行うことができる。更に、規格化されたユーザ記述スキームに基づき、アプリケーションをブラウジングし、フィルタリングするためのインテリジェントソフトウェアエージェントの開発及びアップグレードを簡略化できる。
【0058】
記述スキームは高レベルの(セマンティックな)特徴及び/又は記述子と、低レベルの特徴及び/又は記述子の双方を保持するという意味でマルチモーダルである。例えば、高低レベルの記述子はそれぞれ俳優の名前と動きモデルのパラメータである。高レベルの記述子は人が容易に読み取りできるが、低レベルの記述子は機械によってより容易に読み取られるが、人はあまり理解できない。放送プログラムのサーチ及びフィルタリングを容易にするために、プログラム記述スキームは現在のEPG、PSIP及びDVB−SI情報と容易にハーモナイズできる。現在のサービスは、柔軟な記述スキームを使用する別の情報を組み込むことによって、将来拡張可能である。
【0059】
例えば、あるケースでは、ディジタル動画ディスクのような媒体に予め記録されたオーディオビジュアルプログラムを含むことができ、ここではディジタル動画ディスクはFSBモジュールが使用する記述スキームの同じシンタックス及びセマンティックスを有する記述スキームも含む。FSBモジュールが異なる記述スキームを使用する場合、記述スキームのトランスコーダ(コンバータ)を使用してもよい。ユーザはディジタル動画ディスクのコンテンツをブラウジングし、見たいことがある。この場合、ユーザはプログラム記述をオーサリングするのに解析モジュールを呼び出す必要はない。しかしながらユーザは、ディジタル動画ディスクのコンテンツをフィルタリングし、サーチし、ブラウジングする際に自分のユーザ記述スキーム20を呼び出したいことがある。同じように、プログラム情報の他のソースを使用することも可能である。
【0060】
ここに記述されている動画に関するいかなる技術も画像(静止画像及び動画のフレームのような画像)やオーディオ(ラジオなど)にも同様に適用できることが理解されよう。
図4乃至図12は、好ましいオーディオビジュアル記述スキームに適したオーディオビジュアルインターフェースの一例を示す図である。図4は、オーディオビジュアルシステムのためのサムネイルビュー(カテゴリ)を示す図である。カテゴリの機能としてサムネイル機能を選択することにより、ディスプレイに左側の1セットのカテゴリが提供される。特定のカテゴリ、例えばニュースを選択すると、視聴するのに現在利用できる異なるプログラムの1セットのサムネイルビューが提供される。更に、異なるプログラムは、視聴するにあたって異なる時間に利用できるプログラムも含むことができる。サムネイルビューとはプログラムが対応するそれぞれの実際のプログラムの内容を示す短い動画セグメントのことである。
【0061】
図5は、オーディオビジュアルシステムのためのサムネイルビュー(チャネル)を示す図である。チャネルの点で利用できるプログラムのサムネイルビューを所望する場合にディスプレイできる。図6は、オーディオビジュアルシステムのためのテキストビュー(チャネル)を示す図である。所望する場合、チャネルの点で利用できるプログラムのテキストビューをディスプレイできる。
【0062】
図7は、オーディオビジュアルシステムのためのフレームビューを示す図である。所望する場合、特定のプログラムのフレームビューをディスプレイできる。左側コラム内の異なるプログラムの1セットの代表的なフレームと共に、ディスプレイの中心に1つの代表的なフレームがディスプレイされる。所望するように、フレームの数の周波数を選択することができる。また、特定の選択されたプログラム中に異なるフレームを示す1セットのフレームもディスプレイの下方部分にディスプレイされる。
【0063】
図8は、オーディオビジュアルシステムのためのショットビューを示す図である。所望するように特定のプログラムの短いビューをディスプレイできる。左側コラム内の異なるプログラムの1セットの代表的なフレームと共に、ディスプレイの中心に、あるショットの代表的なフレームがディスプレイされる。特定の選択されたプログラム中に異なるショット(プログラムのセグメント、一般的に性質上シーケンシャルである)を示す1セットのショットがディスプレイの下方部分にディスプレイされる。
【0064】
図9は、オーディオビジュアルシステムのためのキーフレームビューを示す図である。所望するように、特定のプログラムのキーフレームのビューがディスプレイされる。左側コラム内の異なるプログラムの1セットの代表的なフレームとともに、ディスプレイの中心に1つの代表的なフレームがディスプレイされる。また、特定の選択されたプログラム中に異なるキーフレームを示す1セットのキーフレームもディスプレイの下方部分にディスプレイされる。各キーフレームのビューの数はレベルを選択することにより調節できる。
【0065】
図10は、オーディオビジュアルシステムのためのハイライトビューを示す図である。所望するように、ハイライトビューも同様にディスプレイされる。図11は、オーディオビジュアルシステムのためのイベントビューを示す図である。所望するように、イベントビューも同様にディスプレイされる。図12は、オーディオビジュアルシステムのためのキャラクタ/オブジェクトビューを示す図である。所望するように、キャラクタ/オブジェクトビューも同様にディスプレイされる。
【0066】
記述スキームの例を後述するXMLに示す。所望するように、記述スキームは、任意の言語で実行され、任意の含められた記述(もしくはそれよりも多くの記述)を含む。
【0067】
提案されたプログラム記述スキームは、動画プログラムを記述するための3つの主な部分を含んでいる。第1の部分は記述されたプログラムを識別する。第2の部分はブラウジングアプリケーションに有用な多数のビューを定義する。第3のセクションはフィルタリングやサーチアプリケーションに有用な多数のプロフィルを定義する。従って、提案された記述スキームの全構造は次のとおりである。
【0068】
【表1】
Figure 0004107811
【0069】
プログラムのアインデンティティ
・プログラムID
【0070】
【表2】
Figure 0004107811
【0071】
記述子<ProgramID>は、プログラムを識別するための番号又はストリングを含む。
【0072】
・プログラム名
【0073】
【表3】
Figure 0004107811
【0074】
記述子<ProgramName>は、プログラムの名称を指定するものである。
【0075】
・ソースロケーション
【0076】
【表4】
Figure 0004107811
【0077】
記述子<SourceLocation>は、URLフォーマットでプログラムのロケーションを指定する。
【0078】
プログラムビュー
・サムネイルビュー
【0079】
【表5】
Figure 0004107811
【0080】
記述子<ThumbnailVIew>は、プログラムのサムネイル表示として画像を指定する。
・スライドビュー
【0081】
【表6】
Figure 0004107811
【0082】
記述子<SlideView>は、スナップショットとして、又はスライドショーのように見ることができるプログラムにおける多数のフレームを識別する。
【0083】
・フレームビュー
【0084】
【表7】
Figure 0004107811
【0085】
記述子<FrameView>は、プログラムの開始フレーム及び終了フレームを指定する。この記述子はプログラムの最も基本的なビューであり、どのプログラムも1つのフレームビューを有する。
【0086】
・ショットビュー
【0087】
【表8】
Figure 0004107811
【0088】
記述子<ShotView>は、プログラムにおける多数のショットを指定する。記述子<Shot>はショットの開始フレーム及び終了フレームを定め、ショットを示すためのフレームも指定できる。
【0089】
・キーフレームビュー
【0090】
【表9】
Figure 0004107811
【0091】
記述子<KeyFrameView>は、プログラムにおけるキーフレームを指定する。これらキーフレームは階層的に構成されており、これら階層はレベル属性と共に記述子<KeyFrames>によって捕捉される。各キーフレームに関連するクリップは記述子<Clip>によって定められる。ここで各クリップにおけるディスプレイフレームは対応するキーフレームである。
【0092】
・ハイライトビュー
【0093】
【表10】
Figure 0004107811
【0094】
記述子<HighlightView>は、プログラムのハイライトを形成するためのクリップを指定する。プログラムは種々の時間長さに合わされたハイライトの異なるバージョンを有することができ、これらクリップは長さ属性と共に記述子<Highlight>によって指定されるハイライトの各バージョンにグループ分けされる。
【0095】
・イベントビュー
【0096】
【表11】
Figure 0004107811
【0097】
記述子<EventView>は、プログラムにおける所定のイベントに関連するクリップを指定する。これらクリップは名称属性と共に記述子<Event>によって指定される対応するイベントにグループ分けされる。
【0098】
・クローズアップビュー
【0099】
【表12】
Figure 0004107811
【0100】
記述子<CloseUpView>は、プログラムにおける所定のターゲットにズームインできるクリップを指定する。これらクリップは名称属性と共に記述子<Target>によって指定される対応するターゲットに分類される。
【0101】
・代替ビュー
【0102】
【表13】
Figure 0004107811
【0103】
記述子<AlternateView>は、プログラムの代替ビューとして示すことができるソースを指定する。各代替ビューはID属性と共に記述子<AlternateSource>によって指定される。ソースの位置はURLフォーマットで指定される。
【0104】
プログラムプロフィル
・一般的プロフィル
【0105】
【表14】
Figure 0004107811
【0106】
記述子<GeneralProfile>は、プログラムの一般的様相を記述する。
【0107】
・カテゴリプロフィル
【0108】
【表15】
Figure 0004107811
【0109】
記述子<CategoryProfile>は、カテゴリを指定し、これらカテゴリに従ってプログラムを分類できる。
【0110】
・日付−時間プロフィル
【0111】
【表16】
Figure 0004107811
【0112】
記述子<DateTimeProfile>は、プログラムの種々の日付及び時間情報を指定する。
【0113】
・キーワードプロフィル
【0114】
【表17】
Figure 0004107811
【0115】
記述子<KeywordProfile>は、プログラムをフィルタリング又はサーチするのに使用できる多数のキーワードを指定する。
【0116】
・トリガプロフィル
【0117】
【表18】
Figure 0004107811
【0118】
記述子<TriggerProfile>は、プログラムの再生中における所定のアクションをトリガーするのに使用できる、プログラム内の多数のフレームを指定する。
【0119】
・静止プロフィル
【0120】
【表19】
Figure 0004107811
【0121】
記述子<StillProfile>は、フレーム内のホットな領域、すなわち関心のある領域を指定する。このフレームはフレームidに対応するid属性と共に記述子<Still>によって指定される。フレーム内ではid属性と共に記述子<HotRegion>によって各ホットな領域が指定される。
【0122】
・イベントプロフィル
【0123】
【表20】
Figure 0004107811
【0124】
記述子<EventProfile>はプログラム内の所定イベントのための詳細な情報を指定する。各イベントは名称属性と共に記述子<Event>によって指定され、イベントの各発生は<EventView>なるクリップidと一致し得るid属性と共に記述子<Occurrence>によって指定される。
【0125】
・キャラクタプロフィル
【0126】
【表21】
Figure 0004107811
【0127】
【表22】
Figure 0004107811
【0128】
記述子<CharacterProfile>は、プログラムにおける所定キャラクタのための詳細な情報を指定する。各キャラクタは名称属性と共に記述子<Character>によって指定され、キャラクタの各発生は<CloseUpView>なるクリップidと一致し得るid属性と共に記述子<Occurrence>によって指定される。
【0129】
・オブジェクトプロフィル
【0130】
【表23】
Figure 0004107811
【0131】
【表24】
Figure 0004107811
【0132】
記述子<ObjectProfile>は、プログラム内の所定のオブジェクトのための詳細な情報を指定し、各オブジェクトは名称属性と共に記述子<Object>によって指定され、オブジェクトの各発生は<CloseUpView>なるクリップidと一致し得るid属性と共に、記述子<Occurrence>によって指定される。
【0133】
・カラープロフィル
【0134】
【表25】
Figure 0004107811
【0135】
記述子<ColorProfile>は、プログラムの詳細な色情報を指定する。ここにはすべてのMPEG−7のカラー記述子を入れることができる。
【0136】
・テクスチャプロフィル
【0137】
【表26】
Figure 0004107811
【0138】
記述子<TextureProfile>はプログラムの詳細なテクスチャ情報を指定し、ここにはすべてのMPEG−7のテキスチャ記述子を入れることができる。
【0139】
・シェイププロフィル
【0140】
【表27】
Figure 0004107811
【0141】
記述子<ShapeProfile>はプログラムの詳細なシェイプ(形状)情報を指定し、ここにはすべてのMPEG−7のシェイプ記述子を入れることができる。
【0142】
・動きプロフィル
【0143】
【表28】
Figure 0004107811
【0144】
記述子<MotionProfile>はプログラムの詳細な動き情報を指定し、ここにはすべてのMPEG−7の動き記述子を入れることができる。
【0145】
ユーザ記述スキーム
提案されているユーザ記述スキームはユーザを記述するための3つの主な部分を含む。第1部分は記述されたユーザを識別し、第2部分はユーザが好む多数の設定を記録し、第3部分はユーザの所定の利用パターンを表すことがある、ある統計値を記録する。従って、提案されている記述スキームの全構造は次のとおりである。
【0146】
【表29】
Figure 0004107811
【0147】
ユーザアイデンティティ
・ユーザID
【0148】
【表30】
Figure 0004107811
【0149】
記述子<UserID>はユーザを識別するための番号又はストリングを含む。
【0150】
・ユーザ名
【0151】
【表31】
Figure 0004107811
【0152】
記述子<UserName>はユーザの名称を指定する。
【0153】
ユーザの好み
・ブラウジングの好み
【0154】
【表32】
Figure 0004107811
【0155】
記述子<BrowsingPreferences>はユーザのブラウジングの好みを指定し、ユーザの好みのビューは記述子<Views>によって指定される。各カテゴリに対し、好ましいビューはカテゴリidに対応するid属性と共に記述子<ViewCategory>によって指定される。記述子<FrameFrequency>はフレームビューの元でブラウジングスライダにフレームをどれだけのインターバルでディスプレイすべきかを指定する。記述子<ShotFrequency>はショットビューの元でブラウジングスライダにショットをどのインターバルでディスプレイすべきかを指定する。ディスプレイ<KeyFrameLevel>はキーフレームビューの元でブラウジングスライダにキーフレームをどのレベルでディスプレイすべきかを指定し、記述子<HighlightLength>はハイライトビューの元でハイライトのどのバージョンを示すべきかを指定する。
【0156】
・フィルタリングの好み
【0157】
【表33】
Figure 0004107811
【0158】
記述子<FilteringPreferences>はユーザのフィルタリングに関連する好みを指定する。
【0159】
・サーチの好み
【0160】
【表34】
Figure 0004107811
【0161】
記述子<SearchPreferences>はユーザのサーチに関連した好みを指定する。
【0162】
・デバイスの好み
【0163】
【表35】
Figure 0004107811
【0164】
記述子<DevicePreferences>はユーザのデバイスの好みを指定する。
【0165】
利用の履歴
・ブラウジングの履歴
【0166】
【表36】
Figure 0004107811
【0167】
記述子<BrowsingHistory>はユーザのブラウジングに関連した活動の履歴を捕捉する。
【0168】
・フィルタリングの履歴
【0169】
【表37】
Figure 0004107811
【0170】
記述子<FilteringHistory>はユーザのフィルタリングに関連した活動の履歴を捕捉する。
【0171】
・サーチの履歴
【0172】
【表38】
Figure 0004107811
【0173】
記述子<SearchHistory>はユーザのサーチに関連した活動の履歴を捕捉する。
【0174】
・デバイスの履歴
【0175】
【表39】
Figure 0004107811
【0176】
記述子<DeviceHistory>は、ユーザのデバイスに関連した活動の履歴を捕捉する。
【0177】
ユーザの人口統計学的統計値
・年齢
【0178】
【表40】
Figure 0004107811
【0179】
記述子<Age>は、ユーザの年齢を指定する。
【0180】
・性
【0181】
【表41】
Figure 0004107811
【0182】
記述子<Gender>は、ユーザの性を指定する。
【0183】
・郵便番号
【0184】
【表42】
Figure 0004107811
【0185】
記述子<ZIP>はユーザの住んでいる場所の郵便番号を指定する。
【0186】
システム記述スキーム
提案されたシステム記述スキームはユーザを記述するための4つの主な部分を含む。第1部分は記述されたシステムを識別し、第2部分はすべての既知のユーザのリストを維持し、第3部分は利用可能なプログラムのリストを維持する。第4部分はシステムの機能を記述する。従って、提案された記述スキームの全構造は次のとおりである。
【0187】
【表43】
Figure 0004107811
【0188】
システムアイデンティティ
・システムID
【0189】
【表44】
Figure 0004107811
【0190】
記述子<SystemID>は、動画システム又はデバイスを識別するための番号又はストリングを含む。
【0191】
・システム名
【0192】
【表45】
Figure 0004107811
【0193】
記述子<SystemName>は、動画システム又はデバイスの名称を指定する。
【0194】
・システムシリアル番号
【0195】
【表46】
Figure 0004107811
【0196】
記述子<SystemSerialNumber>は動画システム又はデバイスのシリアル番号を指定する。
【0197】
システムユーザ
・ユーザ
【0198】
【表47】
Figure 0004107811
【0199】
記述子<SystemUser>は動画システム又はデバイス上に登録された多数のユーザをリストアップする。各ユーザは記述子<User>によって指定され、記述子<UserID>はユーザ記述スキームのうちの1つにおいて<UserID>で指定される番号又はストリングと一致すべき番号又はストリングを指定する。
【0200】
システム内のプログラム
・カテゴリ
【0201】
【表48】
Figure 0004107811
【0202】
記述子<Category>は動画システム又はデバイスに登録された多数のカテゴリをリストアップする。各カテゴリは記述子<Category>によって指定され、カテゴリ間の主なサブ関係は記述子<SubCategory>によって捕捉される。
【0203】
・チャネル
【0204】
【表49】
Figure 0004107811
【0205】
記述子<Channels>は動画システム又はデバイスに登録された多数のチャネルをリストアップし、各チャネルは記述子<Channel>によって指定され、チャネル間の主なサブ関係は記述子<SubChannel>によって捕捉される。
【0206】
・プログラム
【0207】
【表50】
Figure 0004107811
【0208】
記述子<Programs>は動画システム又はデバイスで利用できるプログラムをリストアップする。プログラムは対応するカテゴリ又はチャネルに従ってグループ分けされ、プログラムの各グループは記述子<CategoryPrograms>又は<ChannelPrograms>によって指定される。記述子<Programs>に含まれる各プログラムidは、プログラム記述スキームのうちの1つにおける<ProgramID>で指定される番号又はストリングと一致しなければならない。
【0209】
システム機能
・ビュー
【0210】
【表51】
Figure 0004107811
【0211】
記述子<Views>は、動画システム又はデバイスによってサポートされるビューをリストアップする。各ビューは記述子<View>によって指定され、記述子<ViewName>はプログラム記述スキーム内で使用される次のビュー、すなわちサムネイルビュー,スライドビュー,フレームビュー,ショットビュー,キーフレームビュー,ハイライトビュー、イベントビュー,クローズアップビューのうちの1つと一致しなければならないストリングを含む。
【0212】
本発明者は、更に、別のケーパビリディを提供するようにプログラム記述スキームを改善するに至った。
図13は、シンタックス構造記述スキーム,セマンティック構造記述スキーム,可視化記述スキーム,メタ情報記述スキームを含むプログラム記述スキームの他の実施形態を示す図である。改良されたプログラム記述スキーム400は4つの別個のタイプの情報、すなわちシンタックスの構造記述スキーム402と、意味構造記述スキーム404と、可視化記述スキーム406と、メタ情報記述スキーム408とを含む。特定のどのシステムでも、必要に応じて1つ以上の記述スキームを含むことができると理解すべきである。
【0213】
図14は、図13の可視化記述スキームの実施形態を示す図である。可視化記述スキーム406は、好ましくはワンステッププロセスにて、必要なデータへのアクセスを認めることにより、動画プログラム(及びオーディオプログラム)の高速かつ有効なブラウジングを可能にする。この可視化記述スキーム406は、動画コンテンツ(又はオーディオ)のいくつかの異なるプレゼンテーション、例えば、サムネイルビュー記述スキーム410,キーフレームビュー記述スキーム412,ハイライトビュー記述スキーム414,イベントビュー記述スキーム416,クローズアップビュー記述スキーム418,代替ビュー記述スキーム420を提供したものである。必要に応じて他のプレゼンテーション技術及び記述スキームを追加できる。
【0214】
サムネイルビュー記述スキーム410は、画像又は動画コンテンツを示す画像に対する基準(画像インジケータ422)及び動画に対する時間基準424を含むことが好ましい。キーフレームビュー記述スキーム412はレベルインジケータ426及び時間基準428を含むことが好ましい。レベルインジケータ426はユーザの好みに応じた同じ動画部分に対する異なる数のキーフレームのプレゼンテーションに適合する。ハイライトビュー記述スキーム414は、長さインジケータ430及び時間基準432を含む。この長さインジケータ430は、ユーザの好みに応じた動画の異なるハイライト時間のプレゼンテーションに適合する。イベントビュー記述スキーム416は、所望するイベントを選択するためのイベントインジケータ434及び時間基準436を含むことが好ましい。クローズアップビュー記述スキーム418は、ターゲットインジケータ438及び時間基準440を含むことが好ましい。代替ビュー記述スキーム420はソースインジケータ442を含むことが好ましい。システムの性能を高めるには、集中的かつストレートフォワードに、かかるビューをレンダリングするのに必要なデータを指定することが好ましい。このようにすることにより、動画を複雑に解析することなく、単純なワンステッププロセスでデータにアクセスすることが可能となる。
【0215】
図15は、図13のメタ情報記述スキームの実施形態を示す図である。メタ情報記述スキーム408は、一般に種々のデスクリプタを含み、これらデスクリプタは動画(又はオーディオ)プログラムに関する一般的情報、例えばタイトル,カテゴリ,注釈,キーワード,日付/時刻などを運ぶようになっている。追加デスクリプタ、例えば先に説明したようなデスクリプタを必要に応じて含めることもできる。
【0216】
再び図13を参照すると、シンタックス構造記述スキーム402は動画(又はオーディオ)プログラムの物理的構造、例えばコンテンツのテーブルを指定する。物理的特徴には、例えばカラー、テクスチャ、動きなどが含まれる。シンタックス構造記述スキーム402は、3つのモジュール、すなわちセグメント記述スキーム450と、領域記述スキーム452と、セグメント/領域関連グラフ記述スキーム454とを含むことが好ましい。セグメント記述スキーム450を使用して、多数のフレームの動画から成る動画の異なる部分の間の関係を定めることができる。1つのセグメント記述スキーム450はセグメントツリーを形成するための別のセグメント記述スキーム450及び/又はショット記述スキームを含むことができる。かかるセグメントツリーは、動画プログラムの時間的構造を定めるのに使用できる。多数のセグメントツリーを形成し、よってコンテンツの多数のテーブルを形成できる。例えば動画プログラムをストーリーユニット,シーン,ショットにセグメント化することができ、これらからセグメント記述スキーム450はコンテンツのテーブルとして、かかる情報を含むことができる。
【0217】
図16は、図13のシンタクティック構造記述スキームのためのセグメント記述スキームの実施形態を示す図で、セグメント記述スキーム450の一例が示されている。ショット記述スキームは多数のキーフレーム記述スキーム,モザイク記述スキーム,カメラ動き記述スキーム,注釈などを含むことができる。キーフレーム記述スキームは、静止画像記述スキームを含むことができ、この静止画像記述スキームはカラー及びテクスチャデスクリプタを含むことができる。セグメント記述スキームによる静止画像記述スキームには種々の低レベルデスクリプタを含むことができることに留意されたい。更に、必ずしも静止画像記述スキーム下にない領域記述スキームにビジュアルデスクリプタが含まれることもある。
【0218】
図17は、図13のシンタクティック記述スキームのための領域記述スキームの実施形態を示す図である。領域記述スキーム452は動画の同一及び/又は異なるフレームのピクセルのグループの間の相互関係を定める。領域記述スキーム452は幾何学的特徴,カラー/テクスチャの特徴,動きの特徴,注釈なども含むことができる。
【0219】
図18は、図13のシンタクティック構造記述スキームのためのセグメント/領域関係記述スキームの実施形態を示す図である。セグメント/領域関係グラフ記述スキーム454は、複数の領域(又は領域記述スキーム)と、複数のセグメント(又はセグメント記述スキーム)の基準をもち、及び/又は複数の領域(又は記述スキーム)及びセグメント(又は記述スキーム)の間の相互の関係を定める。
【0220】
再度、図13を参照すると、動画プログラム(又はオーディオ)のセマンティックな特徴、例えばセマンティックな(意味的な)イベントを指定するのに、セマンティック構造(意味構造)記述スキーム404を使用する。シンタックス構造記述スキームと同じように、このセマンティック構造記述スキーム404は、3つのモジュール、例えばイベント記述スキーム480と、オブジェクト記述スキーム482と、イベント/オブジェクト関係グラフ記述スキーム484を含むことが好ましい。通常、多数のフレームの動画から成る動画の異なるイベント間の関係を形成するのに、イベント記述スキーム480を使用できる。1つのイベント記述スキーム480はセグメントツリーを形成するのに別のイベント記述スキーム480を含むことができる。かかるイベントセマンティックツリーを使用して動画プログラムのためのセマンティックインデックステーブルを定めることができる。多数のイベントツリーを形成し、多数のインデックステーブルを形成できる。例えば動画プログラムは多数のイベント、例えばバスケットボールのダンクシュート,ファストブレーク,フリースローを含むことができ、イベント記述スキームはかかる情報、例えばインデックステーブルを含むことができる。
【0221】
図19は、図13のセマンティック記述スキームのためのイベント記述スキームの実施形態を示す図で、イベント基準の一例が示されている。イベント記述スキーム480は、シンタクティック構造記述スキーム内に指定される対応するセグメント及び/又は領域にイベントがリンクする基準や、イベントのタイプ、イベント行動記述スキーム、注釈などを含むことができる。
【0222】
図20は、図13のセマンティック構造記述スキームのためのオブジェクト記述スキームの実施形態を示す図である。オブジェクト記述スキーム482はオブジェクトを示す同一及び/又は異なるフレームの動画のピクセルのグループ間の相互の関係を定める。オブジェクト記述スキーム482は、別のオブジェクト記述スキームを含み、よってオブジェクトツリーを形成する。かかるオブジェクトツリーを使用して動画プログラムのためのオブジェクトインデックステーブルを定めることができる。オブジェクト記述スキーム482は、シンタックスの構造記述スキームで指定される、対応するセグメント及び/又は領域にオブジェクトをリンクする基準や、オブジェクトのタイプ、オブジェクト行動記述スキーム、注釈なども含むことができる。
【0223】
図21は、図13のシンタクティック構造記述スキームのためのイベント/オブジェクト関係グラフ記述スキームの実施形態を示す図である。イベント/オブジェクト関係グラフ記述スキーム484は、複数のイベント(又はイベント記述スキーム),複数のオブジェクト(又はオブジェクト記述スキーム),及び/又は複数のイベント(又は記述スキーム),オブジェクト(又は記述スキーム)間の相互関係を定める。
【0224】
さらなる考察の結果、本発明者達は、ユーザの好みの記述スキームの特定の設計が、ユーザの好みを記述するユーザ好み記述スキームの最適な更新を確保しながらそのポータビリティを実現するために重要であることに気付いた。さらに、ユーザ好み記述スキームは、ユーザのこれまでの使用履歴パターンに基づく変更に適していると同時に、システムによって直ちに使用できねばならない。特定デバイスの全ユーザを集合的に追跡しそのデバイスのユーザの好み視聴履歴に関するデータベースを構築し、その後は、データを動的に処理して個々のユーザが視聴を望むであろうコンテンツを決定することが可能である。しかしながら、これを実現するには大量のデータを記憶する蓄積デバイスを要し、ユーザの好みを決定するために関連する動的処理条件を必要とする。ユーザ好み記述スキームは、単独又は他の記述スキームと組み合わせて使用することができる。
【0225】
図22は、ユーザ好み記述スキームの実施形態を示す図である。ポータビリティと処理条件の軽減を達成するために、ユーザ好み記述スキーム20は少なくと2つの独立したスキーム、即ち、使用好み記述スキーム500と使用履歴記述スキーム502に分割されているべきである。これらは、それぞれ独立していても良い。使用好み記述スキーム500は、後で詳述するが、ユーザのオーディオ及び/又は動画の視聴好み記述スキームを含む。使用好み記述スキーム500は、特定の実装に依存するが、ユーザの(a)ブラウジング好み、(b)フィルタリングの好み、(c)サーチ好み、及び(d)デバイス好みのうち1つ又は複数を記述する。使用好み記述スキーム500に示される好みのタイプは、通常、入手可能なオーディオ及び/又は動画コンテンツを選択するか使用するシステムにより直ちに使用可能である。言い換えれば、使用好み記述スキーム500は、ユーザのオーディオ及び/又は動画の消費量を記述するデータを含んでいる。使用履歴記述スキーム502は後で詳述するが、ブラウジング,デバイスの設定,視聴,選択のようなユーザのオーディオ及び/又は動画に関する活動履歴を含む。使用履歴記述スキーム502は、特定の実装に依存するが、ユーザの(a)ブラウジング履歴、(b)フィルタリング履歴、(c)サーチ履歴、(d)デバイス履歴、及び(e)ブラウジング,フィルタリング,サーチ等の動作をした日時の1つ又は複数を記述する。使用履歴記述スキーム502に示される好みのタイプは、通常、入手可能なオーディオ及び/又は動画コンテンツを選択するか使用するシステムにより直ちに使用することはできない。使用履歴記述スキーム502に含まれているデータは、通常視聴者のオーディオ及び/又は動画の使用履歴データを含んでいるので、少なくとも使用好み記述スキーム500に含まれているデータと比較すると、一般的に“未処理”であると考えられる。
【0226】
一般に、ユーザが視聴及び選択したプログラムやプログラムのブラウジング手法などの使用履歴を記録し、様々なアルゴリズムを利用することで、マシンはユーザ好み情報を自動的に作成することができる。ユーザ履歴記述スキームを利用することで、使用好み記述の更新が実現できる。アルゴリズムの一例として、履歴情報の統計値を算出して、好み情報の作成をおこなうことができる。
履歴情報と好み情報を独立して管理しているため、好み情報の更新は適宜できる。このため、ユーザの好み作成を行うのに十分でないマシン(モバイル端末など)では、履歴情報のみ記録しておき、後に好み作成処理をおこなうのに十分なマシンに履歴情報を移して、好み情報を更新するということが可能である。また、同一ユーザの複数の履歴情報から一つの嗜好情報を作成するといったことも可能である。
また、マシンがユーザの視聴履歴情報及び好み情報を持っていることにより、ユーザがマシンの電源を切った後、再度電源を入れるとき、履歴情報から続きを自動的に視聴させることも可能であるし、好み情報から新しいプログラムを推薦するといったことをユーザに提供することもできる。
【0227】
ユーザ好み記述スキーム500と使用履歴記述スキーム502を検討後、発明者達は、家庭環境において、視聴及び使用の好みが異なる多数の異なるユーザが同一のデバイスを使用することに気付いた。例えば、スポーツを好む1人の成人男性と、午後のトークショーを好む1人の成人女性と、子供番組を好む3歳の1人の幼児の場合、ユーザ好み記述スキーム500と使用履歴記述スキーム502に含まれている総合情報は、どの特定のユーザにも個人的には不適当である。結果として得られる合成データをデバイスで使用すれば、デバイスは、各々のユーザに適したオーディオ及び/又は動画コンテンツを正しく選択し提示することができないのでユーザ全員を欲求不満にさせる。この制限条件を低減させるために、ユーザ好み記述20には、ユーザID(ユーザ識別子)記述504を含むことができる。ユーザID記述スキーム504は、デバイスを使用中の特定ユーザのIDを含んでいる。ユーザID記述スキーム504を含ませることにより、複数のユーザがそのデバイスを使用でき、同時に、ユーザ好み記述スキーム500と使用履歴記述スキーム502内に異なる又はユニークな1組のデータを保持できる。従って、ユーザID記述504は、そのID記述で特定される特定ユーザの適当なユーザの好み記述スキーム500と使用履歴記述スキーム502を関係付ける。ユーザID記述504の場合、異なるユーザを識別する単一ユーザID記述504内に複数のエントリを設けること及び/又はユーザ好み記述スキーム500と使用履歴記述スキーム502内にユーザID記述504を含ませて関係を付けることにより、複数の異なるユーザが各々独自性を維持しながら同一デバイスを容易に使用することができる。又、好み及び/又は履歴にユーザID記述が無い場合、ユーザは、コンテンツを匿名でより容易にカスタム化できる。
【0228】
さらに、ユーザID記述504は、複数セットの使用好み記述500と使用履歴記述502を識別するために使用でき、ユーザは使用条件により同デバイスとの対話のためにその中から選択することができる。同じユーザがテレビ受像機,ホームステレオ,ビジネス用テレビジョン,ホテルのテレビジョン及び自動車のオーディオプレーヤのような複数の異なるデバイスを使用し複数の異なる好み記述のセットを有している場合は、複数のユーザID記述を使用するのも有効である。さらに、IDは、例えば家族のような、個人のグループを識別するためにも使用できる。さらに、ホテルの部屋又はレンタルカーのような一時的に使用するデバイスの場合は、デバイスにより指定された一時的なユーザIDを採用することにより、ユーザIDの要求を無効にすることができる。プライバシー問題が解決できるか或いは問題が無い機器の場合、ユーザID記述子504は、ユーザの人口統計学的情報を含むことができる。このように、使用履歴記述502が使用期間と共に増大するに従い、この人口統計学的データ及び/又は使用パターンに関するデータは、他のソースにも使用可能になる。データは、例えば、かようなデータに基づきデバイス上で特定目的の広告又はプログラムの作成等の目的に使用することができる。
【0229】
図23は、使用履歴記述スキームとエージェントと図22のユーザ好み記述スキームとの間の相互関係の実施形態を示す図である。周期的に、エージェント510は、特定ユーザの使用履歴記述502を処理しその特定ユーザの好みを“自動的に”決定する。このようにして、ユーザ使用好み記述500は使用履歴記述502に蓄積されたデータを反映するように更新される。エージェント510によるこの処理は、好ましくは、ユーザの現在のブラウジング,フィルタリング,サーチ及びデバイス好みを決定するために使用履歴記述502を処理又は参照する必要がない通常の運転期間において、周期的に実行される。使用好み記述500は、前述したように、比較的コンパクトで、スマートカードのような携帯蓄積デバイスに適している。
【0230】
ユーザは自分の使用好み記述500を含んでいるスマートカードを持って自宅から出ることもしばしば生じる。かような外出中にも、ユーザは、自分の使用好み記述500を入れたデバイス上で、オーディオ及び/又は動画コンテンツのブラウジング,フィルタリング,サーチ及びデバイス設定に関する好みを多分実現させる。しかしながら、或る状況においては、ブラウジング,フィルタリング,サーチされるオーディオ及び/又は動画コンテンツも普段興味を持っているものではなく、またデバイス好みも違うことがある。さらに、単一デバイスの場合、ユーザはフットボールシーズン,バスケットボールシーズン,野球シーズン,秋,冬,夏及び春のような季節によって、1つのプロフィル以上のものを希望することがある。従って、デバイスが使用履歴記述502を生成し、その後、エージェント510に自動的に使用好み記述500を更新させるのは、この場合適当ではない。これは、ユーザの使用好み記述500を実際には改悪することになる。従って、デバイスは、エージェント510を無能化し使用好み記述500を更新させないオプションを含むべきである。別の方法として、ユーザ好み記述20の一部に、ユーザが使用好み記述500(又はその一部)の更新を望むか否かを示す1つ以上のフィールド又はデータ構造を含ませてもよい。
【0231】
図24は、記述子を含むオーディオ及び/又は動画プログラムと、ユーザの識別ラベル(ID)と図22の使用好み記述スキームとの間の相互関係の実施形態を示す図である。デバイスは、適当なソースにより提供される、現在及び/又は時間的に先のプログラムを記述したプログラム記述を使用でき、そこから、フィルタリングエージェント520が特定ユーザのために適当なコンテンツを選択する。コンテンツは、特定ユーザのIDに対する使用好み記述に基づき好みとして選択され、選択されたオーディオ及び/又は動画プログラムのリストを決定される。
【0232】
比較的にコンパクトなユーザの好み記述500を用いれば、パーソナルビデオレコーダ,TiVoプレーヤ,リプレイネットワークプレーヤ,カーオディオプレーヤ又は他のオーディオ及び/又は動画機器のような異なるデバイスに、ユーザの好みを容易に移送できる。ユーザ好み記述500は、ユーザのブラウジング,フィルタリング,サーチ及びデバイス好みに従って更新できる。
【0233】
図25は、図22の使用好み記述スキームの実施形態を示す図である。使用好み記述500は好ましくは、特定の実装によるが、3つの異なるカテゴリの記述を含む。好ましい記述は、(a)ブラウジング好み記述530と(b)フィルタリング・サーチ好み記述532と(c)デバイス好み記述534とを含む。ブラウジング好み記述530は、オーディオ及び/又は動画プログラムの視聴の好みに関する。フィルタリング・サーチ好み記述532は、オーディオ及び/又は動画プログラムのレベルの好みに関する。このプログラムレベル好みは、必ずしも、(ブラウジング)視聴好みと同時に使用しなくてよい。例えば、好ましいプログラムは、ユーザのフィルタリング好みによるプログラム記述のフィルタリング結果として決定することができる。特定の好ましいプログラムは、ユーザのブラウジング好みに従って逐次見ることができる。従って、効率的な実体化は、ブラウジング好み記述530をフィルタリング及びサーチ好み記述532から少なくとも論理的に分離させることにより達成できる。デバイス好み記述534は、デバイスを提示するコンテンツの種類(例えば、ロマンス,ドラマ,アクション,暴力,夕方,朝,日中,週末,ウィークデーの番組及び/又は使用可能な提示デバイス)に対して設定するための好みに関する。例えば、提示デバイスは、ステレオサウンド,モノサウンド,サラウンドサウンド,多重ポテンシャルディスプレイ,オーディオスピーカの複数の異なるセット,AC−3,ドルビーディジタルを含むことができる。デバイス好み記述534も、同様に、ブラウジング好み記述530とフィルタリング及びサーチ好み記述532から少なくとも論理的に独立していることが観察できよう。
【0234】
ブラウジング好み記述530は、マルチメディア(オーディオ及び/又は動画)情報をブラウジングするためのユーザの好みを記述する記述子を含んでいる。動画の場合、例えば、ブラウジング好みはプログラムの短い要約の目視から全プログラムを連続再生するユーザの好みまでを含んでいる。種々の要約種類は、プログラムの複数の異なるビューを記述するプログラム記述に記述できる。尚、これらの記述は、デバイスにより利用され、迅速非線形ブラウジングと目視とナビゲーションを容易にする。種々の要約タイプのパラメータ、即ち、キーフレーム要約を選択する場合は階層レベル番号、ハイライト要約を選択する場合は動画ハイライトの時間長さを規定しなければならない。さらに、ブラウジング好みは、親と子の関係の制御設定を記述する記述子を含むことができる。ユーザに相談することなく好みを変更できるか否かを示す(ユーザが設定した)スイッチ記述子も含まれねばならない。これにより、デバイスによる不注意な変更又は更新を防止できる。さらに、ブラウジング好みはメディアのコンテンツに依存するのが望ましい。例えば、ユーザはバスケットボールの試合の15分間動画ハイライトを見るか、スリーポイントショットのみを見るか、どちらかを優先させることができる。ユーザは、ホームビデオの場合、2つの階層レベルでのキーフレーム要約のいずれかを優先選択することができる。
【0235】
フィルタリング・サーチ好み記述532は、特定の実施形態に応じて、4つの定義された記述子を含むのが好ましい。キーワード好み記述540は、タイトル,カテゴリ等の情報に補捉されない大好きなトピックスを指定するために用いられる。これにより、いかなる使用可能なデータフィールドでも、エントリに一致する問合わせを受理することができる。コンテンツの好み記述542は、例えば大好きな俳優や、監督を探し出すのを容易にするために用いられる。作品好み記述546は、例えば、大好きなショーのタイトルの入手を指定するために用いられる。分類好み記述544は、例えば、大好きなプログラムカテゴリに対する記述を指定するために用いられる。前述のように、ユーザが起動するスイッチ記述子は、ユーザに相談することなく好みを変更できるか否かを指定するために用いられる。
【0236】
デバイス好み記述534は、音量,バランス,低音,高音,輝度,コントラスト,字幕,AC−3,ドルビーディジタル,どのディスプレイデバイスか、ディスプレイデバイスのタイプ等のオーディオ及び/又は動画の選択された表現設定を記述する記述子を含む。デバイスの設定は、ユーザがオーディオ及び/又は動画コンテンツをブラウジングし消費する方法に関する。メディアのタイプとコンテンツに応じてデバイスの設定好みを指定できることが望ましい。例えば、アクション映画の場合、選択された音量設定はドラマの場合より高い。また、クラシック音楽とロック音楽の場合の低音の選択設定は異なる。ユーザが起動するスイッチ記述子は、前述のように、ユーザに相談することなく好みを変更できるか否かを指定するために用いられる。
【0237】
図26は、図22の使用好み記述スキームとMPEG−7の記述スキームとの間の相互関係の実施形態を示す図である。使用好み記述は、MPEG−7に順応したデータストリーム及び/又はデバイスと協同して使用することができる。MPEG−7記述子は、明細書中で参照するISO/IEC JTCI/SC29/WG11 "MPEG−7 Media/Meta DSs(Vo.2)"(1999年8月)に記載されている。メディアコンテンツの記述は、メディアを消費するユーザ好みの記述と関連することが好ましい。これは、メディアとユーザ好み記述において共通の記述子を使用するか、又は、ユーザ好みとメディア記述子間の関連を規定することにより実現できる。ブラウジング好み記述は、メディアの異なるビュー及び要約を記述したメディア記述と関連することが好ましい。コンテンツ好み記述542は、例えばコンテンツ記述スキームによりMPEG−7で指定されたメディアのコンテンツ記述552のサブセットと関連することが好ましい。分類好み記述554は、例えば、MPEG−7で分類記述スキームとして指定された分類記述554のサブセットと関連することが好ましい。作品好み記述546は、例えば、MPEG−7で作品記述スキームにより指定された作品記述556の作品記述のサブセットと関連することが好ましい。キーワード好み記述540は、複数の言語を支持するストリングであり、対応メディアコンテンツ記述スキームと関連することが好ましい。メディアとユーザの好み記述間の関連は、図26に、コンテンツ,作品及び分類の好みの各々の場合につき両方向の矢印で示してある。
【0238】
図27は、図22の使用履歴記述スキームの実施形態を示す図である。使用履歴記述502は好ましくは、特定の実装に依存するが、3つの異なるカテゴリの記述を含む。好まれる記述は、使用好み記述500に関し前述したように、(a)ブラウジング履歴記述560と(b)フィルタリング・サーチ履歴記述562と(c)デバイス履歴記述564を含む。フィルタリング・サーチ履歴記述562は、特定の実施形態に応じて、好みに関し前述した、4つの定義された記述子、即ち、キーワード使用履歴記述566,コンテンツ使用履歴記述568,作品使用履歴記述570,分類使用履歴記述572を含むことが好ましい。使用履歴記述502は、保有情報の時間及び/又は期間を記述する追加の記述子(又は、望むならば記述)を含むことができる。時間は、特定のオーディオ及び/又は動画プログラムを消費する期間に関する。特定プログラムが視聴された時間(期間)は、ユーザの好みを決定するために利用できる情報を提供する。例えば、ユーザがショーを5分間見るだけなら、使用好み記述500に含めるには適した好みではない。さらに、本発明者達は、特定のオーディオ及び/又は動画プログラムに対するユーザの好みのより正確な尺度は、そのプログラムの総時間を考慮した視聴時間であることに気付いた。これは、プログラムの相対的視聴期間を意味する。例えば、4時間のショーを30分間見るのは、30分のショーを30分間見るより、使用好み記述500に含ませる好みデータを決定する際の適切度は低くなる。
【0239】
図28は、ユーザの履歴記述スキームを含むシステムの実施形態を示す図で、半永久的な蓄積装置を持つオーディオ及び/又は動画プログラム受信機の1例が図示されている。図に見られるように、この受信機は、半永久的な蓄積装置601を有し、オーディオ/動画(AV)プログラムの記述600は、放送又は電話線のような他のソースから入手できるように構成されている。ユーザ好み606の記述は、ブラウザ603によるブラウジング,フィルタリング・サーチシステム604におけるフィルタリング及びサーチ、ディスプレイ602等におけるデバイスの設定に関し、個人専用化を容易にする。この実施態様において、ユーザの好み606はユーザの端末に蓄積され、例えばスマートカード607を介して他のシステムに伝送することができる。別の方法では、ユーザの好みをサーバに蓄積し、コンテンツの適応化は、サーバにおいてユーザ記述に従い実施し、好ましいコンテンツをユーザに伝送する。ユーザ611は、望むならば、使用好み606を直接供給することができる。ユーザ好み606及び/又は使用履歴609も同様にサービスプロバイダ610に供給される。このシステムは、先述のように使用履歴記述の形式でユーザ使用履歴を記録するアプリケーションを採用する。使用履歴記述は、次に、他のアプリケーション、例えばスマートエージェントで利用され、変換システム608により使用履歴609がユーザの好み606に自動的にマッピングされる。
【0240】
記述及び記述スキームにおける追加の属性と記述子
発明者達は、記述及び記述スキームに特定タイプの情報を取入れることにより本システムに機能性を追加できることに気付いた。記述スキームは、記述のデータモデルであり、複数の記述子と、記述子が使用されている記述のシンタックスを指定する。以後、記述と記述スキームの用語は、両方共メディアとユーザの好みの記述に対応しているので、互換性のある用語として使用する。記述に使用される追加の属性と記述子について説明し、記述例の各部分例を提示する。
【0241】
さらなる考察により、多くのユーザが複数のユーザ好み記述を保持する必要があることが認識された。複数のユーザ好み記述は、例えば、異なる場所(例えば、家庭,職場,外出先,停車,移動時の自動車)、異なる状況、異なる時間(例えば、異なる日,異なる季節)、ユーザの異なる情緒状態(例えば、幸福な気分であるか、或いは、ウンザリした気分又は悲しい気分であるか)及び/又は持続性(例えば、一時的使用であるのか、或いは、継続使用であるのか)に対応する。さらに、ユーザ好み記述は、異なる主要機能を有する種々の端末(例えば、パーソナルビデオレコーダであるのか、或いは、セルラ電話であるのか)を区別する記述を含むことができる。さらに、異なる場所又は状況において使用可能な通信チャネルの周波数帯域幅は、異なる好みを用いることができる。又、ダウンロード用動画プログラムのオーディオビジュアル要約の長さに関するユーザ好みも種々異なる。異なる使用条件においてユーザは、異なるデバイス及び/又はサービスを区別するベースとしてユーザのID記述を使用することができる。例えば、異なる条件の例として、テレビジョン放送の受像機とセルラ電話がある。
【0242】
上記条件に基づく1人の特定ユーザのために複数のユーザ好みを維持することの他に、本発明者達は、異なる場所,異なる状況,異なる情緒状態,異なる季節,異なる端末等のいずれか1つ又は複数を、ユーザの好み記述を区別するベースとして同様に使用することができることに気付いた。
【0243】
特定ユーザが好み記述を複数持つことを許容し、それらの好み記述を互いに区別する1つの技術は、異なるユーザ名を使用するか、後述するように、ID記述スキームにバージョン記述子を用いる変形の機構を使用するものである。
【0244】
前述したように、システムは、1人の特定ユーザに対して複数のユーザ好みを含むことができる。複数記述の場合、システムは、異なるユーザ好みを異なる細分度(granularity)、例えば、項目量の大小によって表現する。低い細分度(散在性)は、ユーザ好みをフィルタにかけてデータ量をさらに減少させる結果となる。換言すれば、使用好み記述の構造は、データをさらに減少させるフィルタ処理の結果である差分と同じである。別の実施態様では、細分度を可変にすれば、ユーザ好みに含まれているデータサイズを、望むならばユーザの場所及び/又はアプリケーションに基づき、変化させる結果を得る。細分度の低い(粗野度の高い)ユーザ好みは、蓄積量が制限されたポータブルメモリデバイスに蓄積するのに特に適している。同様に、細分度は、使用履歴にも適用できる。
【0245】
本発明の別の実施態様においては、ユーザ好み(及び履歴)をメディアタイプ、ソース又はコンテンツ(例えば、音楽であるか或いは動画であるか、ラジオであるか或いはテレビ放送であるか、及び/又は、スポーツビデオであるか或いはホームビデオであるか)に基づかせることができる。これらの好みは、マルチメディアの好ましさの第三者特性とは対照的に、オーディオ及び/又は動画そのものに関する。この情報を含むことにより、メディアタイプ,ソース又はコンテンツによるコンピュータ処理条件が軽減される。
【0246】
本システムに含まれ得る別の特徴は、ユーザ記述の各又は選択された1セットの構成要素に対する保護属性である。保護属性は、システム又はプロバイダのアクセス権を、典型的にはユーザ本人以外の関係者のアクセス権を、ユーザの記述又はその構成要素に指定する。1実施例において、保護属性は、かようなデータへの他者のアクセスを許すユーザの意向を指定できる。保護属性を実装する1つの技法は、保護属性を、ユーザ記述スキームの全関連部分が含む基本属性として導入することである。
【0247】
ブラウジング好みに対する記述子及び記述スキームは、ISO/IEC JTC1/SC29WG11 N3246 "MPEG−7 Generic AVDescription Schemes,Working Draft V2.0(2000年3月,Noordwijkerhout)に記載されている特定種類のマルチメディア要約記述スキームに適合させることができる。これにより、ユーザはオーディオビジュアルプログラムの特定の視覚要約の種類を指定し、視覚ハイライト形式要約の時間を指定することができる。しかしながら、さらに検討の結果、本発明者達は、オーディオビジュアル要約内の好ましい最小及び最大データ量の仕様がシステムのケイパビリティを著しく高めることを確認した。かような規定により、例えば、ユーザが、異なる制限を有する端末を用い、制限された帯域幅のチャネルでコンテンツのオーディオビジュアル要約を有効にブラウジングするケイパビリティを提供する。帯域幅が制限されたチャネルに接続した端末の場合、ユーザは、プログラムの比較的短いハイライトに対する好みを指定し、高い帯域幅のチャネルに接続した端末の場合は、プログラムの長いハイライトに対する好みを指定することができる。尚、かようなチャネルは、移動局チャネルとケーブルチャネルである。さらに、動画速度でフレームを表示できない端末の場合、ユーザは通信チャネルの帯域幅に適した最大数のキーフレームより成るキーフレーム要約を選択することができる。これらのケイパビリティ強化を達成するために、本発明者達は、ブラウジング好み記述(及び記述スキーム、又は他の好み記述)内に、キーフレームの最小,最大,正確な数とオーディオ及び/又は動画ハイライトの最小,最大,正確な期間を指定する記述子を用いることを提案する。
【0248】
前述のように、記述スキームは、視覚資料の好ましい最小及び最大量を表現するのに適応可能であり、異なる視聴好みと端末及び通信チャネルの帯域幅の制限にも適応できる。この実装は、下記の記述子をブラウジング好み記述スキームに含むことにより達成できる。
【0249】
MaxNumOfKeyframes,MinNumOfKeyframes,NumOfKeyframes,MaxSummaryDuration,MinSummaryDuration,SummaryDuration
【0250】
好み記述子<MaxNumOfKeyframes>と<MinNumOfKeyframes>は、各々、動画プログラムのキーフレーム要約中のキーフレームの最大数と最小数を指定する。<NumOfKeyframes>は、キーフレーム数の標準値を指定する。ユーザが普段使用する既知の接続の既知の周波数帯域幅に応じて、ユーザはこれらの記述子を指定することができる。記述子<MaxSummaryDuration>と<MinSummaryDuration>は、各々、オーディオビジュアルハイライト要約の最大時間長と最小時間長を指定する。<SummaryDuration>は、ハイライト要約の標準時間を指定する。再び、ユーザの愛好と端末及びチャネルの制限に応じて、ユーザはこれらの記述子を指定することができる。記述子<MaxSummaryDuration>と<MinSummaryDuration>は、オーディオ信号の好みに適用でき、又、オーディオハイライトをオーディオスキミング法により生成する場合に適用される。図24のフィルタリングエージェント520によりユーザのブラウジング好み記述とメディア記述を相互に関係付け、ユーザの好み記述に一致する要約記述を含むメディア記述を決定し、選択されたタイプの要約に関連する要約メディア記述を含めてユーザに提供できるようにする。
【0251】
プログラムの要約抽象の忠実度(fidelity)が記述される場合に、汎用マルチメディアアクセスアプリケーション用の抽象忠実度記述子が追加の記述子として導入できる。これは、ISO/IEC JTC1/SC29 WG11N3246 "MPEG−7 Multimedia Description Schemes,Working Draft V2.0"(2000年3月, Noordwijkerhout)に定義されているバリエーション忠実度記述子スキームに該当する。これにより、キーフレーム数に関する制限と時間長の明白な仕様の代案を提供する。
【0252】
セグメント主題記述子は、その主題(テーマ)又は強調点の注釈を付けた、例えば動画クリップ又はオーディオクリップのようなセグメントの好ましいテーマ又は観点を記述することができる。例えば、テーマは、そのテーマのコンテンツの特徴を指定する。かような特徴には、大好きなチームのゴールや、大好きな選手の3ポイントシュート等が含まれる。これらの記述子を指定しランク付けをすれば、クライアントアプリケーション又はサーバは、セグメントレベルの記述子又はラベルに一致する好みテーマ(及び/又はランキング)に従ってユーザセグメントを供給でき、又は、ユーザにセグメント主題の好みに一致するラベル付きセグメントより成る事前に編成されたハイライトを提供することができる。
【0253】
現行のフィルタリング・サーチのユーザ好み記述は、オーディオビジュアル資料のコンテンツに焦点を置きながら、所望のオーディオビジュアル資料を発見、選択して消費することにより有効にオーディオビジュアルコンテンツを利用する技法を志向している。かような記述は有益であるが、本発明者達は、資料コンテンツだけと対比しても、資料ソースの識別はオーディオビジュアル資料の処理と提示のために有利な情報を提供することをさらに認識した。例えば、コンテンツのソースは、地上のソース,デジタルビデオディスク,ケーブルテレビ,アナログテレビ放送,デジタル放送テレビ,アナログラジオ放送,デジタルラジオ放送である。
【0254】
これらの情報を含めることにより、ユーザは、これらの異なるソースから選択でき、又、ユーザが視聴可能なコンテンツのソースを、衛星放送より広く視聴可能な地上放送のようなソースに選択を狭めることにより有効性をさらに高めることができる。例えば、ユーザは、地上放送チャネルからのみ入手可能な“スタートレック”のエピソードに対するユーザ好みを記述することができる。
【0255】
このソースの区別及び識別は、フィルタリング・サーチ好み記述スキーム(又は他の記述スキーム)の下にソースの好み記述スキームを含むことにより実行できる。従って、フィルタリング・サーチ好み記述スキームは、ゼロ又は1つ(望むならば、それ以上)のソース好み記述スキームを含むことができる。ソース好み記述スキームは、ISO/IEC JTC1/SC29/WG11 N3247 "MPEG−7 Multimedia Description Schemes,Experimentation Model(v2.0)(2000年3月, Noordwijkerhout)に記載されているメディアフォーマット記述又はパブリケーション記述スキームから派生できる。
【0256】
ユーザ好みの他に、システムが持ち得る他の特徴は、ユーザの負の好みである。負の好みは、ユーザが嫌いなものとその順位を含むことができる。負の好みを指定することにより、システムは、そのような好みに該当するものを選択することが無くなる。これは、例えば、好み値記述子に正又は負の値を付与することにより実施できる。
【0257】
システムが持ち得る他の特徴は、ユーザの好みのスペシフィケーションであり、これは、例えば、“BetterThan”記述子と“WorseThan”記述子を用いて、他の好みセットに対する特定のユーザ好みセットの相対的な好み度を示すものである。これは、各好みセットに対する好み値記述子が無い場合でも好みの暗黙の相対的な順位付けを可能にする。これは、例えば、フィルタリング・サーチ好み記述に“BetterThan”記述子と“WorseThan”記述子を入れることにより実現できる。
【0258】
追加属性の表現
下記の記述は、ここに参照するXML(Extensible MarkupLanguage)で表現される。任意の他の言語も同様に用いることができる。
ユーザ好み記述の定義は次の通りである。
【0259】
【表52】
Figure 0004107811
【0260】
原始属性“protection(保護)”と“allowAutomaticUpdate(自動更新許可)”については、ユーザ識別子、ユーザ好み及び使用履歴の記述及び全ての関連部分、即ち、ブラウジング好み記述、フィルタリング・サーチ好み記述、デバイス好み記述及び使用履歴記述スキームのサブ記述スキームに具体例を示す。
【0261】
“allowAutomaticUpdate”属性(ユーザが設定)は、ユーザに相談することなく(例えば使用履歴記述を利用するエージェントにより)好みを自動的に変更できるか否かを指示する記述スキームに含ませねばならない。
保護属性は、ユーザがシステムによる好み/履歴の公表(公開)を許すか否かを指定する記述に含ませるべきである。ユーザが、彼の好み/履歴の若干部分を例えばサービスプロバイダに公表することに同意すれば、サービスプロバイダは、この情報を集めて、ユーザの履歴/好みに適合するユーザコンテンツに役立てることができる。上記の記述例において、ユーザは彼の“Username(ユーザネーム)”を秘密にしておくことを選択する。彼は、又、システムが彼の好みを自動的に更新することを望まない。
【0262】
ユーザID記述は、ユーザ記述スキームの特定例を、他のユーザの例又は同一ユーザの異なる使用条件及び状況における例から区別する識別子の目的を果たす。
ユーザネーム記述子は、特定のユーザを他のユーザから識別する。家庭での設定の場合、その一家のメンバーが通常の条件で使用する全ての機器に対し、その一家の各メンバーが、その家庭で唯一のユーザネームを使用することで識別することができる。
ユーザネームは、個人だけでなく例えば家族のような人のグループのユーザ記述スキームを区別するためにも使用できる。(ホテルの部屋又はレンタカー内の装置のように)多数の違った人達により一時的な条件で使用する機器は、識別の一意性を確保するために一時的なセッション識別票を使用者に割り当てる。
【0263】
別案では、バージョン記述子をユーザ識別子記述に含ませて、特定ユーザネームに関係するユーザ記述(好み及び使用履歴)の異なるバージョンを定義する。このバージョンのメカニズムにより、ユーザは、異なる場所(自宅,職場,外出先,停車中の車,移動中の車)、異なる状況、異なる情緒状態(幸福な気分対悲しい気分)、異なる季節等に対応する異なる好みと使用履歴を指定することができる。異なるユーザ記述は、異なるバージョン記述子により区別される。バージョン記述子の種類は、例えば、整数又はストリングであるか、又はユーザID記述スキームの1属性として表現できる。
【0264】
使用好み記述は、時間又は場所又は場所−時間の組合せに従い、特定の好み又は履歴を区別する“PreferenceType(好みタイプ)”記述を含むことができる。使用好み記述の定義例を以下に示す。尚、場所は“職場(Office)”であり、時間は、“午前8時から8時間”である。
【0265】
【表53】
Figure 0004107811
【0266】
PreferenceType記述子は、1つ以上の好みセットの好みタイプを識別するために用いられる。前述のように、ユーザは、ユーザの状況,所在地,時間,季節等に応じて、異なる好みを持つことができる。
【0267】
ブラウジング好み記述は、マルチメディア情報をブラウジングするためのユーザ好みを記述できる。本質的に、この記述は、マルチメディア情報を消費(視聴)するためのユーザ好みを表現する。このブラウジング好み記述は、例えば、要約好みを含むことができる。ブラウジングの好み記述は、動画の場合、例えば、プログラムの短い要約の目視であるのか、或いはプログラム全体の連続再生であるのかのユーザ好みを含むことができる。色々な要約タイプが、ISO/IECJTC1/SC29/WG11 N3246 “MPEG−7 Multimedia Description Schemes,Working Draft V2.0”(2000年3月,Noordwijkerhout)の要約記述スキームに規定されている。その中には、キーフレーム要約、ハイライト要約等が含まれており、種々の要約タイプのパラメータは、要約記述、例えば、動画ハイライト要約の時間によって規定することができる。
【0268】
ブラウジング好み記述スキームは、以下に示す記述子及び記述の未完全リストの1つ以上を記述スキームに含むことができる。
(A)キーフレームの最少数(MinNumOfKeyframes)とキーフレームの最大数(MaxNumOfKeyframes)の記述子を含むことができる。これらの記述子は、AVプログラムのキーフレーム要約を構成するフレームの最少数と最大数に対するユーザ好みを指定する。ユーザは、これらの記述子を、個人的な趣味、状況等に従って、また、チャネル帯域幅と端末資源の制限条件に従って指定することができる。
【0269】
(B)最短時間(MinSummaryDuration)と最長時間(MinSummaryDuration)の記述子を含むことができる。これらの記述子は、動画内のキークリップより構成されたハイライト要約の時間長に対するユーザの好みを指定する。これらの記述子は例えばオーディオのみのマテリアルにも利用することができる。ユーザは、これらの記述子を、個人的な趣味、状況等に従って、また、チャネル帯域幅と端末資源の制限条件に従って指定することができる。
使用好み記述に含むことのできる要約好み記述の1例を次に示す。
【0270】
【表54】
Figure 0004107811
【0271】
(C)汎用マルチメディアアクセスアプリケーション用の抽象忠実度記述子は、ISO/IEC JTC1/SC29/WG11 N3246 “MPEG−7Multimedia Description Sheme,WorkingDraft V2.0”(2000年3月, Noordwijkerhout)のバリエーション記述スキームによって規定されている。また、キーフレームの時間と数を忠実度記述子として規定してもよい。
【0272】
(D)セグメントテーマ記述子を含むことができる。この記述子は、セグメントのテーマ又は観点、例えば、そのテーマ又は強調点に関する動画又はオーディオクリップを記述する。“スペインからのゴール”及び“スペインからのゴールのリプレイ”と名称をつけた動画セグメント(クリップ)に対する好みを表現する要約好み記述の例を以下に示す。
【0273】
【表55】
Figure 0004107811
【0274】
(E)フレーム周波数値の記述子を含むことができる。この記述子は、ブラウザで目視できる動画フレームの時間標本化周波数を指定する。フレームは、視覚要約を提供する。ブラウザにより、フレームはクリックできる動画へのエントリーポイントも提供できる。フレーム周波数値の記述子は、動画のショットにより同様な機能性を提供する。
【0275】
ソース好み記述は、放送又は蓄積メディアタイプ(例えば、地上,衛星,DVD)、放送チャネル識別子等のようなマルチメディア情報の好みソースを記述する。地上放送局からの番組“スタートレックエピソード”に対する好みを表現するユーザ好み記述の1例を以下に示す。
【0276】
【表56】
Figure 0004107811
【0277】
フィルタリング・サーチ好み記述は、選択された(好まれた)プログラムのタイトル,ジャンル,言語,俳優,作品の記述子の少なくとも1つを含む。ユーザの好みが、英語のニュース番組である場合の記述例を以下に示す。かような記述は、例えば、ユーザが日本へ旅行する場合に、彼のスマートカードに含むことができる。この特定の好み記述は、日本に関する特殊なものとして識別され、適当なユーザ名を選ぶことにより区別されることに留意する。
【0278】
【表57】
Figure 0004107811
【0279】
好み値記述子は、ユーザの好み度又は非好み度を示す値のようにフィルタリング及びサーチ好みを優先付けする技法を提供する。非好みは、好み値記述子に負(逆符号)値を割り当てることにより表現できる。
betterthan(良)及びworsethan(劣)記述子は、フィルタリング・サーチの好みタイプ記述子を用いて異なる具体例が識別された場合に、どちらの具体例をユーザが他例と比較し、より好きか嫌いかを記述することができる。これにより、例えば、エージェントによる自動的な好み値記述子の変化に対する耐性を与えることができる。
【0280】
フィルタリング・サーチ好み記述は、複数の特定の個人により好評を受けているプログラムのサーチをユーザが望んでいることを表現する選択レビューの記述を含むことができる。例えば、映画評論家シスケルとエバートが評論し推薦した映画に対する好みをフィルタリング及びサーチ好み記述内に記述して含めることができる。
図29に、全体の記述スキームの概観を示す。
【0281】
さらに本発明者達は、記述及び記述スキームに特定タイプの情報を含ませることにより本システムの機能性の強化が達成できることに気付いた。さらに、これらの特定タイプの情報は、強化された機能性を提供するために記述及びスキームなしのシステム内にも同様に含ませることができる。これらの追加の属性と記述子に関し、記述例の一部を示しながら以下に説明する。
【0282】
特にユーザとシステムとの対話に関してさらに考察した結果、ユーザの好み記述には、メディアをシステムの局部記憶装置に記録する方法に関するユーザの好み記述を含ませる必要があることが判明した。メディアは、例えば、オーディオ及び/又は動画コンテンツを含む。例えば、ユーザは記録技法の品質に対する好みを表現したい。この品質は、例えば、低品質、中間品質及び高品質である。これらの品質レベルは、局部記憶装置に保管する前にメディアに適用されるオーディオ及び/又は動画の圧縮技術の品質に関する。好ましくは、オーディオ及び/又は動画コンテンツはディジタルであり、ディジタル圧縮技術を採用する。記録品質の好みは、局部記憶装置の使用可能な容量もしくはプログラムの属性により影響を受ける。従って、このシステムは使用可能な局部記憶装置に基いて、異なる記録品質を選択し及び/又は異なる記録品質でプログラムを記録することを提案しうる。
【0283】
ReplayTV社のパーソナルビデオレコーダのような、現在のパーソナル記録装置は、セットアップモードを呼び出すことによりユーザが選択できる固定された唯一のデフォルト記録品質を含む。このデフォルト設定は、標準、中間又は高品質であってよい。ReplayTV社のパーソナル記録装置に近く放送されるプログラムを記録するように指示をする時に、必要に応じ、ユーザは手動でこのデフォルト設定を他の2つの選択肢のいずれかに変更しなければならない。さらに、ReplayTV社のパーソナル記録装置は、実演の休止/再生機能性を支援するためにユーザが見ているショーのすべてを記録する。しかしながら、本発明者達は、視聴時のReplayTV社のパーソナル記録装置の記録品質は固定であり調節できないことを知り愕然とした。
【0284】
ユーザの好み記述に記録品質の好みを含ませることにより、柔軟で効率的な方法で、これまでに実現されたことのない確かな利点を容易に実現する。例えばフィルタリングとサーチの好み記述のような使用好み記述の他の態様に関する記録品質好み記述を用いることにより、記録好みは特定タイプのコンテンツに自動的に関係する。例えば、システムは記録の品質を、スポーツプログラムに対し“高品質”、自然を対象としたプログラムに対し“低品質”に自動的に設定する。スポーツプログラムは、高品質で符号化するのが好ましい多数の素早い動作を含む傾向がある。これに反し、自然を対象としたプログラムは、主として動作が少なく、低品質で符号化しても視聴でき、システムの記憶装置の条件を緩和させる。
【0285】
このシステムは、システム内に含まれているか又はオーディオ及び/又は動画コンテンツに関係する特定の属性に対して予め定義した規則に基いて、(オーディオ及び/又は動画)プログラムの記録品質を選択することができる。かような方法により、本システムは、オーディオ及び/又は動画プログラムの予想コンテンツの差異を収容できる。かように、ユーザは異なるプログラムを異なる品質で記録しようと欲する度に手動で選択する必要が無くなる。システムはユーザの好みのコンテンツとそのコンテンツに対する好みの記録品質の両方に関する情報にアクセスでき、ユーザのために自律的な方法で潜在的に可能な機能を発揮することが可能になる。このようにして、システムは好みのプログラムを発見し、ユーザ所望の記録品質で記録することができる。
したがって、システム内に含まれているオーディオ及び/又は動画コンテンツに関係する特定の属性に対して予め定義した規則に基いてこのシステムは、ユーザが(オーディオ及び/又は動画)プログラムの記録品質を、選択することを許容することができる。
【0286】
本システムは特定タイプのコンテンツに対するユーザの記録の好みを自動的に観察し学習する学習エージェントを含むことができる。望むならば、ユーザは自分の好みを自分のプロファイルに入力することができる。ユーザの好みは、複数のユーザが、装置の全てのユーザに対する記録品質の設定を容易に個人化できるように支援する。又、これにより、視聴しながらシステムで記録する際に記録品質を手動及び/又は自動で選択することが可能になる。この様にして、現在見ているプログラムの記録品質をプログラムのコンテンツ又はユーザの好みに基いて選択することができる。本システムは、記述及び記述スキームを含まないシステムにおける記録品質の手動及び/又は自動選択を含んでいると理解すべきである。
【0287】
ユーザはプログラムの開始時刻と終了時刻が変更される可能性を考慮してプログラムコンテンツの開始前と終了後の安全時間長さの好みを表現したい。例えば、1つのプログラムが1つの特定チャネルで午前10時から午前11時まで放送される予定であり、ユーザはプログラムが始まる前の5分間とプログラムが終了してからの10分間を安全時間長さとして選択し、午前9時55分から午前11時10分に記録時間を設定する。これらの安全時間長さは、ユーザ記述及び記述スキームのコンテンツに基くことができる。これは、多数のユーザにとって厄介である上記の設定を、ユーザの明らかな介入無しにシステムが安全時間長さを設定して1つ以上のプログラムを記録するように予めプログラムする際に特に有益である。例えば、スポーツプログラムは通常予定時間を超えて延長されるので、本システムは、かようなプログラムの終了時刻にかなりの追加安全時間長さを含むことができ、一方、シチュエーションコメディープログラムは通常予定通りに終了するので、もし追加の安全時間長さを見込むとしても通常極く短くてよい。尚、本システムは、記述及び記述スキームを含まないシステムにおける安全時間長さの手動及び/又は自動選択を含んでいると理解すべきである。
【0288】
本発明者達は、又、コンテンツとその後のオフライン消費に関するウェブページへのハイパーリンク、例えば多重層リンクにより強化されるオーディオ及び/又は動画コンテンツの記録も同様に考慮すべきであることを知った。この場合、ユーザはオーディオビジュアルプログラムだけでなくハイパーリンクによって示されているような強化データも記録する。なんらかの方法により必要な記憶条件を制限するために、装置が自動的に記録すべきリンクの最大レイヤ数をユーザが指定できることが望ましい。さらに、1つのパラメタを選択して、かような強化データに用いる局部記憶装置の最大容量を指示し、強化データをダウンロードするために必要な時間と記憶条件を低減させることができる。蓄積するリンクレイヤ数を選択して、ユーザがシステム内の制限された局部記憶装置空間を合理化するのを支援する。リンクレイヤ数をユーザの好みの一部として含むことにより、ユーザがかような好みを、ジャンル又はプログラムに関係する任意の他の属性のようなメディア特性に関する好みに自動的に関連付けることが可能になる。例えば、多数のリンクレイヤ数は教育的対話式プログラムに対して指定することができる。さらに、ユーザの好み記述により複数のユーザに対して提供される支援として、装置の全ユーザに対し個人化された仕様を提供できる。尚、本システムは、記述又は記述スキームを含まないシステムにおいて許容されるリンクレベル又は最大記憶容量を手動及び/又は自動で選択することを含んでいると理解すべきである。
【0289】
上述のように、本システムは、ユーザが装置を用いてメディアを消費する方法に関するユーザの好みを記述する装置の好みを含むことができる。メディアの消費は、装置の所謂“トリックモード”、即ち、早送りと高速巻き戻しを使用することを含む。早送りと高速巻き戻しは、標準再生速度より早い任意の速度を含む。ディジタル式ランダムアクセス記憶メディアをベースにした装置は、広範囲の早送り及び高速巻き戻し速度(例えば、標準速度の4倍から20倍の速度)を容易に実現し、又、コンテンツの1点から他の1点までの特定量(例えば、15秒)だけ瞬時にスキップすることができる。スキッピングは、コマーシャルやプログラムの興味を引かない部分をスキップするために用いることができる。早送り、高速巻き戻し及びスキッピングのケイパビリティを考察し、本発明者達は、ユーザがこれらの装置機能を呼び出す際に毎回複数のパラメタから選択しなくてすむような技法を提供する必要があることを実感した。ブラウジング好み記述は、前述のように、再生好みを含むことができ、この再生好みに早送り、高速巻き戻し及び瞬時スキッピングの好み記述が含まれる。かような好み記述をユーザ好み記述の一部とすることにより、かような好みを、1つのプログラムに関係するジャンル又は他の任意属性のようなコンテンツ特性にカスタマイズする機会がユーザに提供される。このようにして、ユーザは機能を使うたびに選択をする必要がなくなる。ユーザは任意の基準に基いて差別化した異なるプログラミング用の好み記述を選択することができる。これに代え、エージェントがユーザのユーザ好み記述を自動的に学習して導入し、装置の全ユーザに対して個人化した設定を提供することができる。さらに、ユーザ各人がユーザ好みを編集することにより瞬時スキップ時間に関する好みを変更することができる。同様に、この技法は低速送り及び低速巻き戻し、即ち通常の再生速度より遅い速度での送りにも同様に適用することができる。
【0290】
もう1セットの有用な追加情報はフィルタリングとサーチの好みに関し、特に、好みのコンテンツのフォーマットにおける好みに関する。考察ののち、本発明者達は特定のメディアフォーマットに対してユーザの好みを記述する必要があるという結論に至った。これはコンテンツが多数のフォーマットで取得可能であること、若しくはユーザの装置が種々のメディアフォーマットに対して限られた再生ケーパビリティしか有さない場合を考えると非常に望ましいことである。ソース好みは、好みのファイルフォーマット記述を含んでもよい。幾つかのメディアフォーマットの例には、例えばMPEG−1,MPEG−2,MP3,Liquid Audio,Real Player,AC−3,Dolby Digital,Wide Screen video format及びNormalScreen video formatが含まれうる。尚、本システムによれば、記述又は記述スキームを含まないシステムにおいて前記メディアフォーマットを使用できると理解すべきである。
【0291】
ここに記述するシステムは拡張サーチ、特徴付け、ブラウジング及びフィルタリング機能を含んでいるが、本発明者達は、もう1つの適切なプログラム属性が、コンテンツ自体の製作日付であることに気付いた。例えば、1本の特定映画の製作日付は、1930年、1940年から1949年または2000年のような原映画が製作された期間の日付であってよい。又、特定映画の場合の製作日付は、その映画をDVDのような現フォーマットに再製作した日付であってよい。製作日付を用いて、1960年から1970年までの間に特定の監督により製作された映画又は1977年から1982年までの間に製作された“スタートレック”のエピソードを選択することができる。製作日付は、ユーザお気に入りの連続テレビ映画の再放送を選択する際に特に有効である。これ以外の別の方法では、システムが新しい(又は比較的新しい)連続テレビ映画と古い(又は比較的に古い)連続テレビ映画を区別することは困難である。日付の期間は、年、10年間、時間、月等のような任意所望の細かさであってよい。
【0292】
以下の記述はXML(Extensible Markup Language)で表現し、以下に参考例として記載する。尚、任意の他の記述言語を同様に使用できることを理解すべきである。
ユーザ好み記述の定義は、以下の通りである。下記の記述において、ユーザであるポールは、特にスポーツに関するユーザの好みを指定することを決心する。この特定ジャンルに関するポールの記録品質の好みは、“高品質”である。ポールは又、そのゲームの延長の可能性を考慮し、スポーツプログラムの開始時の安全時間長さ(30秒)より長い終了時の安全時間長さ(15分)を指定する。ポールは、単レイヤにリンクされたコンテンツに関する好みを表現する。
【0293】
【表58】
Figure 0004107811
【0294】
上記の記述例において、記録の好みは、装置の好みの内に含まれている。他の実施態様の場合、記録の好みはフィルタリングとサーチの好みに含まれる。このように、記録好みはフィルタリングとサーチ好みの各独立したセットに関連させることができる。その後は、異なる記録の好みを異なる好みのタイトル、ジャンル又は好みのコンテンツの任意の他の記述又はそれらの組み合わせに自動的に関連させることが可能である。この包含は、装置の好みに含ませることができる個別の記録好みへのリンクを用いて明示又は暗示することができる。この場合、フィルタリングとサーチの好みは、ユーザのフィルタリングとサーチの好みに一致するプログラムを記録するか又は記録しないかに関するユーザの好みを示す2値の属性を含む。記録の好みはユーザの好みが記録する場合に効力を生じる。
【0295】
さらに、フィルタリング好みとサーチ好みの特定の実施例が特定プログラムを十分に識別できるならば、追加のプログラム特殊記録に関する好みを、フィルタリングとサーチの好みに含むことができる。その場合、例えば、好みのプログラムが複数の定期放送が予定されている連続TV劇プログラムであれば、以下の好みを指定できる。即ち、記録したい放送回数(例えば、1,2,…全部)、局部記憶装置に保管したい最新放送分の数(この数字が例えば1であれば、常に、新しい1回分が先の1回分に代わって保管される)及び、システムがこの特定プログラムのために、将来可能になる空間を直ちに予約すべきか否かを指定することができる。
早送り速度と高速巻き戻し速度での再生好みと瞬時スキップ量の好みは、下記の通りである。
【0296】
【表59】
Figure 0004107811
【0297】
以下の記述において、ユーザはMPEG−1ファイルフォーマットに関する好みを指定する。
【0298】
【表60】
Figure 0004107811
【0299】
以下の記述は、製作日付けの期間に関するユーザの好みを製作好みの一部として含んでいる。ユーザは1977年から1982年の間に製作された連続TV劇“スタートレック”に対する好みを有している。この例の場合、ユーザはソースに関する好みを地上放送として有している。
【0300】
【表61】
Figure 0004107811
【0301】
任意の記述子と記述スキームをシステムの任意部分に配置することができると理解すべきである。説明のために図30を参照する。記録の好み541は、記録の質、安全時間長さ及びリンクレイヤの数を含むことができる。再生の好み543は早送り、高速巻き戻し及び瞬時スキップ期間を含むことができる。メディアフォーマット545は好みのメディアフォーマットを含み、製作日付け547は好みの製作日付期間を含むことができる。
【0302】
本明細書に使用してきた用語と表現は、限定を目的とするものではなく説明のために使用したものであり、用語及び表現の使用において図示又は記述の特徴又は部分の同等な用語と表現を排除する意図は全くない。本発明の範囲は、特許請求範囲によってのみ規定され限定されることを確認する。
【図面の簡単な説明】
【図1】本発明のオーディオビジュアルシステムのプログラム,システム及びユーザの実施形態を関連する記述スキームと共に示す図である。
【図2】図1の解析モジュールを含むオーディオビジュアルシステムの実施形態を示す図である。
【図3】図2の解析モジュールの実施形態を示す図である。
【図4】オーディオビジュアルシステムのためのサムネイルビュー(カテゴリ)を示す図である。
【図5】オーディオビジュアルシステムのためのサムネイルビュー(チャネル)を示す図である。
【図6】オーディオビジュアルシステムのためのテキストビュー(チャネル)を示す図である。
【図7】オーディオビジュアルシステムのためのフレームビューを示す図である。
【図8】オーディオビジュアルシステムのためのショットビューを示す図である。
【図9】オーディオビジュアルシステムのためのキーフレームビューを示す図である。
【図10】オーディオビジュアルシステムのためのハイライトビューを示す図である。
【図11】オーディオビジュアルシステムのためのイベントビューを示す図である。
【図12】オーディオビジュアルシステムのためのキャラクタ/オブジェクトビューを示す図である。
【図13】シンタックス構造記述スキーム,セマンティック構造記述スキーム,可視化記述スキーム,メタ情報記述スキームを含むプログラム記述スキームの他の実施形態を示す図である。
【図14】図13の可視化記述スキームの実施形態を示す図である。
【図15】図13のメタ情報記述スキームの実施形態を示す図である。
【図16】図13のシンタックス構造記述スキームのためのセグメント記述スキームの実施形態を示す図である。
【図17】図13のシンタックス記述スキームのための領域記述スキームの実施形態を示す図である。
【図18】図13のシンタクティック構造記述スキームのためのセグメント/領域関係記述スキームの実施形態を示す図である。
【図19】図13のセマンティック記述スキームのためのイベント記述スキームの実施形態を示す図である。
【図20】図13のセマンティック構造記述スキームのためのオブジェクト記述スキームの実施形態を示す図である。
【図21】図13のシンタックス構造記述スキームのためのイベント/オブジェクト関係グラフ記述スキームの実施形態を示す図である。
【図22】ユーザ好み記述スキームの実施形態を示す図である。
【図23】使用履歴記述スキームとエージェントと図22のユーザ好み記述スキームとの間の相互関係の実施形態を示す図である。
【図24】記述子を含むオーディオ及び/又は動画プログラムと、ユーザの識別ラベル(ID)と図22の使用好み記述スキームとの間の相互関係の実施形態を示す図である。
【図25】図22の使用好み記述スキームの実施形態を示す図である。
【図26】図22の使用好み記述スキームとMPEG−7の記述スキームとの間の相互関係の実施形態を示す図である。
【図27】図22の使用来歴記述スキームの実施形態を示す図である。
【図28】ユーザの履歴記述スキームを含むシステムの実施形態を示す図である。
【図29】ユーザ好み記述スキームの実施形態を示す図である。
【図30】ユーザ好み記述スキームの他の実施形態を示す図である。
【符号の説明】
10…動画、画像及び/又はオーディオ情報(プログラム)、12…動画、画像及び/又はオーディオシステム、14…ユーザ情報、16…オーディオビジュアルシステム、18…プログラム記述スキーム、20…ユーザ記述スキーム,ユーザ好み記述、22…システム記述スキーム、38…プログラム、42…解析モジュール、44…発生モジュール、46…システム情報、48…ユーザ入力情報、50…データ記録ユニット、54…スローモーション検出器、60…逆多重化器/復号器、62…データ及びサービスコンテンツ解析器、64…テキスト処理及びテキスト要約発生器、66…クローズキャプション解析器、68…タイトルフレーム発生器、70…解析マネージャ、72…オーディオビジュアル解析器及び特徴抽出器、74…イベント検出器、76…キーフレームサマライザ、78…ハイライトサマライザ、80…ディスプレイ、82…グラフィカルユーザインターフェース、90…知識ベースシステム、92…コマーシャルフィルタ、500…使用好み記述、502…使用履歴記述、504…ユーザ識別子記述、510…エージェント、520…フィルタリングエージェント、530…ブラウジング好み記述、532…フィルタリング・サーチ好み記述、534…デバイス好み記述、540…キーワード好み記述、541…記録の好み、542…コンテンツ好み記述、543…再生の好み、544…分類好み記述、545…メディアフォーマット、546…作品好み記述、547…製作日付け、552…コンテンツ記述、554…分類記述、556…作品記述、560…ブラウジング履歴記述、562…フィルタリング・サーチ履歴記述、564…デバイス使用履歴記述、566…キーワード使用履歴記述、568…コンテンツ使用履歴記述、572…分類使用履歴記述、570…作品使用履歴記述、600…オーディオ及び/又は動画プログラムの記述(データ)、601…蓄積装置、602…ディスプレイ、603…ブラウザ、604…フィルタリング・サーチシステム、605…データベース管理システム、606…ユーザ好み、607…スマートカード、608…履歴から好みへの変換、609…使用履歴、610…サービス/コンテンツプロバイダ、611…ユーザ。

Claims (1)

  1. オーディオ、画像及び複数のフレームを含む動画のうちの少なくとも1つを扱うシステムを使用する方法であって、
    前記オーディオ、画像及び動画の前記少なくとも1つの使用に関するユーザの複数の好みを記述する好み記述を提供するステップを含んでなり、
    前記システムは、前記オーディオ、画像及び動画の少なくとも1つについて、高速送り、高速巻き戻し、低速送り、低速巻き戻しあるいはスキップ再生を含む複数の再生形態により再生する機能を有し、
    前記好み記述は、前記オーディオ、画像及び動画の前記少なくとも1つを再生する時のユーザの好みの再生形態に関する記述を含み、
    前記好み記述を再生時に用いることで、前記高速送り、高速巻き戻し、低速送り、低速巻き戻しあるいはスキップ再生を含む複数の再生形態のいずれか1つを選択可能であることを特徴とする方法。
JP2001137589A 2000-05-26 2001-05-08 オーディオビジュアルシステムの使用方法 Expired - Fee Related JP4107811B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/580808 2000-05-26
US09/580,808 US8028314B1 (en) 2000-05-26 2000-05-26 Audiovisual information management system

Publications (2)

Publication Number Publication Date
JP2002077786A JP2002077786A (ja) 2002-03-15
JP4107811B2 true JP4107811B2 (ja) 2008-06-25

Family

ID=24322647

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001137589A Expired - Fee Related JP4107811B2 (ja) 2000-05-26 2001-05-08 オーディオビジュアルシステムの使用方法

Country Status (3)

Country Link
US (1) US8028314B1 (ja)
EP (1) EP1158795A3 (ja)
JP (1) JP4107811B2 (ja)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7543325B2 (en) 1999-03-30 2009-06-02 Tivo Inc. System for remotely controlling client recording and storage behavior
US6728713B1 (en) 1999-03-30 2004-04-27 Tivo, Inc. Distributed database management system
US20030182567A1 (en) 1999-10-20 2003-09-25 Tivo Inc. Client-side multimedia content targeting system
US7886330B2 (en) * 2000-06-30 2011-02-08 Jlb Ventures Llc Enhanced home entertainment system with removable long-term storage
MX347698B (es) 2001-02-21 2017-05-09 United Video Properties Inc Sistemas y metodos para guias de programa interactivas con caracteristicas de grabacion personal.
CN1620695A (zh) * 2001-12-25 2005-05-25 松下电器产业株式会社 用于回放内容的装置、方法与计算机可读程序
FR2839183B1 (fr) * 2002-04-25 2006-07-28 Thomson Licensing Sa Procede de decoupage et de visualisation d'un enregistrement audiovisuel, et dispositif audiovisuel associe
KR100466237B1 (ko) * 2002-06-20 2005-01-13 한국전자통신연구원 디지털 방송 프로토콜 변환 방법 및 그 시스템
CN1666503A (zh) * 2002-07-01 2005-09-07 皇家飞利浦电子股份有限公司 用于处理视频信号的系统
JP3714310B2 (ja) 2002-08-07 2005-11-09 ソニー株式会社 コンテンツの自動記録装置及び方法、記録媒体、並びにプログラム
DE10239860A1 (de) * 2002-08-29 2004-03-18 Micronas Gmbh Verfahren und Vorrichtung zum Aufzeichnen und Wiedergeben von Inhalten
US20040123231A1 (en) * 2002-12-20 2004-06-24 Adams Hugh W. System and method for annotating multi-modal characteristics in multimedia documents
ES2343172T3 (es) * 2003-03-28 2010-07-26 Loewe Opta Gmbh Sistema de manejo para un aparato receptor de television.
US7505671B2 (en) * 2004-02-25 2009-03-17 Casio Computer Co., Ltd. Recording/reproduction apparatus, system and program which reproduces a section of a recorded program based on a keyword relating to the section and a reproduction speed corresponding to the keyword
WO2005091133A1 (en) * 2004-03-23 2005-09-29 Electronics And Telecommunications Research Institute Component identification method and targeting method using the same
US8930358B2 (en) * 2004-10-26 2015-01-06 Yahoo! Inc. System and method for presenting search results
JP2007094738A (ja) 2005-09-28 2007-04-12 Sony Corp 嗜好情報処理システム、記録装置及び情報処理装置、並びに通信方法
WO2007069169A2 (en) * 2005-12-13 2007-06-21 Koninklijke Philips Electronics, N.V. Music video clip recorder and method of recording broadcast music videos
JP5061774B2 (ja) * 2007-08-02 2012-10-31 ソニー株式会社 動画像信号生成装置
US8661096B2 (en) * 2007-11-05 2014-02-25 Cyberlink Corp. Collaborative editing in a video editing system
US8307395B2 (en) 2008-04-22 2012-11-06 Porto Technology, Llc Publishing key frames of a video content item being viewed by a first user to one or more second users
JP5531497B2 (ja) * 2009-08-18 2014-06-25 ソニー株式会社 表示装置及び表示方法
CA2786812C (en) 2010-01-18 2018-03-20 Telefonaktiebolaget L M Ericsson (Publ) Method and arrangement for supporting playout of content
KR101517638B1 (ko) 2010-04-22 2015-05-15 엘지전자 주식회사 콘텐츠 제공 방법 및 그를 이용한 디스플레이장치
JP5659027B2 (ja) * 2011-01-24 2015-01-28 株式会社Nttドコモ 情報通信サーバ、及び情報通信方法
US10200756B2 (en) 2011-02-11 2019-02-05 Sony Interactive Entertainment LLC Synchronization of favorites and/or recently viewed lists between registered content playback devices
US20120210224A1 (en) * 2011-02-11 2012-08-16 Sony Network Entertainment International Llc System and method to add an asset as a favorite for convenient access or sharing on a second display
US9161073B2 (en) 2011-02-11 2015-10-13 Sony Corporation System and method to remove outdated or erroneous assets from favorites or recently-viewed lists
US9955202B2 (en) 2011-02-11 2018-04-24 Sony Network Entertainment International Llc Removal of unavailable services and/or content items from a list of favorite and/or recently viewed services and/or content items associated with a user account
KR101835327B1 (ko) * 2011-11-18 2018-04-19 엘지전자 주식회사 디스플레이기기 및 디스플레이기기의 컨텐츠 제공 방법
US9348554B2 (en) * 2011-12-20 2016-05-24 Audible, Inc. Managing playback of supplemental information
US9172983B2 (en) * 2012-01-20 2015-10-27 Gorilla Technology Inc. Automatic media editing apparatus, editing method, broadcasting method and system for broadcasting the same
US20140278911A1 (en) * 2013-03-15 2014-09-18 Telemetry Limited Method and apparatus for determining digital media audibility
US8631325B1 (en) 2013-08-09 2014-01-14 Zoomdata, Inc. Real-time data visualization of streaming data
US9881084B1 (en) * 2014-06-24 2018-01-30 A9.Com, Inc. Image match based video search
US9251276B1 (en) 2015-02-27 2016-02-02 Zoomdata, Inc. Prioritization of retrieval and/or processing of data
US9817871B2 (en) 2015-02-27 2017-11-14 Zoomdata, Inc. Prioritized retrieval and/or processing of data via query selection
KR101650153B1 (ko) * 2015-03-19 2016-08-23 네이버 주식회사 만화 데이터 편집 방법 및 만화 데이터 편집 장치
US9942312B1 (en) 2016-12-16 2018-04-10 Zoomdata, Inc. System and method for facilitating load reduction at a landing zone
US10313756B2 (en) 2017-03-03 2019-06-04 Rovi Guides, Inc. System and methods for recommending a media asset relating to a character unknown to a user
US20220321972A1 (en) * 2021-03-31 2022-10-06 Rovi Guides, Inc. Transmitting content based on genre information
USD973073S1 (en) * 2021-11-09 2022-12-20 Hopin Ltd Display screen with a graphical user interface
USD976928S1 (en) * 2021-11-09 2023-01-31 Hopin Ltd Display screen with a graphical user interface

Family Cites Families (329)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4183056A (en) 1977-05-23 1980-01-08 Kewp Electronic Systems, Inc. Apparatus and method for monitoring sports contests
US4324402A (en) * 1979-01-05 1982-04-13 Mattel, Inc. Electronic baseball game
US4321635A (en) 1979-04-20 1982-03-23 Teac Corporation Apparatus for selective retrieval of information streams or items
US4253108A (en) 1979-06-04 1981-02-24 Zenith Radio Corporation Control for color killer and automatic color limiter
US4298884A (en) 1980-03-31 1981-11-03 Zenith Radio Corporation Chroma amplifier and color killer
US4520404A (en) 1982-08-23 1985-05-28 Kohorn H Von System, apparatus and method for recording and editing broadcast transmissions
US4937685A (en) 1983-12-02 1990-06-26 Lex Computer And Management Corporation Method of display presentation for video editing
US4729044A (en) 1985-02-05 1988-03-01 Lex Computing & Management Corporation Method and apparatus for playing serially stored segments in an arbitrary sequence
JP3002471B2 (ja) 1988-08-19 2000-01-24 株式会社日立製作所 番組配信装置
US5109482A (en) 1989-01-11 1992-04-28 David Bohrman Interactive video control system for displaying user-selectable clips
US5241671C1 (en) 1989-10-26 2002-07-02 Encyclopaedia Britannica Educa Multimedia search system using a plurality of entry path means which indicate interrelatedness of information
US5012334B1 (en) 1990-01-29 1997-05-13 Grass Valley Group Video image bank for storing and retrieving video image sequences
US5222924A (en) 1990-01-31 1993-06-29 Chan Shin Over-drive gear device
US5101364A (en) 1990-02-09 1992-03-31 Massachusetts Institute Of Technology Method and facility for dynamic video composition and viewing
US5148154A (en) 1990-12-04 1992-09-15 Sony Corporation Of America Multi-dimensional user interface
US5459830A (en) 1991-07-22 1995-10-17 Sony Corporation Animation data index creation drawn from image data sampling composites
US5861881A (en) 1991-11-25 1999-01-19 Actv, Inc. Interactive computer system for providing an interactive presentation with personalized video, audio and graphics responses for multiple viewers
US6081750A (en) 1991-12-23 2000-06-27 Hoffberg; Steven Mark Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5901246A (en) 1995-06-06 1999-05-04 Hoffberg; Steven M. Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5875108A (en) 1991-12-23 1999-02-23 Hoffberg; Steven M. Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5903454A (en) 1991-12-23 1999-05-11 Hoffberg; Linda Irene Human-factored interface corporating adaptive pattern recognition based controller apparatus
US5684918A (en) 1992-02-07 1997-11-04 Abecassis; Max System for integrating video and communications
US5434678A (en) 1993-01-11 1995-07-18 Abecassis; Max Seamless transmission of non-sequential video segments
US5610653A (en) 1992-02-07 1997-03-11 Abecassis; Max Method and system for automatically tracking a zoomed video image
US6208805B1 (en) 1992-02-07 2001-03-27 Max Abecassis Inhibiting a control function from interfering with a playing of a video
US6553178B2 (en) 1992-02-07 2003-04-22 Max Abecassis Advertisement subsidized video-on-demand system
US5953485A (en) 1992-02-07 1999-09-14 Abecassis; Max Method and system for maintaining audio during video control
JP3038077B2 (ja) 1992-03-11 2000-05-08 日本ビクター株式会社 デジタルacc回路及びデジタルクロマキラー回路
US5223924A (en) 1992-05-27 1993-06-29 North American Philips Corporation System and method for automatically correlating user preferences with a T.V. program information database
US5469206A (en) 1992-05-27 1995-11-21 Philips Electronics North America Corporation System and method for automatically correlating user preferences with electronic shopping information
US5200825A (en) 1992-07-01 1993-04-06 Beam Laser Systems, Inc. Commercial insertion system remotely controlling multiple video switches
US5404316A (en) 1992-08-03 1995-04-04 Spectra Group Ltd., Inc. Desktop digital video processing system
SE470037C (sv) 1992-10-27 1995-04-10 Ericsson Telefon Ab L M Anordning vid mobila telekommunikationssystem för att möjliggöra synkronisering av basstationernas sändare
US5371551A (en) 1992-10-29 1994-12-06 Logan; James Time delayed digital video system using concurrent recording and playback
US5288069A (en) * 1992-11-20 1994-02-22 Susan Matsumoto Talking football
USD354059S (en) 1992-12-03 1995-01-03 Discovery Communications, Inc. Remote control unit
US5600364A (en) 1992-12-09 1997-02-04 Discovery Communications, Inc. Network controller for cable television delivery systems
US6181335B1 (en) 1992-12-09 2001-01-30 Discovery Communications, Inc. Card for a set top terminal
US5986690A (en) 1992-12-09 1999-11-16 Discovery Communications, Inc. Electronic book selection and delivery system
US5798785A (en) 1992-12-09 1998-08-25 Discovery Communications, Inc. Terminal for suggesting programs offered on a television program delivery system
US5659350A (en) 1992-12-09 1997-08-19 Discovery Communications, Inc. Operations center for a television program packaging and delivery system
US5600573A (en) 1992-12-09 1997-02-04 Discovery Communications, Inc. Operations center with video storage for a television program packaging and delivery system
ES2154291T3 (es) 1992-12-09 2001-04-01 Discovery Communicat Inc Controlador de red para sistemas de distribucion de programas de television por cable.
US6201536B1 (en) 1992-12-09 2001-03-13 Discovery Communications, Inc. Network manager for cable television system headends
USD348251S (en) 1992-12-09 1994-06-28 Discovery Communications, Inc. Menu control panel for a universal remote control unit
US5333091B2 (en) 1993-01-08 1996-12-17 Arthur D Little Enterprises Method and apparatus for controlling a videotape player to automatically scan past recorded commercial messages
JP3297914B2 (ja) 1993-01-08 2002-07-02 ソニー株式会社 テレビジョン受像機
US5987211A (en) 1993-01-11 1999-11-16 Abecassis; Max Seamless transmission of non-sequential video segments
US5381477A (en) 1993-02-16 1995-01-10 Scientific-Atlanta, Inc. Method of selecting cable television converter groups
US5339393A (en) 1993-04-15 1994-08-16 Sony Electronics, Inc. Graphical user interface for displaying available source material for editing
CA2121151A1 (en) 1993-04-16 1994-10-17 Trevor Lambert Method and apparatus for automatic insertion of a television signal from a remote source
US6275268B1 (en) 1993-09-09 2001-08-14 United Video Properties, Inc. Electronic television program guide with remote product ordering
US5410344A (en) 1993-09-22 1995-04-25 Arrowsmith Technologies, Inc. Apparatus and method of selecting video programs based on viewers' preferences
WO1995010915A1 (en) 1993-10-12 1995-04-20 Orad, Inc. Sports event video
US6195497B1 (en) 1993-10-25 2001-02-27 Hitachi, Ltd. Associated image retrieving apparatus and method
US5550965A (en) * 1993-12-27 1996-08-27 Lucent Technologies Inc. Method and system for operating a data processor to index primary data in real time with iconic table of contents
CA2140850C (en) 1994-02-24 1999-09-21 Howard Paul Katseff Networked system for display of multimedia presentations
KR100249874B1 (ko) 1994-03-02 2000-03-15 메코나헤이 미리디 암 비쵸킹성 박리성/마모성 코팅
US5521841A (en) 1994-03-31 1996-05-28 Siemens Corporate Research, Inc. Browsing contents of a given video sequence
US6230501B1 (en) 1994-04-14 2001-05-15 Promxd Technology, Inc. Ergonomic systems and methods providing intelligent adaptive surfaces and temperature control
EP0687112B1 (en) * 1994-06-08 2006-09-20 Matsushita Electric Industrial Co., Ltd. Image conversion apparatus
US5635982A (en) 1994-06-27 1997-06-03 Zhang; Hong J. System for automatic video segmentation and key frame extraction for video sequences having both sharp and gradual transitions
USD381991S (en) 1994-07-12 1997-08-05 Discovery Communications, Inc. Remote control unit
USD368263S (en) 1994-07-12 1996-03-26 Discovery Communications, Inc. Remote control unit
US5682460A (en) 1994-08-29 1997-10-28 Motorola, Inc. Method for selecting transmission preferences
US5675752A (en) 1994-09-15 1997-10-07 Sony Corporation Interactive applications generator for an interactive presentation environment
US5600781A (en) 1994-09-30 1997-02-04 Intel Corporation Method and apparatus for creating a portable personalized operating environment
US5664227A (en) 1994-10-14 1997-09-02 Carnegie Mellon University System and method for skimming digital audio/video data
JP3511409B2 (ja) 1994-10-27 2004-03-29 株式会社半導体エネルギー研究所 アクティブマトリクス型液晶表示装置およびその駆動方法
US5696965A (en) 1994-11-03 1997-12-09 Intel Corporation Electronic information appraisal agent
US5717923A (en) 1994-11-03 1998-02-10 Intel Corporation Method and apparatus for dynamically customizing electronic information to individual end users
USD402310S (en) 1994-11-07 1998-12-08 Discovery Communications, Inc. Electronic book
US5878222A (en) 1994-11-14 1999-03-02 Intel Corporation Method and apparatus for controlling video/audio and channel selection for a communication signal based on channel data indicative of channel contents of a signal
US5617565A (en) 1994-11-29 1997-04-01 Hitachi America, Ltd. Broadcast interactive multimedia system
US6571279B1 (en) 1997-12-05 2003-05-27 Pinpoint Incorporated Location enhanced information delivery system
US5758257A (en) 1994-11-29 1998-05-26 Herz; Frederick System and method for scheduling broadcast of and access to video programs and other data using customer profiles
US6029195A (en) 1994-11-29 2000-02-22 Herz; Frederick S. M. System for customized electronic identification of desirable objects
US5805733A (en) 1994-12-12 1998-09-08 Apple Computer, Inc. Method and system for detecting scenes and summarizing video sequences
US5821945A (en) 1995-02-03 1998-10-13 The Trustees Of Princeton University Method and apparatus for video browsing based on content and structure
US6198767B1 (en) * 1995-03-27 2001-03-06 International Business Machines Corporation Apparatus for color component compression
US5710884A (en) 1995-03-29 1998-01-20 Intel Corporation System for automatically updating personal profile server with updates to additional user information gathered from monitoring user's electronic consuming habits generated on computer during use
US5761881A (en) 1995-05-10 1998-06-09 Wall; Benjamin Process and apparatus for wrapping paper rolls
US5907324A (en) 1995-06-07 1999-05-25 Intel Corporation Method for saving and accessing desktop conference characteristics with a persistent conference object
US5900867A (en) 1995-07-17 1999-05-04 Gateway 2000, Inc. Self identifying remote control device having a television receiver for use in a computer
JPH0946688A (ja) * 1995-07-26 1997-02-14 Fujitsu Ltd ビデオ情報提供/受信システム
GB9517808D0 (en) * 1995-08-31 1995-11-01 Philips Electronics Uk Ltd Interactive entertainment personalisation
US5758259A (en) 1995-08-31 1998-05-26 Microsoft Corporation Automated selective programming guide
US6226678B1 (en) 1995-09-25 2001-05-01 Netspeak Corporation Method and apparatus for dynamically defining data communication utilities
US5694163A (en) 1995-09-28 1997-12-02 Intel Corporation Method and apparatus for viewing of on-line information service chat data incorporated in a broadcast television program
US5717879A (en) 1995-11-03 1998-02-10 Xerox Corporation System for the capture and replay of temporal data representing collaborative activities
US5958006A (en) 1995-11-13 1999-09-28 Motorola, Inc. Method and apparatus for communicating summarized data
US5867226A (en) 1995-11-17 1999-02-02 Thomson Consumer Electronics, Inc. Scheduler employing a predictive agent for use in a television receiver
US5794210A (en) 1995-12-11 1998-08-11 Cybergold, Inc. Attention brokerage
US6269215B1 (en) 1999-03-02 2001-07-31 Hitachi, Ltd. Information processing system
KR0183149B1 (ko) 1995-12-30 1999-05-01 김광호 동화상 검출방법
US5969755A (en) 1996-02-05 1999-10-19 Texas Instruments Incorporated Motion based event detection system and method
JPH11506250A (ja) 1996-03-04 1999-06-02 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ ユーザ指向のマルチメディア プレゼンテーション システム
JP3113814B2 (ja) 1996-04-17 2000-12-04 インターナショナル・ビジネス・マシーンズ・コーポレ−ション 情報検索方法及び情報検索装置
US5848396A (en) 1996-04-26 1998-12-08 Freedom Of Information, Inc. Method and apparatus for determining behavioral profile of a computer user
US5727129A (en) 1996-06-04 1998-03-10 International Business Machines Corporation Network system for profiling and actively facilitating user activities
US5945988A (en) 1996-06-06 1999-08-31 Intel Corporation Method and apparatus for automatically determining and dynamically updating user preferences in an entertainment system
US5959697A (en) 1996-06-07 1999-09-28 Electronic Data Systems Corporation Method and system for detecting dissolve transitions in a video signal
US5920360A (en) 1996-06-07 1999-07-06 Electronic Data Systems Corporation Method and system for detecting fade transitions in a video signal
US5778108A (en) 1996-06-07 1998-07-07 Electronic Data Systems Corporation Method and system for detecting transitional markers such as uniform fields in a video signal
WO1997048230A1 (en) 1996-06-13 1997-12-18 Starsight Telecast, Inc. Method and apparatus for searching a guide using program characteristics
US5781188A (en) 1996-06-27 1998-07-14 Softimage Indicating activeness of clips and applying effects to clips and tracks in a timeline of a multimedia work
US5857190A (en) 1996-06-27 1999-01-05 Microsoft Corporation Event logging system and method for logging events in a network system
PT932398E (pt) 1996-06-28 2006-09-29 Ortho Mcneil Pharm Inc Utilizacao do topiramento ou dos seus derivados para a producao de um medicamento para o tratamento de disturbios bipolares maniaco- depressivos
FI972718A0 (fi) 1996-07-02 1997-06-24 More Magic Software Mms Oy Foerfaranden och arrangemang foer distribution av ett anvaendargraenssnitt
US5832495A (en) 1996-07-08 1998-11-03 Survivors Of The Shoah Visual History Foundation Method and apparatus for cataloguing multimedia data
US6233289B1 (en) 1996-07-17 2001-05-15 Seagate Technolgy, Inc. High rate trellis code for partial response channels
US5933811A (en) 1996-08-20 1999-08-03 Paul D. Angles System and method for delivering customized advertisements within interactive communication systems
US5926624A (en) 1996-09-12 1999-07-20 Audible, Inc. Digital information library and delivery system with logic for generating files targeted to the playback device
US5764916A (en) 1996-09-27 1998-06-09 Ichat, Inc. Method and apparatus for real time communication over a computer network
US6137486A (en) 1996-09-30 2000-10-24 Sanyo Electric Co., Ltd. Image display control device for restricting display of video data viewed on a television in accordance with a restrict level of the video data
US5828809A (en) 1996-10-01 1998-10-27 Matsushita Electric Industrial Co., Ltd. Method and apparatus for extracting indexing information from digital video data
US6199076B1 (en) 1996-10-02 2001-03-06 James Logan Audio program player including a dynamic program selection controller
US5892536A (en) 1996-10-03 1999-04-06 Personal Audio Systems and methods for computer enhanced broadcast monitoring
US5732216A (en) 1996-10-02 1998-03-24 Internet Angles, Inc. Audio message exchange system
US6088455A (en) 1997-01-07 2000-07-11 Logan; James D. Methods and apparatus for selectively reproducing segments of broadcast programming
US5986692A (en) 1996-10-03 1999-11-16 Logan; James D. Systems and methods for computer enhanced broadcast monitoring
US5774666A (en) 1996-10-18 1998-06-30 Silicon Graphics, Inc. System and method for displaying uniform network resource locators embedded in time-based medium
US5917553A (en) 1996-10-22 1999-06-29 Fox Sports Productions Inc. Method and apparatus for enhancing the broadcast of a live event
US5828839A (en) 1996-11-14 1998-10-27 Interactive Broadcaster Services Corp. Computer network chat room based on channel broadcast in real time
US6543053B1 (en) * 1996-11-27 2003-04-01 University Of Hong Kong Interactive video-on-demand system
US6263507B1 (en) 1996-12-05 2001-07-17 Interval Research Corporation Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data
JP3687237B2 (ja) 1996-12-05 2005-08-24 三菱電機株式会社 インバータ装置
US5931901A (en) 1996-12-09 1999-08-03 Robert L. Wolfe Programmed music on demand from the internet
US6233590B1 (en) 1996-12-13 2001-05-15 Venson M. Shaw Server apparatus for distributed communications supporting multiple user/application environment
US6487390B1 (en) * 1996-12-18 2002-11-26 Clubcom, Inc. System and method for interactive on-demand information
US6177931B1 (en) * 1996-12-19 2001-01-23 Index Systems, Inc. Systems and methods for displaying and recording control interface with television programs, video, advertising information and program scheduling information
US6185625B1 (en) * 1996-12-20 2001-02-06 Intel Corporation Scaling proxy server sending to the client a graphical user interface for establishing object encoding preferences after receiving the client's request for the object
ATE223132T1 (de) 1996-12-20 2002-09-15 Princeton Video Image Inc Aufsatzgerät für gezielte elektronische einblendung von zeichen in videosignale
US6163316A (en) 1997-01-03 2000-12-19 Texas Instruments Incorporated Electronic programming system and method
US6637032B1 (en) * 1997-01-06 2003-10-21 Microsoft Corporation System and method for synchronizing enhancing content with a video program using closed captioning
US6983478B1 (en) 2000-02-01 2006-01-03 Bellsouth Intellectual Property Corporation Method and system for tracking network use
US6076166A (en) 1997-01-17 2000-06-13 Philips Electronics North America Corporation Personalizing hospital intranet web sites
US6049821A (en) * 1997-01-24 2000-04-11 Motorola, Inc. Proxy host computer and method for accessing and retrieving information between a browser and a proxy
US5877821A (en) 1997-01-30 1999-03-02 Motorola, Inc. Multimedia input and control apparatus and method for multimedia communications
US6006241A (en) 1997-03-14 1999-12-21 Microsoft Corporation Production of a video stream with synchronized annotations over a computer network
US6122657A (en) 1997-02-04 2000-09-19 Networks Associates, Inc. Internet computer system with methods for dynamic filtering of hypertext tags and content
US5930783A (en) * 1997-02-21 1999-07-27 Nec Usa, Inc. Semantic and cognition based image retrieval
US20020133412A1 (en) 1997-03-07 2002-09-19 David M. Oliver System for management of transactions on networks
US5913030A (en) 1997-03-18 1999-06-15 International Business Machines Corporation Method and system for client/server communications with user information revealed as a function of willingness to reveal and whether the information is required
US6005565A (en) 1997-03-25 1999-12-21 Sony Corporation Integrated search of electronic program guide, internet and other information resources
GB2325537B8 (en) 1997-03-31 2000-01-31 Microsoft Corp Query-based electronic program guide
GB9706620D0 (en) 1997-04-01 1997-05-21 Sgs Thomson Microelectronics A method for remotely controlling a plurality of apparatus using a single remote control device
JPH10304334A (ja) 1997-04-25 1998-11-13 Canon Inc 通信方法、通信装置、送信装置、受信装置、通信システム、及び記憶媒体
US6741655B1 (en) 1997-05-05 2004-05-25 The Trustees Of Columbia University In The City Of New York Algorithms and system for object-oriented content-based video search
CA2236249A1 (en) 1997-05-15 1998-11-15 General Instrument Corporation Virtual information selection system
US6286141B1 (en) 1997-05-22 2001-09-04 Soundview Technologies Incorporated Personal editing system
US6370504B1 (en) * 1997-05-29 2002-04-09 University Of Washington Speech recognition on MPEG/Audio encoded files
WO1998056176A1 (en) 1997-06-03 1998-12-10 Koninklijke Philips Electronics N.V. Navigating through television programs
US6678659B1 (en) * 1997-06-20 2004-01-13 Swisscom Ag System and method of voice information dissemination over a network using semantic representation
US20030088872A1 (en) 1997-07-03 2003-05-08 Nds Limited Advanced television system
IL121230A (en) * 1997-07-03 2004-05-12 Nds Ltd Intelligent electronic program guide
US6014183A (en) 1997-08-06 2000-01-11 Imagine Products, Inc. Method and apparatus for detecting scene changes in a digital video stream
US6163779A (en) * 1997-09-29 2000-12-19 International Business Machines Corporation Method of saving a web page to a local hard drive to enable client-side browsing
US6070167A (en) 1997-09-29 2000-05-30 Sharp Laboratories Of America, Inc. Hierarchical method and system for object-based audiovisual descriptive tagging of images for information retrieval, editing, and manipulation
US6064385A (en) 1997-09-30 2000-05-16 Compaq Computer Corporation Systems with user preference setting schemes
US6594699B1 (en) * 1997-10-10 2003-07-15 Kasenna, Inc. System for capability based multimedia streaming over a network
US6219837B1 (en) 1997-10-23 2001-04-17 International Business Machines Corporation Summary frames in video
US6961954B1 (en) 1997-10-27 2005-11-01 The Mitre Corporation Automated segmentation, information extraction, summarization, and presentation of broadcast news
US6005597A (en) 1997-10-27 1999-12-21 Disney Enterprises, Inc. Method and apparatus for program selection
US6064449A (en) 1997-10-31 2000-05-16 Webtv Networks, Inc. Automatic characterization of a television signal
US6055018A (en) 1997-11-04 2000-04-25 Ati Technologies, Inc. System and method for reconstructing noninterlaced captured content for display on a progressive screen
US6128624A (en) 1997-11-12 2000-10-03 Ncr Corporation Collection and integration of internet and electronic commerce data in a database during web browsing
US6298482B1 (en) * 1997-11-12 2001-10-02 International Business Machines Corporation System for two-way digital multimedia broadcast and interactive services
US6286140B1 (en) 1997-11-20 2001-09-04 Thomas P. Ivanyi System and method for measuring and storing information pertaining to television viewer or user behavior
US5973683A (en) 1997-11-24 1999-10-26 International Business Machines Corporation Dynamic regulation of television viewing content based on viewer profile and viewing history
US6587127B1 (en) 1997-11-25 2003-07-01 Motorola, Inc. Content player method and server with user profile
US6078928A (en) 1997-12-12 2000-06-20 Missouri Botanical Garden Site-specific interest profiling system
US6078917A (en) 1997-12-18 2000-06-20 International Business Machines Corporation System for searching internet using automatic relevance feedback
US5956026A (en) 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
US6480667B1 (en) 1997-12-23 2002-11-12 Intel Corporation Method of time shifting to simultaneously record and play a data stream
US5990980A (en) 1997-12-23 1999-11-23 Sarnoff Corporation Detection of transitions in video sequences
US20050028194A1 (en) 1998-01-13 2005-02-03 Elenbaas Jan Hermanus Personalized news retrieval system
US6363380B1 (en) 1998-01-13 2002-03-26 U.S. Philips Corporation Multimedia computer system with story segmentation capability and operating program therefor including finite automation video parser
US6320624B1 (en) 1998-01-16 2001-11-20 ECOLE POLYTECHNIQUE FéDéRALE Method and system for combining video sequences with spatio-temporal alignment
US6252544B1 (en) 1998-01-27 2001-06-26 Steven M. Hoffberg Mobile communication device
US6055569A (en) * 1998-01-27 2000-04-25 Go Ahead Software Inc. Accelerating web access by predicting user action
JP4074366B2 (ja) 1998-02-24 2008-04-09 コニカミノルタビジネステクノロジーズ株式会社 画像検索装置及び方法並びに画像検索プログラムを記録した記録媒体
US7185355B1 (en) 1998-03-04 2007-02-27 United Video Properties, Inc. Program guide system with preference profiles
EP0940980A2 (en) 1998-03-05 1999-09-08 Matsushita Electric Industrial Co., Ltd. User interface apparatus and broadcast receiving apparatus
US6173287B1 (en) 1998-03-11 2001-01-09 Digital Equipment Corporation Technique for ranking multimedia annotations of interest
JP3657424B2 (ja) 1998-03-20 2005-06-08 松下電器産業株式会社 番組情報を放送するセンター装置と端末装置
US6233586B1 (en) 1998-04-01 2001-05-15 International Business Machines Corp. Federated searching of heterogeneous datastores using a federated query object
US6006265A (en) * 1998-04-02 1999-12-21 Hotv, Inc. Hyperlinks resolution at and by a special network server in order to enable diverse sophisticated hyperlinking upon a digital network
US6304665B1 (en) 1998-04-03 2001-10-16 Sportvision, Inc. System for determining the end of a path for a moving object
US6530082B1 (en) 1998-04-30 2003-03-04 Wink Communications, Inc. Configurable monitoring of program viewership and usage of interactive applications
US6005603A (en) 1998-05-15 1999-12-21 International Business Machines Corporation Control of a system for processing a stream of information based on information content
US6339842B1 (en) 1998-06-10 2002-01-15 Dennis Sunga Fernandez Digital television with subscriber conference overlay
US6081278A (en) 1998-06-11 2000-06-27 Chen; Shenchang Eric Animation object having multiple resolution format
US6614987B1 (en) 1998-06-12 2003-09-02 Metabyte, Inc. Television program recording with user preference determination
JP3907839B2 (ja) 1998-06-17 2007-04-18 松下電器産業株式会社 放送システム
US6141041A (en) 1998-06-22 2000-10-31 Lucent Technologies Inc. Method and apparatus for determination and visualization of player field coverage in a sporting event
JP2000013708A (ja) 1998-06-26 2000-01-14 Hitachi Ltd 番組選択支援装置
JP4198786B2 (ja) 1998-06-30 2008-12-17 株式会社東芝 情報フィルタリングシステム、情報フィルタリング装置、映像機器および情報フィルタリング方法
CA2730344C (en) 1998-07-17 2014-10-21 United Video Properties, Inc. Interactive television program guide system having multiple devices within a household
US6820278B1 (en) 1998-07-23 2004-11-16 United Video Properties, Inc. Cooperative television application system having multiple user television equipment devices
US6546555B1 (en) * 1998-07-23 2003-04-08 Siemens Corporate Research, Inc. System for hypervideo filtering based on end-user payment interest and capability
US6100941A (en) 1998-07-28 2000-08-08 U.S. Philips Corporation Apparatus and method for locating a commercial disposed within a video data stream
US6233389B1 (en) 1998-07-30 2001-05-15 Tivo, Inc. Multimedia time warping system
US6324338B1 (en) * 1998-08-07 2001-11-27 Replaytv, Inc. Video data recorder with integrated channel guides
US6144375A (en) 1998-08-14 2000-11-07 Praja Inc. Multi-perspective viewer for content-based interactivity
US6898762B2 (en) 1998-08-21 2005-05-24 United Video Properties, Inc. Client-server electronic program guide
TW463503B (en) 1998-08-26 2001-11-11 United Video Properties Inc Television chat system
US6240406B1 (en) 1998-08-31 2001-05-29 The Trustees Of The University Of Pennsylvania System and method for optimizing queries with aggregates and collection conversions
US6317722B1 (en) 1998-09-18 2001-11-13 Amazon.Com, Inc. Use of electronic shopping carts to generate personal recommendations
US7720723B2 (en) 1998-09-18 2010-05-18 Amazon Technologies, Inc. User interface and methods for recommending items to users
US6115709A (en) 1998-09-18 2000-09-05 Tacit Knowledge Systems, Inc. Method and system for constructing a knowledge profile of a user having unrestricted and restricted access portions according to respective levels of confidence of content of the portions
US6425133B1 (en) 1998-10-01 2002-07-23 General Instrument Corporation Method for configuring cable television converter terminal using multiple channels and arrangement therefor
US6253203B1 (en) 1998-10-02 2001-06-26 Ncr Corporation Privacy-enhanced database
US6157377A (en) * 1998-10-30 2000-12-05 Intel Corporation Method and apparatus for purchasing upgraded media features for programming transmissions
US6317881B1 (en) 1998-11-04 2001-11-13 Intel Corporation Method and apparatus for collecting and providing viewer feedback to a broadcast
US6215526B1 (en) 1998-11-06 2001-04-10 Tivo, Inc. Analog video tagging and encoding system
US6408128B1 (en) 1998-11-12 2002-06-18 Max Abecassis Replaying with supplementary information a segment of a video
US6845370B2 (en) 1998-11-12 2005-01-18 Accenture Llp Advanced information gathering for targeted activities
CA2352302A1 (en) 1998-11-30 2000-06-08 Index Systems, Inc. Smart agent based on habit, statistical inference and psycho-demographic profiling
US6628302B2 (en) 1998-11-30 2003-09-30 Microsoft Corporation Interactive video programming methods
US6865746B1 (en) * 1998-12-03 2005-03-08 United Video Properties, Inc. Electronic program guide with related-program search feature
US6216129B1 (en) 1998-12-03 2001-04-10 Expanse Networks, Inc. Advertisement selection system supporting discretionary target market characteristics
US7150030B1 (en) 1998-12-03 2006-12-12 Prime Research Alliance, Inc. Subscriber characterization system
US6169542B1 (en) 1998-12-14 2001-01-02 Gte Main Street Incorporated Method of delivering advertising through an interactive video distribution system
US6421680B1 (en) 1998-12-15 2002-07-16 International Business Machines Corporation Method, system and computer program product for case and character-encoding insensitive searching of international databases
US6374404B1 (en) 1998-12-16 2002-04-16 Sony Corporation Of Japan Intelligent device having background caching of web pages from a digital television broadcast signal and method of same
US6342904B1 (en) 1998-12-17 2002-01-29 Newstakes, Inc. Creating a slide presentation from full motion video
US20030001880A1 (en) 2001-04-18 2003-01-02 Parkervision, Inc. Method, system, and computer program product for producing and distributing enhanced media
US6363160B1 (en) 1999-01-22 2002-03-26 Intel Corporation Interface using pattern recognition and tracking
TW452748B (en) 1999-01-26 2001-09-01 Ibm Description of video contents based on objects by using spatio-temporal features and sequential of outlines
US6522342B1 (en) 1999-01-27 2003-02-18 Hughes Electronics Corporation Graphical tuning bar for a multi-program data stream
US6412008B1 (en) * 1999-01-28 2002-06-25 International Business Machines Corporation System and method for cooperative client/server customization of web pages
US6593936B1 (en) * 1999-02-01 2003-07-15 At&T Corp. Synthetic audiovisual description scheme, method and system for MPEG-7
US6236395B1 (en) 1999-02-01 2001-05-22 Sharp Laboratories Of America, Inc. Audiovisual information management system
US6317718B1 (en) * 1999-02-26 2001-11-13 Accenture Properties (2) B.V. System, method and article of manufacture for location-based filtering for shopping agent in the physical world
US6774917B1 (en) 1999-03-11 2004-08-10 Fuji Xerox Co., Ltd. Methods and apparatuses for interactive similarity searching, retrieval, and browsing of video
US6535639B1 (en) 1999-03-12 2003-03-18 Fuji Xerox Co., Ltd. Automatic video summarization using a measure of shot importance and a frame-packing method
JP2000278688A (ja) 1999-03-24 2000-10-06 Sony Corp 動きベクトル検出装置およびその方法と画像処理装置
US7146626B1 (en) 1999-03-29 2006-12-05 The Directv Group, Inc. Method and apparatus for storing and displaying digital objects associated with an electronic television program guide using fuzzy logic
US6813775B1 (en) 1999-03-29 2004-11-02 The Directv Group, Inc. Method and apparatus for sharing viewing preferences
US6754906B1 (en) 1999-03-29 2004-06-22 The Directv Group, Inc. Categorical electronic program guide
US6470378B1 (en) * 1999-03-31 2002-10-22 Intel Corporation Dynamic content customization in a clientserver environment
US6810200B1 (en) 1999-04-14 2004-10-26 Matsushita Electric Industrial Co., Ltd. Digital data processing device that restricts usage of data present on a recording medium
US6426761B1 (en) * 1999-04-23 2002-07-30 Internation Business Machines Corporation Information presentation system for a graphical user interface
US6370688B1 (en) * 1999-05-26 2002-04-09 Enounce, Inc. Method and apparatus for server broadcast of time-converging multi-media streams
KR100624865B1 (ko) 1999-06-02 2006-09-18 엘지전자 주식회사 사용자 프로파일을 이용한 비디오 분할 시청 시스템
US6498783B1 (en) 1999-06-22 2002-12-24 Lucent Technologies Inc. Traffic monitoring system and service differentiation in a dynamic channel assignment system for TCP/IP data transmitted via cable television channels
AU5934900A (en) 1999-07-16 2001-02-05 Agentarts, Inc. Methods and system for generating automated alternative content recommendations
US6971105B1 (en) 1999-07-29 2005-11-29 Rehle Visual Communications Llc Method, apparatus, and computer program product for deferred completion of multi-step user transaction applications
US20010030664A1 (en) 1999-08-16 2001-10-18 Shulman Leo A. Method and apparatus for configuring icon interactivity
US6704929B1 (en) 1999-08-18 2004-03-09 Webtv Networks, Inc. Tracking viewing behavior of a home entertainment system
US6621895B1 (en) 1999-08-31 2003-09-16 Nortel Networks Limited Enhanced communication services for data networks
KR100319157B1 (ko) 1999-09-22 2002-01-05 구자홍 사용자 프로파일의 복합항목 사용자 선호도 정보 자료구조와 복합항목 사용자 선호도 정보 자료구조를 이용한 멀티미디어 콘텐트 필터링 및 검색 방법
KR100304482B1 (ko) 1999-09-22 2001-11-02 구자홍 다중 계층구조를 가지는 사용자 선호도 정보구조와 이를 이용한 멀티미디어 정보 서비스 방법
US6611876B1 (en) * 1999-10-28 2003-08-26 International Business Machines Corporation Method for establishing optimal intermediate caching points by grouping program elements in a software system
US6993245B1 (en) 1999-11-18 2006-01-31 Vulcan Patents Llc Iterative, maximally probable, batch-mode commercial detection for audiovisual content
US6675158B1 (en) 1999-11-30 2004-01-06 Sony Corporation Method and apparatus for organizing data pertaining to audiovisual content
US6549643B1 (en) 1999-11-30 2003-04-15 Siemens Corporate Research, Inc. System and method for selecting key-frames of video data
US6597859B1 (en) 1999-12-16 2003-07-22 Intel Corporation Method and apparatus for abstracting video data
US6754904B1 (en) 1999-12-30 2004-06-22 America Online, Inc. Informing network users of television programming viewed by other network users
US7146329B2 (en) 2000-01-13 2006-12-05 Erinmedia, Llc Privacy compliant multiple dataset correlation and content delivery system and methods
WO2001052173A1 (en) 2000-01-13 2001-07-19 Erinmedia, Inc. Privacy compliant multiple dataset correlation system
US6665423B1 (en) 2000-01-27 2003-12-16 Eastman Kodak Company Method and system for object-oriented motion-based video description
US6490320B1 (en) 2000-02-02 2002-12-03 Mitsubishi Electric Research Laboratories Inc. Adaptable bitstream video delivery system
US6542546B1 (en) * 2000-02-02 2003-04-01 Mitsubishi Electric Research Laboratories, Inc. Adaptable compressed bitstream transcoder
US6868440B1 (en) 2000-02-04 2005-03-15 Microsoft Corporation Multi-level skimming of multimedia content using playlists
US6934964B1 (en) 2000-02-08 2005-08-23 Koninklijke Philips Electronics N.V. Electronic program guide viewing history generator method and system
US7472093B2 (en) 2000-03-08 2008-12-30 Rsa Security Inc. Targeted delivery of informational content with privacy protection
US6817027B1 (en) 2000-03-31 2004-11-09 Matsushita Electric Industrial Co., Ltd. Display interface comprising a channel matrix
US8572646B2 (en) 2000-04-07 2013-10-29 Visible World Inc. System and method for simultaneous broadcast for personalized messages
US6970510B1 (en) 2000-04-25 2005-11-29 Wee Susie J Method for downstream editing of compressed video
US7055168B1 (en) 2000-05-03 2006-05-30 Sharp Laboratories Of America, Inc. Method for interpreting and executing user preferences of audiovisual information
US6829781B1 (en) 2000-05-24 2004-12-07 At&T Corp. Network-based service to provide on-demand video summaries of television programs
US6546101B1 (en) 2000-06-02 2003-04-08 Motorola, Inc. Communication device having illuminated audio indicator
US6691126B1 (en) 2000-06-14 2004-02-10 International Business Machines Corporation Method and apparatus for locating multi-region objects in an image or video database
US7380258B2 (en) 2000-06-21 2008-05-27 At&T Delaware Intellectual Property, Inc. Systems and methods for controlling and managing programming content and portions thereof
US8495679B2 (en) 2000-06-30 2013-07-23 Thomson Licensing Method and apparatus for delivery of television programs and targeted de-coupled advertising
US6813313B2 (en) 2000-07-06 2004-11-02 Mitsubishi Electric Research Laboratories, Inc. Method and system for high-level structure analysis and event detection in domain specific videos
US20040125877A1 (en) 2000-07-17 2004-07-01 Shin-Fu Chang Method and system for indexing and content-based adaptive streaming of digital video content
US20040125124A1 (en) 2000-07-24 2004-07-01 Hyeokman Kim Techniques for constructing and browsing a hierarchical video structure
WO2002008948A2 (en) 2000-07-24 2002-01-31 Vivcom, Inc. System and method for indexing, searching, identifying, and editing portions of electronic multimedia files
US7548565B2 (en) 2000-07-24 2009-06-16 Vmark, Inc. Method and apparatus for fast metadata generation, delivery and access for live broadcast program
US7454775B1 (en) 2000-07-27 2008-11-18 Koninklijke Philips Electronics N.V. Method and apparatus for generating television program recommendations based on similarity metric
US6724933B1 (en) 2000-07-28 2004-04-20 Microsoft Corporation Media segmentation system and related methods
US6766362B1 (en) 2000-07-28 2004-07-20 Seiko Epson Corporation Providing a network-based personalized newspaper with personalized content and layout
US6439572B1 (en) 2000-07-31 2002-08-27 Teresa H. Bowen Baseball and soccer training system for children
US6697523B1 (en) 2000-08-09 2004-02-24 Mitsubishi Electric Research Laboratories, Inc. Method for summarizing a video using motion and color descriptors
US8302127B2 (en) 2000-09-25 2012-10-30 Thomson Licensing System and method for personalized TV
US6774908B2 (en) 2000-10-03 2004-08-10 Creative Frontier Inc. System and method for tracking an object in a video and linking information thereto
US6981129B1 (en) 2000-11-02 2005-12-27 Intel Corporation Breaking replay dependency loops in a processor using a rescheduled replay queue
US6931595B2 (en) 2000-11-02 2005-08-16 Sharp Laboratories Of America, Inc. Method for automatic extraction of semantically significant events from video
US7721310B2 (en) 2000-12-05 2010-05-18 Koninklijke Philips Electronics N.V. Method and apparatus for selective updating of a user profile
US6925455B2 (en) 2000-12-12 2005-08-02 Nec Corporation Creating audio-centric, image-centric, and integrated audio-visual summaries
US20020083473A1 (en) 2000-12-21 2002-06-27 Philips Electronics North America Corporation System and method for accessing a multimedia summary of a video program
US6722471B2 (en) 2000-12-22 2004-04-20 Albert A. Wolfe Scaffolding system having improved safety structures and connecting members
US7660510B2 (en) 2000-12-28 2010-02-09 Sony Corporation Device for creating content from multiple video and/or audio materials and method therefor
US6678635B2 (en) 2001-01-23 2004-01-13 Intel Corporation Method and system for detecting semantic events
US20020108112A1 (en) 2001-02-02 2002-08-08 Ensequence, Inc. System and method for thematically analyzing and annotating an audio-visual sequence
US20020156909A1 (en) 2001-02-15 2002-10-24 Harrington Jeffrey M. System and method for server side control of a flash presentation
US20020120929A1 (en) 2001-02-28 2002-08-29 Schwalb Eddie M. Method and system for mass customization of digital television broadcasts
US7593618B2 (en) 2001-03-29 2009-09-22 British Telecommunications Plc Image processing for analyzing video content
US6907570B2 (en) 2001-03-29 2005-06-14 International Business Machines Corporation Video and multimedia browsing while switching between views
US6813372B2 (en) 2001-03-30 2004-11-02 Logitech, Inc. Motion and audio detection based webcamming and bandwidth control
JP3663362B2 (ja) 2001-03-30 2005-06-22 インターナショナル・ビジネス・マシーンズ・コーポレーション インデックス生成装置
US7110458B2 (en) 2001-04-27 2006-09-19 Mitsubishi Electric Research Laboratories, Inc. Method for summarizing a video using motion descriptors
US20020194589A1 (en) 2001-05-08 2002-12-19 Cristofalo Michael Technique for optimizing the delivery of advertisements and other programming segments by making bandwidth tradeoffs
US20020190991A1 (en) 2001-05-16 2002-12-19 Daniel Efran 3-D instant replay system and method
US7380262B2 (en) 2001-06-12 2008-05-27 Thomson Licensing Method and apparatus for generating a list of suggested scheduled television programs
US7203620B2 (en) 2001-07-03 2007-04-10 Sharp Laboratories Of America, Inc. Summarization of video content
US6820075B2 (en) 2001-08-13 2004-11-16 Xerox Corporation Document-centric system with auto-completion
DE10144023B4 (de) 2001-09-07 2005-12-29 Siemens Ag Vorrichtung und Verfahren zur automatischen Benutzerprofil-Konfiguration
US20030066068A1 (en) 2001-09-28 2003-04-03 Koninklijke Philips Electronics N.V. Individual recommender database using profiles of others
WO2003036970A1 (en) 2001-10-25 2003-05-01 Predictive Media Corporation Method and system for presenting personalized television program recommendation to viewers
US20030084448A1 (en) 2001-10-26 2003-05-01 Koninklijke Philips Electronics N.V. Automatic viewing-history based television control system
US6909384B2 (en) 2002-01-31 2005-06-21 Microsoft Corporation Generating and searching compressed data
US6658095B1 (en) 2002-03-19 2003-12-02 Nortel Networks Limited Customized presence information delivery
US20030182663A1 (en) 2002-03-25 2003-09-25 Sony Corporation System and method for sharing user comments on TV screens
ATE423354T1 (de) 2002-04-02 2009-03-15 Verizon Business Global Llc Nachrichtenantwortsystem
US8856236B2 (en) 2002-04-02 2014-10-07 Verizon Patent And Licensing Inc. Messaging response system
US20040032486A1 (en) 2002-08-16 2004-02-19 Shusman Chad W. Method and apparatus for interactive programming using captioning
US7899915B2 (en) 2002-05-10 2011-03-01 Richard Reisman Method and apparatus for browsing using multiple coordinated device sets
US6757722B2 (en) 2002-07-16 2004-06-29 Nokia Corporation System and method for providing partial presence notifications
EP1645976A3 (en) 2002-07-23 2006-04-26 Samsung Electronics Co., Ltd. Index structure of metadata, method for providing indices of metadata, and metadata searching method and apparatus using the indices of metadata
US7657836B2 (en) 2002-07-25 2010-02-02 Sharp Laboratories Of America, Inc. Summarization of soccer video content
US7130866B2 (en) 2002-07-30 2006-10-31 Koninklijke Philips Electronics N.V. Controlling the growth of a feature frequency profile by deleting selected frequency counts of features of events
US7739584B2 (en) 2002-08-08 2010-06-15 Zane Vella Electronic messaging synchronized to media presentation
US20040197088A1 (en) 2003-03-31 2004-10-07 Ferman Ahmet Mufit System for presenting audio-video content
KR100577360B1 (ko) 2003-09-09 2006-05-10 삼성전자주식회사 디지털 셋톱 박스를 이용한 추천 프로그램 공유 장치 및방법
KR100568234B1 (ko) 2003-12-13 2006-04-07 삼성전자주식회사 마크업 랭귀지 기반의 데이터 관리 방법과 그 장치 및기록매체

Also Published As

Publication number Publication date
JP2002077786A (ja) 2002-03-15
US8028314B1 (en) 2011-09-27
EP1158795A2 (en) 2001-11-28
EP1158795A3 (en) 2005-03-23

Similar Documents

Publication Publication Date Title
JP4107811B2 (ja) オーディオビジュアルシステムの使用方法
JP3810268B2 (ja) オーディオビジュアルシステム
JP4408768B2 (ja) 記述データの生成装置、記述データを利用したオーディオビジュアル装置
JP4363806B2 (ja) オーディオビジュアルプログラム管理システム及びオーディオビジュアルプログラム管理方法
US7424678B2 (en) Audiovisual information management system with advertising
US7055168B1 (en) Method for interpreting and executing user preferences of audiovisual information
US20030206710A1 (en) Audiovisual management system
US20030061610A1 (en) Audiovisual management system
US20030121040A1 (en) Audiovisual management system
EP1100268B1 (en) Audiovisual information management system
EP1580990A2 (en) Audiovisual information management system

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050809

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051003

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060908

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061219

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080401

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080401

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110411

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees