JP2004516753A - 映像番組のマルチメディア要約を提供するシステム及び方法 - Google Patents
映像番組のマルチメディア要約を提供するシステム及び方法 Download PDFInfo
- Publication number
- JP2004516753A JP2004516753A JP2002552310A JP2002552310A JP2004516753A JP 2004516753 A JP2004516753 A JP 2004516753A JP 2002552310 A JP2002552310 A JP 2002552310A JP 2002552310 A JP2002552310 A JP 2002552310A JP 2004516753 A JP2004516753 A JP 2004516753A
- Authority
- JP
- Japan
- Prior art keywords
- video
- topic
- audio
- multimedia summary
- cue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 230000006870 function Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 10
- 230000002452 interceptive effect Effects 0.000 description 5
- 230000003796 beauty Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000000513 principal component analysis Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 241000220010 Rhode Species 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000033458 reproduction Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8549—Creating video summaries, e.g. movie trailer
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
- G11B2220/215—Recordable discs
- G11B2220/216—Rewritable discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
- G11B2220/215—Recordable discs
- G11B2220/218—Write-once discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2508—Magnetic discs
- G11B2220/2516—Hard disks
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2545—CDs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/40—Combinations of multiple record carriers
- G11B2220/45—Hierarchical combination of record carriers, e.g. HDD for fast access, optical discs for long term storage or tapes for backup
- G11B2220/455—Hierarchical combination of record carriers, e.g. HDD for fast access, optical discs for long term storage or tapes for backup said record carriers being in one device and being used as primary and secondary/backup media, e.g. HDD-DVD combo device, or as source and target media, e.g. PC and portable player
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/60—Solid state media
- G11B2220/61—Solid state media wherein solid state memory is used for storing A/V content
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/90—Tape-like record carriers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
- H04N21/42646—Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4884—Data services, e.g. news ticker for displaying subtitles
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Security & Cryptography (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Abstract
Description
〔関連出願へのクロスリファレンス〕
本発明は、発明の名称が”METHOD AND APPARATUS FOR THE SUMMARIZATION AND INDEXING OF VIDEO PROGRAMS USING TRANSCRIPT INFORMATION”である米国特許出願明細書(書類番号PHA701137)と、1999年7月9日に出願された、発明の名称が”METHOD AND APPARATUS FOR LINKING A VIDEO SEGMENT TO ANOTHER SEGMENT OR INFORMATION SOURCE”である米国特許出願第09/351,086号明細書と、発明の名称が”SYSTEM AND METHOD FOR ORDERING ONLINE UTILIZING A DIGITAL TELEVISION RECEIVER”である米国特許出願明細書(書類番号PHA701071)と、発明の名称が”SYSTEM AND METHOD FOR ACCESSING A MULTIMEDIA SUMMARY OF A VIDEO PROGRAM”である米国特許出願明細書(書類番号PHA701182EXT)と、に記載された発明に関連する。これらの特許出願は、本願の譲受人に譲渡されている。これらの関連特許出願の開示内容は、あらゆる目的のため、全文が本明細書に記載されているのと同じように参考のため引用される。
【0002】
〔発明の技術分野〕
本発明は、映像番組を要約するシステム及び方法に係り、特に、トランスクリプト情報及び映像セグメントを使用して映像番組のマルチメディア要約を提供するシステム及び方法に関する。
【0003】
〔発明の背景〕
当初のテレビでは、視聴するため利用できるテレビ放送チャネルの数は少なかった。テレビ技術が進歩して極超短波(UHF)チャネル、超短波(VHF)チャネル、ケーブルテレビ、衛星テレビ受信、及び、インターネットに基づく技術が取り入れられるようになると、利用可能なテレビチャネルの数は著しく増加した。
【0004】
視聴できるテレビ番組の数も著しく増加した。高品位テレビのコンテンツに関しては、その情報量は、1日に1チャネル当たりで200ギガバイト(GB)に達する。視聴者が視聴することに関心を持っている番組若しくは番組セグメントを見つけることができるように、視聴者が映像番組の内容説明を素早く閲覧できることは、徐々に重要になり始めている。その際の主要な問題は、多くの映像番組の内容説明は、容易に入手できないという点である。
【0005】
録画された映像番組を視聴したいと思う視聴者に与えられている現在の選択肢には、次の(1)〜(3)が含まれる。
(1)映像番組全部を見る。
(2)関心を持っている番組の部分を見つけるため映像番組全体の記録物を早送りする。
(3)一般的な番組説明だけを提供する電子番組案内(EPG)のデータを使用する。
【0006】
現在、視聴者が映像番組の内容を簡単に識別できるシステム或いは方法を入手することはできない。特に、視聴者が映像番組の内容の十分に詳細な要約を取得できるようなシステム或いは方法は入手できない。
【0007】
したがって、従来、映像番組の要約を提供する改良されたシステム及び方法が要望されている。従来、トランスクリプト情報及び映像セグメントを使用して映像番組のマルチメディア要約を提供する改良されたシステム及び方法が求められている。また、視聴者が映像番組内の任意のトピック若しくはサブトピックの先頭へアクセスすることができる映像番組のマルチメディア要約を提供する改良されたシステム及び方法が求められている。
【0008】
〔発明の概要〕
上記の従来技術の問題点を解決するため、本発明の主要な目的は、映像番組を表示する能力を備えた映像表示システムで利用される、映像番組のマルチメディア要約を提供するシステム及び方法を提供することである。
【0009】
本発明は、映像番組のマルチメディア要約を作成できるマルチメディア要約作成器を含む。マルチメディア要約作成器は、映像番組のテキストのトランスクリプトと、映像番組の映像セグメントとを取得することができる。マルチメディア要約作成器は、映像番組のトランスクリプト中のトピック・キュー及びサブトピック・キューを識別する。マルチメディア要約作成器は、さらに、トピック・キュー及びサブトピック・キューに関連した映像セグメントを識別する。マルチメディア要約作成器は、トピック・キュー及びサブトピック・キュー、並びに、これらに関連した映像セグメントを組み立てることによりマルチメディア要約を作成する。マルチメディア要約にはトピック及びサブトピック毎にエントリー・ポイントが設けられるので、マルチメディア要約の視聴者は、各トピック及びサブトピックに直接アクセスすることが可能である。
【0010】
本発明の有利な一実施例によれば、マルチメディア要約作成器は、映像番組のマルチメディア要約を作成するため、映像番組のトランスクリプトの部分と映像番組の映像セグメントの部分を組み合わせることが可能である。
【0011】
本発明の有利な一実施例によれば、マルチメディア要約作成器は、映像番組のトランスクリプト内のトピックに関係した映像セグメントを選択し、トピック及び映像セグメントをマルチメディア要約に追加することが可能である。
【0012】
本発明の他の有利な実施例によれば、マルチメディア要約作成器は、映像番組のトランスクリプト内のトピックのサブトピックに関係した映像セグメントを選択し、サブトピック及び映像セグメントをマルチメディア要約に追加することが可能である。
【0013】
本発明の更に別の実施例によれば、マルチメディア発生器は、視聴者がマルチメディア要約内の各トピック及びサブトピックへアクセスし得るようにマルチメディア要約にエントリー・ポイントを作成することができる。
【0014】
本発明の特徴及び技術的効果を包括的に説明したので、当業者は、以下の本発明の詳細な説明をよりよく理解できるであろう。請求項に係わる発明の主題を形成する本発明の更なる特徴及び効果は、後述される。当業者は、開示された概念及び具体的な実施例に基づいて、容易に、本発明と同じ目的を実現する構成を変更し、或いは、他の構成を設計するであろう。当業者は、このような等価的な構成は、本発明の精神及び範囲の外延に含まれることを認めるであろう。
【0015】
本発明の詳細な説明を始める前に、本明細書で使用されるある種の単語若しくは句(語句)を定義しておく方が都合がよい。用語「含む」、「有する」、「構成される」のような単語、及び、これらの単語の派生語は、制限の無い包含を表し、用語「又は」は包含的であり、「及び/又は」を意味し、句「関連している」並びにそのから派生した句は、包括される、相互接続する、包含される、接続する、結合する、通信できる、協働する、交互配置する、並列する、近接する、境界を接する、保有する、性質がある、などの意味を含む。用語「コントローラ」は、少なくとも一つの動作を制御する装置、システム、或いは、システムの一部であり、これらの装置は、ハードウェア、ファームウェア、ソフトウェア、又は、これらのうちの少なくとも二つの組み合わせを意味する。特定のコントローラに関連した機能は、集中的でも分散的でも、局部的でも遠隔的でも構わないことに注意する必要がある。特に、コントローラは、1台以上のデータプロセッサと、関連した入出力装置及びメモリと、を具備し、データプロセッサは、一つ以上のアプリケーションプログラム、及び/又は、オペレーティングシステムプログラムを実行する。ある種の語句の定義は明細書中で与えられ、当業者は、このような定義が、このように定義された語句の過去及び未来の用法に、殆どではなくても多くの場合に適用されることを認めるであろう。
【0016】
本発明及び本発明の効果を完全に理解するために、以下の説明を添付図面と共に提示する。添付図面中、同じ番号は同じものを指定する。
【0017】
〔発明の詳細な説明〕
図1乃至5と、本明細書において本発明の原理を記述するため使用される多数の実施例は、説明のためだけに用いられるものであって、決して本発明の範囲を制限するために構成されるべきではない。以下の典型的な実施例の記述において、本発明は、テレビ受像機に統合されるか、或いは、テレビ受像機と共に使用される。しかし、この実施例は、一例に過ぎないので、本発明の範囲をテレビ受像機に限定するために構成されるべきではない。実際上、当業者は、本発明の典型的な実施例があらゆるタイプの映像表示システムで利用するため簡単に変更できることがわかるであろう。
【0018】
図1は、本発明の一実施例による典型的なビデオレコーダ150及びテレビ受像機105を示す図である。ビデオレコーダ150は、外部源、例えば、ケーブルテレビジョン・サービス・プロバイダ(ケーブル社)、ローカルのアンテナ、衛星、インターネット、又はディジタル多用途ディスク(DVD)又はビデオ・ホーム・システム(VHS)テーププレーヤ等からの入力テレビジョン信号を受信する。ビデオレコーダ150は、選択されたチャンネルからのテレビジョン信号をテレビ受像機105へ送信する。チャンネルは、視聴者によって手動で選択されるか、又は、予め視聴者によってプログラムされた記録装置によって自動的に選択される。或いは、チャンネルと映像番組は、視聴者の個人的な視聴履歴中の番組プロファイルからの情報に基づいて記録装置によって自動的に選択され得る。
【0019】
記録モードでは、ビデオレコーダ150は、入来無線周波数(RF)テレビジョン信号を復調し、ビデオレコーダ150内の記憶媒体若しくはビデオレコーダ150に接続された記憶媒体上に記録され蓄積されるベースバンドビデオ信号を生成する。再生モードでは、ビデオレコーダ150は、記憶媒体から視聴者によって選択された記憶されたベースバンドビデオ信号(即ち、番組)を読み出し、これをテレビ受像機105へ送信する。ビデオレコーダ150は、ディジタル信号を受信し、記録し、作用し、再生することができるタイプのビデオレコーダを含む。
【0020】
ビデオレコーダ150には、記録用テープを使用するタイプ、ハードディスクを使用するタイプ、半導体メモリを使用するタイプ、又は、その他の任意のタイプの記録装置を使用するタイプのビデオレコーダが含まれる。ビデオレコーダ150がビデオカセットレコーダ(VCR)である場合、ビデオレコーダ150は、磁気カセットテープへ入来テレビジョン信号を格納し、磁気カセットテープから入来テレビジョン信号を取り出す。ビデオレコーダ150がReplayTV(登録商標)レコーダ及びTiVO(登録商標)レコーダのようなディスクドライブに基づく装置であるとき、ビデオレコーダ150は、磁気カセットテープではなく、コンピュータ磁気ハードディスクとの間で、入来テレビジョン信号の格納及び取り出しを行う。更なる他の実施例では、ビデオレコーダ150は、ローカル読み書き(R/W)ディジタル多目的ディスク(DVD)又は読み書き(R/W)コンパクトディスク(CD−RW)との間で格納と取り出しを行う。ローカル記憶媒体は固定式(例えばハードディスクドライブ)でも、着脱可能式(例えばDVD、CD−RW)でもよい。
【0021】
ビデオレコーダ150は、視聴者によって操作される遠隔制御装置125からのコマンド(例えば、チャンネル・アップ、チャンネル・ダウン、音量アップ、音量ダウン、記録、再生、早送り(FF)、巻戻し等)を受信する赤外線(IR)センサ160を含む。テレビ受像機105は、画面110、赤外線(IR)センサ115、及び、1つ以上の手動制御部120(点線で示す)を含む従来通りのテレビ受像機である。IRセンサ115は、視聴者によって操作される遠隔制御装置125からのコマンド(例えば、音量アップ、音量ダウン、電源オン、電源オフ等)も受信する。
【0022】
尚、ビデオレコーダ150は、特定の種類の源からの特定の種類の入来テレビジョン信号を受信するとは限らない。上述のように、外部源は、ケーブルサービスプロバイダ、従来のRF放送アンテナ、衛星アンテナ、インターネット接続、又は、例えば、DVDプレーヤ又はVHSテーププレーヤのような他のローカル記憶装置でもよい。入来信号は、ディジタル信号、アナログ信号、インターネットプロトコル(IP)パケット、又は、その他の信号でもよい。
【0023】
本発明の原理を説明するための簡単さと明瞭性のため、以下の説明は、ビデオレコーダ150が(ケーブルサービスプロバイダから)クロースドキャプション・テキスト情報を含むアナログテレビジョン信号を受信する実施例に概ね関連する。それにもかかわらず、当業者は、本発明の原理がディジタルテレビジョン信号、ワイヤレス放送テレビジョン信号、ローカル記憶システム、MPEGデータを含むIPパケットの入来ストリーム等と共に使用するため容易に適応されうることを理解するであろう。
【0024】
更に、当業者は、本発明の原理が、音声からテキストへのコンバータからのテキスト、第三者源からのテキスト、抽出された映像テキストからのテキスト、埋め込み画面テキストからのテキスト等を含み、これらには限られない他のテキスト源と共に使用するため容易に適応されうることを理解するであろう。従って、「トランスクリプト」という用語は、例示的にクロースドキャプション・テキスト、音声からテキストへのコンバータからのテキスト、第三者源からのテキスト、抽出されたビデオテキストからのテキスト、埋め込み画面テキストからのテキスト等を含み、これらに限られない任意のテキスト源から発生するテキストファイルを意味するように定義される。
【0025】
図2は、本発明の一実施例による典型的なビデオレコーダ150をより詳細に示す図である。ビデオレコーダ150は、IRセンサ160、ビデオプロセッサ210、MPEG2符号化器220、ハードディスクドライブ230、MPEG2符号化器/復号化器240、及び、コントローラ250を含む。ビデオレコーダ150は、更に、映像ユニット260、テキスト要約作成器270、及びメモリ280を含む。コントローラ250は、ビューモード、記録モード、再生モード、早送り(FF)モード、巻戻しモード、及び、その他の類似機能を含むビデオレコーダ150の全体的な動作を指示する。コントローラ250は、更に、本発明の原理に従って、マルチメディア要約の作成、表示及び相互作用を指示する。
【0026】
ビューモードでは、コントローラ250は、ケーブルサービスプロバイダからの入来テレビジョン信号を、ビデオプロセッサ210によって復調及び処理させ、ビデオ信号をハードディスクドライブ230に格納して、若しくは、格納せずに、(又はハードディスクドライブ230からビデオ信号を取り出して、若しくは、取り出さずに)テレビ受像機105へ送信させる。ビデオプロセッサ210は、
MPEG2符号化器/復号化器240からの従来の信号、及び、メモリ280からの映像フレームを受信し、ベースバンドテレビジョン信号(たとえば、スーパー映像信号)をテレビ受像機105へ送信することが可能である。
【0027】
記録モードでは、コントローラ250は、入来テレビジョン信号をハードディスクドライブ230に格納させる。コントローラ250の制御下で、MPEG2符号化器220は、ケーブルサービスプロバイダから入来テレビジョン信号を受信し、ハードディスクドライブ230に格納するため受信したRF信号をMPEGフォーマットへ変換する。尚、ディジタルテレビジョン信号の場合、信号は、MPEG2符号化器220において符号化することなく、ハードディスクドライブ230上に直接格納される。
【0028】
再生モードでは、コントローラ250は、ハードディスクドライブ230に対して、格納されたテレビジョン信号(即ち、番組)を、MPEG2復号化器/NTSC符号化器240へ流し込む(ストリーミングする)よう命令する。MPEG2符号化器/復号化器240は、ハードディスクドライブ230からのMPEG2データを、例えば、ビデオプロセッサ210がテレビ受像機105へ送信するスーパー映像信号(S−Video)に変換する。
【0029】
尚、MPEG2符号化器220及びMPEG2符号化器/復号化器240のためのMPEG2標準は、例示のためだけに選択されている。本発明の他の実施例では、MPEG2符号化器及びMPEG2復号化器は、MPEG−1、MPEG−2、及び、MPEG−4標準のうちの少なくとも一つの規格、又は、一つ以上の他の種類の規格に準拠しうる。
【0030】
この適用例及び請求の範囲に記載された事項のため、ハードディスクドライブ230は、読み出し可能及び書き込み可能な任意の大容量記憶装置を含むように定義される。この読み書き可能な大容量記憶装置は、限定的ではなく、例示的に、読み書きディジタル多用途ディスク(DVD−RW)、書換可能CD−ROM、VCRテープ等のための従来の磁気ディスクドライブ及び光ディスクドライブを含む。実際、ハードディスクドライブ230は、ビデオレコーダ150に恒久的に埋め込まれるという従来の意味で、固定式である必要はない。そうではなく、ハードディスクドライブ230には、記録された映像番組を蓄積するためのビデオレコーダ150に専用の大容量記憶装置が含まれる。従って、ハードディスクドライブ230は、例えば、幾つかの読み書きDVD又は書換可能なCD−ROMを保持するジュークボックス装置(図示せず)のような付属周辺機器ドライブ又は取り外し可能な着脱式ディスクドライブ(内蔵型若しくは付属型)を含みうる。図2に概略的に示すように、この種の着脱式ディスクドライブは、書換可能なCD−ROMディスク235を収容し読み出すことが可能である。
【0031】
更に、本発明の有利な実施例によれば、ハードディスクドライブ230は、例えば、視聴者の家庭のパーソナルコンピュータ(PC)中のディスクドライブ、又は、視聴者のインターネットサービスプロバイダ(ISP)のサーバ上のディスクドライブを含む外部大容量記憶装置でもよく、ビデオレコーダ150は、ネットワーク接続(例えば、インターネットプロトコル(IP)接続)を介して、この外部大容量記憶装置にアクセスし制御し得る。
【0032】
コントローラ250は、ビデオプロセッサ210によって受信された映像信号に関連するビデオプロセッサ210からの情報を取得する。コントローラ250が、ビデオレコーダ150は映像番組を受信中であると判定すると、コントローラ250は、その映像番組が記録されるべきものであるとして既に選択されているものであるか否かを判定する。映像番組が記録されるべきものである場合、コントローラ250は、上述の方法で映像番組をハードディスクドライブ230上に記録させる。映像番組を記録する必要がない場合、コントローラ250は、上述の方法で、ビデオ番組をビデオプロセッサ210によって処理させテレビ受像機105へ送信させる。
【0033】
メモリ280は、ランダムアクセスメモリ(RAM)、又は、ランダムアクセスメモリ(RAM)と読み出し専用メモリ(ROM)の組み合わせにより構成できる。メモリ280は、フラッシュメモリのような不揮発性ランダムアクセスメモリ(RAM)でもよい。ビデオレコーダ150の他の有利な実施例では、メモリ280は、ハードディスクドライブ(図示せず)といった大容量記憶データ装置でもよい。メモリ280は、読み書きDVD又は書換可能なCD−ROMを読み出す付属型周辺機器ドライブ又は着脱式ディスクドライブ(内蔵型でも付属型でもよい)を含みうる。図2に概略的に示すように、この種の着脱式ディスクドライブは、追記型(書換可能な)CD−ROMディスク285を収容し読み出すことが可能である。
【0034】
映像番組がハードディスクドライブ230に記録されているとき(或いは、代替的に、映像番組がハードディスクドライブ230に記録された後)、コントローラ250は、テキスト要約作成器270を使用して記録映像番組のテキスト要約を取得する。テキスト要約作成器270は、発明の名称が”METHOD AND APPARATUS FOR THE SUMMARIZATION AND INDEXING OF VIDEO PROGRAMS USING TRANSCRIPT INFORMATION”である米国特許出願明細書(書類番号PHA701137)に記載されているような上述の映像番組要約方法及び装置を使用する。テキスト要約作成器270は、映像番組を、映像信号/音声信号/データ信号として受信する。テキスト要約作成器270は、映像信号/音声信号/データ信号から、番組要約、内容のテーブル、及び、映像番組の番組索引を作成する。テキスト要約作成器270は、テキストに対応する映像の選択されたキーフレームを識別するため、テキストの各ラインに関連したタイムスタンプを使用する。
【0035】
マルチメディア要約は、映像/音声/テキストの要約である。コントローラ250は、映像番組の内容を要約する情報を表示するマルチメディア要約を作成する。コントローラ250は、テキスト要約作成器270によって作成された番組要約を使用し、適当なビデオ画像を追加することによって映像番組のマルチメディア要約を作成する。マルチメディア要約は、(1)テキスト、(2)単一の映像フレームを含む静止ビデオ画像、(3)映像フレームの系列により構成され(映像クリップ若しくは映像セグメントと呼ばれる)動画像、(4)音声、並びに、(5)これらの任意の組合せ、を表示可能である。
【0036】
コントローラ250は、映像ユニット260を用いて、要約されるべき映像番からビデオ画像を獲得する。映像ユニット260は、1999年7月9日に出願された、発明の名称が”METHOD AND APPARATUS FOR LINKING A VIDEO SEGMENT TO ANOTHER SEGMENT OR INFORMATION SOURCE”である米国特許出願第09/351,086号明細書に記載された、上述の映像セグメントを連結する方法及び装置を使用する。
【0037】
コントローラ250は、マルチメディア要約を作成するため使用される適当なビデオ画像を識別しなければならない。本発明の有利な一実施例は、マルチメディア要約を作成するため使用されるべき適当なビデオ画像を識別することができるコンピュータソフトウェア300を含む。図3は、本発明のコンピュータソフトウェア300を収容するメモリ280の選択された一部分の説明図である。メモリ280は、オペレーティングシステム・インタフェース・プログラム310と、ドメイン識別アプリケーション320と、トピック・キュー識別アプリケーション330と、サブトピック・キュー識別アプリケーション340と、音声・映像テンプレート識別アプリケーション350と、マルチメディア要約記憶場所360とを含む。
【0038】
コントローラ250及びコンピュータソフトウェア300は、一体として、本発明を実行することができるマルチメディア要約作成器を構成する。メモリ280に格納されたコンピュータソフトウェア300中の命令の指示に従って、コントローラ250は、映像番組のマルチメディア要約を作成し、マルチメディア要約をマルチメディア要約記憶場所360に格納し、視聴者からの要求時に格納されたマルチメディア要約を再生する。オペレーティングシステム310は、コンピュータソフトウェア300の動作と、コントローラ250のオペレーティングシステムを協調させる。
【0039】
マルチメディア要約を作成するため、コントローラ250は、最初に、記録映像番組のテキスト要約を獲得するため、テキスト要約作成器270へアクセスする。コントローラ250は、次に、マルチメディア要約を作成するためにテキスト要約に組み込むため選択されるべき適当なビデオ画像を識別する。これを行うため、コントローラ250は、はじめに、映像番組のタイプ(ドメイン、カテゴリー、或いは、ジャンルと称される)を識別する。たとえば、ドメイン(又は、カテゴリー若しくはジャンル)は、トークショー、ニュース番組などである。以下の説明中、用語ドメインを使用する。
【0040】
ソフトウェア300内のドメイン識別アプリケーション320は、ドメインのタイプのデータベース(ドメインデータベース)を含む。ドメインデータベースは、ドメインデータベースに保持されるドメインのタイプ毎の識別用特徴を格納する。コントローラ250は、要約される映像番組のタイプを識別するため、ドメイン識別アプリケーション320にアクセスする。ドメイン識別アプリケーション320は、ドメインの各タイプの識別用特徴を、要約中の映像番組の特徴と比較する。この比較の結果を用いることにより、ドメイン識別アプリケーション320は、映像番組の領域を識別する。
【0041】
コントローラ250は、次に、映像番組のトピックと関連した(トピック・キューと称される)語若しくは句(語句)を識別する。たとえば、トークショー映像番組の場合のトピック・キューは、語「最初のゲスト」若しくは語「次のゲスト」である。同様に、ニュース番組映像番組用のトピック・キューは、語「から中継」、或いは、語「次の話題は」である。トピック・キューとして選択された特別の語若しくは句は、映像番組中の変化ポイント(すなわち、トピックスの変化)を指定するため選ばれる。これにより、映像番組を、種々のトピックスを扱う部分に分割できるようになる。
【0042】
ソフトウェア300のトピック・キュー識別アプリケーション300は、トピック・キューのデータベース(トピック・キュー・データベース)を含む。トピック・キュー・データベースは、ドメインデータベースに格納されたドメインのタイプ毎にトピック・キューを収容する。コントローラ250は、要約されている映像番組内のトピック・キューを識別するためトピック・キュー識別アプリケーション330にアクセする。トピック・キュー識別アプリケーション320は、トピック・キュー・データベース内の各トピック・キューを要約されている映像番組のテキスト要約と比較する。
【0043】
トピック・キューが見つかった場合、コントローラ250は、トピック・キューと関連した音声・映像セグメント(音声・映像テンプレート、又は、視聴覚テンプレート)を識別するため音声・映像テンプレート識別アプリケーション350にアクセスする。トークショー映像番組内の「最初のゲスト」に対する適当な音声・映像テンプレートは、ゲストが登場する音声・映像セグメントである。「最初のゲスト」の同一性は、テキスト内で示されたゲストの名前から獲得される。たとえば、トークショーのホスト役が、「最初のゲストは、かけがえのない、Dolly Partonです。」と言うとき、トピック・キュー識別アプリケーション330は、単語「最初のゲスト」をトピック・キューとして識別する。最初のゲストのDolly Partonの同一性は、テキスト要約から獲得される。
【0044】
映像音声テンプレート識別アプリケーション350は、マルチメディア要約へ追加するため選択されるべき音声・映像テンプレートとして、Dolly Partonの音声・映像セグメントを識別し獲得しなければならない。紹介後の数秒のうちに、Dolly Partonは、ステージに登場する。彼女の顔が現れ、ビデオ画像の一部を占領する。以下で詳述するように、音声・映像テンプレート識別アプリケーション350は、Dolly Partonの顔の画像を識別し、Dolly Partonの顔の画像を含む音声・映像テンプレートを抽出し、この音声・映像テンプレートをマルチメディア要約に追加する。
【0045】
音声・映像テンプレート識別アプリケーション350は、次のようにDolly Partonの顔の画像を識別する。Dolly Partonの紹介直後に現れたビデオ画像から、音声・映像テンプレート識別アプリケーション350は、トークショーのホスト役(或いは、ミュージシャンなどのトークショーのレギュラー出演者)の顔画像以外の人物の顔画像を選択する。音声・映像テンプレート識別アプリケーション350は、その人物の画像がDolly Partonの画像であると仮定する。
【0046】
この仮定は、音声・映像テンプレート識別アプリケーション350がDolly Partonの紹介直後に映像に表れた観客の画像を獲得した場合、間違っている。したがって、数分経過後に、最初に選択された画像内の人物の同一性を検査することによって、この仮定を確認することが必要である。これは、顔画像、声、ゲストのネームプレートのような識別用特徴、或いは、その他の同様の識別用特徴を検査することによって行われる。
【0047】
Dolly Partonは、トークショーの10乃至12分の間中登場するので、初期選択画像が実際にDolly Partonの画像であるかどうかを確かめるため、ゲストの画像を解析する時間がある。後で行われた検査によって、最初の仮定は誤りであり、、初期選択画像はDolly Partonの画像ではないということが判明した場合、画像をDolly Partonの画像で置き換えることによって訂正がなされる。
【0048】
本発明の他の有利な一実施例によれば、著名人の顔画像のデータベース(図示せず)が音声・映像テンプレート識別アプリケーション350と共に使用される。映像からの人物(たとえば、トークショーのゲスト)の顔画像は、データベース内の各著名人の顔画像と比較される。顔マッチングは、主成分分析(PCA)技術、若しくは、その他の同等の技術を使用して実現され得る。一致していることが判明した場合、その人物は、誰であるかが確認される。一致する顔画像が見つからない場合、その人物の顔画像は著名人データベースに存在しない。その場合、Dolly Partonを識別するため使用された上述の手続が、この人物を識別するため使用される。
【0049】
著名人データベースに存在しない有名人が識別された後、この有名人はデータベースに追加される。著名人データベースの内容は、人物をデータベースに追加することによって、或いは、データベースから人物を削除することによって、絶えず変更される。このようにして、著名人データベース内の著名人のリストは、常に最新の状態に保たれる。
【0050】
映像セグメント内の顔を検出し識別するその他の方法は、〔文献〕V. Vilaplana, F. Marques, P. Salembier and . Garrid, ”Region−Based Segmentation and Tracking of Human Faces”, The 9th European Signal Processing Conference EUSIPCO−98, Rhodes (1998)、及び、〔文献〕S.Satoh, Y. Nakamura & T. Kanade, ”Name−It: Naming and Detecting Faces in News Videos”, IEEE Multimedia, Volume6(1), pp.22−35(1999)に記載されている。
【0051】
他のアプリケーション例では、スポーツ番組用の音声・映像テンプレートは、(1)ある時間間隔に亘る事前に指定された全体的な動き、又は、(2)動きのタイプの系列により構成され得る。たとえば、「サッカー試合」映像番組におけるトピック・キューは、単語「ゴール」或いは「1点目のゴール」である。トピック・キューが識別された後、音声・映像テンプレート識別アプリケーション350は、マルチメディア要約に追加するため選択されるべき音声・映像テンプレートとして、1点目のゴールのシーンの音声・映像クリップを識別し獲得する必要がある。
【0052】
ゴールが得点されたときを識別するため、音声・映像テンプレート識別アプリケーション350は、最初に、高速モーションでゴールを検出し、次に、スローモーションでゴールを検出する。ゴールの時間的位置が見つけられたとき、ゴールが得点された時間間隔をカバーする音声・映像クリップが抽出される。たとえば、音声・映像クリップは、ゴールが得点される5秒前のポイントから、ゴールが得点された5秒後のポイントまで達する。このようにして、スポーツ番組のマルチメディア要約は、ゴールが得点された番組セグメントの再生の系列により構成される。
【0053】
他の例において、「ニュースショー」映像番組内のトピック・キューは、「中継」である。ニュースショー映像番組内の中継トピック・キューに対する適当な音声・映像テンプレートは、中継リポートが行われている場所の音声・映像セグメントである。或いは、音声・映像テンプレートは、中継リポートを行っているリポーターの音声・映像セグメントである。
【0054】
ニュース番組のアンカーマンが「ラスベガスからの中継です。」というとき、トピック・キュー識別アプリケーション350は、単語「中継」をトピック・キューとして識別し、音声・映像テンプレート識別アプリケーション350は、マルチメディア要約に追加するため選択されるべき音声・映像テンプレートとして、ラスベガスの音声・映像セグメントを識別する。
【0055】
音声・映像テンプレート識別アプリケーション350は、音声・映像テンプレートの組を、特定のドメインタイプに対するトピック・キュー・データベース内に含まれるトピック・キューの組毎に関連付ける。コントローラ250及び音声・映像テンプレート識別アプリケーション350は、当該トピック用のマルチメディア要約に組み入れられるべき適当な音声・映像テンプレートを獲得するため映像ユニット260にアクセスする。
【0056】
音声・映像テンプレートは、映像信号と音声信号の両方を含む。しかし、一部のアプリケーションでは、音声・映像テンプレートは、一方の信号(すなわち、音声信号と映像信号の両方ではなく、いずれか一方の信号)だけを含む場合がある。1種類の信号しか含まない音声・映像テンプレート用の動作原理は、映像信号と音声信号の両方の信号を含む音声・映像テンプレートに対する動作原理と同じである。
【0057】
コントローラ250及び音声・映像テンプレート識別アプリケーション350が、適当な音声・映像テンプレートを識別し獲得した後、コントローラ250は、トピック、及び、対応した音声・映像テンプレートをマルチメディア要約へ追加する。マルチメディア要約中のトピック・キューの場所は、マルチメディア要約内のエントリー・ポイントとなるように定義される。エントリー・ポイントは、マルチメディア要約内で、マルチメディア要約を閲覧する視聴者が直接アクセスすることができる場所である。視聴者は、マルチメディア要約内の全てのエントリー・ポイントのリストへアクセスするためのユーザ・インタフェースが提供される。視聴者がマルチメディア要約の特定のトピックに関心をもつとき、視聴者は、マルチメディア要約内のトピックを、トピックのエントリー・ポイントにアクセスすることによって、表示させることができる。
【0058】
コントローラ250がトピックを識別した後、コントローラ250は、トピック中のサブトピックと関連した(サブトピック・キューと称される)単語若しくは句(語句)を識別する。たとえば、トークショー映像番組内の「最初のゲスト」というトピック・キューに対するサブトピック・キューは、語「新作映画」或いは語「新著」である。サブトピックは、仕事の計画や「最初のゲスト」の人生における興味深いエピソードなどを指す。サブトピック・キューとして選択された特定の語句は、トピック内での変化ポイント(すなわち、サブトピックの変化)を指定するため選定される。これにより、トピックを異なるサブトピックを取り扱う部分に分割できるようになる。
【0059】
ソフトウェア300内のサブトピック・キュー識別アプリケーション340は、サブトピック・キューのデータベース(サブトピック・キュー・データベース)を含む。サブトピック・キュー・データベースは、トピック・キュー・データベースに蓄積されたトピック・キューのタイプ毎にサブトピック・キューを収容する。コントローラ250は、要約しているトピック内のサブトピックを識別するため、サブトピック・キュー識別アプリケーション340にアクセスする。サブトピック・キュー識別アプリケーションは、サブトピック・キュー・データベース内の各サブトピック・キューを要約されているトピックのテキスト要約と比較する。
【0060】
サブトピック・キューが見つかったとき、コントローラ250は、サブトピック・キューと関連した音声・映像テンプレートを識別するため、音声・映像テンプレート識別アプリケーション350にアクセスする。たとえば、トークショー映像番組における「新作映画」サブトピック・キュー用の音声・映像テンプレートは、新作映画の題名を表示する静止ビデオ画像である。あるいは、トークショー映像番組における「新作映画」サブトピック・キュー用の音声・映像テンプレートは、新作映画の音声・映像セグメント(すなわち、クリップ)でもよい。
【0061】
トークショーのホスト役が、「次に、Tom Hankの新作映画からのクリップ(1場面)をお見せします。」と言うとき、サブトピック・キュー識別アプリケーション340は、単語「新作映画」をサブトピック・キューとして識別し、音声・映像テンプレート識別アプリケーション350は、マルチメディア要約に追加するため選択されるべき音声・映像テンプレートとして、新作映画の音声・映像セグメントを識別する。
【0062】
音声・映像テンプレート識別アプリケーション350は、音声・映像テンプレートの組を、特定のトピックのタイプのためのサブトピック・キュー・データベースに収容されているサブトピック・キューの組毎に関連付ける。コントローラ250及び音声・映像テンプレート識別アプリケーション350は、サブトピック用のマルチメディア要約に組み入れられるべき適当な音声・映像セグメントを獲得するため、像ユニット260にアクセスする。
【0063】
コントローラ250及び音声・映像テンプレート識別アプリケーション350が適当な音声・映像テンプレートを識別し取得した後、コントローラ250は、サブトピック・キュー及び対応した音声・映像テンプレートをマルチメディア要約に追加する。トピック・キューの場合と同様に、マルチメディア要約内のサブトピック・キューの場所は、マルチメディア要約内のエントリー・ポイントになるように定義される。視聴者がマルチメディア要約内の特定のサブトピックに関心を持つ場合、視聴者は、サブトピックのエントリー・ポイントにアクセスすることによって、マルチメディア要約内のサブトピックを表示させ得る。
【0064】
コントローラ250は、映像番組のドメインと関連したトピック・キュー及びサブトピック・キューを識別するため上述の処理を継続する。この処理が継続するとき、コントローラ250は、映像番組のマルチメディア要約を作成する。コントローラ250は、マルチメディア要約を、メモリ280のマルチメディア要約記憶場所360に格納する。コントローラ250は、一つ以上のマルチメディア要約を、長期記憶のためハードディスクドライブ230へ転送する。
【0065】
マルチメディア要約を作成する処理は、図4を参照することによって、さらに明瞭に理解できる。図4は、本発明の有利な一実施例の方法の動作を説明するフローチャート400を表わす。フローチャート400に記載された処理ステップは、コントローラ250で実行される。コントローラ250は、テキスト要約作成器270に、上述の方法で映像番組のテキストを要約させる(処理ステップ405)。コントローラ250は、次に、映像番組のドメインを識別する(処理ステップ410)。続いて、コントローラ250は、映像番組の識別されたドメインと関連したトピック・キューを見つけるため、映像番組のテキストをトピック・キューのデータベースと比較する(処理ステップ415)。
【0066】
トピック・キューが見つかった場合、コントローラ250は、トピック・キューに対して関連した音声・映像テンプレートを取得し、音声・映像テンプレートをこのトピック・キューに連結する。コントローラ250は、トピック・キュー及び関連した音声・映像テンプレートを、マルチメディア要約に保存する(処理ステップ420)。
【0067】
コントローラ250は、映像番組の識別されたトピック・キューと関連したサブトピック・キューを見つけるため、映像番組のテキストを、サブトピック・キューのデータベースと比較する(処理ステップ425)。サブトピックが見つけられたとき、コントローラ250は、サブトピック・キューに対する関連した音声・映像テンプレートを獲得し、音声・映像テンプレートをサブトピック・キューに関連付ける。コントローラ250は、サブトピック・キュー及び関連した音声・映像テンプレートを、マルチメディア要約に保存する(処理ステップ430)。
【0068】
コントローラ250は、次のサブトピック・キュー又は次のトピック・キューを探索し続ける(判定ステップ435)。コントローラ250が、これ以上のサブトピック・キュー若しくはトピック・キューは存在しない、と判定した場合、又は、映像番組の終わりに到達した場合、この要約処理が終了する。
【0069】
コントローラ250が次のキューを見つけたとき、コントローラ250は、次のキューがサブトピック・キューであるかどうかを判定する(判定ステップ440)。次のキューがサブトピック・キューである場合、制御は処理ステップ430へ進み、サブトピック・キュー及びその関連した音声・映像テンプレートがマルチメディア要約へ追加される。次のキューがサブトピック・キューではない場合、次のキューはトピック・キューである。制御は処理ステップ420へ進み、トピック・キュー及びその関連した音声・映像テンプレートがマルチメディア要約へ追加される。このようにして、マルチメディア要約がトピック及びサブトピックによって組み立てられる。
【0070】
図5は、本発明の視聴者対話型マルチメディア要約の有利な一実施例の典型的な表示ページの説明図である。図5は、マルチメディア要約全体のエントリー・ポイントが1ページに表示される様子を示している。たとえば、図5に示されたページがトークショー映像番組のマルチメディア要約を表わしているとする。A画像520は、最初のゲストの顔を表し、B画像540は、2人目のゲストの顔を表わし、C画像560は、3人目のゲストの顔を表わす。テキストセクション510は、最初のゲスト520が話題にしたサブトピックのリストを含む。図5に示された例の場合に、これらのサブトピックは、映画、新CD、及び、新居である。同様に、テキストセクション530は、2人目のゲスト540が話題にしたサブトピックのリストを収容し、テキストセクション550は、3人目のゲスト560が話題にしたサブトピックのリストを収容する。
【0071】
視聴者は、マルチメディア要約による表示のため、三つのテキストリスト510、530、550のいずれかのうちのいずれかのサブトピックを選択し得る。各サブトピックがメニュー項目として順番に強調表示されるとき、視聴者は、一つのサブトピックを選択するための信号を送信するため、遠隔制御部125を用いて、表示したいと思うサブトピックを指定することができる。或いは、視聴者は、映像表示システム内に設けられたコンピュータマウス(図示せず)のようなポインティングデバイスを用いて、望ましいサブトピックを指定することが可能である。
【0072】
視聴者が特定のサブトピックを選択するとき、そのサブトピックに対する要約は、アクセス対象の(有効な)要約580として区別された画面の一部分に表示される。サブトピックに関連した音声・映像クリップは、映像再生590として区別された画面の一部分に同時に再生される。たとえば、サブトピックが「映画」である場合、音声・映像クリップは、映画からの1場面であるかもしれない。サブトピックが「サッカー試合」である場合、音声・映像クリップは、ゲーム中にゴールが得点された場面であるかもしれない。アクセス対象の要約580は、視聴者によって選択されたトピックと、このトピックに関連したサブトピックの要約を表示する。視聴者が新しいトピック又は新しいサブトピックを選択した場合、アクセス対象の要約580に表示される要約は、新たに選択されたトピック又はサブトピックに関連したトピック又はサブトピックの要約を反映する。
【0073】
テキストセクション570は、映像番組の全トピックのリストを収容する。たとえば、トークショー映像番組の場合、テキストセクション570は、トークショー映像番組の全トピックのリストを収容する。本例の場合、テキストセクション570内のリスト中の3項目は、3人のゲストの名前である。テキストセクション570に列挙された他の項目は、トークショー映像番組の他のトピック(たとえば、ショーの冒頭のホスト役の独白)に関連する。視聴者は、テキストセクション570に一覧された任意のトピックを表示のために選択することができる。トピックが選択されたとき、トピックに関連した音声・映像クリップは、映像再生590として示された画面の一部分で再生される。
【0074】
このマルチメディア要約の表示モードは、マルチメディア要約の表示用の個々の部分を選択するため視聴者による相互作用を必要とする。マルチメディア要約の別の表示モードは、通し再生モードである。この通し再生モードの場合、マルチメディア要約は、映像番組の先頭から始まり、視聴者による相互作用を伴うことなく、再生され続ける。視聴者は、表示用のトピック若しくはサブトピックを選択することによって、この通し再生モードを停止させるため、何時でも介入することができる。
【0075】
本発明のマルチメディア要約は、映像番組の中で話題にされた製品及びサービスを注文するための方法及び装置と組み合わせて使用することができる。たとえば、視聴者は、トークショー映像番組で話題になった書籍を購入したい場合がある。製品及びサービスは、発明の名称が”SYSTEM AND METHOD FOR ORDERING ONLINE UTILIZING A DIGITAL TELEVISION RECEIVER”である米国特許出願明細書(書類番号PHA701071)に記載された、上記の方法及び装置を用いて直接注文してもよい。
【0076】
また、本発明のマルチメディア要約は、視聴者の興味に関する付加情報を取得する方法及び装置と組み合わせて使用することも可能である。たとえば、視聴者が、まもなく公開予定の新作映画を解説するサブトピックを選択した場合、この視聴者の問い合わせは、将来の参考のため記録される。マルチメディア要約は、映画が公開されたときに視聴者へ通知し、近隣の映画館の上映時間及びチケット価格を提供する。この通知は、関連した番組の要約に添付してもよい。或いは、この通知は、電子メール、若しくは、類似した通信リンクを用いて視聴者へ送信してもよい。この通知は、パーソナルコンピュータ、携帯情報端末(PDA)、或いは、その他の同様の通信機器に可聴性アラーム(たとえば、ビープ音)を発生させてもよい。
【0077】
イベント照合エンジンが、近隣地域内で行われるイベントを見つけるために使用され得る。たとえば、トークショー番組中に、俳優Kevin Spaceyが、現在、”American Beauty”という名前の映画に出演中である、と言ったとする。視聴者がサブトピック”American Beauty”を選択すると、マルチメディア要約は、ある期間(たとえば、数ヶ月間)に亘って、他の番組(たとえば、新番組)、又は、地元のウェブサイト上で、映画”American Beauty”に関する情報を検索するため、ユーザの興味の指標を使用することが可能である。
【0078】
映画”American Beauty”の上映時間及び料金に関する付加情報が見つけられたとき、マルチメディア要約は、電話番号1−800−FILM−777をオーバーレイすることができ、映画が有料視聴テレビで放送予定である旨を視聴者に通知することができ、近隣の劇場における映画の上映時間及び料金に関する情報を自動的に電子メール送信し、若しくは、表示することが可能である。鑑賞チケットは、上述の方法を用いて直接注文することもできる。
【0079】
本発明のマルチメディア要約は、視聴者が長期間に亘って関心のある付加情報を見つけるため、マルチメディア要約からトピック及びサブトピックを使用できるようにする。マルチメディア要約は、視聴者が関心をもつ情報に関して、積極的に動作し検索する状態を維持する。第1の番組のマルチメディア要約に基づいて見つけ出された新たな付加情報は、第2の番組が第1の番組に類似したトピック、サブトピック、又は、キーワードを持つ場合、第2の番組のマルチメディア要約に添付させてもよい。
【0080】
本発明を詳細に説明したが、当業者は、最広義による本発明の精神及び範囲を逸脱することなく、種々の変更、置換及び代替をなし得ることがわかる筈である。
【図面の簡単な説明】
【図1】
映像表示システムの一例の説明図である。
【図2】
図1に示された映像表示システムの一例に組み込まれる映像番組の視聴者対話型マルチメディア要約を作成するシステムの有利な一実施例の説明図である。
【図3】
本発明の視聴者対話型マルチメディア要約の有利な一実施例と共に使用されるコンピュータソフトウェアの説明図である。
【図4】
映像表示システムの一例における本発明の視聴者対話型マルチメディア要約の有利な一実施例の動作を説明するフローチャートである。
【図5】
本発明の視聴者対話型マルチメディア要約の有利な一実施例の表示ページの一例の説明図である。
Claims (18)
- 映像番組を表示する能力を備えた映像表示システムにおいて利用され、該映像番組のマルチメディア要約を作成するシステムであって、
該映像番組のテキストのトランスクリプトを取得し、該映像番組の音声・映像セグメントを取得する能力を備えているマルチメディア要約作成器を具備し、
該マルチメディア要約作成器は、該映像番組のマルチメディア要約を作成するため該トランスクリプトの部分と該音声・映像セグメントの部分を組み合わせる能力を備えている、
システム。 - 該マルチメディア要約作成器は、該映像番組のトランスクリプト内のトピックに関係した音声・映像セグメントを選択し、該トピック及び該音声・映像セグメントを該マルチメディア要約に追加することにより、該マルチメディア要約を作成する能力を備えている、請求項1記載のシステム。
- 該マルチメディア要約作成器は、
該映像番組の該トランスクリプト内の少なくとも一つのトピック・キューを識別し、該少なくとも一つのトピック・キューに関連した少なくとも一つの音声・映像テンプレートを選択し、該トピック・キュー及び該音声・映像テンプレートを該マルチメディア要約に追加することにより、該映像番組の該マルチメディア要約を作成するため、
メモリに接続され該メモリに格納されたコンピュータソフトウェア命令を実行する能力を備えたコントローラを有する、
請求項2記載のシステム。 - 該コントローラは、該映像番組の該少なくとも一つのトピックに対し少なくとも一つサブトピック・キューを識別し、該少なくとも一つのサブトピック・キューに関連した少なくとも一つの音声・映像テンプレートを選択し、該サブトピック・キュー及び該音声・映像テンプレートを該マルチメディア要約に追加することにより、該映像番組の該マルチメディア要約を作成するため、該コントローラに接続されたメモリに格納されたコンピュータソフトウェア命令を実行する能力を備えている、
請求項3記載のシステム。 - 該コントローラは、
該映像番組のタイプを識別する能力を備えたドメイン識別アプリケーションと、
該映像番組の該トランスクリプト内の該少なくとも一つのトピック・キューを識別する能力を備えたトピック・キュー識別アプリケーションと、
該映像番組の該少なくとも一つのトピック内の該少なくとも一つのサブトピック・キューを識別する能力を備えたサブトピック・キュー識別アプリケーションと、
該少なくとも一つのトピック・キューに関連した少なくとも一つの音声・映像テンプレートを識別し、該少なくとも一つのサブトピック・キューに関連した少なくとも一つの音声・映像テンプレートを識別する能力を備えた音声・映像テンプレート識別アプリケーションと、
を実行する能力を備えている、
請求項3記載のシステム。 - 該コントローラは、視聴者が該マルチメディア要約の各トピックにアクセスできるようにさせるエントリー・ポイントをトピック毎に作成し、視聴者が該マルチメディア要約の各サブトピックにアクセスできるようにさせるエントリー・ポイントをサブトピック毎の作成するため、該コントローラに接続されたメモリに格納されたコンピュータソフトウェア命令を実行する能力を備えている、請求項4記載のシステム。
- 請求項1乃至6のうちいずれか一項記載の映像番組のマルチメディア要約を作成するシステムを有する映像表示システム。
- 映像番組を表示する能力を備えた映像表示システムにおいて利用され、該映像番組のマルチメディア要約を作成する方法であって、
該映像番組のテキストのトランスクリプトをマルチメディア要約作成器に取得する手順と、
該映像番組の音声・映像セグメントを該マルチメディア要約作成器に取得する手順と、
該映像番組のマルチメディア要約を作成するため該マルチメディア要約作成器で該トランスクリプトの部分と該音声・映像セグメントの部分を組み合わせる手順と、
を有する方法。 - 該マルチメディア要約作成器で該映像番組の該マルチメディア要約を作成するため該トランスクリプトの部分と該音声・映像セグメントの部分を組み合わせる手順は、
該映像番組のトピックに関係した音声・映像セグメントを選択する手順と、
該トピック及び該音声・映像セグメントを該マルチメディア要約へ追加する手順と、
を有する請求項8記載の方法。 - 該マルチメディア要約作成器に接続されたメモリに格納されたコンピュータソフトウェアから該マルチメディア要約作成器に命令を読み出す手順と、
該映像番組の該トランスクリプト内の少なくとも一つのトピック・キューを識別するため該マルチメディア要約作成器で該命令を実行する手順と、
該少なくとも一つのトピック・キューと関連した少なくとも一つの音声・映像テンプレートを選択するため該マルチメディア要約作成器で該命令を実行する手順と、
該トピック・キュー及び該音声・映像テンプレートを該マルチメディア要約に追加するため該マルチメディア要約作成器で該命令を実行する手順と、
を更に有する請求項9記載の方法。 - 該マルチメディア要約作成器に接続されたメモリに格納されたコンピュータソフトウェアから該マルチメディア要約作成器に命令を読み出す手順と、
該映像番組の該少なくとも一つのトピック・キューに対する少なくとも一つのサブトピック・キューを識別するため該マルチメディア要約作成器で該命令を実行する手順と、
該少なくとも一つのサブトピック・キューと関連した少なくとも一つの音声・映像テンプレートを選択するため該マルチメディア要約作成器で該命令を実行する手順と、
該サブトピック・キュー及び該音声・映像テンプレートを該マルチメディア要約に追加するため該マルチメディア要約作成器で該命令を実行する手順と、
を更に有する請求項10記載の方法。 - ドメイン識別アプリケーションを用いて該映像番組のタイプを識別する手順と、
トピック・キュー識別アプリケーションを用いて該映像番組の該トランスクリプト内の少なくとも一つのトピック・キューを識別する手順と、
サブトピック・キュー識別アプリケーションを用いて該映像番組の該少なくとも一つのトピック内で少なくとも一つのサブトピック・キューを識別する手順と、
音声・映像テンプレート識別アプリケーションを用いて該少なくとも一つのトピック・キューと関連した少なくとも一つの音声・映像テンプレートを識別する手順と、
該音声・映像識別アプリケーションを用い該少なくとも一つのサブトピック・キューと関連した少なくとも一つの音声・映像テンプレートを識別する手順と、を更に有する請求項11記載の方法。 - 該マルチメディア要約作成器で該マルチメディア要約作成器に接続されたメモリに格納されたコンピュータソフトウェアから命令を読み出す手順と、
視聴者が該マルチメディア要約内の各トピックにアクセスできるようにさせるエントリー・ポイントをトピック毎に作成するため該マルチメディア要約作成器で該命令を実行する手順と、
視聴者が該マルチメディア要約内の各サブトピックにアクセスできるようにさせるエントリー・ポイントをサブトピック毎に作成するため該マルチメディア要約作成器で該命令を実行する手順と、
を更に有する請求項12記載の方法。 - 該映像番組中に最初に人物が登場した後に、音声・映像テンプレート識別アプリケーションを用いて該映像番組中の該人物の顔画像を取得する手順と、
該人物の少なくとも一つの識別用特徴を検索することにより該人物の同一性を確認する手順と、
該人物の同一性が確認された後、該人物の画像を該マルチメディア要約に追加する手順と、
を更に有する請求項8記載の方法。 - プログラマブル装置に請求項1乃至6のうちいずれか一項記載のシステムとしての機能を実現させるためのコンピュータプログラム。
- 映像番組のトランスクリプトの少なくとも一部分を含む映像番組のマルチメディア要約。
- 該映像番組の少なくとも一つのトピック内の少なくとも一つのサブトピックと関連した該映像番組の少なくとも一つの音声・映像セグメントを含む、請求項16記載の映像番組のマルチメディア要約。
- トピックに関連した該音声・映像セグメントと関連したトピック・エントリー・ポイントを更に含み、各エントリー・ポイントは視聴者が該トピックと関連した音声・映像セグメントにアクセスできるようにさせる、請求項17記載の映像番組のマルチメディア要約。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/747,107 US20020083471A1 (en) | 2000-12-21 | 2000-12-21 | System and method for providing a multimedia summary of a video program |
PCT/IB2001/002424 WO2002051139A2 (en) | 2000-12-21 | 2001-12-10 | System and method for providing a multimedia summary of a video program |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008245407A Division JP2009065680A (ja) | 2000-12-21 | 2008-09-25 | 映像番組のマルチメディア要約を提供するシステム及び方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2004516753A true JP2004516753A (ja) | 2004-06-03 |
Family
ID=25003678
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002552310A Pending JP2004516753A (ja) | 2000-12-21 | 2001-12-10 | 映像番組のマルチメディア要約を提供するシステム及び方法 |
JP2008245407A Pending JP2009065680A (ja) | 2000-12-21 | 2008-09-25 | 映像番組のマルチメディア要約を提供するシステム及び方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008245407A Pending JP2009065680A (ja) | 2000-12-21 | 2008-09-25 | 映像番組のマルチメディア要約を提供するシステム及び方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20020083471A1 (ja) |
EP (1) | EP1346362A2 (ja) |
JP (2) | JP2004516753A (ja) |
KR (1) | KR100865042B1 (ja) |
CN (1) | CN100358042C (ja) |
WO (1) | WO2002051139A2 (ja) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7120873B2 (en) * | 2002-01-28 | 2006-10-10 | Sharp Laboratories Of America, Inc. | Summarization of sumo video content |
GB2386739B (en) * | 2002-03-19 | 2005-06-29 | British Broadcasting Corp | An improved method and system for accessing video data |
JP3646707B2 (ja) * | 2002-04-12 | 2005-05-11 | ソニー株式会社 | 番組情報の取得装置および取得方法 |
US20030229278A1 (en) * | 2002-06-06 | 2003-12-11 | Usha Sinha | Method and system for knowledge extraction from image data |
US20040024780A1 (en) * | 2002-08-01 | 2004-02-05 | Koninklijke Philips Electronics N.V. | Method, system and program product for generating a content-based table of contents |
JP2006511997A (ja) * | 2002-12-19 | 2006-04-06 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 映像信号を表示するためのディスプレイを備えた携帯コントローラを有するレジデンシャルゲートウェイシステム |
KR100708337B1 (ko) * | 2003-06-27 | 2007-04-17 | 주식회사 케이티 | 퍼지 기반 oc―svm을 이용한 동영상 자동 요약 장치및 방법 |
WO2005031609A1 (en) * | 2003-09-30 | 2005-04-07 | Koninklijke Philips Electronics, N.V. | Method and apparatus for identifying the high level structure of a program |
CN1894964A (zh) * | 2003-12-18 | 2007-01-10 | 皇家飞利浦电子股份有限公司 | 创建视听数据流的多媒体概要的方法和电路 |
US20070192107A1 (en) * | 2006-01-10 | 2007-08-16 | Leonard Sitomer | Self-improving approximator in media editing method and apparatus |
KR20110062982A (ko) * | 2009-12-04 | 2011-06-10 | 삼성전자주식회사 | 실시간 방송 컨텐츠의 방송 요약 정보 생성 방법 및 장치와, 그 제공방법 및 방송 수신 장치 |
CN101883230A (zh) * | 2010-05-31 | 2010-11-10 | 中山大学 | 一种数字电视演员检索方法及系统 |
US9729942B2 (en) * | 2011-11-28 | 2017-08-08 | Discovery Communications, Llc | Methods and apparatus for enhancing a digital content experience |
US9645987B2 (en) | 2011-12-02 | 2017-05-09 | Hewlett Packard Enterprise Development Lp | Topic extraction and video association |
KR101956373B1 (ko) * | 2012-11-12 | 2019-03-08 | 한국전자통신연구원 | 요약 정보 생성 방법, 장치 및 서버 |
US9223870B2 (en) | 2012-11-30 | 2015-12-29 | Microsoft Technology Licensing, Llc | Decoration of search results by third-party content providers |
CN103200463A (zh) * | 2013-03-27 | 2013-07-10 | 天脉聚源(北京)传媒科技有限公司 | 一种视频摘要生成方法和装置 |
JP6069077B2 (ja) * | 2013-04-09 | 2017-01-25 | 日本放送協会 | 中継区間抽出装置、及びプログラム |
US9807474B2 (en) | 2013-11-15 | 2017-10-31 | At&T Intellectual Property I, Lp | Method and apparatus for generating information associated with a lapsed presentation of media content |
US9071855B1 (en) * | 2014-01-03 | 2015-06-30 | Google Inc. | Product availability notifications |
US20150301718A1 (en) * | 2014-04-18 | 2015-10-22 | Google Inc. | Methods, systems, and media for presenting music items relating to media content |
US10140259B2 (en) | 2016-04-28 | 2018-11-27 | Wipro Limited | Method and system for dynamically generating multimedia content file |
CN106550268B (zh) * | 2016-12-26 | 2020-08-07 | Tcl科技集团股份有限公司 | 视频处理方法和视频处理装置 |
US11328512B2 (en) | 2019-09-30 | 2022-05-10 | Wipro Limited | Method and system for generating a text summary for a multimedia content |
CN111597381A (zh) * | 2020-04-16 | 2020-08-28 | 国家广播电视总局广播电视科学研究院 | 内容生成方法、装置以及介质 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5093718A (en) * | 1990-09-28 | 1992-03-03 | Inteletext Systems, Inc. | Interactive home information system |
US5485221A (en) * | 1993-06-07 | 1996-01-16 | Scientific-Atlanta, Inc. | Subscription television system and terminal for enabling simultaneous display of multiple services |
US5499103A (en) * | 1993-10-20 | 1996-03-12 | E Guide, Inc. | Apparatus for an electronic guide with video clips |
US5523796A (en) * | 1994-05-20 | 1996-06-04 | Prevue Networks, Inc. | Video clip program guide |
JPH08249348A (ja) * | 1995-03-13 | 1996-09-27 | Hitachi Ltd | 映像検索方法および装置 |
US5907323A (en) * | 1995-05-05 | 1999-05-25 | Microsoft Corporation | Interactive program summary panel |
US5654748A (en) * | 1995-05-05 | 1997-08-05 | Microsoft Corporation | Interactive program identification system |
JPH0993548A (ja) * | 1995-09-27 | 1997-04-04 | Toshiba Corp | 文字情報表示機能付きテレビ受信機 |
JP3377677B2 (ja) * | 1996-05-30 | 2003-02-17 | 日本電信電話株式会社 | 映像編集装置 |
US6160950A (en) * | 1996-07-18 | 2000-12-12 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for automatically generating a digest of a program |
US6263507B1 (en) * | 1996-12-05 | 2001-07-17 | Interval Research Corporation | Browser for use in navigating a body of information, with particular application to browsing information represented by audiovisual data |
JPH11331760A (ja) * | 1998-05-15 | 1999-11-30 | Nippon Telegr & Teleph Corp <Ntt> | 映像の要約方法および記憶媒体 |
WO2000028440A1 (en) * | 1998-11-06 | 2000-05-18 | The Trustees Of Columbia University In The City Ofnew York | Systems and methods for interoperable multimedia content descriptions |
US6236395B1 (en) * | 1999-02-01 | 2001-05-22 | Sharp Laboratories Of America, Inc. | Audiovisual information management system |
US6535639B1 (en) * | 1999-03-12 | 2003-03-18 | Fuji Xerox Co., Ltd. | Automatic video summarization using a measure of shot importance and a frame-packing method |
US7653925B2 (en) * | 1999-11-17 | 2010-01-26 | Ricoh Company, Ltd. | Techniques for receiving information during multimedia presentations and communicating the information |
US6580437B1 (en) * | 2000-06-26 | 2003-06-17 | Siemens Corporate Research, Inc. | System for organizing videos based on closed-caption information |
-
2000
- 2000-12-21 US US09/747,107 patent/US20020083471A1/en not_active Abandoned
-
2001
- 2001-12-10 JP JP2002552310A patent/JP2004516753A/ja active Pending
- 2001-12-10 KR KR1020027010854A patent/KR100865042B1/ko not_active IP Right Cessation
- 2001-12-10 EP EP01271747A patent/EP1346362A2/en not_active Ceased
- 2001-12-10 CN CNB018082874A patent/CN100358042C/zh not_active Expired - Fee Related
- 2001-12-10 WO PCT/IB2001/002424 patent/WO2002051139A2/en active Application Filing
-
2008
- 2008-09-25 JP JP2008245407A patent/JP2009065680A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
EP1346362A2 (en) | 2003-09-24 |
CN1425180A (zh) | 2003-06-18 |
KR20020077491A (ko) | 2002-10-11 |
WO2002051139A3 (en) | 2002-08-15 |
KR100865042B1 (ko) | 2008-10-24 |
WO2002051139A2 (en) | 2002-06-27 |
US20020083471A1 (en) | 2002-06-27 |
JP2009065680A (ja) | 2009-03-26 |
CN100358042C (zh) | 2007-12-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2004516752A (ja) | 映像番組のマルチメディア要約にアクセスするシステム及び方法 | |
JP2009065680A (ja) | 映像番組のマルチメディア要約を提供するシステム及び方法 | |
US10713009B2 (en) | User speech interfaces for interactive media guidance applications | |
US10482168B2 (en) | Method and apparatus for annotating video content with metadata generated using speech recognition technology | |
US7046911B2 (en) | System and method for reduced playback of recorded video based on video segment priority | |
US7356244B2 (en) | Method and system for replaying video images | |
US6988245B2 (en) | System and method for providing videomarks for a video program | |
US20020174445A1 (en) | Video playback device with real-time on-line viewer feedback capability and method of operation | |
WO2002037498A2 (en) | System and method for detecting highlights in a video program using audio properties | |
KR20040101245A (ko) | 키 오디오/비디오 세그먼트를 찾기 위한 복사부 정보의 사용 | |
KR20060102639A (ko) | 동영상 재생 시스템 및 방법 | |
Barbieri et al. | A personal TV receiver with storage and retrieval capabilities | |
Okuda et al. | Storage technology for television home server | |
JP2001257973A (ja) | 記録/再生装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070703 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20071002 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20071010 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080325 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20080624 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20080701 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20081118 |