JPH11505682A - 自動放送監視システム - Google Patents

Abstract

(57)【要約】 放送信号を受信する装置と、ユーザにとって興味のある番組内容を識別する基準と、基準を表す記憶データのデータベースと、番組の内容を表す番組データの流れを放送信号から発生する識別装置とを有する標準の放送信号を監視するシステム。コンパレータは番組データと記憶データを比較し、出力装置は、番組のセグメントを記録するような所定の動作を実行する。例えばシステムは、予め選択された番組資料が放送信号にあるときマルチメディアＰＣのウインドウを作動する。

Description

【発明の詳細な説明】 自動放送監視システム 本発明は、テレビ放送のような放送を自動的に監視し、個々の視聴者が興味を 持っている特定の内容を検出するシステムに関する。 多数の組織、例えば、株式仲買業は、世界の出来事を継続的に監視する必要が ある。このような組織は、テレビを見て興味のある特定の話題を探すためにテレ ビを注意して見る人を雇用しているメディア及びニューススキャニング・サービ スを持っていることが知られている。これらのサービスは、電話によってその顧 客に助言したり、特定の出来事の発生を記録し、かれらがまとめたビデオクリッ プを含むレポートを提出する。例えば、このサービスは、ある人がテレビを監視 しながら、特定のテレビチャンネルを連続的に記録する。監視する人は、興味の ある対象を日誌に書き込み、時間とテープの位置を記録する。記録されたテープ は、後に時間またはテープを使用して記録から探す。編集されたクリップは、時 間のかかる手作業でまとめられる。 この方法には欠点が多い。興味ある出来事に気が付く応答時間は遅く、通常数 秒かかる。興味のある者が出来事の報告を受ける前に長時間が経過する。テレビ を監視する要員に支払う経費は非常に高い。１時間に１０ドル、１日１２時間と して１年に１つのチャンネルにつき４３，８００ドルとなる。個々のビデオクリ ップを探すことは、非常に時間がかかり、熟練したスタッフを必要とする。なぜ ならば、調査は、用語またはフレーズではなく出来事が起こった時間で検索され るからである。通常テープの早送りまたは巻き戻しには各々３乃至５分かかる。 またこの方法は、記録されたビデオに関して新しく調査する場合には、人がそれ を全体的に再び見る必要があり、さらに経費がかかる。 他の方法は、コンピュータ用のローテレビジョン・キャプチャ装置を含む。こ れらのキャプチャ装置は、テレビジョンビデオをコンピュータネットークに記憶 及び分配するためにテレビジョンビデオからデジタルフォーマットに変換する。 これらのプロダクツは、未加工のフィートの長さであるが、内容に依存する長さ ではない。それらは、ビデオ及び／またはオーディオ及び／またはキャプション テキストを捕捉し、分配するが、それらは特定の話題がテレビ放送で放送された とき直ぐにはそれをユーザに知らせない。 他の解決法は、データキャスティングと称される技術を使用する方法である。 この技術によれば、放送局は、ビデオテレビジョンの垂直帰線消去期間（ＶＢＩ ）にデータ、すなわち、番組に関する情報を含む信号を入れる。このデータは放 送局または、番組の著者によってつくられる。データは通常、タイトル、概要、 及びその番組に関する他の情報を含む。この情報は、ユーザが興味ある対象を選 択するために使用される。この方法における欠点は、ニュースソースでつくるか 、またはソースから伝達される特定の情報を必要とすることである。また、それ は、データを受けるために特別の占有ハードウエアを必要とし、さらに重要なの は、ユーザがデータに関する情報を連続的に監視する必要があることである。こ のＶＢＩデータ注入法は、小さい欠点であるが、もしいずれかの放送局がこの技 術を使用するとすれば、そのデータをコード化し、その結果、そのデータをデコ ードするために特別の設備が必要になるという欠点を有する。インテルによって 販売された作動中のＣＮＮは、このような製品の一例である。 本発明の目的は、従来技術の前述した欠点をなくすことである。 発明の概要 本発明によれば、放送信号を受信し、番組信号を発生して放送信号によって搬 送された利用可能な番組をつくる手段と、ユーザにとって興味の対象となる番組 を識別する基準を入力するユーザが作動可能な選択手段と、基準を表すデータを 記憶するデータベースと、番組信号から分離し、番組内容を代表する番組データ ストリームを放送信号から発生する認識手段と、記憶されたデータと前記番組デ ータとを比較するコンパレータと、番組データストリームが前記記憶データと合 致するとき、ユーザが合致した番組データ・ストリームに関連する監視された番 組の一部を検査することができるように所定の動作を実行するように作動可能な 出力装置とを有する放送信号監視システムが提供される。 放送信号は、番組を搬送する任意のタイプの搬送信号であり、搬送に適当な伝 送媒体、ワイヤレス、ケーブルまたは衛星に分配される。１つの実施例において 、放送信号は、テレビジョン信号である（が、往々にしてある場合のように、番 組データによって達成されるならば、いくつかの場合においてラジオ信号信号も 使用できる）。 また、それらは、例えば、ＭＰＥＧフォーマットを使用してデジタル的に分配 されたテレビジョン信号でもよい。 テレビジョン信号の場合において、認識手段は、信号によって正規に伝送され たクローズキャプションテキストを監視することができる。ある単語またはフレ ーズを検出するときに、システムは、ユーザにこのような番組の内容が存在する ことを知らせる警告状態を発生する。例えば、標準的なテレビセットの場合、ユ ーザが音を聞くことができるように簡単な装置で音を上げることができる。さら に複雑な装置において、信号は、データベース検索技術を使用して次の検索のた めに記憶されタグがつけられる。 所定の動作は、興味ある番組の部分をユーザが検査することができるように任 意の形態の動作である。例えば、それは、後で再調査のために番組信号及びデー タ信号を記録し、コンピュータのビデオウインドウを作動させ、興味の対象の番 組内容の放送があることをユーザに知らせるように警告音を作動させることを含 む。例えば、ユーザに警告音を送り、ユーザに“今クリントンがテレビに出てい る”ことを知らせ、ユーザが最も近いテレビジョンセットで番組を見ることがで きるようにする。 他の実施例において、音声またはパターン認識技術を使用し、オーディオまた はビデオを直接監視するために使用することができる。 よって、本発明によれば、ユーザは興味のある番組が放送されると自動的に警 告を受けることができる。テレビジョン放送からのビデオ、オーディオ及びクロ ーズキャプションが自動的にインデックスが付され、記憶され、それらは、adho cクエリズ(queries)を使用して全体または一部の後に検索することができる。ユ ーザは、従来の時間／位置ベースクエリズに加えてキーワードまたはフレーズを 検索することによって内容を特定することによってビデオ、オーディオまたはク ローズドキャプションテキストの個々のクリップを検索することができる。 本発明は、コンピュータを用いて、ビデオ及びオーディオと共にコンピュータ 環境に入って来るクローズキャプションテキストと同期をとりそれを取り込み、 例えば、クローズキャプションテキストの内容に基づいてビデオ及びオーディオ の個々の部分にインデックスを付け検索することによってテレビジョン放送の内 容を自動的に検出することができる。 本発明は、一般的にマルチメディアの分野に適用することができる。それは、 インデックスの付いたマルチメディアデータベースを自動的につくる技術を提供 し、多くの用途を有する。例えば、政界に立候補した候補者及びそれらのアシス タントは、テレビジョンの番組を監視し、今後どのように対応するか、またかれ らの政策をどうするかを決定することができる。かれらはそのような番組が放送 されていることを直ぐに知らされることができる。 取り締まる組織または政府は、かれらの組織に対して負（または正の）調査の ためにテレビジョン番組を監視する。かれらは、メディアで報告された問題を知 ることができ、直ぐに対応することができる。その上、かれらは、かれらの政策 に対するメディアの反応を追跡することができる。 マーケッティング部門は、かれらを雇用する組織の競合相手、顧客に関する情 報を収集するためにこの発明を使用することができる。それらは、直ぐにこの問 題について対応することができる。同様に、調査マルチメディアのデータベース を自動的につくることができる。 放送業界、電信会社、電話会社は、マルチメディアのデータベースをつくりそ れを維持するためにこの装置を利用することができる。電信会社及びTelco は、 この発明をそれらの顧客によって区別したサービスを行うために、例えば、ライ ブの放送またマルチメディアデータベースに関して濾過機能及び質問機能を提供 するために使用することができる。 個人としては、この技術は、テレビジョンを見る時間を最小限にするために使 用することができる。興味の対象ではない番組は、濾過される。番組に関する記 述は、再生される所望のビデオ及び音声によってのみ追跡される。 また、本発明は、放送テレビジョンから完全にインデックスのついたビデオ、 オーディオ及びクローズキャプションにアクセスすることによって他のマルチメ ディアアプリケーション及びデータベースを提供する。 本発明は、中央処理ユニットと、放送テレビ信号を受信し、ビデオ信号を発生 するビデオキャプチャユニットと、プログラムコントロールによって前記ビデオ 信号を表示することができるビデオディスプレイユニットと、テレビジョン信号 に挿入されたデータ信号を復号し、前記テレビジョン信号の番組内容を代表する 番組データストリームを発生する手段と、ユーザに興味のある内容の番組を識別 する基準を入力する手段と、基準を表すデータを記憶するデータベースと、を有 するマルチメディアコンピュータシステムを提供する。中央処理ユニットは、番 組データが記憶データと合致したときに、ユーザが前記合致した番組データスト リームと関連する監視モニタの一部を調査することができるように番組データと 前記記憶データを比較して前記記憶データを連続的に比較するようにプログラム されている。 本発明は、放送信号から番組信号を引出すステップと、番組信号から分離し、 番組の内容を代表する番組データストリームを発生するステップと、番組データ ストリームを前記ユーザに対して興味ある番組内容を識別する記憶データとを比 較するステップと、発生した番組データストリームが前記記憶データと合致した ときユーザが前記合致した番組データストリームに関連した監視番組の一部を調 査することができるように出力条件を発生するステップと、を有する放送信号を 監視する方法が提供される。 また本発明は、エンコードされるバイナリ情報を有するコンピュータ・リーダ ブル記憶媒体であって、バイナリ情報は、放送信号を監視し、放送信号によって 搬送される番組資料をユーザに提出することを可能にするために番組信号を発生 し、入って来る放送信号を分析して前記番組信号を分離し、それらの番組内容を 代表する番組データストリームを発生し、興味のある番組内容を認識する記憶デ ータと前記データストリームとを比較し、ユーザが前記合致する番組データと関 連する監視番組の一部を検証することができるように発生したデータと前記記憶 データが合致したとき出力条件を発生するコンピュータ・リーダブル記憶媒体が 提供される。 図面の簡単な説明 本発明を添付図面を参照することによって一例として説明する。 第１図は、システム全体のアーキテクチャを示す本発明によるシステムのブロ ック図である。 第２図は、第１図に示すシステムの内部のアーキテクチャを示すブロック図で ある。 第３図は、クローズキャプションの流れ処理を示すフローチャートである。 第４図は、オーディオストリームの処理を示すフローチャートである。 第５図は、ビデオストリームの処理を示すフローチャートである。 第６図は、警告ハンドリング手順を示すフローチャートである。 第７図は、記憶データ処理を示すフローチャートである。 第８図は、標準的なスタンドアロンタイプのマルチメディアパーソナルコンピ ュータに基づいた本発明の実施例である。 第９図は、第８図に示す実施例のライブ送り構成のブロック図である。 第１０図は、ネットワーク送り構成のブロック図である。 第１１図は、ビデオセグメントを再生するまたは再び記録する構成のブロック 図である。 第１２図は、通常のディスプレイスクリーンを示す図である。 第１３図は、番組リストを示す通常のディスプレイスクリーンを示す図である 。 第１４図は、オンデマンドアーキテクチャに適用可能な本発明の他の実施例の ブロック図である。 好ましい実施例の説明 第１図において、本発明による監視システムは、チューナ２からの標準のテレ ビジョン放送信号を受信する。このシステムは、ＣＴＲモニタ４及びスピーカ５ を含むパーソナルコンピュータからなるマルチメディアディスプレイ３に双方向 のリンク６で接続されている。マルチメディアディスプレイは、従来のマルチメ ディアＰＣセットアップの部分から形成することができる。システム１は、ネッ トワーク７に接続され、ネットワーク７は個々のワークステーション８に接続さ れる。 監視システム１は、ビデオキャプチャ・ユニット９と、クローズキャプション ・ユニット１０と、オーディオキャプチャ・ユニット１１とを有する。このよう なユニットは、それ自身市販されている。データの流れ１４，１５，１６は、好 ましくはデジタルであるが、アナログ的であってもよく、これらからユニットは 第２図にさらに詳細に示すユニット１２のバス１３に送られる。ユニット１２は 、次のようないくつかの機能を果たす。 ・ビデオ、オーディオ及びクローズキャプションデータの流れの同期をとり、 到着時間のタグをつける。 ・クローズキャプションテキストの流れを連続的にチェックして番組内容に関 してユーザに警告を出す。 ・ビデオ、オーディオ及びクローズキャプションテキストをディスク記憶装置 に保存する。クローズキャプションテキストを使用してビデオ及びオーディオを 示すタグと同期をとり用語またはフレーズによってビデオ及びオーディオクリッ プを検索することができる。ビデオ、オーディオ及びクローズキャプションテキ ストを連続的にディスクに保存することができるが、データの記録は、内容に基 づいている。例えば、クローズキャプションの流れのキーワードが現れる前３０ 秒前から、現れた後（遅延送りバッファを使用して）５分までのビデオ、オーデ ィオ及びクローズキャプションデータを記録し始めるようにすることができる。 ・ネットワーク７の顧客は、警告を受け、上述したマルチメディアディスプレ イに示すように質問を送る。 動作において、ユーザは、ＬＡＮ−接続ＰＣ８またはワークステーション３の いずれかによってデータを入力する。例えば、ユーザは、興味の対象となる話題 を表す一連のキーワードを入力する。次にキーワードは、ユーザのアイデンティ ティと共に大容量の記憶装置２０のプロファイルデータベースに入力される。選 択されたキーワードがクローズキャプションデータ・ストリームに現れたとき、 システムは、ユーザに知らせるために警告信号を発生する。例えば、システムは 、クリントンという単語及びエリツィンが２０の単語が隣接するストリーム内に あったとき警告を発するために設定される。簡単な場合において、例えば、警告 は、 モニタ４の音を調整することを含む。所望ならば、またシステムは、同様の単語 、例えば、ユーザによって入力された単語の類義語を見つけるためにファジーな 論理原理を使用することができる。またこの構成は、クローズキャプションシス テムに非常によくあるミススペルに対抗する。 もちろん、このシステムと接続された各ユーザは、かれら自身でカスタマイズ した検索プロファイルを入力することができる。 第２図を参照すると、システムが放送信号を監視しているとき、入って来るデ ータの流れ１４，１５，１６が内部バス１３を通ってコンパレータ１７に入り、 このコンパレータ１７は、大容量記憶装置２０にユーザによって設定されたプロ ファイルデータベース１８に記憶された比較データとこのデータを比較する。デ ータベース１８は、マルチメディアＰＣ３を介してユーザによって入力されたデ ータを記憶する。例えば、ユーザは、クローズキャプションデータ・ストリーム で探す一組のキーワード及びフレーズを選択する。これらは、マルチメディアＰ Ｃ３を介して入力され、データベース１８に記録される。 入力されたデータストリームまたはそれらの上述した選択された部分は、タイ ムスタンプユニット２１によってつけられたタイムスタンプと共に大容量記憶装 置２０に記憶される。記憶装置１８は、アナログであるが、情報にランダムにア クセスすることができるようにデジタルが好ましい。 ユーザは、ＰＣ３を通して、キーワードまたはフレーズが発見されたとき実行 するシステムの他の動作を設定することができる。これらの動作は、警報を鳴ら すこと、遠隔の警報を作動させること、ビデオウインドウを開くこと、電子メー ルを送ることを含み、コンピュータは、実行するようにプログラムすることがで きる動作を含む。またシステムは、監視用に使用できる既存のデータベース、ス プレッドシートまたはワードプロセッサファイルからプロファイル、（またはコ ンパレータデータベース）を自動的につくることができる。この装置は、適当な 名詞、カテゴリー及び予備定義されたキーワードについて特定のファイルを検索 することによってこのプロファイルをつくる。特定のファイルからこれらを検索 した後、それらは、変更するためにユーザに提出される。 ネットワーク上の各ユーザ８は、個々の要求に対してそれをカストマイズする ためにネットワーク７上でデータベースプロファイル１８を追加、削除、変更す る。 システムがデータを記憶するとき、クローズキャプションテキストは大容量記 憶装置ユニット２０の標準のテキストデータベースに記憶される。データベース には、主に捕捉されたフレーズ及び絶対時間の少なくとも２つの欄がある。オー ディオストリーム及びビデオストリームがそれらの絶対スタート時間と共に捕捉 される。ビデオ及びオーディオの個々の部分は、クローズキャプションテキスト でＳＱＬ状の質問を使用して検索することができる。関連するビデオ及びオーデ ィオは、テキストの質問から戻る絶対時間を使用して検索される。この装置は、 単語及びフレーズがあるビデオ及びオーディオ内に正確な時間を配置する。 また、この装置は、サーキュラーバッファとして実行される遅延送りバッファ １９を有する。これは、データストリームの各々の最後のｎ分を記録する。ユー ザはこのバッファの長さを特定し、３つのデータストリームの各々は、異なる長 さを有する。またこのバッファ１９は、警告を受けたときに、数秒または数分の 間バックアップする能力をユーザに提供する。遅延送りバッファは、それ自身公 知の技術を使用してユーザが生放送までを捕捉できるように二倍の速度で再生す ることができる。 このシステムは、ビデオ、オーディオ及びテキストを全体または部分に分配す る能力を提供する。さらに遅い速度のシステムは、番組すなわちオーディオの閉 鎖キャプションテキストを受けるようにのみ選択される。 監視システムの使用の特定の例は次の例である。テレビの視聴者は、映画“風 と共に去りぬ”を見たいと思ったとき、視聴者は、セリフ“I don't give a dam n”が話されたときにコンピュータに警告音をならすように設定する。あるいは 、この技術で同じ映画を記憶したとき、かれらは、映画において、時間及び相対 的な位置によってこれらのセリフが話される場所を知らなくともこれらの言葉が 話される場面に直接合わせることができる。興味の対象となるセリフまたはフレ ーズに合わせるユーザインターフェイスは、ワープロまたはＳＱＬ質問の単語ま たはフレーズの検索と非常に似ている。 実施例で述べたシステムは、入って来るクローズキャプションテキストストリ ームを監視し、入って来るビデオ及びオーディオとそれの同期をとり、興味のあ る対象に対してユーザに警告する。警告が起こったときに、音を鳴らすこと及び またはビデオウインドウを開くようにプログラム可能な動作が生じる。入って来 るビデオ、オーディオ及びクローズキャプションテキストは、タイムベースタグ 及びインデックスと共に記憶され、全体にインデックスのついたマルチメディア データベースを自動的につくる。 ユーザは、ビデオ及びオーディオの関連部分を検索する能力でクローズキャプ ションテキストにＳＱＬ質問能力を有する。かれらは、特定の言葉、フレーズま たは一般的な内容についての監視ソフトウェアを構成し、警告時に特定の動作を 実行することができる。 ビデオ、オーディオ及びクローズキャプションテキストは、直接にまたは電子 メールを介してコンピュータネットワーク７に分配される。システム及びネット ワーク管理は、システム及びネットワークリソースの使用を管理する能力を備え ている。 第３図は、この実施例において、クローズキャプション・ストリームを構成す る埋め込まれたデータストリームの処理を示す。このテキストは、ユニット１１ ０において獲得され、ユニット１１１において時間スタンプが挿入された後、遅 延送りバッファ１９に挿入され、その後、記憶ユニット２０に記憶されたユーザ プロファイルからの単語と比較するためにコンパレータ１１３と比較される。も し合致が見いだされれば、判断ユニット１１４は、（第６図にさらに詳細に示す ような）ハンドリングユニット１１５の警告ハンドリングユニットを作動させる 。 合致しない場合には、判断ユニット１１６は、クローズキャプションテキスト をユーザの指示によって記録すべきかどうかについて決定する。もし、ＹＥＳで あれば、ユニット１１７にファイルするために閉鎖キャプションテキストが書か れる。もしＮＯであれば、ユニット１１８は、テキストをクローズキャプション ディスプレイ１１９に表示すべきかどうか決定する。 第４図は、ビデオとは別に処理されるオーディオに基づいたパターンの合致に ついての第３図と同様のフローチャートである。オーディオユニット２１０乃至 ２１９は、音声認識技術を使用してオーディオからテキストを抽出することによ ってパターンの合致を達成するという事実を除いて第３図のユニット１１０乃至 １１９と同様の方法で作動する。 第５図は、オーディオとは別に処理されるビデオに基づいたパターンの合致に ついての第３図と同様のフローチャートである。ビデオユニット３１０乃至３１ ９は、音声認識技術を使用してオーディオからテキストを抽出することによって または例えば色のヒストグラムを分析することによってパターンの合致を達成す るという事実を除いて第３図のユニット１１０乃至１１９と同様の方法で作動す る。 第６図は、どのように警告を処理するかを示すものである。パターンの合致の 結果として警告が生じたとき、ユニット４１０は警告のタイプを認識する。もし 音による警告が必要とされたときには、決定ユニット４１１がベルを鳴らす。 判断ユニット４１３が記録が要求されたからどうかを決定し、もしそうであれ ば、ユニット４１４は、遅延送りバッファからのビデオ及びオーディオ及びクロ ーズキャプションデータを書き込み大量記憶装置ユニット２０のファイルに書き 込むようにする。ユニット４１５は、入って来るビデオ、オーディオ及びクロー ズキャプションデータの記録を開始する。 判断ユニット４１６は、表示が要求されるかどうかを決定し、もしそうなら、 ユニット４１７は、ビデオ、オーディオ及びクローズキャプションデータの表示 を開始する。 第７図は、記録データの処理を示す。１つまたはそれ以上のキーワードがユニ ット５１０によってユーザから要求される。ユーザは、コンピュータのキーボー ドを介してキーワードを入力する。 ユニット５１１は、合致したキーワードについてクローズキャプションファイ ルを検索し、ユニット５１２は、合致したセグメントのリストを表示する。ユニ ット５１３はユーザの選択を要求する。判断ユニット５１４は、選択が行われな ければ要求ユニット５１０に戻り、ユニット５１５は、合致セグメントの位置を 示して、ユニット５１６によって表示する。 本発明によるシステムは、第８図に示すようにパソコンのウインドウズ（登録 商標）のオペレーティングシステムのスタンドアロンシステムとして実行される 。 パーソナルコンピュータ３０は、少なくとも４８６ＤＸ６６と、マザーボードに ９０ＭＨｚ若しくはもっと早いマイクロプロセッサ３１と、ＰＣバス３５に接続 された記憶空間の少なくとも１ギガバイトを有するハードドライブ３２とを有す る。クリエティブ・ラブス・ビデオブラスタ（登録商標）のビデオキャプチャカ ード３３はマザーボードの１つの拡張スロットに配置される。サウンドブラスタ （登録商標）のような適当な１６ビットのサウンドカード３４が、第２の拡張ス ロットに配置される。パーソナルコンピュータ３０は従来のビデオディスプレイ ユニット２８及びキーボード２９に接続される。 ビデオカード３３及びサウンドカード３４は、圧縮されたビデオパケット３５ 及びオーディオパケット３６をＰＣバス３５に送る。 ケーブルまたはアンテナソース３８から入って来るＲＦテレビジョン信号３７ は、ケーブルコンバータまたはＶＣＲに送られ、ここで入って来るＲＦ信号を復 調し、オーディオストリーム４０及びビデオストリーム４１を発生し、このオー ディオストリーム４０は、サウンドカード３４に送られ、ビデオストリーム４１ は、ビデオカード３３に送られる。 ビデオ信号４１は、サンベルトテキストグラバ（登録商標）・クローズドキャ プションデコーダに送られる。これは、垂直帰線期間に挿入されるクローズキャ プション信号を復号し、テキストパケット４６をつくるシリアルポート４４及び ＵＡＲＴ４５を通ってＰＣバス３５にＡＳＣＩＩテキストストリームを送る。 ユーザはダイアログボックス及びマウス（図示せず）を用いて従来のようにキ ーボード２９を通して指示を入力する。 第９図は、パーソナルコンピュータ３０での信号の処理をさらに詳細に示す。 ビデオ信号は、速度コントローラ５０を通して送られ、これは、ビデオ遅延ユニ ット５１に対してユーザの指示によるフレーム速度を測定する。オーディオ信号 はオーディオキャプチャユニット３４からオーディオ遅延ユニット５２に直接送 られる。クローズキャプション信号は、選択された基準を表す記憶データとのパ ターン突き合わせを探すクローズキャプション・パターンマッチングユニット５ ３及びクローズキャプションディスプレイユニット５４及びクローズキャプショ ン遅延ユニット５５に通過する。キャプションパターンユニット５３は、キャプ ションパターンユニット５３はキーボード２９を介してユーザによって入力され たキーボードのブールコンビネーションを基礎としてパターン突き合わせを実行 することができる。例えば、パターンマッチング回路５３は、たとえ２０の隣接 する単語のストリーム内で２つの単語が選択されても１つのイベントを起動する 。クローズキャプションディスプレイユニット５４は、プログラムコントロール の下でビデオディスプレイユニットのウインドウで直接クローズキャプションテ キストを見ることができるようにする。 ディスプレイユニット５１，５２，５３は、例えば１０秒または２０秒にわた ってユーザによって選択することができる時間に入って来る各信号を保持するバ ッファとして作用する。これはユーザが放送された番組の一部を再生するか、パ ターンの突き合わせの検出の後に予め定義された番組の部分だけではなく、突き 合わせを見つける前のセグメントをもコンピュータが記憶することができるよう にする。例えば、典型的なセットアップは、パターンの突き合わせの１０秒前及 び次にその後２０秒を記録する。各遅延ユニット５１，５２，５５は、３つの出 力ポートａ，ｂ，ｃを有する。 ビデオ遅延ユニット５１，オーディオ遅延ユニット５２及びクローズキャプシ ョン遅延ユニット５５は、ポートｂを通してローカルエリアのネットワークのよ うな１つネットワークについてキャプチャ材料を分配するためにポートｂを通し てネットワークインターフェイス５６に接続される。 また、上述したユニットは、ポートｃを通して同期ユニット５７、オーディオ 同期ユニット５８及びクローズキャプション同期ユニット５９に接続される。こ れら３つのユニット５７，５８，５９は、ハードディスク３２上にＡＶＩ（オー ディオビデオインターリーブ）ファイル６０をつくり、これは、ビデオ、オーデ ィオ及び関連するクローズキャプションデータを含む。 ユニット５１，５２及び５５はポートａを介して、追加的な同期ユニット６１ ，６２，６３に接続され、これらのユニットは、ビデオディスプレイ発生器６４ と、オーディオカード３４のサウンドジェネレータ６４と、クローズキャプショ ンディスプレイ発生器６６とに接続されている。ビデオ及びクローズキャプショ ニングはウインドウに現れ、ビデオ（及びオーディオ）はクローズキャプショニ ング に同期が取られている。 パターンの合致がユニット５３によって検出されたとき、信号６８が記録コー ルバックユニット６７に送られる。これは、ユーザによって選択されたモードに 依存して１つまたはそれ以上のいくつかの所定の動作を生じる。記録コールバッ クユニットは、ディスプレイユニット５１，５２，５５のポートａ，ｂまたはｃ を作動させてユニット６１，６２，６３を通ってライブディスプレイにユニット ５７，５８，５９を通ってネットワーク５６またはＡＶＩファイル６０に遅延フ ィードを送る。コンピュータのファイルに記憶する代わりに、ビデオ及びオーデ ィオ（及び可能ならばクローズキャプション）ストリームはＶＣＲテープに記録 することができる。ポートはユーザの設定に依存してバッファの任意の時間にバ ッファ信号に接近することができる。 第１０図は、コンピュータが、ローカルエリアのネットワークからフィードを 受ける構成を示す。この場合、入って来る放送信号は、ネットワークサーバによ って受けられ、ネットワーク上で顧客にデジタル化され伝送される。このネット ワークは、キャプチャユニット３３，３４，４２に相当する信号を提供する。シ ステムの他の部分は同じである。この実施例において、サーバのみがビデオカー ド及びクローズキャプションキャプチャユニットを必要とする。顧客は、ＳＭＣ ＥｔｈｅｒＥＺのようなネットワークインターフェイスにわたってビデオ、サウ ンド及びクローズキャプションを含むデジタル信号を受ける。 第１１図において、ＡＶＩファイルはユニット９０によって受けられ、ユニッ ト９５に抽出されたオーディオによって受けられる。ビデオをビデオシンクロナ イザ９１、速度モニタ９２及びビデオスプリッタ９３を通ってビデオディスプレ イ９４に送られ、ＡＶＩファイル９７を出力する。クローズキャプションストリ ームは、クローズキャプションシンクロナイザ１００、クローズキャプションシ ンク９９を通って送られ、連続的なディスプレイ、クローズキャプションスプリ ッタ９８のクローズキャプションテキストを抽出し、そこからクローズキャプシ ョンディスプレイ９６及びＡＶＩ出力ファイル９７に送られる。ユニット９４及 び９６は、関連するクローズキャプションテキストと共にビデオを表示すること ができる。出力ファイル９７は、ユーザが記憶されたテキストの部分を編集及び 再記録することができるようにする。 第１２図は、ビジュアルディスプレイユニット２８のアクティブウインドウ７ ０で動作中の通常のディスプレイスクリーンを示す。ビデオセグメント７１は、 関連する音声と共に再生される。一方ビデオセグメント７１は、クローズキャプ ションテキスト７２である。ポインタ７３は、現在の画像に関連するテキストの 部分である。ポインタ７３はマウスでドラグアップダウンして指示されたテキス トに対応したビデオを再生する。 第１３図は、記録されたビデオクリップのリストを表示するウインドウを示す 。リストの任意の項目をダブルクリックすることによって再生する関連テキスト と共にアクティブウインドウに項目が現れるようにし、ウインドウズ（登録商標 ）スタイルのコントロールバーを使用して初期化することができる。 このシステムは、同時に複数のチャンネルを見るようにプログラムすることが できる。この場合、各チャンネルは、第９図を参照して説明したように、それ自 身の処理システムを有する。 第１４図の実施例において、ブロック７００は、上述したような監視システム を含み、リモートネットワークに分配するためにデジタル信号を出力する。これ は衛星ゲートウエイ７０３を通って衛星アンテナ７０４に信号を送ることによっ て達成され、参照符号７０６のような一連の顧客のいずれか１つに衛星を介して 信号を送る。顧客７０６は、インターネットまたは公衆切り替え電話網７０８を 介してブロック７００に戻す。顧客は、ＤｉｒｅｃＰＣとし知られるサービスを 利用し、このサービスは、広帯域のダウンリンクをインターネットに提供し、従 来のモデムを介してアップリンクが設けられている。 ユニット７０２は、空中またはケーブルから放送信号７０１を受信する。これ らは、従来のアナログ信号か、またはＭＰＥＧフォーマットのデジタル信号であ る。このユニット７０２は、ネットワークの顧客７０６からの指示を受ける。パ ターンの突き合わせが達成されると、それはネットワーク上の番組信号を顧客７ ０６に送る。 第１４図に示すシステムは、ネットワークとして有効に機能し、ユニット７０ ０は、ネットワークサーバである。 さらに改良したシステムにおいて、顧客はメディアサーバ７０９に接続され、 これはオンディマンドチャンネルにアクセスすることができる。第２の監視シス テムが設けられ、所望ならば、双方のユニット７０６及び７１０は顧客によって 制御可能である。 上述したシステムは、それらが生じたときにイベントに対して直ぐに警告を発 する利点を有する。テレビジョンフィードは、それが記憶されたときに自動的に 編成され、すなわち、クローズキャプションテキストは、入って来るビデオ及び オーディオと同期をとる。これは、話し言葉のような内容に基づいて検索するこ とができるマルチメディアデータベースを自動的につくる機能及び単語またはフ レーズの解析でビデオ及びオーディオセグメントを検索する機能を提供する。記 憶されたビデオフィードは新しい情報に基づいて検索することができる。 同期がとられたビデオ、オーディオ及びクローズキャプションは、コンピュー タネットワークに分散される。 また本発明は、手動のインタベンション及び生の情報の流れの減少を無くすこ とによって底コストを達成し、過剰なネットワークをなくす。

【手続補正書】特許法第１８４条の８第１項 【提出日】１９９７年３月４日 【補正内容】 ではない。それらは、ビデオ及び／またはオーディオ及び／またはキャプション テキストを捕捉し、分配するが、それらは特定の話題がテレビ放送で放送された とき直ぐにはそれをユーザに知らせない。 他の解決法は、データキャスティングと称される技術を使用する方法である。 この技術によれば、放送局は、ビデオテレビジョンの垂直帰線消去期間（ＶＢＩ ）にデータ、すなわち、番組に関する情報を含む信号を入れる。このデータは放 送局または、番組の著者によってつくられる。データは通常、タイトル、概要、 及びその番組に関する他の情報を含む。この情報は、ユーザが興味ある対象を選 択するために使用される。この方法における欠点は、ニュースソースでつくるか 、またはソースから伝達される特定の情報を必要とすることである。また、それ は、データを受けるために特別の占有ハードウェアを必要とし、さらに重要なの は、ユーザがデータに関する情報を連続的に監視する必要があることである。こ のＶＢＩデータ注入法は、小さい欠点であるが、もしいずれかの放送局がこの技 術を使用するとすれば、そのデータをコード化し、その結果、そのデータをデコ ードするために特別の設備が必要になるという欠点を有する。インテルによって 販売された作動中のＣＮＮは、このような製品の一例である。 本発明の目的は、従来技術の前述した欠点をなくすことである。 発明の概要 本発明によれば、放送信号を受信し、番組信号ストリームを発生して前記放送 信号によって搬送された利用可能な番組をつくる手段と、ユーザにとって興味の 対象となる番組を識別する基準を入力するユーザが作動可能な選択手段と、前記 基準を表すデータを記憶するデータベースと、前記番組ストリームから分離し、該番組データストリームが 番組内容を代表する番組データストリームを、各番組 ストリームごとに 前記放送信号から発生するとともにダイナミックに変化させる 認識手段と、前記番組データストリームを前記番組信号ストリームと同期させる 手段と、 前記記憶されたデータと前記番組データとを比較するコンパレータと、 前記番組データストリームが前記記憶データと合致するとき、該番組データスト リームと番組セグメントとの間の同期状態と維持すると同時に番組セグメント及 びそれと関連する番組データストリームを記憶する装置と、ユーザがそれと対応 するダイナミック番組データストリームの一部を選択することにより記憶された 番組セグメントの一部を検査することができるディスプレイ手段 とを有する放送 信号監視システムが提供される。 放送信号は、番組を搬送する任意のタイプの搬送信号であり、搬送に適当な伝 送媒体、ワイヤレス、ケーブルまたは衛星に分配される。１つの実施例において 、放送信号は、テレビジョン信号である（が、往々にしてある場合のように、番 組データによって達成されるならば、いくつかの場合においてラジオ信号信号も 使用できる）。 また、それらは、例えば、ＭＰＥＧフォーマットを使用してデジタル的に分配 されたテレビジョン信号でもよい。 テレビジョン信号の場合において、認識手段は、信号によって正規に伝送され たクローズキャプションテキストを監視することができる。ある単語またはフレ ーズを検出するときに、システムは、ユーザにこのような番組の内容が存在する ことを知らせる警告状態を発生する。例えば、標準的なテレビセットの場合、ユ ーザが音を聞くことができるように簡単な装置で音を上げることができる。さら に複雑な装置において、信号は、データベース検索技術を使用して次の検索のた めに記憶されタグがつけられる。 所定の動作は、興味ある番組の部分をユーザが検査することができるように任 意の形態の動作である。例えば、それは、後で再調査のために番組信号及びデー タ信号を記録し、コンピュータのビデオウインドウを作動させ、興味の対象の番 組内容の放送があることをユーザに知らせるように警告音を作動させることを含 む。例えば、ユーザに警告音を送り、ユーザに“今クリントンがテレビに出てい る”ことを知らせ、ユーザが最も近いテレビジョンセットで番組を見ることがで きるようにする。 他の実施例において、音声またはパターン認識技術を使用し、オーディオまた はビデオを直接監視するために使用することができる。 よって、本発明によれば、ユーザは興味のある番組が放送されると自動的に警 告を受けることができる。テレビジョン放送からのビデオ、オーディオ及びクロ 個人としては、この技術は、テレビジョンを見る時間を最小限にするために使 用することができる。興味の対象ではない番組は、濾過される。番組に関する記 述は、再生される所望のビデオ及び音声によってのみ追跡される。 また、本発明は、放送テレビジョンから完全にインデックスのついたビデオ、 オーディオ及びクローズキャプションにアクセスすることによって他のマルチメ ディアアプリケーション及びデータベースを提供する。 本発明は、中央処理ユニットと、放送テレビ信号を受信し、ビデオ信号を発生 するビデオキャプチャユニットと、プログラムコントロールによって前記ビデオ 信号を表示することができるビデオディスプレイユニットと、前記テレビジョン 信号に挿入されたデータ信号を復号し、前記テレビジョン信号の番組内容を代表 する番組データストリームを発生するとともにダイナミックに変化させる手段と 、ユーザに興味のある内容の番組を識別する基準を入力する手段と、前記基準を 表すデータを記憶するデータベースと、前記番組データストリームと番組セグメ ントとの間の同期状態と維持すると同時に番組セグメント及びそれと関連する番 組データストリームを記憶する装置と、ユーザがそれと対応するダイナミック番 組データストリームの一部を選択することにより記憶された番組セグメントの一 部を検査することができるディスプレイ手段と を有するマルチメディアコンピュ ータシステムを提供する。前記中央処理ユニットは、前記番組データが前記記憶 データと合致したときに、番組データと前記記憶データを比較して前記記憶デー タを連続的に比較するとともに番組セグメントを記憶するようにプログラムされ ている。 本発明は、前記放送信号から番組信号を引出すステップと、番組信号ストリー ム から分離し、該番組データストリームが番組の内容を代表する番組データスト リームを発生するとともにダイナミックに変化させるステップと、前記番組デー タストリームを前記ユーザに対して興味ある番組内容を識別する記憶データとを 比較するステップと、前記発生した番組データストリームが前記記憶データと合 致したとき、前記番組データストリームと番組セグメントとの間の同期状態と維 持すると同時に番組セグメント及びそれと関連する番組データストリームを記憶 するステップと、 ユーザが前記合致した番組データストリームに関連した監視番 組の一部をそれと対応するダイナミック番組データストリームの一部を選択する ことにより検査するステップと を有する放送信号を監視する方法が提供される。 また本発明は、エンコードされるバイナリ情報を有するコンピュータ・リーダ ブル記憶媒体であって、前記バイナリ情報は、放送信号を監視し、放送信号によ って搬送される番組資料をユーザに提出することを可能にするために番組信号ス トリーム を発生し、入って来る放送信号を分析して前記番組信号を分離し、該番 組データストリームが それらの番組内容を代表する番組データストリームを発生するとともにダイナミックに変化させ 、興味のある番組内容を認識する記憶デー タと前記データストリームとを比較し、ユーザがディスプレイ手段でダイナミッ クデータストリームの一部を選択することにより 前記合致する番組データストリ ームと関連する監視番組の一部を検証することができるように発生したデータと 前記記憶データが合致したとき、前記番組データストリームと番組セグメントと の間の同期状態と維持すると同時に番組セグメント及びそれと関連する番組デー タストリームを記憶 するコンピュータ・リーダブル記憶媒体が提供される。 図面の簡単な説明 本発明を添付図面を参照することによって一例として説明する。 第１図は、システム全体のアーキテクチャを示す本発明によるシステムのブロ ック図である。 第２図は、第１図に示すシステムの内部のアーキテクチャを示すブロック図で ある。 第３図は、クローズキャプションの流れ処理を示すフローチャートである。 第４図は、オーディオストリームの処理を示すフローチャートである。 第５図は、ビデオストリームの処理を示すフローチャートである。 第６図は、警告ハンドリング手順を示すフローチャートである。 第７図は、記憶データ処理を示すフローチャートである。 第８図は、標準的なスタンドアロンタイプのマルチメディアパーソナルコンピ ュータに基づいた本発明の実施例である。 第９図は、第８図に示す実施例のライブ送り構成のブロック図である。 パーソナルコンピュータ３０は、少なくとも４８６ＤＸ６６と、マザーボードに ９０ＭＨｚ若しくはもっと早いマイクロプロセッサ３１と、ＰＣバス３５０に接 続された記憶空間の少なくとも１ギガバイトを有するハードドライブ３２とを有 する。クリエティブ・ラブス・ビデオブラスタ（登録商標）のビデオキャプチャ カード３３はマザーボードの１つの拡張スロットに配置される。サウンドブラス タ（登録商標）のような適当な１６ビットのサウンドカード３４が、第２の拡張 スロットに配置される。パーソナルコンピュータ３０は従来のビデオディスプレ イユニット２８及びキーボード２９に接続される。 ビデオカード３３及びサウンドカード３４は、圧縮されたビデオパケット３５ 及びオーディオパケット３６をＰＣバス３５に送る。 ケーブルまたはアンテナソース３８から入って来るＲＦテレビジョン信号３７ は、ケーブルコンバータまたはＶＣＲに送られ、ここで入って来るＲＦ信号を復 調し、オーディオストリーム４０及びビデオストリーム４１を発生し、このオー ディオストリーム４０は、サウンドカード３４に送られ、ビデオストリーム４１ は、ビデオカード３３に送られる。 ビデオ信号４１は、サンベルトテキストグラバ（登録商標）・クローズドキャ プションデコーダに送られる。これは、垂直帰線期間に挿入されるクローズキャ プション信号を復号し、テキストパケット４６をつくるシリアルポート４４及び ＵＡＲＴ４５を通ってＰＣバス３５にＡＳＣＩＩテキストストリームを送る。 ユーザはダイアログボックス及びマウス（図示せず）を用いて従来のようにキ ーボード２９を通して指示を入力する。 第９図は、パーソナルコンピュータ３０での信号の処理をさらに詳細に示す。 ビデオ信号は、速度コントローラ５０を通して送られ、これは、ビデオ遅延ユニ ット５１に対してユーザの指示によるフレーム速度を測定する。オーディオ信号 はオーディオキャプチャユニット３４からオーディオ遅延ユニット５２に直接送 られる。クローズキャプション信号は、選択された基準を表す記憶データとのパ ターン突き合わせを探すクローズキャプション・パターンマッチングユニット５ ３及びクローズキャプションディスプレイユニット５４及びクローズキャプショ ン遅延ユニット５５に通過する。キャプションパターンユニット５３は、キャプ 請求の範囲 １．ａ）放送信号を受信し、番組信号ストリームを発生して前記放送信号によ って搬送された利用可能な番組をつくる手段と、 ｂ）ユーザにとって興味の対象となる番組を識別する基準を入力するユーザが 作動可能な選択手段と、 ｃ）前記基準を表すデータを記憶するデータベースと、 ｄ）前記番組ストリームから分離し、該番組データストリームが番組内容を代 表する番組データストリームを、各番組ストリームごとに前記放送信号から発生 するとともにダイナミックに変化させる認識手段と、 ｅ）前記番組データストリームを前記番組信号ストリームと同期させる手段と 、 ｆ）前記記憶されたデータと前記番組データとを比較するコンパレータと、 ｇ）前記番組データストリームが前記記憶データと合致するとき、該番組デー タストリームと番組セグメントとの間の同期状態と維持すると同時に番組セグメ ント及びそれと関連する番組データストリームを記憶する装置と、 ｆ）ユーザがそれと対応するダイナミック番組データストリームの一部を選択 することにより記憶された番組セグメントの一部を検査することができるディス プレイ手段 とを有する放送信号監視システム。 ２．前記認識手段は、前記番組データストリームをつくるために前記放送信号 に挿入されたデータ信号を復号する請求の範囲１に記載のシステム。 ３．前記挿入データ信号は、クローズキャプションテキスト・ストリームを有 する請求の範囲２に記載のシステム。 ４．前記認識手段は、放送信号のオーディオ内容を分析するオーディオ認識信 号を有する請求の範囲１に記載のシステム。 ５．前記認識手段は、放送信号のビデオの内容を分析するパターン認識手段を 有する請求の範囲１に記載のシステム。 ６．前記番組セグメントは、前記番組データストリームに基づいてインデック スのついた請求の範囲１から５のいずれかに記載のシステム。 ７．前記番組信号ストリームを提供する各ビデオ及びオーディオ信号を発生す るビデオ及びオーディオキャプチャ装置を有する請求の範囲１から６のいずれか に記載のシステム。 ８．記憶された番組セグメントに放送時間でタグをつける手段を有する請求の 範囲１から７のいずれかに記載のシステム。 ９．ユーザの選択基準に合致する番組内容の存在をユーザに知らせる警告信号 を発生する装置をさらに有する請求の範囲１から８のいずれかに記載のシステム 。 １０．前記警告信号は、ビデオモニタを作動させる請求の範囲９に記載のシス テム。 １１．前記ビデオモニタは、テレビジョンセットである請求の範囲１０のいず れかに記載のシステム。 １２．前記ビデオモニタは、マルチメディアコンピュータ環境の一部分を構成 する請求の範囲１０に記載のシステム。 １３．前記マルチメディアコンピュータの環境は、前記ユーザ作動可能な選択 手段を提供する請求の範囲１２に記載のシステム。 １４．番組内容の合致の検出の前に所定時間番組内容にアクセスすることがで きるように所定期間にわたって前記番組信号ストリームを記憶する短期間バッフ ァを有する請求の範囲１から１３のいずれかに記載のシステム。 １５．顧客が個別に質問し、各番組基準によってシステムから番組を受信する ことができるようにコンピュータネットワークに接続されている請求の範囲１か ら１４のいずれか に記載のシステム。。 １６．前記装置は、前記警告信号を離れた場所のユーザが受けることができる ように伝送する請求の範囲９に記載のシステム。 １７．前記警告信号は音声信号である請求の範囲１６に記載のシステム。 １８．前記放送信号は、複数のチャンネルを有し、前記認識手段は、前記各チ ャンネルに対応したデータストリームを発生し、前記比較器は、前記複数のチャ ンネルを同時に監視するように前記複数の番組データストリームに含まれる前記 番組データと前記記憶データとを連続的に比較する請求の範囲１から１７のいず れか に記載のシステム。 １９．前記データベースは、各ユーザの予め選択された基準を表す複数の予め 定義された複数のユーザプロファイルを記憶し、前記予め定義されたユーザプロ ファイルのいずれか１つを作動する手段を備えている請求の範囲１から１８のい ずれか に記載のシステム。 ２０．前記放送信号はテレビジョン信号であり、前記認識手段は、連続したテ レビジョンフレームの間の垂直帰線消去期間に伝達された信号から前記番組デー タストリームを発生する請求の範囲１から１９のいずれかに記載のシステム。 ２１．前記放送信号はラジオ信号である請求の範囲１から１９のいずれかに記 載のシステム。 ２２．ネットワークサーバに配置され、前記ネットワークサーバは、前記番組 データストリームと前記記憶データとの間の合致に応答してネットワーク上の顧 客までネットワークに前記番組信号を送る請求の範囲１から２１のいずれかに記 載のシステム。 ２３．ネットワークサーバに配置され、前記ネットワークサーバは、ローカル エリアネットワークの部分を形成する請求の範囲２２に記載のシステム。 ２４．前記ネットワークサーバは、前記顧客から離れて配置され、前記ネット ワークサーバと前記顧客との間に長距離通信が確立されている請求の範囲２２に 記載のシステム。 ２５．ａ）中央処理ユニットと、 ｂ）放送テレビ信号を受信し、ビデオ信号を発生するビデオキャプチャユニッ トと、 ｃ）プログラムコントロールによって前記ビデオ信号を表示することができる ビデオディスプレイユニットと、 ｄ）前記テレビジョン信号に挿入されたデータ信号を復号し、前記テレビジョ ン信号の番組内容を代表する番組データストリームを発生するとともにダイナミ ックに変化させる 手段と、 ｅ）ユーザに興味のある内容の番組を識別する基準を入力する手段と、 ｆ）前記基準を表すデータを記憶するデータベースと、 ｇ）前記番組データストリームと番組セグメントとの間の同期状態と維持する と同時に番組セグメント及びそれと関連する番組データストリームを記憶する装 置と、 ｈ）ユーザがそれと対応するダイナミック番組データストリームの一部を選択 することにより記憶された番組セグメントの一部を検査することができるディス プレイ手段と を有し、 前記中央処理ユニットは、前記番組データが前記記憶データと合致したときに 、番組データと前記記憶データを比較して前記記憶データを連続的に比較すると ともに番組セグメントを記憶する ようにプログラムされているマルチメディアコ ンピュータシステム。 ２６．前記データ信号は、前記テレビジョン信号の垂直帰線消去期間に挿入さ れる請求の範囲２５に記載のマルチメディアコンピュータシステム。 ２７．データ信号は、クローズキャプション信号である請求の範囲２６に記載 のマルチメディアコンピュータ。 ２８．前記記憶データはユーザによって選択された１つまたはそれ以上のキー ワードを表す請求の範囲２６に記載のマルチメディアコンピュータ。 ２９．前記記憶データは複数のキーワードを表し、前記出力条件は、予備定義 されたブール論理によって予備選択された期間内での前記番組データで検出され るとき発生される請求の範囲２７に記載のマルチメディアコンピュータシステム 。 ３０．前記記憶されたセグメントは、ユーザによって予め設定された長さを有 する請求の範囲２９に記載のマルチメディアコンピュータシステム。 ３１．関連する番組データと前記記憶されたデータとの比較の前に前記ビデオ 信号を一時的に記憶するバッファを有し、前記中央処理ユニットは、前記ラムデ ータと前記記憶されたデータの合致を検出する前に所定の時間でスタートし、前 記番組データと前記記憶データの合致の後に所定の時間で終了する前記ビデオ信 号のセグメントを記憶するようにプログラムされている請求の範囲２５から３０ のいずれか に記載のマルチメディアコンピュータシステム。 ３２．前記中央処理ユニットは、前記番組データに基づいてインデックスがつ けられた複数の前記セグメントを記憶する請求の範囲３１に記載のマルチメディ アコンピュータシステム。 ３３．前記コンピュータシステムは、複数のウインドウを使用するオペレーテ ィングシステムを有し、前記ビデオ信号はプログラムコントロールの下で１つま たはそれ以上の前記複数のウインドウに現れる請求の範囲２５から３１のいずれ か に記載のシステム。 ３４．前記ビデオ信号は、前記番組データと前記記憶データとの合致に応答し て前記複数の１つまたはそれ以上のウインドウに現れる請求の範囲３３に記載の マルチメディアコンピュータシステム。 ３５．前記中央処理ユニットは、ユーザの命令に応答して前記ウインドウの１ つの記憶セグメントのリストを表示するようにプログラムされている請求の範囲３４ に記載のマルチメディアコンピュータシステム。 ３６．前記番組データストリームから引き出されたテキスト情報は、前記ウイ ンドウの１つに表示される請求の範囲３５に記載のマルチメディアコンピュータ システム。 ３７．ネットワークサーバを形成し、前記ネットワークサーバは、前記出力条 件またはユーザの要求に応答してネットワークの顧客に番組信号を分散する請求 の範囲２５から３６のいずれかに記載のマルチメディアコンピュータシステム。 ３８．前記ネットワークはローカルエリヤネットワークである請求の範囲３７ に記載のマルチメディアコンピュータシステム。 ３９．前記顧客は、長距離の通信リンクにわたって前記ネットワークに接続さ れる請求の範囲３７に記載のマルチメディアコンピュータシステム。 ４０．ａ）前記放送信号から番組信号を引出すステップと、 ｂ）番組信号ストリームから分離し、該番組データストリームが番組の内容を 代表する番組データストリームを発生するとともにダイナミックに変化させるス テップと、 ｃ）前記番組データストリームを前記ユーザに対して興味ある番組内容を識別 する記憶データとを比較するステップと、 ｄ）前記発生した番組データストリームが前記記憶データと合致したとき、前 記番組データストリームと番組セグメントとの間の同期状態と維持すると同時に 番組セグメント及びそれと関連する番組データストリームを記憶するステップと 、 ｅ）ユーザが前記合致した番組データストリームに関連した監視番組の一部をそれと対応するダイナミック番組データストリームの一部を選択することにより 検査するステップと を有する放送信号を監視する方法。 ４１．前記番組データストリームは、前記放送信号に挿入された信号から引き 出された請求の範囲４０に記載の方法。 ４２．前記放送信号はテレビジョン信号であり、前記データ信号はその垂直帰 線消去期間に挿入されている請求の範囲４１に記載の方法。 ４３．前記挿入データ信号は、クローズキャプション信号である請求の範囲４ ２ に記載の方法。 ４４．ユーザに合致したデータが存在することを知らせるために警告信号が発 生される請求の範囲４１に記載の方法。 ４５．合致データの存在に応答してユーザが番組資料を見ることができるよう にビデオモニタが作動される請求の範囲４０に記載の方法。 ４６．前記ビデオモニタは、マルチメディアコンピュータシステムの一部を形 成する請求の範囲４５に記載の方法。 ４７．前記放送信号は、ディジタルフォーマットで受信される請求の範囲４０ に記載の方法。 ４８．ネットワークサーバで生じ、前記番組信号は、ネットワークの顧客に送 られる請求の範囲４０に記載の方法。 ４９．前記番組信号は、前記出力条件または顧客の要求に応答して遠隔の前記 顧客に長距離の通信によって伝送される請求の範囲４８に記載の方法。 ５０．エンコードされるバイナリ情報を有するコンピュータ・リーダブル記憶 媒体であって、前記バイナリ情報は、放送信号を監視し、放送信号によって搬送 される番組資料をユーザに提出することを可能にするために番組信号ストリーム を発生し、入って来る放送信号を分析して前記番組信号を分離し、該番組データ ストリームが それらの番組内容を代表する番組データストリームを発生するとと もにダイナミックに変化させ 、興味のある番組内容を認識する記憶データと前記 データストリームとを比較し、ユーザがディスプレイ手段でダイナミックデータ ストリームの一部を選択することにより 前記合致する番組データストリームと関 連する監視番組の一部を検証することができるように発生したデータと前記記憶 データが合致したとき、前記番組データストリームと番組セグメントとの間の同 期状態と維持すると同時に番組セグメント及びそれと関連する番組データストリ ームを記憶 するコンピュータ・リーダブル記憶媒体。 ５１．前記バイナリ情報は、コンピュータが前記放送信号に挿入されたデータ 信号から前記データストリームを発生するようにする請求の範囲５０に記載のコ ンピュータ・リーダブル記憶媒体。 ５２．前記放送信号は、テレビジョン信号であり、前記バイナリ情報は、コン ピュータが連続したフレームの間で垂直帰線消去期間に挿入されたデータ信号か ら前記データストリームを発生する請求の範囲５０に記載のコンピュータ・リー ダブル記憶媒体。 ５３．前記挿入データ信号は、クローズキャプション信号である請求の範囲５ １ に記載のコンピュータ・リーダブル記憶媒体。 ５４．前記バイナリ情報は、コンピュータが、前記番組データと前記記憶デー タとの合致 が生じたときユーザに警告するために警告信号が発生するようにする 請求の範囲５１に記載のコンピュータ・リーダブル記憶媒体。 ５５．前記バイナリ情報は、前記出力条件が生じたとき前記放送信号によって 搬送された番組資料をユーザが見ることができるようにコンピュータがビデオモ ニタを作動するようにする請求の範囲５１に記載のコンピュータ・リーダブル記 憶媒体。 ５６．前記バイナリ情報は、その関連する番組データとともに放送信号に含ま れた番組資料をコンピュータファイルに記憶するようにコンピュータを作動させ る請求の範囲５０に記載のコンピュータ・リーダブル記憶媒体。 ５７．前記ビデオモニタはマルチメディアコンピュータシステムの一部を形成 する請求の範囲５０に記載のコンピュータ・リーダブル記憶媒体。 ５８．前記コンピュータは、複数のウインドウを使用するオペレーションシス テムで作動し、前記バイナリ情報は、ユーザの指示によって前記ウインドウの前 記放送信号によって搬送された番組資料を表示するようにする請求の範囲５０に 記載のコンピュータ・リーダブル記憶媒体。 ５９．前記バイナリ情報は、コンピュータが前記番組データストリームと前記 記憶データとの合致の に応答して前記ウインドウの放送信号によって搬送された 番組資料を表示するようにする請求の範囲５０に記載のコンピュータ・リーダブ ル記憶媒体。 ６０．前記コンピュータは、ネットワークサーバである請求の範囲５０に記載 のコンピュータ・リーダブル記憶媒体。 【図８】

───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＤＥ， ＤＫ，ＥＳ，ＦＩ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，ＩＴ，Ｌ Ｕ，ＭＣ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ，ＣＦ ，ＣＧ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＭＬ，ＭＲ，ＮＥ， ＳＮ，ＴＤ，ＴＧ)，ＡＰ(ＫＥ，ＬＳ，ＭＷ，ＳＤ，Ｓ Ｚ，ＵＧ)，ＵＡ(ＡＭ，ＡＺ，ＢＹ，ＫＧ，ＫＺ，ＭＤ ，ＲＵ，ＴＪ，ＴＭ)，ＡＬ，ＡＭ，ＡＴ，ＡＵ，ＡＺ ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，ＣＨ，ＣＮ，ＣＺ， ＤＥ，ＤＫ，ＥＥ，ＥＳ，ＦＩ，ＧＢ，ＧＥ，ＨＵ，Ｉ Ｓ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＲ，ＫＺ，ＬＫ，ＬＲ ，ＬＳ，ＬＴ，ＬＵ，ＬＶ，ＭＤ，ＭＧ，ＭＫ，ＭＮ， ＭＷ，ＭＸ，ＮＯ，ＮＺ，ＰＬ，ＰＴ，ＲＯ，ＲＵ，Ｓ Ｄ，ＳＥ，ＳＧ，ＳＩ，ＳＫ，ＴＪ，ＴＭ，ＴＲ，ＴＴ ，ＵＡ，ＵＧ，ＵＳ，ＵＺ，ＶＮ (72)発明者 ストリーチ，ポール カナダ・オンタリオ ケー０エー ２ゼッ ド０・リッチモンド・ピー．オー．ボック ス 1196

Claims (1)

1. 【特許請求の範囲】 １．ａ）放送信号を受信し、番組信号を発生して前記放送信号によって搬送さ れた利用可能な番組をつくる手段と、 ｂ）ユーザにとって興味の対象となる番組を識別する基準を入力するユーザが 作動可能な選択手段と、 ｃ）前記基準を表すデータを記憶するデータベースと、 ｄ）前記番組信号から分離し、番組内容を代表する番組データストリームを前 記放送信号から発生する認識手段と、 ｅ）前記記憶されたデータと前記番組データとを比較するコンパレータと、 ｆ）前記番組データストリームが前記記憶データと合致するとき、ユーザが前 記合致した番組データ・ストリームに関連する監視された番組の一部を検査する ことができるように所定の動作を実行するように作動可能な出力装置とを有する 放送信号監視システム。 ２．前記認識手段は、前記番組データストリームをつくるために前記放送信号 に挿入されたデータ信号を復号する請求の範囲１に記載のシステム。 ３．前記挿入データ信号は、クローズキャプションテキスト・ストリームを有 する請求の範囲２に記載のシステム。 ４．前記認識手段は、放送信号のオーディオ内容を分析するオーディオ認識信 号を有する請求の範囲１に記載のシステム。 ５．前記認識手段は、放送信号のビデオの内容を分析するパターン認識手段を 有する請求の範囲１に記載のシステム。 ６．前記番組データストリーム及び前記記憶データの合致に応答する前記番組 信号を記憶する大容量記憶装置を有する請求の範囲１乃至３のいずれか１項に記 載のシステム。 ７．前記番組信号は、前記大容量記憶装置の関連する番組データで記憶される 請求の範囲６に記載のシステム。 ８．前記番組信号は、前記番組データによってインデックスのついた請求の範 囲６に記載のシステム。 ９．前記番組信号を提供する各ビデオ及びオーディオ信号を発生するビデオ及 びオーディオキャプチャ装置を有する請求の範囲６に記載のシステム。 １０．記憶された番組セグメントに放送時間でタグをつける手段を有する請求 の範囲６に記載のシステム。 １１．前記出力装置は、ユーザの選択基準に合致する番組内容との合致の存在 をユーザに知らせる警告信号を発生する請求の範囲１に記載のシステム。 １２．前記警告信号は、ビデオモニタを作動させる請求の範囲１１に記載のシ ステム。 １３．前記ビデオモニタは、テレビジョンセットである請求の範囲１２に記載 のシステム。 １４．前記ビデオモニタは、マルチメディアコンピュータ環境の一部分を構成 する請求の範囲１２に記載のシステム。 １５．前記マルチメディアコンピュータの環境は、前記ユーザ作動可能な選択 手段を提供する請求の範囲１４に記載のシステム。 １６．番組内容の合致の検出の前に所定時間番組内容にアクセスすることがで きるように所定期間にわたって前記番組信号を記憶する短期間バッファを有する 請求の範囲６に記載のシステム。 １７．顧客が個別に質問し、各番組基準によってシステムから番組信号を受信 することができるようにコンピュータネットワークに接続されている請求の範囲 １に記載のシステム。。 １８．前記出力装置は、前記警告信号を離れた場所のユーザが受けることがで きるように伝送する請求の範囲１１に記載のシステム。 １９．前記警告信号は音声信号である請求の範囲１８に記載のシステム。 ２０．前記放送信号は、複数のチャンネルを有し、前記認識手段は、前記各チ ャンネルに対応したデータストリームを発生し、前記比較器は、前記複数のチャ ンネルを同時に監視するように前記複数の番組データストリームに含まれる前記 番組データと前記記憶データとを連続的に比較する請求の範囲１に記載のシステ ム。 ２１．前記データベースは、各ユーザの予め選択された基準を表す複数の予め 定義された複数のユーザプロファイルを記憶し、前記予め定義されたユーザプロ ファイルのいずれか１つを作動する手段を備えている請求の範囲１に記載のシス テム。 ２２．前記放送信号はテレビジョン信号であり、前記認識手段は、連続したテ レビジョンフレームの間の垂直帰線消去期間に伝達された信号から前記番組デー タストリームを発生する請求の範囲１に記載のシステム。 ２３．前記放送信号はラジオ信号である請求の範囲１に記載のシステム。 ２４．ネットワークサーバに配置され、前記ネットワークサーバは、前記番組 データストリームと前記記憶データとの間の合致に応答してネットワーク上の顧 客までネットワークに前記番組信号を送る請求の範囲１に記載のシステム。 ２５．ネットワークサーバに配置され、前記ネットワークサーバは、ローカル エリアネットワークの部分を形成する請求の範囲２４に記載のシステム。 ２６．前記ネットワークサーバは、前記顧客から離れて配置され、前記ネット ワークサーバと前記顧客との間に長距離通信が確立されている請求の範囲２４に 記載のシステム。 ２７．ａ）中央処理ユニットと、 ｂ）放送テレビ信号を受信し、ビデオ信号を発生するビデオキャプチャユニッ トと、 ｃ）プログラムコントロールによって前記ビデオ信号を表示することができる ビデオディスプレイユニットと、 ｄ）前記テレビジョン信号に挿入されたデータ信号を復号し、前記テレビジョ ン信号の番組内容を代表する番組データストリームを発生する手段と、 ｅ）ユーザに興味のある内容の番組を識別する基準を入力する手段と、 ｆ）前記基準を表すデータを記憶するデータベースと、を有し、 前記中央処理ユニットは、前記番組データが前記記憶データと合致したときに 、ユーザが前記合致した番組データストリームと関連する監視モニタの一部を調 査することができるように番組データと前記記憶データを比較して前記記憶デー タを連続的に比較するようにプログラムされているマルチメディアコンピュータ システム。 ２８．前記データ信号は、前記テレビジョン信号の垂直帰線消去期間に挿入さ れる請求の範囲２７に記載のマルチメディアコンピュータシステム。 ２９．データ信号は、クローズキャプション信号である請求の範囲２８に記載 のマルチメディアコンピュータ。 ３０．前記記憶データはユーザによって選択された１つまたはそれ以上のキー ワードを表す請求の範囲２９に記載のマルチメディアコンピュータ。 ３１．前記記憶データは複数のキーワードを表し、前記出力条件は、予備定義 されたブール論理によって予備選択された期間内での前記番組データで検出され るとき発生される請求の範囲３０に記載のマルチメディアコンピュータシステム 。 ３２．前記中央処理ユニットは、前記番組データ及び前記記憶データの合致に 応答して前記ビデオ信号のセグメントを記憶するようにプログラムされ、前記セ グメントは、関連する番組データと共に記憶される請求の範囲２７に記載のマル チメディアコンピュータシステム。 ３３．前記セグメントは、ユーザによって予め設定された長さを有する請求の 範囲３２に記載のマルチメディアコンピュータシステム。 ３４．関連する番組データと前記記憶されたデータとの比較の前に前記ビデオ 信号を一時的に記憶するバッファを有し、前記コンピュータは、前記ラムデータ と前記記憶されたデータの合致を検出する前に所定の時間でスタートし、前記番 組データと前記記憶データの合致の後に所定の時間で終了する前記ビデオ信号の セグメントを記憶するようにプログラムされている請求の範囲３３に記載のマル チメディアコンピュータシステム。 ３５．前記中央処理ユニットは、前記番組データによってインデックスがつけ られた複数の前記セグメントを記憶する請求の範囲３４に記載のマルチメディア コンピュータシステム。 ３６．前記コンピュータシステムは、複数のウインドウを使用するオペレーテ ィングシステムを有し、前記ビデオ信号はプログラムコントロールの下で１つま たはそれ以上の前記複数のウインドウに現れる請求の範囲１に記載のシステム。 ３７．前記ビデオ信号は、前記番組データと前記記憶データとの合致に応答し て前記複数の１つまたはそれ以上のウインドウに現れる請求の範囲３６に記載の マルチメディアコンピュータシステム。 ３８．前記中央処理ユニットは、ユーザの命令に応答して前記ウインドウの１ つの記憶セグメントのリストを表示するようにプログラムされている請求の範囲 ３６に記載のマルチメディアコンピュータシステム。 ３９．前記番組データストリームから引き出されたテキスト情報は、前記ウイ ンドウの１つに表示される請求の範囲３６に記載のマルチメディアコンピュータ システム。 ４０．前記表示されたテキスト情報は、関連するビデオディスプレイと同期を 取られている請求の範囲３９に記載のマルチメディアコンピュータシステム。 ４１．前記コンピュータは、表示された画像に関連するテキストを示すように プログラムされている請求の範囲４０に記載のマルチメディアコンピュータシス テム。 ４２．前記コンピュータは、ユーザによって指定されたテキスト情報に対応し たビデオを表示するようにプログラムされ、ユーザがテキストのストリングを指 定したときコンピュータがテキストに関連したビデオ画像を表示する請求の範囲 ４１に記載のマルチメディアコンピュータシステム。 ４３．ネットワークサーバを形成し、前記ネットワークサーバは、前記出力条 件またはユーザの要求に応答してネットワークの顧客に番組信号を分散する請求 の範囲２７に記載のマルチメディアコンピュータシステム。 ４４．前記ネットワークはローカルエリヤネットワークである請求の範囲４３ に記載のマルチメディアコンピュータシステム。 ４５．前記顧客は、長距離の通信リンクにわたって前記ネットワークに接続さ れる請求の範囲４３に記載のマルチメディアコンピュータシステム。 ４６．ａ）前記放送信号から番組信号を引出すステップと、 ｂ）番組信号から分離し、番組の内容を代表する番組データストリームを発生 するステップと、 ｃ）前記番組データストリームを前記ユーザに対して興味ある番組内容を識別 する記憶データとを比較するステップと、 ｄ）前記発生した番組データストリームが前記記憶データと合致したときユー ザが前記合致した番組データストリームに関連した監視番組の一部を調査するこ とができるように出力状態を発生するステップと、を有する放送信号を監視する 方法。 ４７．前記番組データ信号は、前記放送信号に挿入された信号から引き出され た請求の範囲４６に記載の方法。 ４８．前記放送信号はテレビジョン信号であり、前記データ信号はその垂直帰 線消去期間に挿入されている請求の範囲４６に記載の方法。 ４９．前記挿入データ信号は、クローズキャプション信号である請求の範囲４ ８に記載の方法。 ５０．前記出力条件は、ユーザに合致したデータが存在することを知らせるた めに警告信号を発生する請求の範囲４６に記載の方法。 ５１．前記出力条件は、ユーザが番組資料を見ることができるようにビデオモ ニタを作動させる請求の範囲４６に記載の方法。 ５２．前記出力条件は、ユーザが後に番組資料を見ることができるように放送 信号に含まれた番組資料を記憶することができる請求の範囲４６に記載の方法。 ５３．前記番組資料は、関連する番組データと共に記憶される請求の範囲５２ に記載の方法。 ５４．前記ビデオモニタは、マルチメディアコンピュータシステムの一部を形 成する請求の範囲５３に記載の方法。 ５５．前記放送信号は、ディジタルフォーマットで受信される請求の範囲４６ に記載の方法。 ５６．ネットワークサーバで生じ、前記番組信号は、ネットワークの顧客に送 られる請求の範囲４６に記載の方法。 ５７．前記番組信号は、前記出力条件または顧客の要求に応答して遠隔の前記 顧客に長距離の通信によって伝送される請求の範囲４７に記載の方法。 ５８．エンコードされるバイナリ情報を有するコンピュータ・リーダブル記憶 媒体であって、前記バイナリ情報は、放送信号を監視し、放送信号によって搬送 される番組資料をユーザに提出することを可能にするために番組信号を発生し、 入って来る放送信号を分析して前記番組信号を分離し、それらの番組内容を代表 する番組データストリームを発生し、興味のある番組内容を認識する記憶データ と前記データストリームとを比較し、ユーザが前記合致する番組データと関連す る監視番組の一部を検証することができるように発生したデータと前記記憶デー タが合致したとき出力条件を発生するコンピュータ・リーダブル記憶媒体。 ５９．前記バイナリ情報は、コンピュータが前記放送信号に挿入されたデータ 信号から前記データストリームを発生するようにする請求の範囲５８に記載のコ ンピュータ・リーダブル記憶媒体。 ６０．前記放送信号は、テレビジョン信号であり、前記バイナリ情報は、コン ピュータが連続したフレームの間で垂直帰線消去期間に挿入されたデータ信号か ら前記データストリームを発生する請求の範囲５９に記載のコンピュータ・リー ダブル記憶媒体。 ６１．前記挿入データ信号は、クローズキャプション信号である請求の範囲６ ０に記載のコンピュータ・リーダブル記憶媒体。 ６２．前記バイナリ情報は、コンピュータが、前記出力条件が生じたときユー ザに警告するために警告信号が発生するようにする請求の範囲５８に記載のコン ピュータ・リーダブル記憶媒体。 ６３．前記バイナリ情報は、前記出力条件が生じたとき前記放送信号によって 搬送された番組資料をユーザが見ることができるようにコンピュータがビデオモ ニタを作動するようにする請求の範囲５８に記載のコンピュータ・リーダブル記 憶媒体。 ６４．前記バイナリ情報は、後に番組資料をユーザが見ることができるように 放送信号に含まれた番組資料をコンピュータファイルに記憶するようにコンピュ ータを作動させる請求の範囲５８に記載のコンピュータ・リーダブル記憶媒体。 ６５．前記バイナリ情報は、コンピュータがその関連した番組データを有する コンピュータファイルに前記番組資料を記憶するようにする請求の範囲５８に記 載のコンピュータ・リーダブル記憶媒体。 ６６．前記ビデオモニタはマルチメディアコンピュータシステムの一部を形成 する請求の範囲５８に記載のコンピュータ・リーダブル記憶媒体。 ６７．前記コンピュータは、複数のウインドウを使用するオペレーションシス テムで作動し、前記バイナリ情報は、ユーザの指示によって前記ウインドウの前 記放送信号によって搬送された番組資料を表示するようにする請求の範囲５８に 記載のコンピュータ・リーダブル記憶媒体。 ６８．前記バイナリ情報は、コンピュータが前記出力条件に応答して及びユー ザの指示によって前記ウインドウの放送信号によって搬送された番組資料を表示 するようにする請求の範囲６７に記載のコンピュータ・リーダブル記憶媒体。 ６９．前記バイナリ情報は、コンピュータが前記番組データストリームから発 生した関連するテキスト材料と関連する前記ウインドウに前記番組資料を表示す るようにする請求の範囲６８に記載のコンピュータ・リーダブル記憶媒体。 ７０．前記バイナリ情報は、コンピュータが前記ウインドウの関連するテキス ト資料を指摘することによって前記番組資料の部分をユーザが見ることができる ようにする請求の範囲６７に記載のコンピュータ・リーダブル記憶媒体。 ７１．前記コンピュータは、ネットワークサーバである請求の範囲５８に記載 のコンピュータ・リーダブル記憶媒体。