JP4482161B2 - 映像への電子的な指標の挿入が強化されたオーディオ - Google Patents
映像への電子的な指標の挿入が強化されたオーディオ Download PDFInfo
- Publication number
- JP4482161B2 JP4482161B2 JP53886697A JP53886697A JP4482161B2 JP 4482161 B2 JP4482161 B2 JP 4482161B2 JP 53886697 A JP53886697 A JP 53886697A JP 53886697 A JP53886697 A JP 53886697A JP 4482161 B2 JP4482161 B2 JP 4482161B2
- Authority
- JP
- Japan
- Prior art keywords
- audio
- television broadcast
- broadcast signal
- video
- live television
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
Description
この特許出願は、“映像への電子的な指標の挿入が強化されたオーディオ”と名付けられた1996年4月29日に出願された米国の暫定的な特許出願番号60/016,419号の優先権と利点を要求する。
発明の背景
1.発明の技術分野
本発明は、映像シーケンス内に、現実的な指標を挿入する装置の改良された性能に関し、特に、挿入に関連する音声効果の付加による強化に関するものである。
2.関連技術の説明
生映像信号中に電子的な画像を挿入するための装置は、ロッサー他による米国特許5,264,933号、クレイトマン他による米国特許5,491,517号に開示され、広告や他の指標をスポーツ競技の生放送を含む映像シーケンス内に挿入する目的で商業的に使用され、発展してきた。成功の程度を変化させるため、これらの装置は、指標を継ぎ目なく実際的にオリジナル映像中にリアルタイムで結合する。リアリズムは、オリジナルの背景がズームされ、パンされ、サイズや遠近が他の状態に変わったとしても、維持される。
ロッサー他による米国特許5,264,933号は、イベントの音声に応答して映像を挿入すること、たとえば、群衆ノイズの増加に応じて映像挿入パルスまたは色変化をすることを述べている。しかしながら、それは映像挿入に一致させるための音に確実な効果を付加する、たとえば、挿入パルスに一致するプログラムサウンドにビートを付加することや、プログラム内のまたはオペレータの指示に応答する音や視覚の指示に応じてプログラムオーディオを変更するという逆の可能性は開示していない。
映像挿入技術に関する他の特許、クレイトマン他による米国特許5,491,517号、ルグエト他による米国特許5,353,392号、ハンナによる米国特許5,488,675号、あるいは、シャリーとタミーのPCT出願PCT/US94/01679号、PCT/US94/11527号は、それら自身、放送の映像部分に厳しく制限される。前記した特許や用途のどれも、同期された音声の効果を加えることによって挿入された指標がより現実的に見えるようにする方法は開示されていない。
発明の要約
本発明は、放送の映像部分と同じく放送の音声部分を変更することによって、映像内にリアルタイムで指標を挿入する性能を強化した方法と装置から成る。本発明は、パターン認識技術の手段、イベントを記録しているカメラに取り付けられたカメラ挙動センサの手段、またはパター認識とカメラ挙動センサの組み合わせによって成し遂げられるリアルタイム映像指標挿入と全く同じものを適用している。
本発明において、生映像中に挿入しようとするそれぞれの静止画または動画映像シーケンスは、付随する音声シーケンスを有する。静止画像、動画像シーケンス、または映像シーケンスが挿入されるとき、付随する音声シーケンスもまたアクティブになる。音声の起動は、挿入の開始によって、映像部分への挿入の作用によって、放送局の映像または音声チャンネルのいずれかの作用によって、音声と映像チャンネルの作用の組み合わせによって、オペレータによるこれらの部分的または全体的な組み合わせによってトリガされる。加えて、トリガ、再生、音量、変調、終了または付随する音声シーケンスの他のいずれの属性も、挿入された画像、動画または映像、またはイベントの映像チャンネル、オペレータによる部分的または全体的なイベントの音声と映像チャンネルとの組み合わせによって影響される。
付随する音声シーケンスは、映像シーケンスが保存されるのと同じようにして、ディジタル的にあるいはアナログとディジタルの両方に分けてシステムのメモリに保存される。
生映像挿入システムは、映像プログラムと映像挿入用のチャネルの他に、強化された音声プロセッサが音声チャンネル内で付加されるために強化される。標準の生映像挿入システムにおいては、音声チャンネルは、ビデオ処理中の音声処理を遅延させる単なる遅延線に過ぎない。強化された音声プロセッサは、パターン認識と生映像挿入システム(LVIS 商標)の追跡部分とに相互に作用する。音声のミキシングがディジタル的に行なわれるとすれば、音声プログラムをアナログからディジタルに変換する手段と、ミキシングされた後に、アナログに戻す手段とを有している。
また、強化されたオーディオプロセッサは、放送の音声に音声シーケンスを付加するため、あるいは別の方法で放送の音声を変更するための音声パターン認識用の手段を含む。音声パターン認識は、単独でまたは映像パターン認識およびLVIS(商標)の追跡モジュールからのコマンドと共に使用できる。また、オペレータのコマンドと共にも使用できる。
挿入された指標があたかもオリジナル映像場面の実際の一部であるかのように見せることが技術の重要な見地である。妥当な音声の合図は、オリジナル場面の一部に挿入された映像指標の視覚の錯覚を相当に高めることができる。音声による錯覚の強化は、挿入された指標が動画の一連の場面であり、付加された音声が動画の特徴的な動きと時期が調和しているときに特に効果的である。たとえば、挿入される映像指標は、パルスのオン、オフでプログラムすることができる。この錯覚を高めるため、音声の効果をパルス的に映像を挿入することに同期する音量で増加させたり減少させたりすることができる。他の例は、挿入された映像の変化に同期して挿入した音声のピッチ、トーン、残響、付加されたエコー、話された対話、または音楽のジングルを変化させることを含む。
分離した音声挿入を付加するよりもオリジナルプログラムサウンドの変更が同様に行なわれる。たとえば、群衆のノイズは、挿入されたロゴの変化に一致するように人為的に修正される。チームマスコットのアニメ版を考慮する。人為的に挿入されたチームマスコットがその腕を上げ下げすると、群衆の音量は増減し、それゆえにマスコットが実際にスタジアムにいるかのような錯覚を与える。
さらなる強化は、放送局のイベントの作用で起こっている音声のまたは視覚の合図によって音声の付加や実際の放送局の音声に同期させることを含む。たとえば、野球の試合において、漫画のキャラクターを挿入することは、キャラクターの独特な声による適切な言葉と一緒にバットの鋭い音のような音声イベントに反応させることができる。または、その反応をバットを振るというような視覚的な合図に同期させることができる。視覚または音声の合図の組み合わせは、部分的にまたは全体的にオペレータが起動し、また、回の初めまたは終わりのようなイベントに同期する。その上、そのボールが打たれるかのように見える野球の試合に挿入される場合、感情が害されるような適切な音が音声プログラムに付加される。既知の音声認識技術の利用では、音声の合図は、コマンド、良く知られたフレーズ、チーム名である。
付加された音声は、結果として映像挿入の移動を辿ることができる。たとえば、カメラがズームインし挿入サイズが大きくなるにつれて、挿入に関連する音量を大きくすることができる。ステレオ放送については、挿入が端にパンオフされるにつれて音声がその挿入を辿るように左右のチャネル比を変化させることができる。
【図面の簡単な説明】
図1は、強化されたオーディオプロセッサを含むように変更された生映像挿入システムの平面図を示す。
図2は、それぞれの映像の場面が処理されるときのシステムのデータの流れを示すフロー図である。
図3は、強化されたオーディオプロセッサのより詳細を示す図である。
好適な実施例の詳細な説明
この説明の過程中、本発明を図示する異なる図に関して、等しい番号は等しい要素を示すのに用いられる。
代表的な生映像挿入システムLVIS(商標)は、「テレビジョンディスプレイに画像を挿入する装置と方法」と称される1995年6月16日に出願された暫定的な米国特許出願No.60/000,279号、「生映像放送中に静止画像と動画像を挿入する装置と方法」と称される1995年11月28日に出願された米国特許出願、「生映像挿入システム」と称される1995年1月31日に出願された米国特許出願No.08/381,088号、「生映像挿入システムのための場面追跡運動の方法」と称される1995年12月12日に出願された米国特許出願No.08/580,892号といった幾つかの関連出願で詳細に説明され、ここでの教えはこれらの公報に含まれている。
図1に模式的に示されているような代表的なLVIS(商標)40では、イベントを認識しているカメラ32からの映像信号は、サーチ/追跡/検査モジュール42に導かれる。サーチ/追跡/検査モジュール42は、シャリーとタミーの係続中のPCT出願PCT/US94/01679号とPCT/US94/11527号のカメラパラメータ抽出モジュールと同じである。サーチ/追跡/検査モジュール42は、どのカメラがその場面を見ているかを決定するために、パターン認識、カメラに取り付けられたセンサからの情報、放送スイッチャからの計数信号、これら3つの情報源の幾つかの組み合わせを用いる。モジュール42は、現在のカメラの視界を参照視界に関係付けるゆがみパラメータ20(図2)のモデルとしてそれらを表すカメラの方向と視野を計算する。ゆがみパラメータ20はパターン認識に由来し、そのカメラからの参照視界に関するアファイン変換として表される。しかしながら、そのゆがみパラメータは、完全な遠近変換のようなモデルを含む、しかしそれに限定されない、適切な数学的変換であるかも知れない。
図2を参照すると、ゆがみパラメータ20は、オクルージョンプロセッサ44内の合成参照画像22とともに、ロゴ26が挿入されようとしている生映像28のどの部分がロゴ26の目立つ対象であるかを示すキー32を発生させるために用いられる。
従来のブルースクリーンのオクルージョン処理技術を大きく強化することにより、本システムのオクルージョンを織地の表面上に実行することができる。挿入プロセッサ46(図1)は、キー32およびロゴ画像26を選択し、ロゴ画像26がそれが本来の場面の一部であるかのように見えるように、生映像28の中にロゴ画像26を配置する。
ロゴ画像26は、映像記憶装置36からの動画の切り取りを含む他の映像源でもよい。映像記憶装置36は、デジタルテープレコーダ、デジタルビデオディスク、または他の適切な記憶媒体である。映像記憶装置36は、サーチ/追跡/検査モジュール42からの情報またはシステムオペレータによって、適当な動画が選択され、そして生映像放送における動作に調和する適当なときにスタートされるように制御される。たとえば、野球の試合において、動画の一連場面として、バッターがボールを打とうとした直後に、チームマスコットの中にスポンサのロゴを形態化することができる。異なる動画の一連場面は、スウィングの試みが成功したかどうか、またはピッチングがストライクかボールかに従い、オペレータにより選択することができる。
本発明においては、典型的な生映像挿入システム(LVIS 商標)は、図1に概略で示すように、強化音声プロセッサ60の付加により変形される。強化音声プロセッサ60は、画像認識からの入力を解釈し応答するマイクロプロセッサであり、LVIS(商標)システムの追跡モジュール42である。音声調整器62(図3)は、サーチ/追跡/検査ユニット42の一部である映像パターン認識ユニット64からの入力に対して解釈し応答するためにプログラムされる。
強化音声プロセッサユニット60は、さらに、音声調整器62がまた、ユーザインタフェースの一部を形成するオペレータ入力ユニット66に対して解釈し応答するときに、直接的なオペレータの制御に応答する。
加えて、強化音声プロセッサ60は、いずれかの制御信号を用いて放送音声に関連音声の挿入を同期をとって付加したりミックスする。これには、音声調整器62および音声ミキサーユニット68がプログラム可能なマイクロプロセッサなので、パターン識別モジュール自身からの信号が含まれる。音声ミキサユニット68は、例えば、完全にプログラム可能でコンピュータ制御可能な音声ミキシングマシンである、ニューヨーク州“MIX−44”,ロチェスターのホィールウィンド インコーポレイテッド(the WhirlWind Inc.,of Rochester,NY“MIX-44”)の商用ユニットでもよい。
強化音声プロセッサ60はまた、放送音声の音量、トーン、ピッチを変更することができ、エコー、反響および他の同様な音声効果を創成することができる。音声効果ユニット70は、例えば、すぐに入手可能な、完全にプログラム可能でコンピュータ制御可能な音声マルチ効果マシンである、ニューヨーク州“イフェクツ ネットワーク”,ロチェスターのアプライド リサーチ テクノロジー インコーポレイテッド(the Applied Research Technology Inc.,of Rochester,NY“Effects Network”)の商用ユニットとすることができる。
また、強化音声プロセッサ60は、音声認識を含むところの、放送音声における音の音声パターン認識のための手段を有する。音声パターン認識ユニット72は、たとえば、デイビス(Davis)の米国特許4,802,231号、またはベーカー(Baker)の米国特許4,713,778号において論議されている周知の音声パターン識別アルゴリズムの一またはそれ以上を使用するプログラム可能なマイクロプロセッサである。
別の代替的な実施態様において、強化音声プロセッサ60の簡易化されたバージョンは、これらの主要な特質のいずれかの部分的集合を有してもよい。
本発明の技術革新は、映像記憶装置36に保存された映像挿入動画に関連した音声効果を保存する音声記憶装置38の付加を含んでいる。強化音声プロセッサ60は、もはや、標準的なLVIS(商標)システムにおけるような、単なる遅延ルートではない。強化音声プロセッサ60の心臓部は、音声調整器62である。音声調整器62は、トラッキングや、他のコンピュータにより生じた情報、オペレータ入力、プログラムにより生じたパラメータ、あるいはそれらのいくつかの組み合わせを用いて、音声記憶装置38からの音声の切り取りを放送音声16にミックスする。強化音声プロセッサ60は、システムを通して中継される放送音声、および音声効果ユニット70によって放送音声の中にミックスされる関連付けられた音声の双方の全ての必要な特性に作用を及ぼすことができる。前記特性には、限定されるものではないが、音量、トーン、エコー、ひずみ、フェイド、反響、および周波数プロフィールが含まれる。それに加えて、音声コーディネータ62は、開始、終了、再生スピード、同期、および関連付けられた音声の切り取りの他の類似の特性に作用することが可能である。全ての音声操作は、コンピュータから、他の適切な外部クロックやトリガから、オペレータから、またはそれらの組合わせのいずれかから、の入力の作用に同期される。
また、強化音声プロセッサ60には、デイビス(Davis)の米国特許4,802,231号、またはベーカー(Baker)の米国特許4,713,778号に開示されたもののような信号処理能力を有する音声パターン認識ユニット72が組み入れられている。強化音声プロセッサ60は、放送音声の中にミックスされた関連付けられた音声の切り取りを制御または変更するために、簡単な言葉や他の顕著な音声信号を認識し、それらのレベルや他の特性をモニターして、それらの特質を使用することができる。前記特性には、限定されるものではないが、開始、終了、再生スピード、同調、音量、トーン、ピッチ、エコー、反響、および周波数プロフィールが含まれる。また、音声調整器62は、たとえば音量、トーン、ピッチ、エコー、反響、および周波数プロフィール等の放送音声の一定の特質を変更するために、認識された音声パターンを使用することができる。
本発明の好適な実施態様では、サーチ/追跡/検査モジュール42は、指標を全てのシーンに継ぎ目なく挿入するために対象や目印、組織を認識し追跡することができるのに加えて、同じ技術を用いてシーンの中で起こっているイベントの動きを認識および/または追跡することができるように強化されている。そのようなイベントには、野球のバットのスイングまたはテニスボールの軌跡があるが、これに限定されるわけではない。サーチ/追跡/検査モジュール42は、上述した方法で関連音声と放送音声のいずれか一方または両方を制御しまたは修正するために、この情報を音声調整器62に送る。
また、音声調整器62は、オペレータの直接の命令によって挿入に関連した音声や放送音声を調整することもできる。これは、LVIS(商標)ユーザインタフェースの一部であるオペレータユニット66によって達成される。また、音声調整器62は、オペレータ、視覚画像認識追跡部、および音声信号認識監視部の組合せに応じて作動し、これらの組合せ、これは時間中1以上の従属発生を含んでもよい、を用いて関連音声と放送音声の両方の属性を修正し、同期させ、あるいは調整することもできる。修正には、放送音声の音量、トーン、ピッチ、同期、エコー、残響、周波数プロフィールの変更や、関連挿入音声の開始、終了、再生スピード、音量、トーンピッチ、同期、エコー、残響、周波数プロフィールの変更があるが、これらに限定されるわけではない。
強化された音声プロセッサ60の好適な実施態様の概略図は、図3に示されている。放送音声は、音声A/D変換器74を用いてまずデジタル化される。デジタル化されたプログラム音声は、従来のLVIS(商標)音声経路(図2)内の音声遅延ユニット16に対応するプログラム音声記憶装置76に記憶される。その後、音声信号は、音声調整器62の制御下で、言葉を含む音声パターンを認識することができる音声パターン認識ユニット72を通過する。音声パターン認識ユニット72によるパターンまたは言葉の認識は、音声ミキサー68や音声効果ユニット70による放送音声や関連音声の調整のタイプとタイミングを制御するため、音声調整器62によって利用される。
また、音声調整器62は、音声ミキサー68や音声効果ユニット70による放送音声や関連音声の調整のタイプとタイミングを制御するため、映像パターン認識ユニット64、フィールド同期装置76、オペレータ入力66からの情報や、外部クロックトリガーインタフェースユニット78からの情報を受け取る。プログラム音声に加えられる音声シーケンスは、これもまた音声調整器62の制御下にある関連音声記憶装置84に記憶される。音声調整器62は何が音声ミキサー68に伝達されいつその伝達が起こるのかを決定する。その結果得られる混合されたプログラム音声は音声効果ユニット70を通過し、ここで音声調整器62の制御の下、例えば音量、トーン、ピッチ、エコー、残響、周波数プロフィールのような属性に対する調整がさらに行われる。
その結果得られる音声は、その後、適当な期間(二三の映像フィールド)の間多フィールドプログラム音声記憶装置80に記憶され、音声D/A変換器82を用いてもとのアナログ形式に変換する前にビデオ画像と同期させられる。その後、アナログ音声出力は映像信号に合体され、NTSCまたはPAL放送のような標準放送信号が形成される。
上記した好適な実施態様では音声をデジタル領域で混合したが、周知の適当な技術を用いて全ての音声処理をアナログ領域で行うことも可能である。
図2に示す好適な実施態様には、LVIS(商標)サイクル全体の第5フィールドで使用されている音声ミキサー68と第6フィールドで使用されている音声効果発生器70とが記載されている。しかし、音声ミキサー68と音声効果発生器70は両方とも、映像挿入記憶装置36に記憶される映像フィールドと関連音声記憶装置38に記憶される音声フィールドとの間で適当なオフセットが用いられる限り、処理サイクル中のどこにでも使用することができる。特に、音声ミキサー68と音声効果発生器70は両方とも、映像出力30を形成するためのロゴ、最終キー、および映像の組合せと同時に、処理の最終フィールドで使用することができる。これによって、多フィールドプログラム音声記憶装置80を2つ必要とする図3に示す音声プロセッサ60のレイアウトに対して、単にそのような装置80をたった1つしか必要としないという利点が得られる。
ここに教示した処理装置および方法は本発明を例示したものであることは理解されるべきである。当業者であれば本発明の精神または範囲を逸脱することなく容易に変形例を案出できるであろう。
Claims (12)
- 生テレビジョン放送信号の音声部分をほぼリアルタイムに変更する方法であって、
(a)同期化された音声部分および映像部分を含む前記生テレビジョン放送信号を受け取る18工程と、
(b)前記生テレビジョン放送信号の映像部分と音声部分とを別々のチャネルで供給する工程と、
(c)前記生テレビジョン放送信号の映像部分を遅延させる28工程と、
(d)前記生テレビジョン放送信号の音声または映像部分の中のイベントを認識する72工程と、
(e)前記イベントに基づいて前記生テレビジョン放送信号の音声部分を変更する68,70工程と、
(f)前記生テレビジョン放送信号の映像部分と音声部分とを再び同期させる80工程と、
(g)音声が変更された生テレビジョン放送信号を出力する50工程と、
を有する前記方法。 - 前記変更する68工程(e)は、選択的に、所定の音声クリップ84を備えた第2の音声チャネルを前記生テレビジョン放送音声チャネルの中に入れてミキシングすることを含む請求項1記載の方法。
- 前記音声チャネルは、音量、トーン、ピッチ、同期、エコー、残響、周波数プロフィールのような音声属性を含む請求項2記載の方法。
- 前記変更する70工程(e)は、前記音声属性の中の少なくとも1つを修正する請求項3記載の方法。
- 前記認識する72工程(d)は、前記イベントの音声パターン認識に基づいている請求項4記載の方法。
- 前記認識する72工程(d)は、前記イベントの映像パターン認識に基づいている請求項4記載の方法。
- 前記認識する72工程(d)は、オペレータの直接入力66に基づいている請求項4記載の方法。
- 生テレビジョン放送信号の音声部分をほぼリアルタイムに変更するシステムであって、
同期化された音声部分および映像部分を含む前記生テレビジョン放送信号の映像部分と音声部分とを独立に操作可能な別々のチャネルで供給する供給手段と、
前記生テレビジョン放送信号の音声部分の中のイベントを認識する音声パターン認識手段72と、
前記生テレビジョン放送信号の前記音声部分を受け取り前記イベントに基づいて変更する音声処理手段60と、
前記生テレビジョン放送信号音声部分が変更された後、前記生テレビジョン放送信号の映像部分と音声部分とを再び同期させる再同期手段と、を有する前記システム。 - 前記音声処理手段60は、さらに、
前記生テレビジョン放送信号音声部分を記憶し遅延させる第1音声記憶手段80と、
挿入可能な音声クリップを記憶する第2音声記憶手段84と、
前記イベントに関する情報を受け取り前記生テレビジョン放送信号音声部分の変更のタイプとタイミングを制御する音声調整手段62と、
前記音声調整手段による制御を受けて、前記挿入可能な音声クリップと前記生テレビジョン放送信号音声部分とを選択的に混合する音声混合手段68と、
前記音声調整手段による制御を受けて、前記生テレビジョン放送信号音声部分および前記混合生テレビジョン放送信号音声部分の属性を選択的に変更する音声効果手段70と、
を有する請求項8記載のシステム。 - 前記イベント情報は、さらに、前記音声処理手段60の外部のソースから前記音声調整手段62の中に受け取られた信号を含む請求項9記載のシステム。
- 前記外部ソースは、オペレータ入力手段66、映像パターン認識手段64、フィールド同期手段76、外部トリガー手段78、外部クロック手段78、またはこれらの任意の組合せからなる請求項10記載のシステム。
- 前記属性は、音量、トーン、ピッチ、同期、エコー、残響、周波数プロフィールを含む請求項11記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US1641996P | 1996-04-29 | 1996-04-29 | |
US60/016,419 | 1996-04-29 | ||
PCT/US1997/004083 WO1997041683A1 (en) | 1996-04-29 | 1997-03-14 | Audio enhanced electronic insertion of indicia into video |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000509236A JP2000509236A (ja) | 2000-07-18 |
JP4482161B2 true JP4482161B2 (ja) | 2010-06-16 |
Family
ID=21777029
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP53886697A Expired - Lifetime JP4482161B2 (ja) | 1996-04-29 | 1997-03-14 | 映像への電子的な指標の挿入が強化されたオーディオ |
Country Status (5)
Country | Link |
---|---|
US (1) | US6184937B1 (ja) |
EP (1) | EP0896772A4 (ja) |
JP (1) | JP4482161B2 (ja) |
BR (1) | BR9709751A (ja) |
WO (1) | WO1997041683A1 (ja) |
Families Citing this family (75)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6345104B1 (en) | 1994-03-17 | 2002-02-05 | Digimarc Corporation | Digital watermarks and methods for security documents |
US6560349B1 (en) | 1994-10-21 | 2003-05-06 | Digimarc Corporation | Audio monitoring using steganographic information |
US6505160B1 (en) | 1995-07-27 | 2003-01-07 | Digimarc Corporation | Connected audio and other media objects |
US7490169B1 (en) | 1997-03-31 | 2009-02-10 | West Corporation | Providing a presentation on a network having a plurality of synchronized media types |
IL132060A0 (en) * | 1997-03-31 | 2001-03-19 | Broadband Associates | Method and system for providing a presentation on a network |
US7412533B1 (en) | 1997-03-31 | 2008-08-12 | West Corporation | Providing a presentation on a network having a plurality of synchronized media types |
US7143177B1 (en) | 1997-03-31 | 2006-11-28 | West Corporation | Providing a presentation on a network having a plurality of synchronized media types |
JPH11300039A (ja) * | 1998-04-24 | 1999-11-02 | Namco Ltd | ゲーム装置及び情報記憶媒体 |
US6266100B1 (en) | 1998-09-04 | 2001-07-24 | Sportvision, Inc. | System for enhancing a video presentation of a live event |
US6381362B1 (en) * | 1999-04-08 | 2002-04-30 | Tata America International Corporation | Method and apparatus for including virtual ads in video presentations |
DE19925387A1 (de) * | 1999-06-02 | 2000-12-14 | Clemente Spehr | Verfahren und Vorrichtung zur Unterdrückung unerwünschter Programmteile für Geräte der Unterhaltungselektronik |
US7075556B1 (en) | 1999-10-21 | 2006-07-11 | Sportvision, Inc. | Telestrator system |
US6993245B1 (en) | 1999-11-18 | 2006-01-31 | Vulcan Patents Llc | Iterative, maximally probable, batch-mode commercial detection for audiovisual content |
US6965397B1 (en) | 1999-11-22 | 2005-11-15 | Sportvision, Inc. | Measuring camera attitude |
US6909438B1 (en) | 2000-02-04 | 2005-06-21 | Sportvision, Inc. | Video compositor |
US20020062481A1 (en) | 2000-02-25 | 2002-05-23 | Malcolm Slaney | Method and system for selecting advertisements |
US6968565B1 (en) | 2000-02-25 | 2005-11-22 | Vulcan Patents Llc | Detection of content display observers with prevention of unauthorized access to identification signal |
US8910199B2 (en) | 2000-02-25 | 2014-12-09 | Interval Licensing Llc | Targeted television content display |
US6931656B1 (en) * | 2000-10-11 | 2005-08-16 | Koninklijke Philips Electronics N.V. | Virtual creature displayed on a television |
US6829017B2 (en) * | 2001-02-01 | 2004-12-07 | Avid Technology, Inc. | Specifying a point of origin of a sound for audio effects using displayed visual information from a motion picture |
US8897596B1 (en) | 2001-05-04 | 2014-11-25 | Legend3D, Inc. | System and method for rapid image sequence depth enhancement with translucent elements |
US9286941B2 (en) | 2001-05-04 | 2016-03-15 | Legend3D, Inc. | Image sequence enhancement and motion picture project management system |
US8401336B2 (en) | 2001-05-04 | 2013-03-19 | Legend3D, Inc. | System and method for rapid image sequence depth enhancement with augmented computer-generated elements |
US8667553B2 (en) | 2001-06-19 | 2014-03-04 | Opentv, Inc. | Automated input in an interactive television system |
AU2002336354A1 (en) * | 2001-09-15 | 2003-04-01 | Michael Neuman | Dynamic variation of output media signal in response to input media signal |
US20040100581A1 (en) * | 2002-11-27 | 2004-05-27 | Princeton Video Image, Inc. | System and method for inserting live video into pre-produced video |
CN1742492B (zh) * | 2003-02-14 | 2011-07-20 | 汤姆森特许公司 | 媒体内容的基于音频和视频的媒体服务的自动同步 |
CN102088625A (zh) * | 2003-02-14 | 2011-06-08 | 汤姆森特许公司 | 媒体内容的基于音频和视频的媒体服务的自动同步 |
US20040194123A1 (en) * | 2003-03-28 | 2004-09-30 | Eastman Kodak Company | Method for adapting digital cinema content to audience metrics |
US20040194127A1 (en) * | 2003-03-28 | 2004-09-30 | Eastman Kodak Company | Method and system for modifying digital cinema frame content |
US20040194128A1 (en) * | 2003-03-28 | 2004-09-30 | Eastman Kodak Company | Method for providing digital cinema content based upon audience metrics |
US7142250B1 (en) * | 2003-04-05 | 2006-11-28 | Apple Computer, Inc. | Method and apparatus for synchronizing audio and video streams |
FR2857131A1 (fr) * | 2003-07-01 | 2005-01-07 | Thomson Licensing Sa | Procede de recalage automatique d'un modele geometrique d'une scene sur une image de la scene, dispositif de mise en oeuvre et support de programmation. |
EP1766962A4 (en) * | 2004-06-22 | 2009-03-25 | Sarnoff Corp | METHOD AND APPARATUS FOR MEASURING AND / OR CORRECTING AUDIOVISUAL SYNCHRONIZATION |
US9704502B2 (en) * | 2004-07-30 | 2017-07-11 | Invention Science Fund I, Llc | Cue-aware privacy filter for participants in persistent communications |
US9779750B2 (en) | 2004-07-30 | 2017-10-03 | Invention Science Fund I, Llc | Cue-aware privacy filter for participants in persistent communications |
EP2052552A4 (en) * | 2006-07-16 | 2011-12-28 | Seambi Ltd | SYSTEM AND METHOD FOR POSITIONING VIRTUAL CONTENT |
US8413182B2 (en) | 2006-08-04 | 2013-04-02 | Aol Inc. | Mechanism for rendering advertising objects into featured content |
US8374479B1 (en) * | 2006-11-02 | 2013-02-12 | National Public Radio, Inc. | Live-chase video-description buffer display |
FR2912026B1 (fr) * | 2007-01-29 | 2010-03-12 | Cineact | Procede de generation d'un signal de modification et d'une sequence infographique, signal source, sequence infographique, procede et dispositif de diffusion et systeme de gestion correspondants |
US8179475B2 (en) * | 2007-03-09 | 2012-05-15 | Legend3D, Inc. | Apparatus and method for synchronizing a secondary audio track to the audio track of a video source |
US8239767B2 (en) * | 2007-06-25 | 2012-08-07 | Microsoft Corporation | Audio stream management for television content |
CN101861710B (zh) | 2007-10-05 | 2013-03-27 | 数字标记公司 | 通过改变内容属性包括改变原版拷贝水印属性来进行的内容序列化 |
WO2009117450A1 (en) * | 2008-03-18 | 2009-09-24 | Invism, Inc. | Enhanced immersive soundscapes production |
EP2163284A1 (en) * | 2008-09-02 | 2010-03-17 | Zero Point Holding A/S | Integration of audio input to a software application |
US8447065B2 (en) | 2008-09-16 | 2013-05-21 | Cyberlink Corp. | Method of facial image reproduction and related device |
US8265450B2 (en) * | 2009-01-16 | 2012-09-11 | Apple Inc. | Capturing and inserting closed captioning data in digital video |
US8392004B2 (en) * | 2009-04-30 | 2013-03-05 | Apple Inc. | Automatic audio adjustment |
US8334888B2 (en) * | 2009-08-27 | 2012-12-18 | Apple Inc. | Dynamically generated ring tones |
US8910046B2 (en) | 2010-07-15 | 2014-12-09 | Apple Inc. | Media-editing application with anchored timeline |
US8862254B2 (en) | 2011-01-13 | 2014-10-14 | Apple Inc. | Background audio processing |
US8730232B2 (en) | 2011-02-01 | 2014-05-20 | Legend3D, Inc. | Director-style based 2D to 3D movie conversion system and method |
US8621355B2 (en) | 2011-02-02 | 2013-12-31 | Apple Inc. | Automatic synchronization of media clips |
US9997196B2 (en) | 2011-02-16 | 2018-06-12 | Apple Inc. | Retiming media presentations |
US11747972B2 (en) | 2011-02-16 | 2023-09-05 | Apple Inc. | Media-editing application with novel editing tools |
US9288476B2 (en) | 2011-02-17 | 2016-03-15 | Legend3D, Inc. | System and method for real-time depth modification of stereo images of a virtual reality environment |
US9407904B2 (en) | 2013-05-01 | 2016-08-02 | Legend3D, Inc. | Method for creating 3D virtual reality from 2D images |
US9241147B2 (en) | 2013-05-01 | 2016-01-19 | Legend3D, Inc. | External depth map transformation method for conversion of two-dimensional images to stereoscopic images |
US9282321B2 (en) | 2011-02-17 | 2016-03-08 | Legend3D, Inc. | 3D model multi-reviewer system |
US9437247B2 (en) | 2011-11-14 | 2016-09-06 | Apple Inc. | Preview display for multi-camera media clips |
CA2855845A1 (en) | 2011-11-18 | 2013-05-23 | Sirius Xm Radio Inc. | Systems and methods for implementing cross-fading, interstitials and other effects downstream |
US9014500B2 (en) * | 2012-01-08 | 2015-04-21 | Gary Shuster | Digital media enhancement system, method, and apparatus |
WO2013134567A1 (en) | 2012-03-06 | 2013-09-12 | Sirius Xm Radio Inc. | Systems and methods for audio attribute mapping |
EP2826261B1 (en) * | 2012-03-14 | 2020-04-22 | Nokia Technologies Oy | Spatial audio signal filtering |
MX353259B (es) | 2012-04-17 | 2018-01-08 | Sirius Xm Radio Inc | Transicion gradual del lado del servidor para la descarga progresiva de medios. |
US9007365B2 (en) | 2012-11-27 | 2015-04-14 | Legend3D, Inc. | Line depth augmentation system and method for conversion of 2D images to 3D images |
US9547937B2 (en) | 2012-11-30 | 2017-01-17 | Legend3D, Inc. | Three-dimensional annotation system and method |
US9014544B2 (en) | 2012-12-19 | 2015-04-21 | Apple Inc. | User interface for retiming in a media authoring tool |
US9007404B2 (en) | 2013-03-15 | 2015-04-14 | Legend3D, Inc. | Tilt-based look around effect image enhancement method |
US9438878B2 (en) | 2013-05-01 | 2016-09-06 | Legend3D, Inc. | Method of converting 2D video to 3D video using 3D object models |
GB201419396D0 (en) * | 2014-10-31 | 2014-12-17 | Univ Salford Entpr Ltd | Assistive Mixing System And Method Of Assembling A Synchronised Spattial Sound Stage |
US9609307B1 (en) | 2015-09-17 | 2017-03-28 | Legend3D, Inc. | Method of converting 2D video to 3D video using machine learning |
US10225621B1 (en) | 2017-12-20 | 2019-03-05 | Dish Network L.L.C. | Eyes free entertainment |
US11336949B2 (en) | 2019-06-07 | 2022-05-17 | Roku, Inc. | Content-modification system with testing and reporting feature |
US10820131B1 (en) | 2019-10-02 | 2020-10-27 | Turku University of Applied Sciences Ltd | Method and system for creating binaural immersive audio for an audiovisual content |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1983002208A1 (en) * | 1981-12-19 | 1983-06-23 | Frederick William Chard | Method and apparatus for editing the output of a television set |
US5202761A (en) * | 1984-11-26 | 1993-04-13 | Cooper J Carl | Audio synchronization apparatus |
JPS61230484A (ja) * | 1985-04-04 | 1986-10-14 | Alps Electric Co Ltd | Catvコンバ−タ |
FR2661061B1 (fr) | 1990-04-11 | 1992-08-07 | Multi Media Tech | Procede et dispositif de modification de zone d'images. |
JP3166173B2 (ja) * | 1991-07-19 | 2001-05-14 | プリンストン エレクトロニック ビルボード,インコーポレイテッド | 選択および挿入された標章を有するテレビ表示 |
KR940002828A (ko) | 1992-07-15 | 1994-02-19 | 강진구 | 자막 색 변환 기능을 가진 영상재생장치 |
US5387943A (en) * | 1992-12-21 | 1995-02-07 | Tektronix, Inc. | Semiautomatic lip sync recovery system |
ATE192622T1 (de) | 1993-02-14 | 2000-05-15 | Orad Inc | Vorrichtung und verfahren zur detektierung, identifizierung und einfügung in ein video |
US5467139A (en) * | 1993-09-30 | 1995-11-14 | Thomson Consumer Electronics, Inc. | Muting apparatus for a compressed audio/video signal receiver |
WO1995010915A1 (en) | 1993-10-12 | 1995-04-20 | Orad, Inc. | Sports event video |
IL108957A (en) | 1994-03-14 | 1998-09-24 | Scidel Technologies Ltd | Video sequence imaging system |
US5488675A (en) | 1994-03-31 | 1996-01-30 | David Sarnoff Research Center, Inc. | Stabilizing estimate of location of target region inferred from tracked multiple landmark regions of a video image |
US5436672A (en) | 1994-05-27 | 1995-07-25 | Symah Vision | Video processing system for modifying a zone in successive images |
US5880788A (en) * | 1996-03-25 | 1999-03-09 | Interval Research Corporation | Automated synchronization of video image sequences to new soundtracks |
-
1997
- 1997-03-14 JP JP53886697A patent/JP4482161B2/ja not_active Expired - Lifetime
- 1997-03-14 BR BR9709751A patent/BR9709751A/pt unknown
- 1997-03-14 US US09/171,941 patent/US6184937B1/en not_active Expired - Lifetime
- 1997-03-14 WO PCT/US1997/004083 patent/WO1997041683A1/en not_active Application Discontinuation
- 1997-03-14 EP EP97915980A patent/EP0896772A4/en not_active Withdrawn
Also Published As
Publication number | Publication date |
---|---|
EP0896772A4 (en) | 2001-12-05 |
WO1997041683A1 (en) | 1997-11-06 |
JP2000509236A (ja) | 2000-07-18 |
EP0896772A1 (en) | 1999-02-17 |
US6184937B1 (en) | 2001-02-06 |
BR9709751A (pt) | 1999-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4482161B2 (ja) | 映像への電子的な指標の挿入が強化されたオーディオ | |
US8320743B2 (en) | Dynamic variation of output media signal in response to input media signal | |
CN107027050B (zh) | 辅助直播的音视频处理方法及装置 | |
US5264933A (en) | Television displays having selected inserted indicia | |
US20070122786A1 (en) | Video karaoke system | |
US6331851B1 (en) | Graphic display apparatus, synchronous reproduction method, and AV synchronous reproduction apparatus | |
US20090202223A1 (en) | Information processing device and method, recording medium, and program | |
US20060025998A1 (en) | Information-processing apparatus, information-processing methods, recording mediums, and programs | |
US20050226601A1 (en) | Device, system and method for synchronizing an effect to a media presentation | |
CN108282598A (zh) | 一种软件导播系统及方法 | |
KR101249447B1 (ko) | 이동물체의 객체분석 모듈을 이용한 실시간 영상합성 시스템 및 이를 이용한 방송중계방법 | |
JP3895014B2 (ja) | 映像再生装置およびカラオケ装置 | |
JP3522537B2 (ja) | 画像再生方法、画像再生装置及び画像通信システム | |
KR20070098362A (ko) | 배경 음악을 동영상에 합성시키는 음성 합성 장치 및 방법 | |
CN108810436A (zh) | 一种基于全自动乐器合奏的视频录制方法和系统 | |
JP2008178090A (ja) | 映像処理装置 | |
JP3929811B2 (ja) | 画像合成装置及び画像合成方法 | |
US6473136B1 (en) | Television broadcast transmitter/receiver and method of transmitting/receiving a television broadcast | |
US20060200847A1 (en) | Control apparatus and control method | |
JP2019153952A (ja) | ヘッドマウントディスプレイ、ヘッドマウントディスプレイシステム及びプログラム | |
JP2002142165A (ja) | デジタルtv送受信システムにおける映像のプレイバック方式 | |
Borchers et al. | Conducting a realistic electronic orchestra | |
CN114419285A (zh) | 应用于复合型剧场的虚拟人物表演控制方法和系统 | |
JP2004328188A (ja) | コンテンツ再生装置、コンピュータプログラム、及び記録媒体 | |
MXPA98008955A (en) | Electronic insertion of improved audio indications in vi |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040312 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061205 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20070302 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20070416 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071023 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20080118 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20080225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080222 |
|
A72 | Notification of change in name of applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A721 Effective date: 20080606 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080812 |
|
A72 | Notification of change in name of applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A721 Effective date: 20080821 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20081112 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20081222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081208 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090407 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20090603 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090807 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20091015 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100309 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100319 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130326 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130326 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140326 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |