JP7009489B2

JP7009489B2 - デジタルｔｖ画面の黒色境界領域を再使用する方法及び装置

Info

Publication number: JP7009489B2
Application number: JP2019545993A
Authority: JP
Inventors: ウー，チャンシェン; ヤン，ヨン; ペイ，カイジュン
Original assignee: インターデジタルマディソンパテントホールディングス，エスアーエス
Priority date: 2017-02-27
Filing date: 2017-02-27
Publication date: 2022-01-25
Anticipated expiration: 2037-02-27
Also published as: CN110915222A; US11134302B2; EP3586519A1; EP3586519A4; MX2019010136A; JP2020508611A; WO2018152826A1; US20200007924A1

Description

分野
提案される方法及び装置は、デジタルＴＶ画面の黒色境界領域を検出し、再使用に向けてそれらの領域を調整することに関する。

背景
このセクションは、後述する本実施形態に関連し得る分野の様々な態様を読み手に紹介することを目的とする。この考察は、背景情報を読み手に提供して、本開示の様々な態様のよりよい理解を促進するのに役立つと考えられる。したがって、これらの文章がこれに照らして読まれるべきであることを理解されたい。

中国特許出願公開第１０３０２４３１３号には、ビデオコンテンツに従ってテレビジョンのピクチャサイズをリアルタイムで調整する方法が記載されている。中国特許出願公開第１０３５４６７１３号には、スマートテレビジョンのピクチャの比率を調整する方法及びデバイスが記載されている。中国特許出願公開第１０１５６２７１２号には、デジタルＴＶネットワークビデオ自己適応ウィンドウのインターセプション再生を実現する方法が記載されている。中国特許出願公開第１０２４９７５８５号には、テレビジョン機器の広告方法及びテレビジョン機器が記載されている。米国特許第８７４９７１０号には、ビデオ信号にオーバーレイされ、クロール、ロゴ、及びＴＶセット又はモニタに表示される画像を邪魔し乱す他の物を遮断する簡単、費用効率的、且つロバストな方法及びシステムが提供されることが記載されている。方法及びシステムは、不要な画像の存在を検出し、それらを自動的にブロックし得るか、又はハンドヘルド制御デバイスを介してユーザから手動入力を受け入れて、これらの画像をブロック又は遮断し得る。

通常、ＴＶ画面の上部及び下部は幾何学的に対称である。すなわち、ＴＶ画面の上部及び下部の黒色境界領域は略同じ高さである。別々では、上部のみ又は下部のみはいずれも、リサイクルし、広告、通知、及び天気予報等の付加価値情報表示に再使用するには十分に大きくない。提案される方法は、ユーザ（消費者、加入者）及び広告主の双方にとって有利である。ユーザ（消費者）にとっては、広告は現在のビデオコンテンツ（現在のビデオ入力）と同時に下部（上部、左部、及び／又は右部）に表示（レンダリング）されるため、コマーシャルの割り込みなしでＴＶ番組をレンダリングし得る。広告主にとっては、広告を常時流すことができ、したがって、広告時間が増える。これはまた、ビデオコンテンツプロバイダ（ケーブル、衛星、ブロードキャスト）が、追加収益のためにより多くの広告時間を販売することができることも意味する。

出願人が認識した技術のいずれも、アクティブビデオエリアのシフトを記載していない。その代わり、従来技術は、広告の挿入及び表示に適したエリア、例えば、ブラックバー又はアクティブビデオエリア内のいくらかの非重要エリアを検出する。

概要
提案される方法及び装置は、ＴＶ画面の上部及び下部における黒色境界の表示部分／高さを調整する。黒色境界を調整して、１つのより大きな黒色境界を作成することにより、情報、広告（宣伝）、天気予報、緊急アラート及び他のアラートを１つのより拡大された黒色境界領域に邪魔をすることなく表示することが可能になる。そのような情報を画面の下部に表示することは、人間の視覚系にとっての目障りさがより低いと考えられる。しかしながら、より大きな黒色境界が画面の上部にあるように黒色境界を調整することも等しく可能である。より大きな黒色境界がＴＶ画面の下部に作成されると仮定して、提案される方法について説明する。同様に、同様の手順を使用して、より大きな下部黒色境界に加えてより大きな左部又は右部黒色境界を作成することも可能である。より大きな左部又は右部黒色境界の作成は、より大きな下部黒色境界の作成への代替又は追加であることができる。ビデオコンテンツ（入力）が、コンテンツプロバイダ（ケーブル、衛星、ブロードキャスト、ＩＰＴＶ）からビデオコンテンツを受信するデジタルＴＶにより復号化される一連のフレームで構成されていることは当技術分野において既知である。通常、デジタルＴＶは、コンテンツプロバイダにより提供されるコンテンツを復号化するためにオーディオデコーダ及びビデオデコーダの両方を有する。提案される方法は、デジタルＴＶ又はメディアデバイス、ホームゲートウェイデバイス、セットトップボックス、ルータ、ブリッジ、若しくはブルータ等の別の受信デバイスで実施可能であると想定される。

ビデオ番組コンテンツの受信フレームを囲む黒色境界領域がある場合、黒色境界領域を検出し、検出された黒色境界領域のサイズを特定することと、ビデオ番組コンテンツの受信フレームを囲む上部及び下部黒色境界領域の特定されたサイズの和が値よりも大きい場合、フレームバッファに、ビデオ番組コンテンツの復号化されたフレームが記憶されたビデオデコーダバッファをコピーし、二次挿入デコーダバッファをフレームバッファにコピーすることとを含む方法及び装置が記載される。

図面の簡単な説明
提案される方法及び装置は、添付図面と併せて読まれた場合、以下の詳細な説明から最良に理解される。図面は、以下に手短に説明される以下の図を含む。

従来のデジタルＴＶでのＴＶ番組を示す。デジタルＴＶに表示されるビデオコンテンツを囲む黒色境界エリアを識別し使用する、提案される方法の例示的な一実施形態のフローチャートである。デジタルＴＶに表示されるビデオコンテンツを囲む黒色境界エリアを識別し使用する、提案される方法の計算ブロック（２２０）の例示的な一実施形態のフローチャートである。デジタルＴＶに表示されるビデオコンテンツを囲む黒色境界エリアを識別し使用する、提案される方法の例示的な一実施形態の検出ブロック（２１０）の結果を示す。デジタルＴＶに表示されるビデオコンテンツを囲む黒色境界エリアを識別し使用する、提案される方法の例示的な一実施形態の計算ブロック（２２０）の結果を示す。デジタルＴＶに表示されるビデオコンテンツを囲む黒色境界エリアを識別し使用する、提案される方法の例示的な一実施形態の移動／再配置ブロック（２３０）の結果を示す。デジタルＴＶに表示されるビデオコンテンツを囲む黒色境界エリアを識別し使用する、提案される方法の例示的な一実施形態の挿入ブロック（２３５）の結果を示す。上部及び下部黒色境界領域のみを有する従来のデジタルＴＶ表示画面を示す。ピクチャインピクチャ（ＰＩＰ）フォーマットで挿入された広告を有するデジタルＴＶ画面を示す。提案される方法の原理に従って上部及び下部黒色境界領域のエリアを一緒に追加することにより調整され拡大された上部及び下部境界領域を有するデジタルＴＶ画面を示す。提案される方法の原理に従ってデジタルＴＶ画面の下部において、拡大されたデジタルＴＶ画面に挿入された広告を有するデジタルＴＶ画面を示す。提案される方法の原理に従ってデジタルＴＶ画面の下部において、拡大されたデジタルＴＶ画面に挿入された広告を有するデジタルＴＶ画面を示す。限定ではなく、セットトップボックス又はデジタルＴＶ等の例示的な受信デバイス（ホームネットワーキングデバイス、メディアデバイス）１３００のブロック図である。

図面が本開示の概念を示すことを目的としており、必ずしも本開示を示すために可能な唯一の構成であるわけではないことを理解されたい。

詳細な説明
本説明は本開示の原理を示す。したがって、本明細書に明示的に説明又は示されていないが、本開示の原理を実施し、本開示の原理の範囲内に含まれる様々な構成を当業者が考案可能であることが理解されよう。

本明細書に記載される全ての例及び条件語は、本開示の原理及び当技術分野の前進への本発明者により寄与される概念を理解するに当たり読み手を支援する教育的目的を意図し、そのような特に記載される例及び条件への限定として解釈されるべきではない。

さらに、本開示の原理、態様、及び実施形態、並びにその特定の例を記載する本明細書における全ての文章は、その構造的均等物及び機能的均等物の両方の包含を意図する。さらに、そのような均等物が、現在既知の均等物及び将来開発される均等物、すなわち、構造に関係なく同じ機能を実行する、開発された任意の要素の両方を含むことが意図される。

したがって、例えば、本明細書に提示されるブロック図が、本開示の原理を実施する例示的な回路の概念図を表すことが当業者には理解されよう。同様に、任意のフローチャート、流れ図、状態遷移図、擬似コード等が、コンピュータ可読媒体内で実質的に表し得る様々なプロセスを表し、したがって、コンピュータ又はプロセッサにより、そのようなコンピュータ又はプロセッサが明示的に示されているか否かに関係なく、実行されることが理解されよう。

図に示される様々な要素の機能は、専用ハードウェア及び適切なソフトウェアと関連してソフトウェアを実行可能なハードウェアの使用を通して提供し得る。プロセッサにより提供される場合、機能は、１つの専用プロセッサにより、１つの共有プロセッサにより、又は幾つかは共有し得る複数の個々のプロセッサにより提供し得る。さらに、「プロセッサ」又は「コントローラ」という用語の明示的使用は、ソフトウェアを実行可能なハードウェアを排他的に指すものとして解釈されるべきではなく、暗黙的に、限定ではなく、デジタル信号プロセッサ（ＤＳＰ）ハードウェア、ソフトウェアを記憶する読み取り専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、及び不揮発性記憶装置を含み得る。

従来及び／又はカスタムの他のハードウェアを含むこともできる。同様に、図に示される任意のスイッチは、概念のみである。スイッチの機能は、プログラム論理の動作を通して、専用論理を通して、プログラム制御と専用論理との相互作用を通して、又は手動でさえも実行し得、特定の技法は、状況からより具体的に理解されるように実施者により選択可能である。

本発明の特許請求の範囲において、指定された機能を実行する手段として表現される任意の要素は、例えば、ａ）その機能を実行する回路要素の組合せ、又はｂ）任意の形態のソフトウェア、したがって、ファームウェア、マイクロコード等を含むソフトウェアと、そのソフトウェアを実行して機能を実行するのに適切な回路との組合せを含め、その機能を実行する任意の方法を包含することが意図される。そのような特許請求の範囲により規定される本開示は、記載される様々な手段により提供される機能が、請求項が求めるように組み合せられ一緒になることに存在する。したがって、それらの機能を提供することができる任意の手段は、本明細書に示されるものと同等であると見なされる。

図１は、従来のデジタルＴＶでのＴＶ番組を示す。見て分かるように、ビデオコンテンツ（ＴＶ番組）は、ピクチャ（ビデオコンテンツを表示するアクティブビデオエリア）を囲む上側、下側、右側、左側に黒色境界を有する。

図２は、デジタルＴＶ画面に表示されたビデオコンテンツを囲む黒色境界領域を識別し使用する、提案される方法の例示的な一実施形態のフローチャートである。提案される方法は、デジタル画面上の上部及び下部黒色境界領域に関して説明されるが、デジタルＴＶ画面の上部及び下部黒色境界領域に加えて又は代えて、デジタルＴＶ画面上の左部及び右部黒色境界領域を使用することができることに留意されたい。２０５において、デジタルＴＶはビデオコンテンツ（現在のビデオ入力）を受信する。２１０において、デジタルＴＶは、ＴＶ画面の黒色境界領域のエッジ（上下左右）を検出する。２１５において、テストを実行して、任意の黒色境界エッジが検出されたか否かを判断する。黒色エッジが検出されなかった場合、処理は２０５に進む。黒色境界エッジが検出された場合、２２０において、黒色境界領域の面積（サイズ）が計算される。２２５において、テストを実行して、黒色境界領域の上部面積及び下部面積の和が、予め定義されたピクセル数以上であるか否かを判断する。予め定義されたピクセル数は、ルミナンス閾値である。上部及び下部黒色境界領域の面積の和が、予め定義されたピクセル数以上でない場合、処理は２０５に進む。上部及び下部黒色境界領域の面積の和が予め定義されたピクセル数以上である場合、２３０において、ビデオコンテンツは、上部黒色境界領域面積量に等しい量、上に移動（再配置、リフトアップ／ダウン）する。現在のビデオコンテンツ（現在のビデオ入力）の移動は、ビデオ復号化バッファをフレームバッファにコピーすることにより達成される。これは、更なる垂直方向オフセットを追加する。有効表示面積全体の高さ（高度）は上がる（高くなる）。提案される方法は、上に移動するビデオに関して説明されるが、ビデオは、黒色境界領域を上に動かすことにより下にも同様に移動し得る。したがって、広告、情報、アラート、追加の二次ビデオコンテンツ等の表示（レンダリング）での使用に確保することができる、拡大された下部黒色境界領域がデジタルＴＶ画面の下部に存在する。２２５におけるテストは、上部及び下部黒色境界領域の面積の和に加えて又は代えて、左部及び右部黒色境界領域の面積の和であってもよい。２３５において、デジタルＴＶ、広告、二次ビデオコンテンツ、情報、及び／又はアラート等は、この時点ではデジタルＴＶ画面の下部にある黒色境界領域内に挿入される。広告、二次ビデオコンテンツ、情報、アラート等の挿入は、広告、情報、二次ビデオコンテンツ、アラート等を二次挿入復号化バッファからフレームバッファにコピーすることによって達成される。上で示したように、上部及び下部黒色境界領域に代えて又は加えて、左部／右部黒色境界領域を使用することができる。再配置されたビデオコンテンツ及び広告、二次ビデオコンテンツ、情報、アラート等は次に、デジタルＴＶ画面に出力（表示、レンダリング）される。広告にオーディオを有することが可能であるが、仮に現在のビデオコンテンツ（入力）及び幾つかの広告のオーディオが再生された場合、恐らく問題を生じさせるため、広告主がよりクリエイティブである必要があり得ることに留意されたい。広告は、広告において字幕の均等物を使用する必要があり得る。

ビデオコンテンツのフレームの移動（再配置）は、ビデオコンテンツのフレームの黒色境界をカットすることにより達成し得る。ビデオウィンドウのサイズは、有効ビデオ領域のサイズ（フレームサイズから黒色境界領域のサイズを引いたもの）に従って設定される。ビデオ復号化バッファ内のビデオコンテンツのフレームは、上に移動し、フレームバッファにコピーされる。広告又は任意の他の二次情報（アラート、二次ビデオコンテンツ、天気等）は次に、二次挿入復号化バッファからフレームバッファにコピーされる。大半のデジタルＴＶ（ＤＴＶ）ベンダーはＰＩＰＡＰＩを提供する。これらのＡＰＩを実施して、広告又は他の二次情報（アラート、二次コンテンツ、天気等）の、黒色境界領域として識別されたいずれの場所への挿入も実施することができる。したがって、提案される方法を実施するために、新しいハードウェアモジュールが必要ないことがある。

図３は、デジタルＴＶ画面に表示されるビデオコンテンツを囲む黒色境界領域を識別し使用する、提案される方法の計算ブロック（２２０）の例示的な一実施形態のフローチャートである。３０５において、現在のＤＴＶ出力のピクセル情報がディスプレイドライバから読み取られる（取得される、抽出される）。３１０において、ピクセル情報は、当技術分野で既知であり、https://en.wikipedia.org/wiki/YUV及びhttps://en.wikipedia.org/wiki/YCbCrに詳述される手段でＹＵＶ色画像空間に変換される。全ての計算（ピクセル情報の変換後）は、ＹＵＶ画像空間で実行される。最小Ｙルミナンス値が０であると仮定し、Ｙルミナンス値が１００であると仮定し、設定する。３２０において、黒色レベルＹルミナンス値を設定し（例えば、５に）、３２５において、連続検出時間の値を設定する（例えば、３０秒）。３３０において、領域のＹルミナンス値が、約連続検出時間（Ｂ）にわたり黒色レベルＹルミナンス値（Ａ）未満であるか否かを判断する。ＹＵＶ画像空間において領域のＹルミナンス値が、約連続検出時間（Ｂ）にわたり黒色レベルＹルミナンス値未満である場合、領域は黒色領域である。３３５において、領域が黒色であるか否かを判断するために全ての領域（上下左右）がチェックされたか否かを判断する。全ての領域（上下左右）がチェックされている場合、３４０において、黒色境界領域を識別する。領域のＹルミナンス値が、約連続検出時間（Ｂ）にわたり黒色レベルルミナンス値（Ａ）以上である場合、３４０に進む。すなわち、３４０において、現在のビデオ画像（現在のビデオコンテンツ、現在のビデオ入力）が、広告、二次ビデオコンテンツ、情報、アラート等の挿入への使用に十分大きい黒色境界領域を有するか否かについて判断する。３３５において、領域の全て（上下左右）がチェックされたわけではない場合、３０５に進む。全ての領域をチェックする目的は、黒色境界が妥当、安定、且つ正確であることを保証するためである。レンダリングされている番組が暗い背景を有することもあり得る。ある時間にわたってチェックが行われる場合、暗い背景を有するコンテンツは経時変化するため、領域が黒色領域であるか、それとも単に暗い背景を有するコンテンツであるかを判断することができる。領域が、暗い背景を有するコンテンツである場合、それは実際の黒色境界領域ではない。

図４は、デジタルＴＶ画面に表示されるビデオコンテンツを囲む黒色境界領域を識別し使用する、提案される方法の例示的な一実施形態の検出ブロック（２１０）の結果を示す。

図５は、デジタルＴＶ画面に表示されるビデオコンテンツを囲む黒色境界領域を識別し使用する、提案される方法の例示的な一実施形態の計算ブロック（２２０）の結果を示す。計算ブロックは、図３に更に示され、上述されている。下部黒色境界領域５０５は、デジタルＴＶ画面に表示（レンダリング、出力）される現在のビデオ入力（現在のビデオコンテンツ）の真下に留まり、上部黒色境界領域５１０は下部黒色境界領域５０５に追加（移動、再配置）されて、デジタルＴＶ画面上の黒色境界を大きくする。

図６は、デジタルＴＶ画面に表示されたビデオコンテンツを囲む黒色境界領域を識別し使用する、提案される方法の例示的な一実施形態の移動／再配置ブロック（２３０）の結果を示す。上部及び下部黒色境界領域が結合されて、より大きな黒色境界領域６０５（上部及び下部黒色境界領域の面積（サイズ）の和）を形成すると、現在のビデオコンテンツ（現在のビデオ入力）は、現在のビデオコンテンツ（現在のビデオ入力）を上に持ち上げることにより移動する（再配置される）。上述したように、現在のビデオコンテンツ（現在のビデオ入力）は、拡大された黒色境界領域がデジタルＴＶ画面の上部に作成される場合、下方に移動（再配置）し得る。さらに、拡大された黒色境界領域は、下部又は上部の拡大された黒色境界領域に代えて又は加えて、デジタルＴＶ画面の左側又は右側に作成し得る。

図７は、デジタルＴＶ画面に表示されたビデオコンテンツを囲む黒色境界領域を識別し使用する、提案される方法の例示的な一実施形態の挿入ブロック（２３５）の結果を示す。拡大された下部黒色境界領域に１つの広告が挿入されている。

図８は、上部及び下部黒色境界領域のみを有する従来のデジタルＴＶ表示画面を示す。

図９は、ピクチャインピクチャ（ＰＩＰ）フォーマットで挿入された広告を有するデジタルＴＶ画面を示す。従来のＴＶピクチャインピクチャ（ＰＩＰ）は、典型的なＴＶオーバーレイ表示モードである。ビデオ（入力）の別のフレームがオーバーレイした現在のビデオコンテンツ（現在のビデオ入力）のフレームの小さな部分がある。これは、デジタルＴＶ表示画面のその部分を覆ってブロックし、ユーザ（消費者、加入者）の閲覧経験を妨げる。提案される方法及び装置、ピクチャインピクチャ（ＰＩＰ）オーバーレイはなく、したがって、いずれの現在のビデオコンテンツ（入力）もブロック又は覆われず（隠されず）、したがって、いずれの現在のビデオコンテンツ（入力）も失われず又は遮蔽されず、したがって、閲覧経験を改善する。従来のＰＩＰを達成するには、２つの別個のチューナが必要であることに留意されたい。一方のチューナは、主ピクチャのビデオコンテンツを受信し、第２のチューナはオーバーレイのビデオコンテンツを受信する。ＩＰＴＶはチューナを必要としないが、ＰＩＰの場合、主（一次）コンテンツ及びオーバーレイの両方がＩＰＴＶソースから受信されるとき、２つのＩＰ接続が必要とされる。一方は主（一次）ビデオコンテンツを受信し、第２のＩＰ接続は、オーバーレイのビデオコンテンツを受信する。典型的ではないが、コンテンツのユニットの一方はＩＰＴＶからのものであり得、コンテンツの他のユニットは、ケーブルプロバイダ、衛星プロバイダ、又はブロードキャストプロバイダから受信し得る。この場合、ＩＰＴＶコンテンツはＩＰ接続を必要とし、ケーブルプロバイダ、衛星プロバイダ、又はブロードキャストプロバイダにより提供されるコンテンツ用のチューナが必要である。

図１０は、提案される方法の原理に従って上部及び下部黒色境界領域のエリアを一緒に追加し、上部及び下部黒色境界領域をデジタルＴＶ画面の下部に再配置することにより調整され拡大された上部及び黒色境界領域を有するデジタルＴＶ画面を示す。図９のように、図１０は第２のビデオコンテンツを有する。違いは、第２のビデオコンテンツがオーバーレイの形態ではなく、したがって、第２のビデオコンテンツが主ピクチャの第１の（一次）コンテンツから何もとらないことである。図９と同様に、拡大された黒色境界に表示される第２のビデオコンテンツを達成するために、２つの別個のチューナが必要とされることに留意されたい。一方のチューナは、主（一次）ピクチャのビデオコンテンツを受信し、第２のチューナは、拡大された黒色境界領域（エリア）に表示される第２のビデオコンテンツのビデオコンテンツを受信する。上で示したように、ＩＰＴＶはチューナを必要としないが、図１０の場合、主（一次）コンテンツ及び拡大された黒色境界領域（エリア）に表示される第２のビデオコンテンツの両方がＩＰＴＶソースから受信されるとき、２つのＩＰ接続が必要とされる。一方は主（一次）ビデオコンテンツを受信し、第２のＩＰ接続は、拡大された黒色境界領域（エリア）に表示される第２のビデオコンテンツのビデオコンテンツを受信する。典型的ではないが、コンテンツのユニットの一方はＩＰＴＶからのものであり得、コンテンツの他のユニットは、ケーブルプロバイダ、衛星プロバイダ、又はブロードキャストプロバイダから受信し得る。この場合、ＩＰＴＶコンテンツはＩＰ接続を必要とし、ケーブルプロバイダ、衛星プロバイダ、又はブロードキャストプロバイダにより提供されるコンテンツ用のチューナが必要である。

図１１は、提案される方法の原理に従ってデジタルＴＶ画面の下部において、拡大されたデジタルＴＶ画面に挿入された広告を有するデジタルＴＶ画面を示す。

図１２は、提案される方法の原理に従ってデジタルＴＶ画面の下部において、拡大されたデジタルＴＶ画面に挿入された二次コンテンツの「ビデオウォール」を有するデジタルＴＶ画面を示す。二次コンテンツの「ビデオウォール」は、幾つかの競技種目（幾つかのサッカーの試合、幾つかのオリンピックのイベント等）等の同様の番組（ビデオコンテンツ）を挿入することによって作成し得る。ビデオウォールは、監視画面を監視するために、例えば、ドア、入口、又は子供の寝室における複数のカメラからのビデオフィード（入力）を有し得るホームモニタリングシステムから作成することもできる。代替的には、二次コンテンツの「ビデオウォール」の代わりに、拡大された黒色境界領域に複数の広告を挿入し得る。広告又は監視画面が、拡大された黒色境界に表示される場合、１つのチューナだけでよい。しかしながら、二次ビデオコンテンツの「ビデオウォール」が表示される場合、拡大された黒色境界領域（エリア）に表示される別個のビデオコンテンツ毎に別個のチューナが必要である。二次ビデオコンテンツの「ビデオウォール」は、オーバーレイの形態ではなく、したがって、二次ビデオコンテンツは、主ピクチャの第１の（主）ビデオコンテンツから何もとらない。図９と同様に、拡大された黒色境界（エリア）に表示される二次ビデオコンテンツを達成するために、複数の別個のチューナが必要とされることに留意されたい。１つのチューナは、主（一次）ピクチャのビデオコンテンツを受信し、複数の他のチューナは、拡大された黒色境界領域（エリア）に表示される「ビデオウォール」のビデオコンテンツを受信する。上で示したように、ＩＰＴＶはチューナを必要としないが、図１２の場合、主（一次）コンテンツ及び拡大された黒色境界領域（エリア）に表示される二次ビデオコンテンツ（ビデオウォール）の両方がＩＰＴＶソースから受信されるとき、複数のＩＰ接続が必要とされる。１つは主（一次）ビデオコンテンツを受信し、追加の複数のＩＰ接続は、拡大された黒色境界領域（エリア）に表示される二次ビデオコンテンツ（ビデオウォール）のビデオコンテンツを受信する。典型的ではないが、コンテンツのユニットの１つ又は複数はＩＰＴＶからのものであり得、コンテンツの他の１つ又は複数のユニットは、ケーブルプロバイダ、衛星プロバイダ、又はブロードキャストプロバイダから受信し得る。この場合、ＩＰＴＶコンテンツのいずれかはそれぞれＩＰ接続を必要とし、ケーブルプロバイダ、衛星プロバイダ、又はブロードキャストプロバイダにより提供されるコンテンツの各ユニットにチューナが必要である。

図１３は、限定ではなく、セットトップボックス又はデジタルＴＶ等の例示的な受信デバイス（ホームネットワーキングデバイス、メディアデバイス、ルータ、ブリッジ、ブルータ）１３００のブロック図である。ブロック図構成は、プロセッサ１３２０及びメモリ１３４５を相互接続するバス指向１３５０構成を含む。図１３の構成は通信インターフェース１３２５も含む。通信インターフェース１３２５は、有線又は無線であり得、実際に、２つのインターフェースを含み得る－一方は有線通信用、一方は無線通信用。

プロセッサ１３２０は、図１～図１２に示される等のセットトップボックスの計算機能及び従来のセットトップボックス機能を提供する。プロセッサ１３２０は、セットトップボックスの要素間の通信を利用して、通信プロセス及び計算プロセスを制御する任意の形態のＣＰＵ又はコントローラであることができる。バス１３５０が実施形態１３００の様々な要素間に通信パスを提供し、他のポイントツーポイント相互接続選択肢（例えば、非バスアーキテクチャ）も実現可能であることを当業者は認識する。

ユーザインターフェース及びディスプレイ１３１０は、インターフェース回路１３１５により駆動される。ユーザインターフェース及びディスプレイ１３１０は、オーディオ機能及びビデオ機能の両方を有して、通信インターフェース１３２５及びネットワーク１３０５への接続を介してストリーミング又はダウンロードされたオーディオ及び／又はビデオ並びに／或いは取得されたマルチメディアコンテンツを表示するマルチメディアインターフェースとして使用される。複数の通信インターフェース及び複数のＩＰ接続が必要とされ得る。

チューナ１３５５は、ネットワーク１３０５からバス１３５０を介し通信インターフェース１３２５を通してダウンロード且つ／又はストリーミングされたオーディオ、ビデオ、及びマルチメディアコンテンツを要求し受信する。チューナ１３５５は、チューナ（例えば、衛星受信機）のみならず、復調器並びにパケットエラー検出器及び搬送波レベル、搬送波対雑音比（ＣＮＲ）、ビットエラーレート、受信周波数、極性及び帯域（衛星の場合）、パケットカウント等の他のＲＦ信号受信パラメータ等の提案される方法の目的に関連する他の特徴も含む。少なくとも図９、図１０、及び図１２に関して先に示したように、複数のチューナ又は複数のＩＰ接続が必要とされ得る。したがって、チューナ１３５５は、二次ビデオコンテンツを用いる提案される方法及び装置の動作をサポートする必要がある場合、複数のチューナとして解釈し得、ここで、二次ビデオコンテンツは、「ビデオウォール」の複数の追加のビデオコンテンツを含み得る。ビデオコンテンツがケーブルプロバイダ、衛星プロバイダ、及び／又は従来のブロードキャストコンテンツプロバイダから受信される場合、複数のチューナが必要であることにも留意されたい。しかしながら、ＩＰＴＶを介して受信する任意のコンテンツは、チューナを必要とせず、WiFi又はEthernet接続（通信インターフェース１３２５等）のみがそのようなＩＰＴＶコンテンツに必要とされる。

セットトップボックス又はデジタルＴＶに含まれる機能のいずれか又は全ては、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、縮小命令セットコンピュータ（ＲＩＳＣ）、又はプロセッサ６２０に統合される任意の他の同等の別個のタイプのコプロセッサとして実施し得る。

メモリ１３４５（ＲＡＭ等）は、セットトップボックスの機能を組み込む任意の方法に関連するメモリのリポジトリとして機能することができる。メモリ１３４５は、プログラムメモリ、ダウンロード、アップロード、又はスクラッチパッド計算等の情報並びにオーディオ、ビデオ、及びマルチメディアコンテンツを含むストリーミング又はダウンロードされたコンテンツを記憶するリポジトリを提供することができる。メモリ１３４５が全て又は部分的にプロセッサ１３２０に組み込まれ得ることを当業者は認識しよう。通信インターフェース１３２５は、当業者に既知のように、通信の受信機要素及び送信機要素の両方を有する。セットトップボックスのプロセッサの動作のプログラム命令は、メモリ１３４５に記憶してもよく、又はプロセッサ内にあってもよい。

記憶装置１３４６（ハードディスク又はフラッシュメモリ等）が存在することもできる。メモリ１３４５等のＲＡＭメモリは、電力供給が停止した後、データを記憶することができず、したがって、メモリ１３４６は、万が一電力供給が停止した場合、提案される方法の動作をサポートするために、提案される装置に存在してもよい。

提案される方法及び装置が、様々な形態のハードウェア、ソフトウェア、専用プロセッサ、又はそれらの組合せで実施し得ることを理解されたい。専用プロセッサは、特定用途向け集積回路（ＡＳＩＣ）、縮小命令セットコンピュータ（ＲＩＳＣ）、及び／又はフィールドプログラマブルゲートアレイ（ＦＰＧＡ）を含み得る。好ましくは、提案される方法及び装置はハードウェアとソフトウェアとの組合せとして実施される。さらに、ソフトウェアは、好ましくは、プログラム記憶装置で有形に具現されたアプリケーションプログラムとして実施される。アプリケーションプログラムは、任意の適したアーキテクチャを含むマシンにアップロードし得、任意の適したアーキテクチャを含むマシンにより実行し得る。好ましくは、マシンは、１つ又は複数の中央演算処理装置（ＣＰＵ）、ランダムアクセスメモリ（ＲＡＭ）、及び入出力（Ｉ／Ｏ）インターフェース等のハードウェアを有するコンピュータプラットフォームで実施される。コンピュータプラットフォームは、オペレーティングシステム及びマイクロ命令コードも含む。本明細書に記載された様々なプロセス及び機能は、オペレーティングシステムを介して実行されるマイクロ命令コードの一部又はアプリケーションプログラムの一部のいずれか（又はそれらの組合せ）であり得る。加えて、追加のデータ記憶装置及びプリントデバイス等の様々な他の周辺機器をコンピュータプラットフォームに接続することもできる。

図に示される要素が、ハードウェア、ソフトウェア、又はそれらの組合せという様々な形態で実施し得ることを理解されたい。好ましくは、これらの要素は、プロセッサ、メモリ、及び入出力インターフェースを含み得る１つ又は複数の適宜プログラムされた汎用デバイス上のハードウェアとソフトウェアとの組合せで実施される。本明細書では、「結合される」という語句は、直接接続又は１つ若しくは複数の中間構成要素を通した間接的な接続を意味するように定義される。そのような中間構成要素は、ハードウェアに基づく構成要素及びソフトウェアに基づく構成要素の両方を含み得る。

添付図に示される構成システム要素及び方法ステップの幾つかは、好ましくは、ソフトウェアで実施されるため、提案される方法及び装置がプログラムされる様式に応じて、システム構成要素（又はプロセスステップ）間の実際の接続が異なり得ることを更に理解されたい。本明細書の教示を所与として、関連する技術分野の当業者は、提案される方法及び装置のこれら及び同様の実施又は構成を考えることが可能である。

例示的な語句「Ａ、Ｂ、及びＣの少なくとも１つ」を使用する本願及び特許請求の範囲では、語句は、「Ａのみ、Ｂのみ、Ｃのみ、又はＡ、Ｂ、及びＣの任意の組合せ」を意味する。
上記実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
ビデオ番組コンテンツ（２０５）の受信フレームを少なくとも部分的に囲む黒色境界領域がある場合、前記黒色境界領域を検出し（２１０）、前記検出された黒色境界領域のサイズを特定することと、
前記ビデオ番組コンテンツの受信フレームを囲む上部及び下部黒色境界領域の特定されたサイズの和が値（２１５、２２０、２２５）よりも大きい場合、フレームバッファ、ビデオ番組コンテンツの復号化されたフレームが記憶されたビデオデコーダバッファにコピーし（２３０）、二次挿入デコーダバッファを前記フレームバッファにコピーする（２３５）ことと、
を含む、方法。
（付記２）
前記フレームバッファをデジタルＴＶ表示画面にレンダリングすること（２４０）を更に含む、付記１に記載の方法。
（付記３）
前記受信ビデオコンテンツの前記フレームを囲む前記検出された黒色境界領域の前記サイズを特定すること（２２０）は、
デジタルテレビジョン出力のピクセル情報を読み取ること（３０５）と、
前記ピクセル情報をＹＵＶ画像空間に変換すること（３１０）と、
黒色Ｙルミナンス値を設定すること（３２０）と、
連続検出期間の値を設定すること（３２５）と、
前記ＹＵＶ画像空間内の領域のＹルミナンス値が、前記連続検出時間の前記黒色レベルルミナンス値未満であるか否かを判断すること（３３０）と、
前記ビデオ番組コンテンツの前記受信フレームの前記検出された黒色境界領域が、情報挿入に十分であるか否かを判断すること（３４０）と、
を更に含む、付記１又は２に記載の方法。
（付記４）
前記ビデオ番組コンテンツは、ケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、又はＩＰＴＶプロバイダの１つから受信される、付記１～３のいずれか一に記載の方法。
（付記５）
チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからのビデオ番組コンテンツの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからのビデオ番組コンテンツの受信に使用される、付記４に記載の方法。
（付記６）
前記二次挿入デコーダバッファは、二次ビデオコンテンツ、広告、情報、及びアラートの１つを有する、付記１～３のいずれか一に記載の方法。
（付記７）
前記二次ビデオコンテンツはケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、及びＩＰＴＶプロバイダの１つ又は複数から受信される、付記６に記載の方法。
（付記８）
チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからの二次ビデオコンテンツの各ユニットの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからの二次ビデオコンテンツの各ユニットの受信に使用される、付記７に記載の方法。
（付記９）
プロセッサ（１３２０）
を含み、
前記プロセッサは、
ビデオ番組コンテンツの前記受信フレームを少なくとも部分的に囲む黒色境界領域がある場合、前記黒色境界領域を検出し、前記検出された黒色境界領域のサイズを特定することと、
前記ビデオ番組コンテンツの受信フレームを囲む上部及び下部黒色境界領域の特定されたサイズの和が値よりも大きい場合、フレームバッファ、ビデオ番組コンテンツの復号化されたフレームが記憶されたビデオデコーダバッファにコピーし、二次挿入デコーダバッファを前記フレームバッファにコピーすることと、
を行うように構成された、装置。
（付記１０）
前記フレームバッファをデジタルＴＶ表示画面にレンダリングするように構成されたユーザインターフェース及びディスプレイ（１３１０）を更に含む、付記９に記載の装置。
（付記１１）
前記受信ビデオコンテンツの前記フレームを囲む前記検出された黒色境界領域の前記サイズを特定するように構成された前記プロセッサ（１３２０）は、
デジタルテレビジョン出力のピクセル情報を読み取ること（３０５）と、
前記ピクセル情報をＹＵＶ画像空間に変換すること（３１０）と、
黒色Ｙルミナンス値を設定すること（３２０）と、
連続検出期間の値を設定すること（３２５）と、
前記ＹＵＶ画像空間内の領域のＹルミナンス値が、前記連続検出時間の前記黒色レベルルミナンス値未満であるか否かを判断すること（３３０）と、
前記ビデオ番組コンテンツの前記受信フレームの前記検出された黒色境界領域が、情報挿入に十分であるか否かを判断すること（３４０）と、
を行うように更に構成された、付記９又は１０に記載の装置。
（付記１２）
前記装置は受信デバイスである、付記９～１１のいずれか一に記載の装置。
（付記１３）
前記ビデオ番組コンテンツは、ケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、又はＩＰＴＶプロバイダの１つから受信される、付記９～１２のいずれか一に記載の装置。
（付記１４）
チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからのビデオ番組コンテンツの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからのビデオ番組コンテンツの受信に使用される、付記１３に記載の装置。
（付記１５）
前記二次挿入デコーダバッファは、二次ビデオコンテンツ、広告、情報、及びアラートの１つを有する、付記９～１２のいずれか一に記載の装置。
（付記１６）
前記二次ビデオコンテンツはケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、及びＩＰＴＶプロバイダの１つ又は複数から受信され、チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからの二次ビデオコンテンツの各ユニットの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからの二次ビデオコンテンツの各ユニットの受信に使用される、付記１５に記載の装置。
（付記１７）
ビデオ番組コンテンツの受信フレームを少なくとも部分的に囲む黒色境界領域がある場合、前記黒色境界領域を検出し、前記検出された黒色境界領域のサイズを特定する手段と、
前記ビデオ番組コンテンツの受信フレームを囲む上部及び下部黒色境界領域の特定されたサイズの和が値よりも大きい場合、フレームバッファ、ビデオ番組コンテンツの復号化されたフレームが記憶されたビデオデコーダバッファにコピーし、二次挿入デコーダバッファを前記フレームバッファにコピーする手段と、
を含む装置。
（付記１８）
前記フレームバッファをデジタルＴＶ表示画面にレンダリングする手段（１３１０）を更に含む、付記１７に記載の装置。
（付記１９）
前記受信ビデオコンテンツの前記フレームを少なくとも部分的に囲む前記検出された黒色境界領域の前記サイズを特定する手段（１３２０）は、
デジタルテレビジョン出力のピクセル情報を読み取る手段と、
前記ピクセル情報をＹＵＶ画像空間に変換する手段と、
黒色Ｙルミナンス値を設定する手段と、
連続検出期間の値を設定する手段と、
前記ＹＵＶ画像空間内の領域のＹルミナンス値が、前記連続検出時間の前記黒色レベルルミナンス値未満であるか否かを判断する手段と、
前記ビデオ番組コンテンツの前記受信フレームの前記検出された黒色境界領域が、情報挿入に十分であるか否かを判断する手段と、
を更に含む、付記１７又は１８に記載の装置。
（付記２０）
前記ビデオ番組コンテンツは、ケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、又はＩＰＴＶプロバイダの１つから受信される、付記１７～１９のいずれか一に記載の装置。
（付記２１）
チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからのビデオ番組コンテンツの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからのビデオ番組コンテンツの受信に使用される、付記２０に記載の装置。
（付記２２）
前記二次挿入デコーダバッファは、二次ビデオコンテンツ、広告、情報、及びアラートの１つを有する、付記１７～１９のいずれか一に記載の装置。
（付記２３）
前記二次ビデオコンテンツはケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、及びＩＰＴＶプロバイダの１つ又は複数から受信され、チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからの二次ビデオコンテンツの各ユニットの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからの二次ビデオコンテンツの各ユニットの受信に使用される、付記２２に記載の装置。

Claims

ビデオ番組コンテンツの受信フレームを少なくとも部分的に囲む黒色境界領域がある場合、前記黒色境界領域を検出することと、
前記検出された黒色境界領域それぞれのサイズを特定することと、
前記ビデオ番組コンテンツの前記受信フレームを少なくとも部分的に囲む２つの対向する黒色境界領域の特定されたサイズの和が所定の閾値よりも大きい場合、前記２つの対向する黒色境界領域を調整してより大きな黒色境界領域を作成し、前記より大きな黒色境界領域に二次情報を挿入すること、
を含む、方法。
前記ビデオ番組コンテンツ、及び、前記挿入された二次情報を有する前記より大きな黒色境界領域をディスプレイにレンダリングすることを更に含む、請求項１に記載の方法。
前記ビデオ番組コンテンツの前記受信フレームを囲む前記検出された黒色境界領域それぞれの前記サイズを特定することは、
黒色レベルルミナンス値を設定することと、
前記受信フレームの画像空間におけるＹルミナンス値と、前記黒色レベルルミナンス値とに基づいて黒色のエッジ位置を分析し、ビデオ番組コンテンツの前記受信フレームの前記黒色境界領域を特定すること、
前記ビデオ番組コンテンツの前記受信フレームの前記黒色境界領域が、情報挿入に十分であるか否かを判断することと、
を更に含む、請求項１又は２に記載の方法。
前記受信フレームの前記ビデオ番組コンテンツを、ケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、又はＩＰＴＶプロバイダの１つから受信することを更に含む、請求項１～３のいずれか一項に記載の方法。
前記ビデオ番組コンテンツを受信することは、チューナを使用し、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかから前記受信フレームの前記ビデオ番組コンテンツを受信し、ＩＰ接続を使用し、ＩＰＴＶプロバイダから前記受信フレームの前記ビデオ番組コンテンツを受信することを含む、請求項４に記載の方法。
前記二次情報は、二次ビデオコンテンツ、広告、情報、及びアラートの１つを含む、請求項１～３のいずれか一項に記載の方法。
前記二次ビデオコンテンツを、ケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、及びＩＰＴＶプロバイダの１つ又は複数から受信することを更に含む、請求項６に記載の方法。
前記二次情報は、二次ビデオコンテンツを含み、
前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダ、及び前記ＩＰＴＶプロバイダの１つまたは複数から、前記二次ビデオコンテンツを受信することを更に含む、請求項７に記載の方法。
プロセッサ
を含み、
前記プロセッサは、
ビデオ番組コンテンツの受信フレームを少なくとも部分的に囲む黒色境界領域がある場合、前記黒色境界領域を検出することと、
前記検出された黒色境界領域それぞれのサイズを特定することと、
前記ビデオ番組コンテンツの前記受信フレームを囲む２つの対向する黒色境界領域の特定されたサイズの和が所定の閾値よりも大きい場合、前記２つの対向する黒色境界領域を調整してより大きな黒色境界領域を作成し、前記より大きな黒色境界領域に二次情報を挿入することと、
を行うように構成された、装置。
ユーザインターフェースと、
前記ビデオ番組コンテンツ、及び、前記挿入された二次情報を有する前記より大きな黒色境界領域をディスプレイの画面にレンダリングするように構成された前記ディスプレイと、を更に含む、請求項９に記載の装置。
前記ビデオ番組コンテンツの前記受信フレームを囲む前記検出された黒色境界領域の前記サイズを特定するように構成された前記プロセッサは、
黒色レベルルミナンス値を設定することと、
前記受信フレームの画像空間におけるＹルミナンス値と、前記黒色レベルルミナンス値とに基づいて黒色のエッジ位置を分析し、ビデオ番組コンテンツの前記受信フレームの前記黒色境界領域を特定すること、
前記ビデオ番組コンテンツの前記受信フレームの前記黒色境界領域が、情報挿入に十分であるか否かを判断することと、
を行うように更に構成された、請求項９又は１０に記載の装置。
前記装置は受信デバイスである、請求項９～１１のいずれか一項に記載の装置。
前記ビデオ番組コンテンツは、ケーブルプロバイダ、衛星プロバイダ、ブロードキャストプロバイダ、又はＩＰＴＶプロバイダの１つから受信される、請求項９～１２のいずれか一項に記載の装置。
チューナが、前記ケーブルプロバイダ、前記衛星プロバイダ、又は前記ブロードキャストプロバイダのいずれかからのビデオ番組コンテンツの受信に使用され、ＩＰ接続が、ＩＰＴＶプロバイダからのビデオ番組コンテンツの受信に使用される、請求項１３に記載の装置。
前記二次情報は、二次ビデオコンテンツ、広告、情報、及びアラートの１つを含む、請求項９～１２のいずれか一項に記載の装置。