WO2012017793A1 - 映像処理装置、映像処理方法及びコンピュータプログラム - Google Patents

Abstract

　奥行き感を強調させる映像処理が施された映像を、奥行き感強調処理の効果が損なわれないように配列させることができる映像処理装置を提供する。　複数の映像を配列させる映像処理装置に、背景映像部分、該背景映像部分の周縁の一部又は全部に配された周縁映像部分、及び前記背景映像の内側から該周縁映像部分へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得部１１と、背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得する映像特徴取得部１２と、映像特徴取得部１２にて取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定部１４と、配置決定部１４の決定結果に基づいて、前記一つの映像及び他の映像を配列させる映像合成部１５とを備える。

Description

映像処理装置、映像処理方法及びコンピュータプログラム

　本発明は、複数の映像を配列させる映像処理装置、映像処理方法及びコンピュータプログラムに関する。

　昨今、デジタルカメラ、デジタルカメラ機能を搭載した携帯電話の普及により、映像を撮影し、撮影された映像をデジタルデータとして保存することが一般的になってきている。また、ネットワーク環境の発達、及び高性能なパーソナルコンピュータ（PC:Personal Computer）の普及によって、ユーザ自身がコンテンツを作成し、他のユーザに公開することが一般的に行われている。ユーザによって作成されたコンテンツは、ＵＧＣ（User Generated Contents）と呼ばれる。ＵＧＣの例としては、静止画、動画などの映像を組み合わせて作成されたフォトアルバム、映像に文字を組み合わせることで作成されたブログに代表される日記形式のコンテンツ等が挙げられる。

　一方、特許文献１には、入力された映像に応じたレイアウトパターンを自動生成し、該映像を所定の大きさに拡大縮小させる自動レイアウト機能を有するレイアウト装置が開示されている。

特開平２－１４３３８０号公報

　しかしながら、デザイナー等のプロの知識を持ち合わせないユーザにとっては、奥行き感を強調させるなどの特殊な処理が施された映像の効果的なレイアウトを適切に行うことは困難であるという問題があった。
　特許文献１に開示されたレイアウト装置によれば、入力された映像に応じたレイアウトパターンを作成することができるが、映像処理の効果を考慮した映像の配列は行われていない。従って、映像の配列方法によっては、該映像に施された映像処理の効果が損なわれることがあった。

　本発明は斯かる事情に鑑みてなされたものであり、奥行き感を強調させる映像処理が施された映像を、奥行き感強調処理の効果が損なわれないように配列させることができる映像処理装置、映像処理方法及びコンピュータプログラムを提供することを目的とする。

　本発明に係る映像処理装置は、複数の映像を配列させる映像処理装置において、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得する映像特徴取得手段と、該映像特徴取得手段にて取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列させる手段とを備えることを特徴とする。

　本発明に係る映像処理方法は、複数の映像を配列させる映像処理方法において、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得するステップと、背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得するステップと、取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定するステップと、取得した前記一つの映像及び他の映像を、配置領域の決定結果に基づいて、配列させるステップとを備えることを特徴とする。

　本発明に係るコンピュータプログラムは、コンピュータに、複数の映像を配列してなる映像を生成させるコンピュータプログラムにおいて、コンピュータを、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得する映像特徴取得手段と、該映像特徴取得手段にて取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列してなる映像を生成させる手段として機能させることを特徴とする。

　本発明にあっては、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像と、他の映像を配列する際、一つの映像に含まれる背景映像部分の大きさと、該背景映像部分から飛び出す移動体映像部分の移動範囲を考慮して、前記一つの映像を配置する。

　本発明に係る映像処理装置は、複数の映像を配列させる映像処理装置において、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、該映像取得手段にて取得した映像に基づいて、該映像に含まれる背景映像部分の大きさ及び移動体映像部分の移動範囲を算出する映像特徴算出手段と、該映像特徴算出手段にて算出した大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列させる手段とを備えることを特徴とする。

　本発明に係る映像処理方法は、複数の映像を配列させる映像処理方法において、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得するステップと、取得した映像に基づいて、該映像に含まれる背景映像部分の大きさ及び移動体映像部分の移動範囲を算出するステップと、算出した大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定するステップと、取得した前記一つの映像及び他の映像を、配置領域の決定結果に基づいて、配列させるステップとを備えることを特徴とする。

　本発明に係るコンピュータプログラムは、コンピュータに、複数の映像を配列してなる映像を生成させるコンピュータプログラムにおいて、コンピュータを、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、該映像取得手段にて取得した映像に基づいて、該映像に含まれる背景映像部分の大きさ及び移動体映像部分の移動範囲を算出する映像特徴算出手段と、該映像特徴算出手段にて算出した大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列してなる映像を生成させる手段として機能させることを特徴とする。

　本発明にあっては、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像と、他の映像を配列する際、該一つの映像に基づいて、該背景映像部分の大きさと、移動体映像部分の移動範囲とを算出する。そして、背景映像部分の大きさと、該背景映像部分から飛び出す移動体映像部分の移動範囲を考慮して、前記一つの映像を配置する。

　本発明に係る映像処理装置は、前記配置決定手段は、移動体映像部分が、複数の映像を配列してなる映像の内側に収まるように、前記一つの映像の配置領域を決定するようにしてあることを特徴とする。

　本発明にあっては、複数の映像を配列して得られる映像の周縁部から、移動体映像部分がはみ出すことは無い。

　本発明に係る映像処理装置は、複数の映像が配されるべき複数の配置領域を示した配置情報を取得する配置情報取得手段を備え、前記配置決定手段は、前記配置情報取得手段にて取得した配置情報が示す複数の配置領域の中から、特定の配置領域を決定するようにしてあることを特徴とする。

　本発明にあっては、複数の映像が配されるべき複数の配置領域を示した配置情報を取得し、該複数の配置領域の中から、前記一つの映像が配される特定の配置領域を選択する。

　本発明に係る映像処理装置は、前記一つの映像の大きさを、背景映像部分が配置領域に収まるように変更する手段を備え、前記配置決定手段は、背景映像部分の大きさが最大になる配置領域を決定するようにしてあることを特徴とする。

　本発明にあっては、前記一つの映像の大きさが最大になるように、該一つの映像の配置領域を決定する。

　本発明に係る映像処理装置は、背景映像部分及び移動体映像部分を含む一つの映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段を備えることを特徴とする。

　本発明にあっては、背景映像部分、周縁映像部分及び移動体映像部分を含む映像と、背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶手段が記憶している。

　本発明に係る映像処理装置は、複数の映像を配列させる映像処理装置において、複数の映像が配されるべき配置領域を示した配置情報を取得する配置情報取得手段と、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段と、該記憶手段が記憶している情報が示す大きさ及び移動範囲に基づいて、前記配置情報取得手段にて取得した配置情報が示した配置領域に配することが可能な一つの映像を前記記憶手段から取得する映像取得手段と、前記一つの映像及び他の映像を配列させる手段とを備えることを特徴とする。

　本発明に係る映像処理方法は、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段を用いて、複数の映像を配列させる映像処理方法において、複数の映像が配されるべき配置領域を示した配置情報を取得するステップと、取得した配置情報が示した配置領域に配することが可能な一つの映像を、前記記憶手段が記憶している情報が示す大きさ及び移動範囲に基づいて、前記記憶手段から取得するステップと、取得した前記一つの映像及び他の映像を配列させるステップとを備えることを特徴とする。

　本発明に係るコンピュータプログラムは、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段を備えたコンピュータに、複数の映像を配列してなる映像を生成させるコンピュータプログラムにおいて、コンピュータを、複数の映像が配されるべき配置領域を示した配置情報を取得する配置情報取得手段と、前記記憶手段が記憶している情報が示す大きさ及び移動範囲に基づいて、前記配置情報取得手段にて取得した配置情報が示した配置領域に配することが可能な一つの映像を前記記憶手段から取得する映像取得手段と、前記一つの映像及び他の映像を配列してなる映像を生成させる手段として機能させることを備えることを特徴とする。

　本発明にあっては、背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像が複数ある。複数の映像を配列させる際、背景映像部分の大きさと、該背景映像部分から飛び出す移動体映像部分の移動範囲を考慮して、複数ある映像の中から一つの映像を選択し、配置する。

　本発明によれば、奥行き感を強調させる映像処理が施された映像を、奥行き感強調処理の効果が損なわれないように配列させることができる。

本発明の実施の形態１に係る映像処理システムの一構成例を示すブロック図である。 奥行き強調処理対象の映像の一例を示す説明図である。 奥行き強調処理が施された映像の一例を示す説明図である。 一のフレームにおける枠形状情報を概念的に示す説明図である。 一のフレームにおける動き情報を概念的に示す説明図である。 他のフレームにおける枠形状情報を概念的に示す説明図である。 他のフレームにおける動き情報を概念的に示す説明図である。 配置レイアウト情報及び配置情報を概念的に示す説明図である。 配置レイアウト情報及び配置情報を概念的に示す説明図である。 奥行き強調処理が施された映像を配することにより得られた映像を概念的に示す説明図である。 複数の映像を配列させることにより得られた映像を概念的に示す説明図である。 本実施の形態１に係る映像処理装置の効果を説明するための第１の比較例を示す説明図である。 本実施の形態１に係る映像処理装置の効果を説明するための第２の比較例を示す説明図である。 本実施の形態１に係る映像処理方法の手順を示すフローチャートである。 映像配置領域の決定に係る処理手順を示すフローチャートである。 配置領域適否検査に係る処理手順を示すフローチャートである。 変形例に係る映像処理システムの一構成例を示すブロック図である。 本実施の形態２に係る映像処理システムの一構成例を示すブロック図である。 本実施の形態２に係る配置レイアウト及び配置情報を概念的に示す説明図である。 本実施の形態２に係る配置レイアウト及び配置情報を概念的に示す説明図である。 記憶部が記憶している複数の映像における枠形状情報及び動き情報を概念的に示す説明図である。 記憶部が記憶している複数の映像における枠形状情報及び動き情報を概念的に示す説明図である。 本実施の形態２に係る映像処理方法の手順を示すフローチャートである。 配置映像の選択に係る処理手順を示すフローチャートである。 本実施の形態２における映像適否検査に係る処理手順を示すフローチャートである。 本実施の形態３に係る映像処理システムの一構成例を示すブロック図である。

　以下、本発明の実施の形態を図面に基づいて詳述する。
（実施の形態１）
　図１は、本発明の実施の形態１に係る映像処理システムの一構成例を示すブロック図である。本実施形態１に係る映像処理システムは、映像処理装置１、奥行き強調処理装置２、記憶部３及び出力装置４を有する。

　奥行き強調処理装置２は、立体感又は奥行き感を向上させる奥行き強調処理対象の映像を取得し、取得した映像の立体感・奥行き感を強調させる処理を行い、奥行き強調処理が施された映像を記憶部３に与える。また、奥行き強調処理装置２は、奥行き強調処理が施された映像の特徴を示した映像特徴情報を記憶部３に与える。映像特徴情報の詳細は後述する。

　図２は、奥行き強調処理対象の映像の一例を示す説明図である。奥行き強調処理対象の映像５は、動画であり、時系列の複数のフレーム５１，５２を含む。図２には、第ｎのフレーム５１から第ｎ＋ｍのフレーム５２までの各フレームを展開した様子を概念的に示している。フレーム５１，５２は、静止映像であって、二次元に配列された複数の画素夫々の輝度及び色を示したデータであり、奥行き方向の距離が異なる複数のオブジェクト、例えば鳥、木、太陽、空、雲等の被写体に相当する映像部分から構成されている。ここでは、映像５を構成するフレーム５１，５２は、奥行き方向の距離が長い背景映像部分５１ａ，５２ａと、奥行き方向の距離が短い移動体映像部分５１ｂ，５２ｂとで構成されているとする。奥行き方向の距離とは、オブジェクトに係る被写体と、所定位置、例えば該映像の撮像に用いた撮影装置の位置との距離をいう。以下、該距離を適宜、奥行きという。映像５は、所定の符号化方式、例えばＭＰＥＧ－２（Moving Picture Expert Group phase2）、若しくはＭｏｔｉｏｎ－ＪＰＥＧ２０００などの任意の圧縮方式で符号化されている。なお、言うまでもなく、映像５は、非圧縮であっても良い。

　図３は、奥行き強調処理が施された映像の一例を示す説明図である。奥行き強調処理が施された映像６は、時系列の複数のフレーム６１，６２を含む。図３には、図２と同様、奥行き強調処理が施された第ｎのフレーム６１から第ｎ＋ｍのフレーム６２までの各フレームを展開した様子を概念的に示している。各フレーム６１，６２は、背景映像部分６１ａ，６２ａ、背景映像部分６１ａ，６２ａの周縁の外側の一部又は全部に配された周縁映像部分６１ｄ，６２ｄ、背景映像部分６１ａ、６２ａを囲む枠オブジェクト６１ｃ，６２ｃ、及び背景映像部分６１ａ，６２ａから枠オブジェクト６１ｃ，６２ｃを乗り越えて周縁映像部分６１ｄ，６２ｄへ飛び出す移動体映像部分６１ｂ，６２ｂを含む。映像６は、例えば、以下の手順で生成される。
　奥行き強調処理装置２は、映像５と共に、フレーム５１，５２を構成する複数のオブジェクト夫々の奥行きを示した奥行き情報を取得する。本実施の形態では、奥行き方向における撮影装置及び各被写体間の距離を撮像時に計測しておき、計測して得られた距離の情報を有する奥行き情報である。奥行き強調処理装置２は、取得した映像５の各フレーム５１，５２を、奥行き情報に基づいて、背景映像部分５１ａ，５２ａと、前景映像部分である移動体映像部分５１ｂ，５２ｂとに分割する。そして、奥行き強調処理装置２は、図３に示すように、背景映像部分６１ａ，６２ａの一部に、奥行きを強調するための枠オブジェクト６２ｃを重畳させ、更に背景映像部分６１ａ，６２ａ及び枠オブジェクト６２ｃの上に移動体映像部分６１ｂ，６２ｂである鳥の映像部分を重畳する。次いで、奥行き強調処理装置２は、枠オブジェクト６１ｃ，６２ｃの外側の領域、即ち周縁映像部分６１ｄ，６２ｄを任意の色で塗りつぶす。このようにして、各オブジェクト間の重畳関係を描写することによって、二次元的に描写されたオブジェクトの一部が恰も現実世界の三次元空間に飛び出しているように錯覚を起こさせ、二次元の映像に立体感又は奥行き感を付与することができる。

　記憶部３は、例えば、ハードディスク、光ディスク、光磁気ディスク、半導体メモリなどで構成されており、奥行き強調処理装置２から与えられた映像６及び映像特徴情報、並びにその他のコンテンツ映像を記憶する。また、記憶部３は、映像６及びその他のコンテンツ映像が配される配置レイアウト８の映像データである配置レイアウト情報と、映像６及びその他のコンテンツ映像を配列してなる映像を配置するためのレイアウトに関する配置情報とを記憶する。配置情報の詳細は後述する。なお、映像特徴情報及び配置情報は、例えばＸＭＬ（eXtensible Markup Language）のような構造化されたデータとして記憶部３に格納されている。

　映像処理装置１は、記憶部３から映像６を取得する映像取得部１１と、記憶部３から映像特徴情報を取得する映像特徴取得部１２と、記憶部３から配置レイアウト情報及び配置情報を取得する配置情報取得部１３と、映像特徴情報及び配置情報に基づいて、映像６の配置領域を決定する配置決定部１４と、決定した配置領域に従って映像６及びその他のコンテンツ映像を配列させた映像を合成する映像合成部１５とを有する。

＜映像取得部＞
　映像取得部１１は、記憶部３が記憶している映像６及びその他のコンテンツ映像を取得し、取得した映像６及びコンテンツ映像を映像合成部１５に与える。なお、映像６が符号化されている場合、映像取得部１１は、映像６をＲＧＢ形式又はＹＵＶ形式などの映像６に複合する処理を行う。以下、本実施の形態１では、複合後の映像６について処理を行うものとする。また、本実施の形態１では記憶部３から取得する映像はユーザの指示などにより一意に決定されているものとする。

＜映像特徴取得部＞
　映像特徴取得部１２は、記憶部３が記憶している映像特徴情報を取得し、取得した映像特徴情報を配置決定部１４に与える。映像特徴情報は、枠オブジェクト６１ｃ，６２ｃの大きさを示した枠形状情報と、移動体映像部分６１ｂ，６２ｂの移動範囲を示した動き情報を含む。

　図４は、一のフレーム６１における枠形状情報を概念的に示す説明図である。図４に示すように、枠形状情報は、枠オブジェクト６１ｃに外接する長方形の幅Ｗｆと、高さＨｆとを含む情報である。但し、図４に示す例では、枠オブジェクト６１ｃは長方形であるため、枠オブジェクト６１ｃの幅及び高さと、枠オブジェクト６１ｃに外接する長方形の幅Ｗｆ及び高さＨｆは一致している。

　図５は、一のフレーム６２における動き情報を概念的に示す説明図である。図５に示すように、移動体映像部分６２ｂの動き情報は、移動体映像部分６２ｂが背景映像部分６２ａから枠オブジェクト６２ｃを乗り越えて、周縁映像部分６２ｄへ飛び出す上下左右方向の最大の飛び出し距離を含む情報である。図５中、太線矢印は、移動体映像部分６２ｂの動きを示した動きベクトル６２ｖである。以下、移動体映像部分６２ｂの左方向の最大飛び出し距離をＤｌ、右方向の最大飛び出し距離をＤｒ、上方向の最大飛び出し距離をＤｕ、下方向の最大飛び出し距離をＤｂと表す。なお、図５に示す例では、右方向の最大飛び出し距離Ｄｒ以外の、最大飛び出し距離はＤｕ＝Ｄｌ＝Ｄｂ＝０であるため図示されていない。

　図６は、他のフレーム７１における枠形状情報を概念的に示す説明図である。図６に示す例では、フレーム７１は、背景映像部分７１ａ及び枠オブジェクト７１ｃが左下側に配されており、フレーム７１の右側部分及び上側部分に周縁映像部分７１ｄが配されている。そして、移動体映像部分７１ｂは、上側に飛び出している。この場合、映像特徴取得部１２は、左下側に配された枠オブジェクト７１ｃに外接する長方形の幅Ｗｆ及び高さＨｆを含む枠形状情報を取得する。

　図７は、他のフレームにおける動き情報を概念的に示す説明図である。フレーム７２は、背景映像部分７２ａ及び枠オブジェクト７２ｃが左下側に配されており、周縁部の右側部分及び上側部分に周縁映像部分７２ｄが配されている。そして、移動体映像部分７２ｂは、右上に飛び出している。移動体映像部分７２ｂが背景映像部分７２ａから右上に飛び出している場合、飛び出し距離Ｄｒ，Ｄｕが有限の値になる。その他の距離はＤｌ＝Ｄｂ＝０であるため図示されていない。なお、図７中、太線矢印は、移動体映像部分７２ｂの動きを示した動きベクトル７２ｖである。

＜配置情報取得部＞
　配置情報取得部１３は、記憶部３が記憶している配置レイアウト情報及び配置情報を取得し、取得した配置情報を配置決定部１４に与える。

　図８Ａ及び図８Ｂは、配置レイアウト情報及び配置情報を概念的に示す説明図である。図８Ａは、配置レイアウト情報を概念的に示した説明図、図８Ｂは、配置情報の具体的な内容を概念的に示した説明図である。図８Ａに示すように、配置レイアウト情報によって表される配置レイアウト８は、映像６と、図表、文字など等の他のコンテンツ映像とが配されるべき複数の配置領域８１，８２，８３，８４を含む映像である。各配置領域８１，８２，８３，８４は、例えば、略長方形であり、各配置領域８１，８２，８３，８４には、映像６及びその他のコンテンツ映像が嵌め込まれるようにして配列される。
　配置情報は、図８Ｂに示すように、配置領域８１，８２，８３，８４の上辺、下辺、左辺及び右辺から配置レイアウト８の外周縁までの距離Ｌｕ，Ｌｂ，Ｌｌ，Ｌｒ、長方形の配置領域８１，８２，８３，８４自身の幅Ｗｔ及び高さＨｔの情報を含む。なお、図８Ｂには、配置領域８２に関する各距離、幅及び高さのみが図示されているが、他の配置領域８１，８３，８４についても同様である。

＜配置決定部＞
　配置決定部１４は、映像特徴取得部１２及び配置情報取得部１３から与えられた映像特徴情報、及び配置情報に基づいて、映像６及び他のコンテンツ映像を配置すべき配置領域８１，８２，８３，８４を決定し、映像６及び他のコンテンツ映像と、配置領域８１，８２，８３，８４とを対応付けた配置決定結果情報と、配置レイアウト情報とを映像合成部１５に与える。配置決定部１４は、映像６を拡大又は縮小し、背景映像部分６１ａ，６２ａ及び枠オブジェクト６１ｃ，６２ｃの外周縁と、配置領域８１の外縁とを合わせるように配置した場合、移動体映像部分６１ｂ，６２ｂが、配置レイアウト８の映像内に収まるか否かを判定する。同様にして、配置領域８２，８３，８４に映像６を拡大又は縮小して配置した場合、移動体映像部分６１ｂ，６２ｂが、配置レイアウト８の映像内に収まるか否かを判定する。そして、移動体映像部分６１ｂ，６２ｂが、配置レイアウト８の映像内に収まり、かつ、背景映像部分６１ａ，６２ａの大きさが最大になる配置領域８１，８２，８３，８４を、映像６の配置領域として決定する。その他のコンテンツ映像の配置は、該コンテンツ映像の大きさに基づいて、配置決定部１４によって適宜決定される。映像６の配置領域の決定方法の詳細は、後述する。

＜映像合成部＞
　映像合成部１５は、配置決定部１４から与えられた配置決定結果情報及び配置レイアウト情報と、映像取得部１１から与えられた映像６及びその他のコンテンツ映像とを取得する。そして、映像合成部１５は、取得した配置決定結果情報に基づいて、映像６及びその他のコンテンツ映像を拡大又は縮小し、拡大又は縮小された映像６及びコンテンツ映像を配置レイアウト８に配列してなる映像を生成する。映像合成部１５は、生成された映像を出力装置４に与える。

　図９は、奥行き強調処理が施された映像を配することにより得られた映像を概念的に示す説明図である。映像６は、例えば図９に示すように、配置領域８２に配される。なお、図９には映像６を構成するフレーム６２が図示されている。映像６は、枠オブジェクト６２ｃの外縁と、配置領域８２の外縁とが略一致するように拡大又は縮小され、配置領域８２に枠オブジェクト６２ｃが嵌め込まれるよう、枠オブジェクト６２ｃの中心点と、配置領域８２の中心点を一致させた位置に映像６が配される。また、映像６を配する場合、映像合成部１５は、周縁映像部分６２ｄに透過処理を施すため、図９上には現れない。このように映像６を配することによって、移動体映像部分６２ｂが枠オブジェクト６２ａを乗り越えて他の配置領域へ飛び出したような構図の映像が得られる。

　図１０は、複数の映像を配列させることにより得られた映像を概念的に示す説明図である。図１０に示すように、他の配置領域８１，８３，８４には、他のコンテンツ映像６ａ，６ｂ，６ｃが配置される。

　出力装置４は、例えば液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイであり、映像合成部１５から与えられた映像を表示する。

　図１１は、本実施の形態１に係る映像処理装置１の効果を説明するための第１の比較例を示す説明図、図１２は、本実施の形態１に係る映像処理装置１の効果を説明するための第２の比較例を示す説明図である。図１１には、フレーム６１，６２を、配置レイアウト８の配置領域８３の外縁と、フレーム６１，６２の外縁とが一致するように拡大又は縮小し、拡大又は縮小されたフレーム６１，６２を配置領域８３に嵌め込むように配置してなる映像が示されている。このようにフレーム６１，６２を配置した場合、移動体映像部分６２ｂの飛び出しが行われない無駄な映像空間８５が発生してしまう。
　また、図１２には、フレーム６１，６２を、配置レイアウト８の配置領域８３の外縁と、枠オブジェクト６１ｃ、６２ｃの外縁とが一致するように拡大又は縮小し、拡大又は縮小されたフレーム６１，６２を配置領域８３に嵌め込むように配置してなる映像が示されている。このようにフレーム６１，６２を配置した場合、移動体映像部分６２ｂが配置レイアウト８の映像からはみ出してしまい、奥行き感の強調効果が薄れてしまう。

　一方、図９、図１０で説明した本実施の形態１に係る方法で、映像６のフレーム６１，６２を配置領域８２に配した場合、無駄な映像空間８５を発生させることなく、大きな映像６を、奥行き感強調処理の効果が損なわれないように配することができる。

　図１３は、本実施の形態１に係る映像処理方法の手順を示すフローチャートである。まず、映像取得部１１は、記憶部３が記憶している映像６及びその他のコンテンツ映像を取得し、取得した映像６及びコンテンツ映像を映像合成部１５に与える（ステップＳ１１）。そして、映像特徴取得部１２は、記憶部３が記憶している映像特徴情報を取得し、取得した映像特徴情報を配置決定部１４に与え（ステップＳ１２）、配置情報取得部１３は、記憶部３が記憶している配置レイアウト情報及び配置情報を取得し、取得した配置レイアウト情報及び配置情報を配置決定部１４に与える（ステップＳ１３）。

　次いで、配置決定部１４は、映像特徴取得部１２及び配置情報取得部１３から与えられた映像特徴情報、並びに配置レイアウト情報及び配置情報に基づいて、映像６及び他のコンテンツ映像を配置すべき配置領域８１，８２，８３，８４を決定し、配置決定結果情報及び配置レイアウト情報を映像合成部１５に与える（ステップＳ１４）。以下、映像６及び他のコンテンツ映像を配置すべき領域として一意に決定された配置領域８１，８２，８３，８４を映像配置領域という。

　図１４は、映像配置領域の決定に係る処理手順を示すフローチャートである。配置決定部１４は、映像配置領域に係る処理を開始した場合、まず、配置情報に基づいて、全ての配置領域８１，８２，８３，８４について映像６の配置の適否を検査したか否かを判定する（ステップＳ３１）。

　全ての配置領域８１，８２，８３，８４について映像６の配置の適否を検査していないと判定した場合（ステップＳ３１：ＮＯ）、配置決定部１４は、未だ検査されていない一つの配置領域８１，８２，８３，８４の適否を検査する（ステップＳ３２）。配置領域の適否検査の処理を開始した配置決定部１４は、下記式（１）～（４）の全てを満たす配置領域８１，８２，８３，８４を映像６の配置領域候補とする。
α＊Ｄｌ≦Ｌｌ…（１）
α＊Ｄｒ≦Ｌｒ…（２）
β＊Ｄｕ≦Ｌｕ…（３）
β＊Ｄｂ≦Ｌｂ…（４）
　但し、
α＝Ｗｔ／Ｗｆ…（５）
β＝Ｈｔ／Ｈｆ…（６）

　上記式（１）～（４）を全て満たす場合、拡大又は縮小後の映像６における左方向、右方向、上方向、下方向の最大飛び出し距離が、配置レイアウト８の外側に達することが無い。つまり、移動体映像部分６１ｂ，６２ｂが配置レイアウト８からはみ出すことは無い。なお上記式（１）～（４）は、背景映像部分６１ａ，６２ａが検査対象の配置領域の幅、高さに合うように拡大率又は縮小率を決めたものであるが、他の方法でα、βを設定しても良いことは言うまでもない。

　図１５は、配置領域適否検査に係る処理手順を示すフローチャートである。
まず、配置決定部１４は、上記式（５）を用いて、映像６の横方向の拡大又は縮小率αを算出し（ステップＳ５１）、次いで、上記式（６）を用いて、映像６の縦方向の拡大又は縮小率βを算出する（ステップＳ５２）。

　次いで、配置決定部１４は、α×Ｄ１が距離Ｌｌ以下であるか否かを判定する（ステップＳ５３）。つまり、拡大又は縮小後の移動体映像部分６１ｂ，６２ｂの飛び出し距離α×Ｄ１が、配置領域８１，８２，８３，８４の左辺から配置レイアウト８の左辺までの距離Ｌｌ以下であるか否かを判定する。

　α×Ｄ１が距離Ｌｌ以下であると判定した場合（ステップＳ５３：ＹＥＳ）、配置決定部１４は、α×Ｄｒが距離Ｌｒ以下であるか否かを判定する（ステップＳ５４）。つまり、拡大又は縮小後の移動体映像部分６１ｂ，６２ｂの飛び出し距離α×Ｄｒが、配置領域８１，８２，８３，８４の右辺から配置レイアウト８の右辺までの距離Ｌｒ以下であるか否かを判定する。

　α×Ｄｒが距離Ｌｒ以下であると判定した場合（ステップＳ５４：ＹＥＳ）、配置決定部１４は、β×Ｄｕが距離Ｌｕ以下であるか否かを判定する（ステップＳ５５）。つまり、拡大又は縮小後の移動体映像部分６１ｂ，６２ｂの飛び出し距離β×Ｄｕが、配置領域８１，８２，８３，８４の上辺から配置レイアウト８の上辺までの距離Ｌｕ以下であるか否かを判定する。

　β×Ｄｕが距離Ｌｕ以下であると判定した場合（ステップＳ５５：ＹＥＳ）、配置決定部１４は、β×Ｄｂが距離Ｌｂ以下であるか否かを判定する（ステップＳ５６）。つまり、拡大又は縮小後の移動体映像部分６１ｂ，６２ｂの飛び出し距離β×Ｄｂが、配置領域８１，８２，８３，８４の下辺から配置レイアウト８の下辺までの距離Ｌｂ以下であるかを判定する。

　β×Ｄｂが距離Ｌｂ以下であると判定した場合（ステップＳ５６：ＹＥＳ）、配置決定部１４は、検査対象の配置領域８１，８２，８３，８４を配置領域候補とし（ステップＳ５７）、処理を終える。

　α×Ｄ１が距離Ｌｌより大きいと判定した場合（ステップＳ５３：ＮＯ）、α×Ｄｒが距離Ｌｒより大きいと判定した場合（ステップＳ５４：ＮＯ）、β×Ｄｕが距離Ｌｕより大きいと判定した場合（ステップＳ５５：ＮＯ）、β×Ｄｂが距離Ｌｂより大きいと判定した場合（ステップＳ５６：ＮＯ）、配置決定部１４は、検査対象の配置領域８１，８２，８３，８４を非配置領域候補であるとし（ステップＳ５８）、処理を終える。

　図１４に戻り、配置領域の適否検査に係る処理を終えた配置決定部１４は、該適否検査の戻り値に基づいて、検査対象の配置領域８１，８２，８３，８４が配置領域候補であるか否かを判定する（ステップＳ３３）。配置領域候補でないと判定した場合（ステップＳ３３：ＮＯ）、配置決定部１４は、処理をステップＳ３１に戻す。配置領域候補であると判定した場合（ステップＳ３３：ＹＥＳ）、配置決定部１４は、配置領域候補である一つの配置領域８１，８２，８３，８４を記憶し（ステップＳ３４）、処理をステップＳ３１に戻す。

　ステップＳ３１で全ての配置領域を検査したと判定した場合（ステップＳ３１：ＹＥＳ）、配置決定部１４は、配置領域候補が少なくとも一つあるか否かを判定する（ステップＳ３５）。配置領域候補が一つもないと判定した場合（ステップＳ３５：ＮＯ）、配置決定部１４は、映像の配置に関してエラーがあった旨を記憶し（ステップＳ３９）、処理を終える。配置領域候補が少なくとも一つあると判定した場合（ステップＳ３５：ＹＥＳ）、配置決定部１４は、配置領域候補が複数であるか否かを判定する（ステップＳ３６）。

　配置領域候補が複数あると判定した場合（ステップＳ３６：ＹＥＳ）、映像６を配すべき一つの配置領域に絞り込む（ステップＳ３７）。複数の配置領域候補から一つの配置領域一意に決定する条件としては、例えば、Ｍａｘ＝α×βを最大化する、即ち映像６が一番大きく表示される配置領域８１，８２，８３，８４を選択することが挙げられる。また、Ｍｉｎ＝｜１－α｜＊｜１－β｜を最小化する、即ち映像６を可能な限り原寸大に近いサイズで表示可能な配置領域を選択するものとしても良い。また、別途ユーザの指示を受け付け、複数の配置領域候補８１，８２，８３，８４の中から１つの配置領域８１，８２，８３，８４を選択するように構成しても良い。

　ステップＳ３７の処理を終えた場合、又はステップＳ３６で配置領域候補が単数であると判定した場合（ステップＳ３６：ＮＯ）、配置決定部１４は、絞り込まれた一つの配置領域８１，８２，８３，８４を決定し（ステップＳ３８）、処理を終える。

　図１３に戻り、映像配置領域の決定に係る処理を終えた後、配置決定部１４は、映像６の配置に関してエラーがあったか否かを判定する（ステップＳ１５）。エラーがあったと判定した場合（ステップＳ１５：ＹＥＳ）、配置決定部１４は処理を終える。エラーがなかったと判定した場合（ステップＳ１５：ＮＯ）、映像合成部１５は、拡大又は縮小率α及びβを用いて、映像６を拡大又は縮小する（ステップＳ１６）。そして、映像合成部１５は、拡大又は縮小された映像６と、その他のコンテンツ映像とを、配置レイアウト８上に配列してなる映像を生成し（ステップＳ１７）、処理を終える。

　このように構成された本実施の形態１に係る映像処理システムによれば、奥行き感を強調させる処理が施された映像を、奥行き感強調処理の効果が損なわれないように配列させることができる。

（変形例）
　図１６は、変形例に係る映像処理システムの一構成例を示すブロック図である。変形例に係る映像処理システムは、実施の形態１と同様の奥行き強調処理装置２、映像処理装置１０１、記憶部３及び出力装置４を有し、映像処理装置１０１が映像特徴情報を記憶部３から取得するのでは無く、映像に基づいて映像特徴情報を算出するように構成してある点が異なる。以下では主に上記相異点を説明する。

　映像処理装置１０１は、映像取得部１１１、映像特徴算出部１１２、配置情報取得部１３、配置決定部１４及び映像合成部１５を有する。映像特徴算出部１１２以外の構成は、実施の形態１と同様である。

　映像特徴算出部１１２は、記憶部３が記憶している映像６を取得し、取得した映像６に基づいて、映像特徴情報を算出し、算出した映像特徴情報を配置決定部１４に与える。映像特徴算出部１１２は、例えば、テクスチャ解析、パターンマッチング等のパターン認識によって、映像６に含まれる枠オブジェクト６１ｃ，６２ｃを認識し、枠オブジェクト６１ｃ，６２ｃに外接する長方形の短辺及び長辺の長さ、つまり枠形状情報を算出する。より具体的には、テクスチャ解析機能を有する映像特徴算出部１１２は、映像６から略同一の映像パターンを有する映像領域を抽出し、各フレーム６１，６２に共通する映像領域を枠オブジェクト６１ｃ，６２ｃとして認識するように構成すれば良い。また、パターンマッチング機能を有する映像特徴算出部１１２は、枠オブジェクト６１ｃ，６２ｃのテンプレート映像を記憶しており、映像６と、該テンプレート映像との一致度、例えばユークリッド距離等を算出し、相関が高い映像領域を枠オブジェクト６１ｃ，６２ｃとして認識するように構成すれば良い。
　また、映像特徴算出部は、枠オブジェクト６１ｃ，６２ｃの外側にはみ出している非周辺映像部分を移動体映像部分６１ｂ、６２ｂとして認識し、動き情報を算出することができる。

　変形例１によれば、映像特徴情報を予め用意し、記憶部３に記憶させておかなくても、実施の形態１と同様の効果を奏する。

（実施の形態２）
　図１７は、本実施の形態２に係る映像処理システムの一構成例を示すブロック図である。実施の形態２に係る映像処理システムは、実施の形態１と同様の映像処理装置２０１、奥行き強調処理装置２、記憶部３及び出力装置４を有する。実施の形態２に係る映像処理システムは、配置レイアウト２０８に映像２０６，２０７が配される配置領域が予め確定されており、特定の配置領域に適した映像２０６，２０７を、記憶部３が記憶する複数の映像２０６，２０７の中から選択するように構成してある点が異なる。以下では主に上記相異点を説明する。

　映像処理装置２０１は、映像選択部２１２、配置情報取得部２１３、配置決定部２１４、及び映像合成部１５を有する。配置情報取得部２１３及び映像選択部２１２以外の構成は、実施の形態１と同様である。

　配置情報取得部２１３は、記憶部３が記憶している配置レイアウト情報及び配置情報を取得し、取得した配置情報を映像選択部２１２に与え、取得した配置レイアウト情報及び配置情報を配置決定部２１４に与える。
　図１８Ａ及び図１８Ｂは、本実施の形態２に係る配置レイアウト２０８及び配置情報を概念的に示す説明図である。図１８Ａは、配置レイアウト情報を概念的に示した説明図、図１８Ｂは、配置情報の具体的な内容を概念的に示した説明図である。図１８Ａに示すように、配置レイアウト情報によって表される配置レイアウト２０８は、基本的には実施の形態１における配置レイアウトと同様である。ただし、奥行き強調処理が施された映像２０６，２０７を配すべき配置領域は予め定められている。図１８Ａ中、実線で囲まれた配置領域２８１は、奥行き強調処理が施された映像２０６，２０７が配されるべき領域を示している。
　配置情報は、図１８Ｂに示すように、配置領域２８１，２８２，２８３，２８４の上辺、下辺、左辺及び右辺から配置レイアウト２０８の外周縁までの距離Ｌｕ，Ｌｂ，Ｌｌ，Ｌｒ、長方形の配置領域２８１，２８２，２８３，２８４自身の幅Ｗｔ及び高さＨｔの情報を含む。なお、図１８Ｂには、配置領域２８１に関する各距離、幅及び高さのみが図示されているが、他の配置領域２８２，２８３，２８４についても同様である。また、配置情報は、奥行き強調処理が施された映像２０６，２０７が配されるべき配置領域を特定するための情報を含む。

　映像選択部２１２は、記憶部３が記憶している複数の映像それぞれの映像特徴情報を取得する映像特徴取得部２１２ａと、映像特徴取得部２１２ａにて取得した映像特徴情報、及び配置情報取得部２１３から与えられた配置情報に基づいて、一つの映像２０６，２０７を選択し、選択された一つの映像２０６，２０７及び他のコンテンツ映像を取得する映像取得部２１２ｂとを含む。映像取得部２１２ｂは、選択された映像２０６，２０７及び他のコンテンツ映像を映像合成部１５に与える。

　図１９Ａ及び図１９Ｂは、記憶部３が記憶している複数の映像２０６，２０７における枠形状情報及び動き情報を概念的に示す説明図である。特に図１９Ａは、第１の映像２０６の枠形状情報及び動き情報を示す説明図、図１９Ｂは、第２の映像２０７の枠形状情報及び動き情報を示す説明図である。枠形状情報は、実施の形態１と同様、枠オブジェクト２６１ｃ，２７１ｃに外接する長方形の幅Ｗｆと、高さＨｆとを含む情報である。また、移動体映像部分２６１ｂ、２７１ｂの動き情報は、移動体映像部分２６１ｂ、２７１ｂが背景映像部分２６１ａ，２７１ａから枠オブジェクト２６１ｃ，２７１ｃを乗り越えて、周縁映像部分２６１ｄ，２７１ｄへ飛び出す上下左右方向の最大の飛び出し距離を含む情報である。映像２０６，２０７が異なれば、基本的に枠形状情報及び動き情報も異なる。なお、図１９中、太線矢印は、移動体映像部分２６１ｂ，２７１ｂの動きを示した動きベクトル２６１ｖ，２７１ｖである。

　図２０は、本実施の形態２に係る映像処理方法の手順を示すフローチャートである。まず、配置情報取得部２１３は、記憶部３が記憶している配置レイアウト情報及び配置情報を取得し、取得した配置情報を映像選択部２１２に与え、取得した配置レイアウト情報及び配置情報を配置決定部２１４に与える（ステップＳ２１１）。そして、映像選択部２１２は、配置情報取得部２１３から与えられた配置情報に基づいて、奥行き強調処理が施された映像２０６，２０７が配されるべき配置領域２８１を特定する（ステップＳ２１２）。配置情報には、各配置領域２８１，２８２，２８３，２８４の左端、上端、右端、下端からの距離Ｌｌ、Ｌｔ、Ｌｒ、Ｌｂと、配置領域２８１，２８２，２８３，２８４の幅Ｗｔ及び高さＨｔと、奥行き強調処理が施された映像２０６，２０７が配されるべき配置領域２８１を特定するための特定情報とが含まれている。映像選択部２１２は、配置情報に含まれる該特定情報を用いて、映像２０６，２０７が配されるべき配置領域２８１を特定する。

　次いで、映像選択部２１２は、記憶部３が記憶している複数の映像２０６，２０７の中から、配置領域２８１に配置すべき一つの映像２０６，２０７を選択し、選択された一つの映像２０６，２０７及び他のコンテンツ映像を記憶部３から取得し、取得した一つの映像２０６，２０７及び他のコンテンツ映像を映像合成部１５に与える（ステップＳ２１３）。

　図２１は、配置映像の選択に係る処理手順を示すフローチャートである。映像選択部２１２は、配置映像の選択に係る処理を開始した場合、まず、記憶部３が記憶している全ての映像２０６，２０７について配置の適否を検査したか否かを判定する（ステップＳ２３１）。

　全ての映像２０６，２０７について配置の適否を検査していないと判定した場合（ステップＳ２３１：ＮＯ）、映像選択部２１２は、未だ検査されていない一つの映像２０６，２０７を記憶部３から取得し（ステップＳ２３２）、取得した映像２０６，２０７に対応する映像特徴情報を取得する（ステップＳ２３３）。なお、本実施の形態２では、映像特徴情報と共に映像２０６，２０７を取得する例を説明したが、映像２０６，２０７を取得せず、映像特徴情報のみを取得するように構成しても良い。

　そして、映像選択部２１２は、配置領域２８１に配置すべき映像２０６，２０７の適否を検査する（ステップＳ２３４）。映像選択部２１２は、実施の形態１と同様、上記式（１）～（４）の全てを満たす映像２０６，２０７を、配置領域２０８に配すべき適当な映像として、映像の適否を検査する。

　図２２は、本実施の形態２における映像適否検査に係る処理手順を示すフローチャートである。映像選択部２１２は、ステップＳ２３２で取得した一つの映像２０６，２０７と、ステップＳ２１２で特定された配置領域２８１と関係について、実施の形態１におけるステップＳ５１～ステップＳ５６と同様の処理をステップＳ２５１～ステップＳ２５６で実行する。そして、ステップＳ２５６で、β×Ｄｂが距離Ｌｂ以下であると判定した場合（ステップＳ２５６：ＹＥＳ）、配置決定部２１４は、検査対象の一つの映像２０６，２０７を、配置領域２８１に配されるべき候補映像とし（ステップＳ２５７）、処理を終える。

　α×Ｄ１が距離Ｌｌより大きいと判定した場合（ステップＳ２５３：ＮＯ）、α×Ｄｒが距離Ｌｒより大きいと判定した場合（ステップＳ２５４：ＮＯ）、β×Ｄｕが距離Ｌｕより大きいと判定した場合（ステップＳ２５５：ＮＯ）、β×Ｄｂが距離Ｌｂより大きいと判定した場合（ステップＳ２５６：ＮＯ）、映像選択部２１２は、検査対象の一つの映像２６０，２０７を、非候補映像であるとし（ステップＳ２５８）、処理を終える。

　図２１に戻り、配置映像の適否検査に係る処理を終えた映像選択部２１２は、該適否検査の戻り値に基づいて、検査対象の映像２０６，２０７が候補映像であるか否かを判定する（ステップＳ２３５）。候補映像でないと判定した場合（ステップＳ２３５：ＮＯ）、配置決定部２１４は、処理をステップＳ２３１に戻す。候補映像であると判定した場合（ステップＳ２３５：ＹＥＳ）、配置決定部２１４は、配置領域２８１に配置すべき候補の映像２０６，２０７を記憶し（ステップＳ２３６）、処理をステップＳ２３１に戻す。

　ステップＳ２３１で全ての映像２０６，２０７を検査したと判定した場合（ステップＳ２３１：ＹＥＳ）、映像選択部２１２は、配置領域２８１に配置する映像の候補が一つもないか否かを判定する（ステップＳ２３７）。候補映像が一つもないと判定した場合（ステップＳ２３７：ＮＯ）、映像選択部２１２は、映像の配置に関してエラーがあった旨を記憶し（ステップＳ２４１）、処理を終える。候補映像が少なくとも一つあると判定した場合（ステップＳ２３７：ＹＥＳ）、映像選択部２１２は、候補映像が複数であるか否かを判定する（ステップＳ２３８）。

　候補映像が複数あると判定した場合（ステップＳ２３８でＹＥＳ）、映像２０６，２０７を一つに絞り込む（ステップＳ２３９）。ステップＳ２３９の後、又は候補映像が複数ないと判定した場合（ステップＳ２３８でＮＯ）、絞り込まれた映像２０６，２０７を、配置領域２８１に配置すべき映像として決定し（ステップＳ２４０）、処理を終える。例えば、映像選択部２１２は、Ｍｉｎ＝｜１－α｜＊｜１－β｜を最小化する、可能な限り原寸大に近いサイズで表示可能な映像２０６，２０７に絞り込む。また、別途ユーザの指示を受け付け、複数の候補映像の中から一つの映像２０６，２０７を選択するように構成しても良い。

　図２０に戻り、配置映像の選択に係る処理を終えた後、配置決定部２１４は、映像２０６，２０７の配置に関してエラーがあったか否かを判定する（ステップＳ２１４）。エラーがあったと判定した場合（ステップＳ２１４：ＹＥＳ）、配置決定部２１４は処理を終える。エラーがなかったと判定した場合（ステップＳ２１４：ＮＯ）、映像合成部１５は、拡大又は縮小率α及びβを用いて、映像２０６、２０７を拡大又は縮小する（ステップＳ２１５）。そして、映像合成部１５は、拡大又は縮小された映像２０６、２０７と、他のコンテンツ映像とを、配置レイアウト２０８上に配列してなる映像を生成し（ステップＳ２１６）、処理を終える。

　このように構成された実施の形態２に係る映像処理システムによれば、実施の形態１と同様の効果を奏する。

（実施の形態３）
　図２３は、本実施の形態３に係る映像処理システムの一構成例を示すブロック図である。実施の形態３に係る映像処理装置３０１は、本発明に係るコンピュータプログラム３０９ａをコンピュータ３０１に実行させることによって実現される。

　コンピュータ３０１は、装置全体を制御するＣＰＵ（Central Processing Unit）３１１を備える。ＣＰＵ３１１は、ＲＯＭ（Read Only Memory）３１２と、演算に伴って発生する一時的な情報を記憶するＲＡＭ（Random Access Memory）３１３と、本発明の実施の形態に係るコンピュータプログラム３０９ａを記録した記録媒体３０９、例えばＣＤ－ＲＯＭからコンピュータプログラム３０９ａを読み取る外部記憶装置３１４と、外部記憶装置３１４により読み取ったコンピュータプログラム３０９ａを記録するハードディスク等の内部記憶装置３１５と、入力部３１６と、出力部３１７とが接続されている。ＣＰＵ３１１は、内部記憶装置３１５からコンピュータプログラム３０９ａをＲＡＭ３１３に読み出して各種演算処理を実行することによって、本発明に係る映像処理方法を実施する。ＣＰＵ３１１の処理手順は、図１３及び図１５に示す通りであり、ステップＳ１１～１７、ステップＳ３１～３９、及びステップＳ５１～５８の処理手順を実行する。該処理手順は、本実施の形態１及び変形例に係る映像処理装置１、１０１を構成した各構成部の処理内容と同様であるため、その詳細な説明を省略する。

　実施の形態３に係るコンピュータ３０１及びコンピュータプログラム３０９ａにあっては、コンピュータ３０１を本実施の形態１に係る映像処理装置１として機能させ、また本実施の形態１に係る映像処理方法を実施させることができ、本実施の形態１及び変形例と同様の効果を奏する。

　なお、ＣＰＵに、図２０及び図２２に示す通りであり、ステップＳ２１１～２１６、ステップＳ２３１～２４１、及びステップＳ２５１～２５８の処理手順を実行させるように構成しても良い。該処理手順は、本実施の形態２に係る映像処理装置２０１を構成した各構成部の処理内容と同様であるため、その詳細な説明を省略する。
　このように構成されたコンピュータ及びコンピュータプログラムにあっては、コンピュータを本実施の形態２に係る映像処理装置２０１として機能させ、また本実施の形態２に係る映像処理方法を実施させることができ、本実施の形態２と同様の効果を奏する。

　また、本実施の形態３に係るコンピュータプログラム３０９ａは、言うまでもなく記録媒体３０９に記録されているものに限定されず、有線又は無線の通信網を介してダウンロードし、記憶し、実行されるものであっても良い。

　今回開示された実施の形態はすべての点で例示であって、制限的なものでは無いと考えられるべきである。本発明の範囲は、上記した意味では無く、請求の範囲によって示され、請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。

　１　奥行き強調処理装置
　２　映像処理装置
　３　記憶部
　４　出力装置
　８　配置レイアウト
　１１　映像取得部
　１２　映像特徴取得部
　１３　配置情報取得部
　１４　配置決定部
　１５　映像合成部

Claims (13)

1. 　複数の映像を配列させる映像処理装置において、
   　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、
   　背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得する映像特徴取得手段と、
   　該映像特徴取得手段にて取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、
   　該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列させる手段と
   　を備えることを特徴とする映像処理装置。
2. 　複数の映像を配列させる映像処理装置において、
   　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、
   　該映像取得手段にて取得した映像に基づいて、該映像に含まれる背景映像部分の大きさ及び移動体映像部分の移動範囲を算出する映像特徴算出手段と、
   　該映像特徴算出手段にて算出した大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、
   　該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列させる手段と
   　を備えることを特徴とする映像処理装置。
3. 　前記配置決定手段は、
   　移動体映像部分が、複数の映像を配列してなる映像の内側に収まるように、前記一つの映像の配置領域を決定するようにしてある
   　ことを特徴とする請求項１又は請求項２に記載の映像処理装置。
4. 　複数の映像が配されるべき複数の配置領域を示した配置情報を取得する配置情報取得手段を備え、
   　前記配置決定手段は、
   　前記配置情報取得手段にて取得した配置情報が示す複数の配置領域の中から、特定の配置領域を決定するようにしてある
   　ことを特徴とする請求項１から請求項３までのいずれか一項に記載の映像処理装置。
5. 　前記一つの映像の大きさを、背景映像部分が配置領域に収まるように変更する手段を備え、
   　前記配置決定手段は、
   　背景映像部分の大きさが最大になる配置領域を決定するようにしてある
   　ことを特徴とする請求項４に記載の映像処理装置。
6. 　背景映像部分及び移動体映像部分を含む一つの映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段を備える
   　ことを特徴とする請求項１から請求項５までのいずれか一つに記載の映像処理装置。
7. 　複数の映像を配列させる映像処理装置において、
   　複数の映像が配されるべき配置領域を示した配置情報を取得する配置情報取得手段と、
   　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段と、
   　該記憶手段が記憶している情報が示す大きさ及び移動範囲に基づいて、前記配置情報取得手段にて取得した配置情報が示した配置領域に配することが可能な一つの映像を前記記憶手段から取得する映像取得手段と、
   　前記一つの映像及び他の映像を配列させる手段と
   　を備えることを特徴とする映像処理装置。
8. 　複数の映像を配列させる映像処理方法において、
   　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得するステップと、
   　背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得するステップと、
   　取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定するステップと、
   　取得した前記一つの映像及び他の映像を、配置領域の決定結果に基づいて、配列させるステップと
   　を備えることを特徴とする映像処理方法。
9. 　複数の映像を配列させる映像処理方法において、
   　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得するステップと、
   　取得した映像に基づいて、該映像に含まれる背景映像部分の大きさ及び移動体映像部分の移動範囲を算出するステップと、
   　算出した大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定するステップと、
   　取得した前記一つの映像及び他の映像を、配置領域の決定結果に基づいて、配列させるステップと
   　を備えることを特徴とする映像処理方法。
10. 　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段を用いて、複数の映像を配列させる映像処理方法において、
    　複数の映像が配されるべき配置領域を示した配置情報を取得するステップと、
    　取得した配置情報が示した配置領域に配することが可能な一つの映像を、前記記憶手段が記憶している情報が示す大きさ及び移動範囲に基づいて、前記記憶手段から取得するステップと、
    　取得した前記一つの映像及び他の映像を配列させるステップと
    　を備えることを特徴とする映像処理方法。
11. 　コンピュータに、複数の映像を配列してなる映像を生成させるコンピュータプログラムにおいて、
    　コンピュータを、
    　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、
    　背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を取得する映像特徴取得手段と、
    　該映像特徴取得手段にて取得した情報が示す大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、
    　該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列してなる映像を生成させる手段と
    　して機能させることを特徴とするコンピュータプログラム。
12. 　コンピュータに、複数の映像を配列してなる映像を生成させるコンピュータプログラムにおいて、
    　コンピュータを、
    　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む一つの映像を取得する映像取得手段と、
    　該映像取得手段にて取得した映像に基づいて、該映像に含まれる背景映像部分の大きさ及び移動体映像部分の移動範囲を算出する映像特徴算出手段と、
    　該映像特徴算出手段にて算出した大きさ及び移動範囲に基づいて、前記一つの映像の配置領域を決定する配置決定手段と、
    　該配置決定手段の決定結果に基づいて、前記一つの映像及び他の映像を配列してなる映像を生成させる手段と
    　して機能させることを特徴とするコンピュータプログラム。
13. 　背景映像部分、及び前記背景映像部分から該背景映像部分の外側へ飛び出す移動体映像部分を含む映像、並びに背景映像部分の大きさ及び移動体映像部分の移動範囲を示した情報を記憶した記憶手段を備えたコンピュータに、複数の映像を配列してなる映像を生成させるコンピュータプログラムにおいて、
    　コンピュータを、
    　複数の映像が配されるべき配置領域を示した配置情報を取得する配置情報取得手段と、
    　前記記憶手段が記憶している情報が示す大きさ及び移動範囲に基づいて、前記配置情報取得手段にて取得した配置情報が示した配置領域に配することが可能な一つの映像を前記記憶手段から取得する映像取得手段と、
    　前記一つの映像及び他の映像を配列してなる映像を生成させる手段と
    　して機能させることを特徴とするコンピュータプログラム。

Images