JP4989788B2 - 立体画像表示制御装置およびその動作制御方法 - Google Patents

Description

この発明は，立体画像表示制御装置およびその動作制御方法に関する。

視差のある左目用画像（観賞者の左目で見る画像）と右目用画像（観賞者の右目で見る画像）とが表示画面に表示されることにより，画像が立体的に見える。立体画像の視差がありすぎると，ユーザが違和感を覚えてしまうことがある。このために，視差の離れた領域に対してぼかし処理を行うもの（特願平４−３４３６８５号公報），ユーザが注視している部分以外をぼかすもの（特願平９−４３４６８号公報）などがある。
しかしながら，視差の離れた領域を単にぼかすのでは，立体画像として観賞できずに違和感を生じることがある。

この発明は，違和感の無い立体画像を表示することを目的とする。
この発明による立体画像表示制御装置は，記録媒体に記録されている立体画像を表す立体画像データを読み取る立体画像データ読み取り装置（立体画像データ読み取り手段），上記記録媒体に記録されており，かつ上記立体画像の視差が無くなるクロス・ポイントを表すクロス・ポイント情報を，上記記録媒体から読み取るクロス・ポイント情報読取装置（クロス・ポイント情報読み取り手段），上記立体画像データ読み取り装置によって読み取られた立体画像データによって表される立体画像のうち，上記クロス・ポイント情報読み取り装置によって読み取られたクロス・ポイント情報によって表されるクロス・ポイントよりも奥側に遠いほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分をぼかす第１のぼかし装置（第１のぼかし手段），および上記第１のぼかし装置によって上記遠い位置にある被写体を表す画像部分がぼかされた上記立体画像を表示するように表示装置を制御する表示制御装置（表示制御手段）を備えていることを特徴とする。
この発明は，上記立体画像表示制御装置に適した動作制御方法も提供している。すなわち，この方法は，立体画像データ読み取り装置が，記録媒体に記録されている立体画像を表す立体画像データを読み取り，クロス・ポイント情報読み取り装置が，上記記録媒体に記録されており，かつ上記立体画像の視差が無くなるクロス・ポイントを表すクロス・ポイント情報を，上記記録媒体から読み取り，ぼかし装置が，上記立体画像データ読み取り装置によって読み取られた立体画像データによって表される立体画像のうち，上記クロス・ポイント情報読み取り装置によって読み取られたクロス・ポイント情報によって表されるクロス・ポイントよりも奥側に遠いほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分をぼかし，表示制御装置が，上記第１のぼかし装置によって上記遠い位置にある被写体を表す画像部分がぼかされた上記立体画像を表示するように表示装置を制御するものである。
この発明によると，立体画像データおよびクロス・ポイント情報が記録媒体に記録されている。記録媒体から立体画像データとクロス・ポイント情報とが読み取られ，クロス・ポイント情報によって表されるクロス・ポイントよりも遠いほど，ぼかし量が多くなるように，立体画像のうちクロス・ポイントよりも奥側の遠い位置にある被写体を表す画像部分がぼかされる。そのようにぼかされた立体画像が表示される。クロス・ポイントよりも手前側の近い被写体を表す画像部分がぼかされると，立体画像として観賞できないことがあるが，この発明によると，クロス・ポイントよりも手前側の近い被写体を表す画像部分はぼかされないので，ぼかし処理をしても立体画像として観賞できる。さらに，クロス・ポイントよりも奥側に遠いほど視差の量は大きくなるが，クロス・ポイントよりも遠いほどぼかし量も多くなるので，視差による観賞者への悪影響を抑えることができるようになる。
上記第１のぼかし装置は，たとえば，上記表示装置の表示画面が大きいほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイント検出装置によって検出されたクロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分をぼかすものである。
上記立体画像のうち上記クロス・ポイントよりも奥側に近い位置にある被写体を表す画像部分の視差がしきい値以上かどうかを判定する視差判定装置（視差判定手段），および上記視差判定装置によって，上記クロス・ポイントよりも奥側に近い位置にある被写体を表す画像部分の視差がしきい値以上と判定されたことに応じて，上記クロス・ポイントが，上記立体画像のうち上記クロス・ポイント情報読み取り装置によって読み取られたクロス・ポイント情報によって表される上記クロス・ポイントの位置よりも手前の被写体を表す画像部分に移動するように上記立体画像データを制御するクロス・ポイント制御装置（クロス・ポイント制御手段）をさらに備えてもよい。
上記立体画像は立体動画を構成する１フレームの画像であり，上記立体画像データ読み取り装置は多数フレームの立体画像を表す立体画像データを上記記録媒体から読み取るものであり，かつ上記立体画像のシーンが変わる上記立体画像のフレームを表すシーン・チェンジ情報が上記記録媒体に記録されており，上記記録媒体から上記シーン・チェンジ情報を読み取るシーン・チェンジ情報読み取り装置（シーン・チェンジ情報読み取り手段），ならびに上記シーン・チェンジ情報読み取り装置によって読み取られたシーン・チェンジ情報によって表される上記立体画像のフレームの前後の１または複数のフレームであるシーン・チェンジ・フレームの上記立体画像の全体をぼかす第２のぼかし装置（第２のぼかし手段）をさらに備えてもよい。この場合，上記表示制御装置は，上記シーン・チェンジ・フレームを除くフレームの上記立体画像についは上記第１のぼかし装置によってぼかされた立体画像を表示し，かつ上記シーン・チェンジ・フレームの上記立体画像については上記第１のぼかし装置および上記第２のぼかし装置によってぼかされた立体画像を表示するように表示装置を制御するものとなろう。
上記表示制御装置は，たとえば，上記立体画像のシーンが変わる上記立体画像の前までは，上記シーン・チェンジ・フレームの立体画像が大きいものから徐々に上記立体画像のシーンが変わる上記立体画像の前までは小さくなり，上記立体画像のシーンが変わる上記立体画像の後からは上記シーン・チェンジ・フレームの立体画像が小さいものから徐々に大きくなるような上記立体画像を表示するように表示装置を制御するものである。
上記立体画像データ読み取り装置によって読み取られた立体画像データによって表される立体画像のうち，上記クロス・ポイント情報読み取り装置によって読み取られたクロス・ポイント情報によって表されるクロス・ポイントよりも手前側に近いほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイントよりも手前側に近い位置にある被写体を表す画像部分をぼかす第２のぼかし装置（第２のぼかし手段）をさらに備えてもよい。第２のぼかし装置は，第１のぼかし装置と同じものでもよいし，別のものでもよい。

第１図は立体撮像ディジタル・カメラの電気的構成を示すブロック図である。
第２図はヘッダの内容を示している。
第３図は立体画像の一例である。
第４図は立体画像の一例である。
第５図は立体画像の一例である。
第６図は再生処理手順を示すフローチャートである。
第７図は立体画像の一例である。
第８図は立体画像の一例である。
第９図は再生処理手順を示すフローチャートである。
第１０図はヘッダの内容を示している。
第１１ａ図および第１１ｂ図は立体画像の一例である。
第１２図は再生処理手順を示すフローチャートである。
第１３図は立体画像の一例である。
第１４図は再生処理手順を示すフローチャートである。
第１５図はヘッダの内容を示している。
第１６図はシーンが切り替わる様子を示している。
第１７図はシーンが切り替わる様子を示している。
第１８図はシーンが切り替わる時の立体画像の様子を示している。
第１９図はシーンが切り替わる様子を示している。
第２０図はシーンが切り替わる時の立体画像の大きさが変わる様子を示している。
第２１図は再生処理手順を示すフローチャートである。

第１図は，立体動画撮像ディジタル・カメラの電気的構成を示すブロック図である。
立体動画撮像ディジタル・カメラの動作は，中央制御装置３１によって統括される。また，立体動画撮像ディジタル・カメラには所定のデータを記憶するメモリ３２および自動制御装置３６も含まれている。
立体動画撮像ディジタル・カメラには，右目用の動画を撮像する第１の撮像装置１０および左目用の動画を撮像する第２の撮像装置２０が含まれている。
第１の撮像装置１０には，ＣＣＤ，Ｃ−ＭＯＳのような第１の撮像素子１３が含まれている。第１の撮像素子１３の前方には，撮像レンズ１１および絞り１２が設けられている。撮像レンズ１１は，レンズ制御装置１６によって位置決めされる。絞り１２は絞り制御装置１５によって開口が制御される。撮像素子１３によって撮像された被写体像を表す右目用の映像信号はＡＤＣ（アナログ・ディジタル・コンバータ）制御装置１４に入力する。ＡＤＣ制御装置１４において，アナログ／ディジタル変換処理等の所定の信号処理が行われて，右目用の動画を表す動画データに変換される。
第２の撮像装置２０にも第２の撮像素子２３が含まれている。第２の撮像素子２３の前方にも，撮像レンズ２１および絞り２２が設けられている。撮像レンズ２１は，レンズ制御装置２６によって位置決めされる。絞り２２は絞り制御装置２５によって開口が制御される。撮像素子２３によって撮像された被写体像を表す左目用の映像信号はＡＤＣ制御装置２４において，アナログ／ディジタル変換処理等の所定の信号処理が行われて，右目用の動画を表す動画データに変換される。
操作装置３４において撮像モードが設定されると，ＡＤＣ制御装置１４から出力された右目用の動画データおよびＡＤＣ制御装置２４から出力された左目用の動画データは画像処理装置３７において所定の画像処理が行われて液晶表示装置３３に入力する。撮像された被写体が動画で表示される。立体撮像ディジタル・カメラには，外部表示装置４１を接続することもできる。外部表示装置４１を立体撮像ディジタル・カメラに接続するために，立体撮像ディジタル・カメラには，入出力インターフェイス３９が設けられている。入出力インターフェイス３９に外部表示装置４１が接続されることにより，撮像により得られた（再生された）立体画像（立体動画）が外部表示装置４１の表示画面に表示される。
操作装置３４において記録モードが設定されると，ＡＤＣ制御装置１４から出力された右目用の動画データおよびＡＤＣ制御装置２４から出力された左目用の動画データは，視差量判断装置３８に入力する。
視差量判断装置３８において，立体動画を構成する１フレームの立体画像（一組の左目用画像と右目用画像）に所定のしきい値以上の視差をもつ被写体像部分が含まれているかどうかが判断される。所定のしきい値以上の視差をもつ被写体像部分が含まれている立体画像については，所定のしきい値以上の視差をもつ被写体像部分が含まれないように，その立体画像を表す一組の左目用画像と右目用画像とが視差調整される。
撮像によって得られた左目用画像データと右目用画像データとがメディア・インターフェイス３５を介してメモリ・カード４０に与えられ，立体画像データとしてメモリ・カード４０に記録される。視差調整された場合には，それらの視差調整された左目用画像と右目用画像とをそれぞれ表す左目用画像データと右目用画像データのメモリ・カード４０に記録されるのはいうまでもない。１フレームごとに左目用画像データと右目用画像データとがメモリ・カード４０に記録されることにより，メモリ・カード４０には，立体的な動画を表す動画データ（左目用動画データ，右目用動画データ）が記録されることとなる。
この実施例では，立体的な動画を表す動画データのほかに，視差が生じない箇所を示すクロス・ポイントを表すクロス・ポイント情報もメモリ・カード４０に記録される。この実施例では，クロス・ポイントは，あらかじめ定められており（例えば，立体撮像ディジタル・カメラから２ｍ前方の距離），通常は，そのクロス・ポイントで定められる箇所の視差が無くなるように被写体が撮像される。しかしながら，上述のように，所定のしきい値以上の視差が生じる場合には，そのフレームの立体画像を表す左目用画像と右目用画像とは視差調整が行われる。この結果，クロス・ポイントの位置もずれる。この実施例では，立体動画を構成する立体画像のフレームに対応してクロス・ポイント情報がメモリ・カード４０に記録される。もっとも，フレームに対応してフレームごとにクロス・ポイント情報が記録されなくとも，あらかじめ定められているクロス・ポイントとずれている立体画像のフレームだけを，フレームごとにクロス・ポイント情報を記録するようにしてもよい。その場合，あらかじめ定められているクロス・ポイントを表すクロス・ポイント情報もメモリ・カード４０に記録されるのはいうまでもない。
第２図は，クロス・ポイント（ＣＰ）情報が記録されているファイル（立体動画データが格納されているファイル）のヘッダを示している。クロス・ポイント情報は，ヘッダでなくともファイルの画像データ記録領域に記録してもよい。
立体動画を構成する１フレーム目，２フレーム目，３フレーム目のクロス・ポイントは，それぞれ２ｍ，２．１ｍ，２．３ｍであり，それらのクロス・ポイント情報がメモリ・カード５９に記録されている。その他のフレームについてもクロス・ポイントが記録されている。
第１図に戻って，立体撮像ディジタル・カメラは，再生機能も有している。メモリ・カード４０に記録された立体動画を表す立体動画データは，メディア・インターフェイス３５を介してメモリ・カード４０から読み取られる。読み取られた立体動画データが液晶表示装置３３に与えられる。立体動画データによって表わされる立体動画が液晶表示装置３３の表示画面に表示される。上述したように，立体撮像ディジタル・カメラは，外部表示装置４１を接続することもでき，その外部表示装置４１にメモリ・カード４０に記録されている立体動画データによって表される立体動画を表示することもできる。その場合には，メモリ・カード４０から読み取られた立体動画データが入出力インターフェイス３９を介して外部表示装置４１に与えられる。外部表示装置４１に立体動画が表示されるようになる。
視差が大きい部分が含まれていると立体画像を見る観賞者に違和感を与えることがある。この実施例によると，立体画像のうちクロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分がぼかされる。このように遠い位置にある被写体を表す画像部分はぼかされるので，その画像部分を観賞者が注視することを防止できる。観賞者に違和感を与えるのは防止できる。立体画像のうちクロス・ポイントよりも近い位置にある被写体を表す画像部分についてはぼかされないので，立体的な画像が表示される。立体撮像ディジタル・カメラの背面に設けられている液晶表示装置３３の表示画面は比較的小さいので視差が大きく無いが，外部表示装置４１の表示画面は比較的大きいので視差も大きくなり，観賞者は違和感を持つことがある。この実施例では，外部表示装置４１のような比較的大きな表示画面に立体画像を表示する場合に有効である。ぼかし処理は平滑化フィルタを利用できるし，ソフトウェアでも実現できる。ぼかし処理を行うためにぼかし処理装置４２が立体撮像ディジタル・カメラに設けられている。
第３図は，再生された立体画像の一例である。
この立体画像５０は，左目用画像と右目用画像とが重ねられることにより表される。左目用画像と右目用画像とが同時に重ねられてもよいし，時間的にずれて表示されることにより実質的に観賞者に左目用画像と右目用画像とが重ねて見えるようになればよい。
立体画像５０には，左上に第１の領域５１，右上に第２の領域５２および手前に第３の領域５３が含まれている。第２の領域５２がクロス・ポイントがある領域である。第１の領域５１はクロス・ポイントよりも遠い（奥にある）領域であり，第３の領域５３はクロス・ポイントよりも近い（手前にある）領域である。
第２の領域５２には木の画像５２Ａが含まれている。第２の領域５２はクロス・ポイントがある領域であるから，木の画像５２Ａには視差が無い（左右にずれた画像とはなっていない）。第１の領域５１には，左右にずれた木の画像５１Ｌと５１Ｒとが含まれている。一方の木の画像５１Ｌは左目用画像によって表されるもので，他方の木の画像５１Ｒは右目用画像によって表されるものである。木の画像５１Ｌと５１Ｒとの間には視差が生じている。第３の領域５３には左右にずれた人の画像５３Ｌと５３Ｒとが含まれている。一方の人の画像５３Ｌは左目用画像によって表されるもので，他方の人の画像５３Ｒは右目用画像によって表されるものである。この実施例では，クロス・ポイントよりも遠い被写体を表している画像５１Ｌおよび５１Ｒについてぼかし処理が行われる。
立体画像のうち，クロス・ポイントよりも遠い画像部分を見つけるために視差が利用される。
第４図は，視差を説明するための立体画像の一例である。第４図において，第３図に示すものと同一物については同一符号を付して説明を省略する。
左目用画像を基準に考える。右目用画像を基準に考えてもよい。第１の領域５１に含まれる一方の木の画像５１Ｌの中の特定の画素Ｐ１を考える。他方の木の画像５１Ｒの中から，画素Ｐ１に対応する画素Ｐ２が見つけられる。画素Ｐ１の位置を（ｘＬ１，ｙＬ１），画素Ｐ２の位置を（ｘＲ１，ｙＲ１）とすると，視差ｄ１は，ｄ１＝（ｘＬ１−ｘＲ１）となる。視差ｄ１は正となる。視差ｄ１が正となるので，画素Ｐ１とＰ２とで表される被写体はクロス・ポイントよりも遠いと判断される。同様に，第３の領域５３に含まれる一方の人の画像５３Ｌの中の特定の画素Ｐ３を考え，他方の人の画像５３Ｒの中から，画素Ｐ２に対応する画素Ｐ４が見つけられる。画素Ｐ３の位置を（ｘＬ２，ｙＬ２），画素Ｐ４の位置を（ｘＲ２，ｘＲ２）とすると，視差ｄ２は，ｄ２＝（ｘＬ２−ｘＲ２）となる。視差ｄ２は負となる。視差ｄ２が負となるので，画素Ｐ３とＰ４とで表される被写体はクロス・ポイントよりも近いと判断される。このような処理が立体画像５０のすべてについて行われ，立体画像５０のうち，クロス・ポイントよりも遠い（奥側の）被写体を表す画像部分とクロス・ポイントよりも近い（手前の）被写体を表す画像部分とが見つけられる。もっとも，同一の被写体像部分と考えられる領域内では，その領域内での一または複数の画素で，このような処理が行われ，その結果により領域内の画像がクロス・ポイントよりも遠いまたは近いと判断してもよい。
第５図は，再生された立体画像の一例である。
上述のように第２の領域５２はクロス・ポイントの領域であり，第１の領域５１はクロス・ポイントよりも遠い被写体を表す領域であり，第３の領域５３はクロス・ポイントよりも近い被写体を表す領域である。第１の領域５１はクロス・ポイントよりも遠い被写体を表わす領域であるから，その領域５１内の画像５１Ｒおよび５１Ｌがぼかされている。これにより，領域５１内の画像５１Ｒおよび５１Ｌを観賞者が注視してしまうことを未然に防止できる。
第６図は，再生処理手順を示すフローチャートである。
立体撮像ディジタル・カメラと外部表示装置（例えば，テレビジョン装置）４１とが接続され，通信が開始する（ステップ６１）。メモリ・カード４０からクロス・ポイント情報および立体動画データが読み取られる（ステップ６２）。立体動画データによって表わされる立体動画を構成する各フレームの立体画像について上述のように，クロス・ポイントよりも遠い画像部分が見つけられ，その見つけられた画像部分についてぼかし処理が行われる（ステップ６３）。クロス・ポイントよりも遠い画像部分についてぼかされた立体画像が順次，外部表示装置４１に表示されることにより，立体動画が表示されるようになる（ステップ６４）。
上述の実施例では，立体動画についてのものであったが，立体動画に限らず，立体的な静止面についても同様の処理を行うことができるのはいうまでもない。
第７図から第９図は，他の実施例を示している。上述の実施例では，クロス・ポイントよりも遠い位置にある被写体を表している画像部分をぼかしているが，この実施例では，クロス・ポイントから遠いほどぼかし量を大きくするものである。
第７図は，再生された立体画像の一例である。この図において，第３図に示すものと同一物については同一符号を付して説明を省略する。
立体画像６０には，上述したように，第１の領域５１，第２の領域５２および第３の領域５３のほかに第４の領域５４が含まれている。第４の領域５４には左目用画像の木の画像５４Ｌと右目用画像の木の画像５４Ｒとが含まれている。これらの画像５４Ｌと５４Ｒとによって表される被写体は，第１の領域５１に含まれている画像５１Ｌおよび５１Ｒによって表される被写体よりも遠い位置にある。
第８図は，ぼかし処理が行われた立体画像の一例である。
上述したように，クロス・ポイントよりも遠い被写体を表す第１の領域５１内の木の画像５１Ｌおよび５１Ｒならびに第２の領域５４内の木の画像５４Ｌおよび５４Ｒはいずれもぼかされている。但し，第１の領域５１内の木の画像５１Ｌおよび５１Ｒによって表される被写体よりも第２の領域５４内の木の画像５４Ｌおよび５４Ｒによって表される被写体の方が遠いのでぼかし量が多くなっている。
クロス・ポイントよりも奥側に遠いほど視差が大きいが，クロス・ポイントよりも奥側に遠いほどぼかし量が大きいので，視差の大きい画像部分を注視しないようにできる。
第９図は，第６図に対応するもので，再生処理手順を示すフローチャートである。この図において，第６図に示す処理と同一の処理については同一符号を付して説明を省略する。
この実施例では，上述したように画像の視差を表す情報があらかじめ生成されており，その視差を表す情報が立体動画の各フレームの立体画像に対応してメモリ・カード４０に記録されているものとする。もっとも，視差を表す情報があらかじめメモリ・カード４０に記録されていなくとも，再生時に視差を算出するようにしてもよいのはいうまでもない。
メモリ・カード４０からクロス・ポイント情報，立体動画データおよび視差を表す情報が読み取られる（ステップ６２，６５）。
つづいて，ぼかし処理が一段階かどうかが判断される（ステップ６６）。ぼかし処理が一段階かどうかは，操作装置３４からの設定により決定される。操作装置３４により，ぼかし処理が一段階に設定されていると（ステップ６６でＹＥＳ），上述のようにクロス・ポイントよりも遠い被写体を表す画像部分は一律のぼかし量でぼかし処理が行われる（ステップ６３）。操作装置３４により，ぼかし処理が一段階に設定されていなければ（ステップ６６でＮＯ），クロス・ポイントよりも奥側に遠い被写体を表す画像部分ほどぼかし量が多くなるようなぼかし処理が行われる（ステップ６７）。
第１０図から第１２図は，他の実施例を示している。この実施例は，立体画像を表示する表示画面サイズに応じてぼかし量を変えるものである。上述のように，クロス・ポイントから奥に遠いほどぼかし量を変えつつ，表示画面サイズに応じてぼかし量を変えてもよい。
第１０図は，立体動画データが記録されているファイルのヘッダの内容を示している。
この実施例では，上述したクロス・ポイント情報のほかに，所定の表示画面サイズにたいする基準のぼかし量が格納されている。例えば，表示画面サイズが４２型の場合には基準のぼかし量はＤで表される。
第１１ａ図および第１１ｂ図は，再生された立体画像の一例である。これらの図において，第８図に示すものと同一物については同一符号を付して説明を省略する。
第１１ａ図は，３７型の表示画面に表示された立体画像６０の一例であり，第１１ｂ図は，４２型の表示画面に表示された立体画像６０の一例である。
表示された画像の大きさが大きいほど視差は大きくなる。たとえば，第１１ａ図において，第１の領域５１内の画像５１Ｌと５１Ｒとの視差がｄ３７であり，第１１ｂ図において，第１の領域５１内の画像５１Ｌと５１Ｒとの視差がｄ４２であったものとする。すると，視差ｄ４２＞ｄ３７となる。この実施例では，表示画面サイズが大きくなり視差が大きくなるほどぼかし量が大きくなり，表示画面サイズが小さくなり視差が小さくなるほどぼかし量は小さくなる。たとえば，４２型の表示画面に立体画像を表示したときのぼかし量が上述したようにぼかし量Ｄであるとすると，３７型の表示画面に立体画像を表示したときのぼかし量は（３７型／４２型）×Ｄとなる。
第１２図は，第６図に対応するもので，再生処理手順のフローチャートである。この図において，第６図に示す処理と同一の処理については同一符号を付して説明を省略する。
立体撮像ディジタル・カメラと外部表示装置４１とが接続され，その外部表示装置４１の表示画面の大きさを表すサイズ情報が外部表示装置４１から読み取られ，メモリ・カード４０に記録されている基準ぼかし量が読み取られる（ステップ６８）。読み取られたサイズ情報によって表される表示画面の大きさに合致したクロス・ポイントが算出される。算出されたクロス・ポイントの視差がなくなるように，左目用画像と右目用画像とが調整される。また，読み取られた基準ぼかし量から，立体画像を表示する表示画面に合致したぼかし量が算出される。算出されたクロス・ポイントよりも遠い位置の被写体が，基準ぼかし量から算出されたぼかし量でぼかされる（ステップ６９）。
上述の実施例では，表示画面の大きさに応じてクロス・ポイントが算出され，算出されたクロス・ポイントの視差が無くなるように，左目用画像と右目用画像とが調整されているが，表示画面に応じたクロス・ポイントの算出，左目用画像と右目用両像との調整を行うことなく，読み取られた基準ぼかし量から表示画面の大きさに応じたぼかし量をぼかすようにしてもよい。
第１３図および第１４図は，他の実施例を示している。この実施例は，再生時にクロス・ポイントを変更するものである。
第１３図は，表示画面に表示された立体画像の一例である。
立体画像６０Ａには，第８図に示す立体画像６０と同様に，第１の領域５１，第２の領域５２，第３の領域５３および第４の領域５４が含まれている。第８図に示す立体画像６０では，第２の領域５２にクロス・ポイントが含まれており，視差の無い木の画像５２Ａが表示されている。これに対して，第１３図に示す立体画像６０Ａでは，第２の領域５２に含まれる画像部分によって表される被写体よりも手前の被写体を表す第３の領域５３にクロス・ポイントが移動させられている。このために，第２の領域５２内の木の画像５２Ｌおよび５２Ｌは二重の画像となっており，第３の領域５３内の人物の画像５３Ａは視差の無い画像となっている。
クロス・ポイントよりも手前の画像部分は立体画像を構成するために視差が必要となるが，視差が多いと観賞者に違和感を与えることがある。このために，この実施例では，記録時の立体画像のクロス・ポイントよりも手前の画像部分の視差が所定のしきい値以上の場合にはクロス・ポイントを手前に移動するものである。
第１４図は，再生処理手順を示すフローチャートである。
立体撮像ディジタル・カメラと外部表示装置４１との通信が開始され（ステップ６１），メモリ・カード４０に記録されている立体動画データが読み取られる（ステップ７１）。また，その立体動画データが格納されているファイルのヘッダから立体動画を構成する立体画像ごとのクロス・ポイント情報，表示画面サイズに対する基準ぼかし量が読み取られる（ステップ７２）。さらに，そのファイルから立体画像ごとの視差情報も読み取られる（ステップ７３）。視差情報は，立体動画データの記録時に生成され，クロス・ポイント情報，基準ぼかし量とともにファイルのヘッダに格納されているのはいうまでもない。もっとも，視差情報があらかじめ記録されていなくとも，再生時に生成するようにしてもよい。
立体画像の記録時のクロス・ポイントよりも手前（近距離）の画像部分の視差が，許容範囲内かどうかが確認される（ステップ７４）。その視差が所定のしきい値以上であれば許容範囲外とされ，その視差が所定のしきい値未満であれば許容範囲内とされる。
許容範囲内でなければ（ステップ７４でＮＯ），クロス・ポイントが近距離側（手前側）に移動させられる（ステップ７５）。第１３図に示すように，手前の被写体を表す画像部分の視差が無くなる。
許容範囲内であると（ステップ７４でＹＥＳ），記録時のクロス・ポイントよりも遠い被写体を表す画像部分が，視差量および外部表示装置の表示画面サイズに応じてぼかされる（ステップ７６）。視差量が多い部分ほどぼかし量が多くなり，かつ表示画面サイズが大きいほどぼかし量が多くなる。
クロス・ポイントが手前に移動させられた場合には，そのクロス・ポイントよりも遠い被写体を表す画像部分が，視差量および外部表示装置の表示画面サイズに応じてぼかされる（ステップ７６）。
立体動画を構成するすべてのフレームの立体画像についての処理が終了していなければ（ステップ７７でＮＯ），次のフレームの立体画像について同様の処理が行われるように立体撮像ディジタル・カメラが制御させられて（ステップ７８），ステップ７４から７６の処理が繰り返される。
立体動画を構成するすべてのフレームの立体画像についての処理が終了すると（ステップ７７でＹＥＳ），立体動画が表示される（ステップ６４）。
第１５図から第２１図は，他の実施例を示している。この実施例は，立体動画のシーンが変わる場合に，急激にシーンが変わってしまう印象を観賞者に与えないようにするものである。
第１５図は，ヘッダの内容の一例である。
この実施例では，クロス・ポイント情報のほかにシーンが切り替わるフレームを表すシーン・チェンジ・フレームもヘッダに記録されている。たとえば，１３４フレーム目がシーン・チェンジ・フレームであり，１３３フレームまでの立体動画のシーンと１３４フレーム以降の立体動画のシーンとが切り替わる。
第１６図は，立体動画のシーンを表するタイム・チャートである。
第１フレームから第１３３フレームまでがシーンＡの立体動画であり，第１３４フレーム以降がシーンＢの立体動画である。
第１７図は，立体動画のシーン切り替え前後の立体画像全体をぼかすタイミングを示すタイム・チャートである。
ハッチングで示すように，シーン・チェンジ・フレームの前後のそれぞれの１秒間の合計２秒間の間立体画像全体がぼかされて表示される。シーン・チェンジ前後は立体画像全体がぼかされるので，シーンが変わっても観賞者に違和感を与えなくて済む。
第１８図は，立体画像の一例である。
第１３３フレームの立体画像６０から第１３４フレームの立体画像６０Ａに切り替わるときにシーンが切り替わる。上述のように，シーンが切り替わる前後の立体画像は全体がぼかされるので，シーンが変わっても観賞者に違和感を与えなくて済む。
第１９図は，変形例を示すもので，立体動画のシーン切り替え前後の立体画像全体をぼかすタイミングを示すタイム・チャートである。
上述の実施例では，シーンが切り替わる前後において立体画像全体がぼかされているが，この実施例ではシーンが切り替わる前の複数フレームの立体画像は徐々に大きさが小さくなるものが表示され，シーンの切り換え後の複数フレームの立体画像は徐々に大きさが大きくなり，立体画像の元の大きさとなる。
第２０図は，シーンが切り替わる前後で立体画像の大きさが変わる様子を示している。
上述のように，シーンが切り替わる前の複数フレームの立体画像は，立体画像の元の大きさ６０Ｂから徐々に小さくなり，シーンが切り替わる直前またはシーンが切り替わるフレームの画像がもっとも小さい大きさ６０Ｃとなる。シーンが切り替わった後は徐々に大きくなり，元の立体画像の大きさ６０Ｂとなる。
第２１図は，第６図に対応するもので，再生処理手順を示すフローチャートである。この図において，第６図に示すものと同一物については同一符号を付して説明を省略する。
メモリ・カード４０に記録されているシーン・チェンジ情報が読み取られる（ステップ１０１）。シーンの切り替えがあると（ステップ１０２でＹＥＳ），上述のように，そのシーンの切り替え前後において立体画像全体のぼかし，立体画像の縮小，拡大処理などが行われる（ステップ１０４）。その後，上述のように，クロス・ポイントよりも奥に遠い被写体を表す画像部分のぼかし処理が行われる（ステップ６９）。シーンの切り替えが無ければ（ステップ１０２でＮＯ），ステップ１０４がスキップされる。
上述の実施例において，第６図に示す処理，第９図に示す処理，第１２図に示す処理，第１４図に示す処理および第２１図に示す処理は，それぞれ別々の処理として図面上は現れているが，それらの処理のうち，任意の複数の処理を組み合わせてもよい。たとえば，第９図に示す処理，第１２図に示す処理，第１４図に示す処理および第２１図に示す処理のうち，一または複数の任意の処理を第６図に示す処理に組み合わせてもよいし，第１２図に示す処理，第１４図に示す処理および第２１図に示す処理のうち，一または複数の任意の処理を第９図に示す処理に組み合わせてもよいし，第１４図に示す処理および第２１図に示す処理のいずれかまたは両方の処理を第１２図に示す処理に組み合わせてもよいし，第１４図に示す処理と第２１図に示す処理とを組み合わせてもよい。
さらに，上述の実施例では，クロス・ポイントよりも奥側に遠いほどぼかし量が多くなるように立体画像がぼかされているが，クロス・ポイントよりも手前側に近いほど立体画像をぼかすようにしてもよい。このように，クロス・ポイントよりも手前側に近いほど立体画像をぼかす処理は，上述の第６図に示す処理，第９図に示す処理，第１２図に示す処理，第１４図に示す処理または第２１図に示す処理のそれぞれの処理において行われてもよいし，それらの任意の組み合わせの処理においても行われるようにしてもよい。このようなぼかし処理も平滑化フィルタを用いて実現できるのはいうまでもない。

Claims (6)

1. 記録媒体に記録されている立体画像を表す立体画像データを読み取る立体画像データ読み取り手段，
   上記記録媒体に記録されており，かつ上記立体画像の視差が無くなるクロス・ポイントを表すクロス・ポイント情報を，上記記録媒体から読み取るクロス・ポイント情報読み取り手段，
   上記立体画像データ読み取り手段によって読み取られた立体画像データによって表される立体画像のうち，上記クロス・ポイント情報読み取り手段によって読み取られたクロス・ポイント情報によって表されるクロス・ポイントよりも奥側に遠いほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分をぼかす第１のぼかし手段，
   上記第１のぼかし手段によって上記遠い位置にある被写体を表す画像部分がぼかされた上記立体画像を表示するように表示手段を制御する表示制御手段，
   上記立体画像のうち上記クロス・ポイントよりも手前側に近い位置にある被写体を表す画像部分の視差がしきい値以上かどうかを判定する視差判定手段，および
   上記視差判定手段によって，上記クロス・ポイントよりも手前側に近い位置にある被写体を表す画像部分の視差がしきい値以上と判定されたことに応じて，上記クロス・ポイントが，上記立体画像のうち上記クロス・ポイント情報読み取り手段によって読み取られたクロス・ポイント情報によって表される上記クロス・ポイントの位置よりも手前の被写体を表す画像部分に移動するように上記立体画像データを制御するクロス・ポイント制御手段，
   を備えた立体画像表示制御装置。
2. 上記第１のぼかし手段は，
   上記表示手段の表示画面が大きいほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイント検出手段によって検出されたクロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分をぼかすものである，
   請求項１に記載の立体画像表示制御装置。
3. 上記立体画像は立体動画を構成する１フレームの画像であり，上記立体画像データ読み取り手段は多数フレームの立体画像を表す立体画像データを上記記録媒体から読み取るものであり，かつ上記立体画像のシーンが変わる上記立体画像のフレームを表すシーン・チェンジ情報が上記記録媒体に記録されており，上記記録媒体から上記シーン・チェンジ情報を読み取るシーン・チェンジ情報読み取り手段，ならびに
   上記シーン・チェンジ情報読み取り手段によって読み取られたシーン・チェンジ情報によって表される上記立体画像のフレームの前後の１または複数のフレームであるシーン・チェンジ・フレームの上記立体画像の全体をぼかす第２のぼかし手段をさらに備え，
   上記表示制御手段は，上記シーン・チェンジ・フレームを除くフレームの上記立体画像については上記第１のぼかし手段によってぼかされた立体画像を表示し，かつ上記シーン・チェンジ・フレームの上記立体画像については上記第１のぼかし手段および上記第２のぼかし手段によってぼかされた立体画像を表示するように表示手段を制御するものである，
   請求項２に記載の立体画像表示制御装置。
4. 上記表示制御手段は，
   上記立体画像のシーンが変わる上記立体画像の前までは，上記シーン・チェンジ・フレームの立体画像が大きいものから徐々に上記立体画像のシーンが変わる上記立体画像の前までは小さくなり，上記立体画像のシーンが変わる上記立体画像の後からは上記シーン・チェンジ・フレームの立体画像が小さいものから徐々に大きくなるような上記立体画像を表示するように表示手段を制御するものである，
   請求項３に記載の立体画像表示制御装置。
5. 上記立体画像データ読み取り手段によって読み取られた立体画像データによって表される立体画像のうち，上記クロス・ポイント情報読み取り手段によって読み取られたクロス・ポイント情報によって表されるクロス・ポイントよりも手前側に近いほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイントよりも手前側に近い位置にある被写体を表す画像部分をぼかす第２のぼかし手段，
   をさらに備えた請求項４に記載の立体画像表示制御装置。
6. 立体画像データ読み取り手段が，記録媒体に記録されている立体画像を表す立体画像データを読み取り，
   クロス・ポイント情報読み取り手段が，上記記録媒体に記録されており，かつ上記立体画像の視差が無くなるクロス・ポイントを表すクロス・ポイント情報を，上記記録媒体から読み取り，
   ぼかし手段が，上記立体画像データ読み取り手段によって読み取られた立体画像データによって表される立体画像のうち，上記クロス・ポイント情報読み取り手段によって読み取られたクロス・ポイント情報によって表されるクロス・ポイントよりも奥側に遠いほどぼかし量が多くなるように，上記立体画像のうち上記クロス・ポイントよりも奥側に遠い位置にある被写体を表す画像部分をぼかし，
   表示制御手段が，上記第１のぼかし手段によって上記遠い位置にある被写体を表す画像部分がぼかされた上記立体画像を表示するように表示手段を制御し，
   視差判定手段が，上記立体画像のうち上記クロス・ポイントよりも手前側に近い位置にある被写体を表す画像部分の視差がしきい値以上かどうかを判定し，
   クロス・ポイント制御手段が，上記視差判定手段によって，上記クロス・ポイントよりも手前側に近い位置にある被写体を表す画像部分の視差がしきい値以上と判定されたことに応じて，上記クロス・ポイントが，上記立体画像のうち上記クロス・ポイント情報読み取り手段によって読み取られたクロス・ポイント情報によって表される上記クロス・ポイントの位置よりも手前の被写体を表す画像部分に移動するように上記立体画像データを制御する，
   立体画像表示制御装置の動作制御方法。

Images