JP6679856B2 - 表示制御装置、表示制御方法及びプログラム - Google Patents

Description

本発明は、表示制御装置、表示制御方法及びプログラムに関する。

従来、重要な施設等での設置に限定されていた監視カメラが、一般人が通行する駅や街中等、より広い範囲に設定されるようになってきている。監視カメラはその数が多ければ多いほど監視範囲が広がるが、その分、監視員の負担は増大する。複数の監視カメラで監視中に不審者が検出されたカメラの映像に切り替えて表示するという技術が広く知られており、さらに特許文献１のように、不審者の移動方向の監視カメラの表示に切り替えるといった技術も開示されている。

特開２０１１−１４５７３０号公報

しかしながら、監視を行っている監視員が直接現地に向かう場合、あるいは監視員とは別の警備員に連絡して現地に向かわせる場合、何れにおいても時間的な遅延が避けられないという問題がある。

本願発明の課題は、異常に対してより迅速に対応を可能とすることである。

上記目的を達成するため、本発明の一態様の表示制御装置は、
人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、
前記検出手段により検出される人物の動作が所定の閾値を超えているか否かを判別する動作判別手段と、を備え、
前記表示制御手段は、前記動作判別手段による判別結果に応じて異なるように、前記表示手段が切り替えて表示するように出力する制御を行うことを特徴とする。

本発明によれば、異常に対してより迅速に対応することが可能となる。

本発明の一実施形態に係る表示制御装置の外観構成を示す模式図であり、図１（Ａ）は上面図、図１（Ｂ）は右側面図、図１（Ｃ）は正面図である。 本発明の一実施形態に係る表示制御装置のハードウェアの構成を示すブロック図である。 図１の表示制御装置の機能的構成のうち、画像表示処理を実行するための機能的構成を示す機能ブロック図である。 各撮像部によって出力される撮像画像の画角を示す模式図である。 画像加工部によって生成される表示画像の一例を示す模式図である。 特定状況通知信号が入力された際の表示画像の一例を示す模式図である。 後方画像を示す特定状況通知信号が入力された際の表示画像の一例を示す模式図である。 図３の機能的構成を有する図１の表示制御装置が実行する画像表示処理の流れを説明するフローチャートである。 画像加工部によって生成される表示画像の一例を示す模式図である。 前方画像を示す特定状況通知信号が入力された際の表示画像の一例を示す模式図である。 後方画像を示す特定状況通知信号が入力された際の表示画像の一例を示す模式図である。 右側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が前方から後方へ移動する際の表示画像の一例を示す模式図である。 左側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が前方から後方へ移動する際の表示画像の一例を示す模式図である。 右側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が後方から前方へ移動する際の表示画像の一例を示す模式図である。 左側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が後方から前方へ移動する際の表示画像の一例を示す模式図である。 メイン表示領域に表示する方向を固定する状態を示す模式図である。 撮像画像の方向と表示画像の方向との関係の一例を示す模式図である。

以下、本発明の実施形態について、図面を用いて説明する。

［第１実施形態］
［構成］
図１は、本発明の一実施形態に係る表示制御装置１の外観構成を示す模式図であり、図１（Ａ）は上面図、図１（Ｂ）は右側面図、図１（Ｃ）は正面図である。
表示制御装置１は、例えばヘッドマウントディスプレイとして構成される。
本実施形態において、表示制御装置１は、光学透過ヘッドマウントディスプレイ（光学シースルー方式）として構成され、液晶によって表される画像をハーフミラーからなる表示領域に投影する小型プロジェクタ方式を用いている。このような方式の表示制御装置１は、表示領域がハーフミラーによって構成されているため、表示領域に画像が投影されていない状態において、ユーザは外界の景色を直接視認することができる。

図１に示すように、表示制御装置１は、ヘルメット型の本体１Ａに、前方、後方、左側方及び右側方を所定のフレーム周期で撮像する撮像部１６ａ〜１６ｄと、装着者の片眼（ここでは右眼）を覆うディスプレイ１８ａとが備えられた外観を有している。
撮像部１６ａ〜１６ｄは、装着者周辺の景色を撮像するカメラによって構成され、装着者の頭部の向きを基準として、撮像部１６ａは前方、撮像部１６ｂは後方、撮像部１６ｃは左側方、撮像部１６ｄは右側方を撮像する。撮像部１６ａ〜１６ｄにより撮像される画像を、装着者周辺の景色としてリアルタイムの動画として撮影したり、特定の瞬間を静止画として撮影したりすることが可能である。

ディスプレイ１８ａは、ハーフミラーを備えており、後述する出力部１８の液晶表示素子から投影された画像がハーフミラーに反射して装着者に視認される。一方、ディスプレイ１８ａのハーフミラーに液晶表示素子から出力された画像が投影されていない場合、ディスプレイ１８ａを透過した外光が装着者に視認される。
なお、表示制御装置１は、本体１Ａ及び撮像部１６ａ〜１６ｄを備えるヘルメット型のユニットに対して、ディスプレイ１８ａを含む眼鏡型のユニットを別ユニットとして構成し、これらのユニットを有線または無線通信によって接続するものとしてもよい。

［ハードウェア構成］
図２は、本発明の一実施形態に係る表示制御装置１のハードウェアの構成を示すブロック図である。

表示制御装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、撮像部１６ａ〜１６ｄと、入力部１７と、出力部１８と、センサ部１９と、記憶部２０と、通信部２１と、ドライブ２２と、を備えている。
表示制御装置１におけるこれらのハードウェアは、本体１Ａに備えることや、ディスプレイ１８ａを含む眼鏡型のユニットを構成する場合のテンプルの部分に備えることができる。

ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、または、記憶部２０からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。

ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６、入力部１７、出力部１８、センサ部１９、記憶部２０、通信部２１及びドライブ２２が接続されている。

撮像部１６ａ〜１６ｄは、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。

光学レンズ部は、被写体を撮像するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。

イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６ａ〜１６ｄの出力信号として出力される。
このような撮像部１６ａ〜１６ｄの出力信号を、以下、「撮像画像」と呼ぶ。撮像画像のデータは、ＣＰＵ１１や図示しない画像処理部等に適宜供給される。

入力部１７は、各種釦等で構成され、ユーザの指示操作に応じて各種情報を入力する。なお、表示制御装置１に入力部１７を直接備える場合の他、表示制御装置１をスマートフォン等の電子機器からリモートコントロールする構成とし、入力部１７の機能を電子機器側に備える構成としてもよい。
出力部１８は、ディスプレイ１８ａを備え、上述のように、不図示の液晶表示素子から出力された画像がディスプレイ１８ａのハーフミラーに投影され、ハーフミラーに反射した画像が装着者に視認される構成となっている。なお、出力部１８は、スピーカを備えることにより音声を出力することとしてもよい。
センサ部１９は、ジャイロセンサ及び加速度センサを備え、装着者の動作（具体的には頭の向きの変化や移動）を検出する。なお、センサ部１９にＧＰＳ等の位置センサや周辺環境を測定するセンサ（温度センサや気圧センサ等）を備え、装着者の現在位置あるいは周辺環境を検出することとしてもよい。
記憶部２０は、ハードディスクあるいはフラッシュメモリ等で構成され、ＣＰＵ１１が実行するプログラムや各種画像のデータを記憶する。
通信部２１は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。

ドライブ２２には、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリ等よりなる、リムーバブルメディア３１が適宜装着される。ドライブ２２によってリムーバブルメディア３１から読み出されたプログラムは、必要に応じて記憶部２０にインストールされる。また、リムーバブルメディア３１は、記憶部２０に記憶されている画像のデータ等の各種データも、記憶部２０と同様に記憶することができる。

［機能的構成］
図３は、このような表示制御装置１の機能的構成のうち、画像表示処理を実行するための機能的構成を示す機能ブロック図である。
画像表示処理とは、撮像部１６ａ〜１６ｄによって撮像された装着者の前方、後方、左側方及び右側方の画像を、装着者にとって周辺の状況を把握しやすい形態に加工して表示する一連の処理をいう。

画像表示処理が実行される場合、図３に示すように、ＣＰＵ１１において、画像取得部５１と、動作検出部５２と、状況検出部５３と、表示画像生成部５４と、表示制御部５５と、が機能する。
また、記憶部２０の一領域には、画像記憶部７１が設定される。
画像記憶部７１には、状況検出部５３によって異常が検出されたときの画像（静止画像または動画像）のデータ等、予め設定された条件に従って選択された画像や、撮像部１６ａ〜１６ｄによって出力された所定時間分（例えば５秒）の撮像画像が記憶される。

画像取得部５１は、撮像部１６ａ〜１６ｄによって出力される撮像画像をそれぞれ取得し、画像記憶部７１に記憶する。このとき、画像取得部５１は、撮像部１６ａから出力された撮像画像を装着者の頭部の向きを基準として前方を撮像した前方画像、撮像部１６ｂから出力された撮像画像を装着者の頭部の向きを基準として後方を撮像した後方画像として取得する。同様に、画像取得部５１は、撮像部１６ｃから出力された撮像画像を装着者の頭部の向きを基準として左側方を撮像した左側方画像、撮像部１６ｄから出力された撮像画像を装着者の頭部の向きを基準として右側方を撮像した右側方画像として取得する。
図４は、各撮像部によって出力される撮像画像の画角を示す模式図である。
図４に示すように、撮像部１６ａ〜１６ｄによって撮像される前方画像、後方画像、左側方画像及び右側方画像の画角は、装着者の周囲全体をカバーするように設定されている。
そのため、装着者の周囲における物体は、撮像部１６ａ〜１６ｄの少なくとも何れかによって撮像される。

動作検出部５２は、センサ部１９から出力されるセンサ出力を取得し、取得したセンサ出力に基づいて、装着者の動作を検出する。具体的には、動作検出部５２は、ジャイロセンサの出力に基づいて、装着者の頭部の向きの変化を検出すると共に、加速度センサの出力に基づいて、装着者の動作を検出する。そして、動作検出部５２は、装着者が急激な動作を行ったか否か（即ち、センサ出力の変化が閾値以上であるか否か）を判定し、装着者が急激な動作を行ったと判定した場合、表示画像生成部５４に対して、装着者の向きの変化が一時的である旨の信号（以下、「一時変化通知信号」と呼ぶ。）を出力する。なお、動作検出部５２は、装着者が急激な動作を行っている状態でなくなったと判定した場合、表示画像生成部５４に対して、一時変化通知信号を解除するための解除信号を出力する。

状況検出部５３は、撮像部１６ａ〜１６ｄによって出力された撮像画像の被写体における特定の状況を検出する。具体的には、状況検出部５３は、撮像部１６ａ〜１６ｄによって出力された撮像画像それぞれにおいて、危険であると推定される人物（以下、「危険人物」と呼ぶ。）あるいは物体（以下、「危険物体」と呼ぶ。）の存在及び移動を検出する。例えば、状況検出部５３は、危険人物として登録されている人物、あるいは信頼できる人物として登録されていない人物が装着者に接近している状況や、危険物体として、高速で移動する自動車が装着者に接近している状況を検出する。そして、状況検出部５３は、被写体における特定の状況が検出された場合、表示画像生成部５４に対して、被写体における特定の状況が検出された撮像画像を示す信号（以下、「特定状況通知信号」と呼ぶ。）を出力する。

表示画像生成部５４は、画像記憶部７１に記憶されている撮像部１６ａ〜１６ｄによって出力された撮像画像に基づいて、ディスプレイ１８ａに投影する表示画像を生成する。具体的には、表示画像生成部５４は、中央のメイン表示領域に前方画像を配置し、メイン表示領域の下部に、前方画像、後方画像、左側方画像及び右側方画像を横方向に配列した全周囲画像表示領域を配置して、表示画像を生成する。本実施形態においては、表示画像生成部５４は、全周囲画像表示領域として、前方画像、後方画像、左側方画像及び右側方画像を合成して３６０度のパノラマ画像が配置された表示画像を生成する。また、表示画像生成部５４は、全周囲画像表示領域（パノラマ画像）のうち、メイン表示領域に表示されている撮像画像に対応する部分は、メイン表示領域に撮像画像が表示されていることを識別するために空白とする。
図５は、表示画像生成部５４によって生成される表示画像の一例を示す模式図である。
図５に示す例では、ディスプレイ１８ａのハーフミラーの領域において、前方画像を表示するメイン表示領域と、メイン表示領域の下部に全周囲画像表示領域とが配置されている。また、メイン表示領域は、通常の表示状態を示す色（ここでは青色）の枠で囲われている。なお、メイン表示領域及び全周囲画像表示領域の周囲は、外光が透過して視認される風景（裸眼で見える風景）を表している。

また、表示画像生成部５４は、動作検出部５２から一時変化通知信号が入力された場合、メイン表示領域及び全周囲画像表示領域の画像を保持し、一時停止した状態とする。そして、表示画像生成部５４は、動作検出部５２から一時変化通知信号を解除するための解除信号が入力された場合、メイン表示領域及び全周囲画像表示領域の画像を保持した状態を終了し、通常通り、前方画像がメイン表示領域に表示された状態とする。
これにより、装着者が周囲を左右に振り返る等、急激な動作を行った場合に、メイン表示領域及び全周囲画像表示領域の画像が頻繁に切り替わり、視認性が低下することを防ぐことができる。

また、表示画像生成部５４は、状況検出部５３から特定状況通知信号が入力された場合、全周囲画像表示領域において、被写体における特定の状況が検出された撮像画像をメイン表示領域に配置した表示画像を生成する。このとき、表示画像生成部５４は、全周囲画像表示領域のうち、メイン表示領域に表示されている撮像画像に対応する部分は、メイン表示領域に撮像画像が表示されていることを識別するために空白とする。ただし、この場合、表示画像生成部５４は、特定状況通知信号の入力に対応してメイン表示領域に表示された撮像画像であることを示すため、メイン表示領域を赤色の枠で囲い、全周囲画像表示領域の空白とした部分を赤色で表示する等、通常の表示状態と識別して表示画像を生成する。
図６は、特定状況通知信号が入力された際の表示画像の一例を示す模式図である。
図６に示す例では、右側方画像において被写体における特定の状況（危険物体としての自動車）が検出されており、右側方画像がメイン表示領域に表示され、赤色の枠で囲われていると共に、全周囲画像表示領域における右側方画像の部分が空白となり、赤色で表示されている。なお、左側方画像において被写体における特定の状況が検出された場合も同様の処理が行われる。

また、表示画像生成部５４は、被写体における特定の状況が検出された撮像画像が後方画像であることを示す特定状況通知信号が入力された場合、後方画像を左右反転させた状態でメイン表示領域に配置し、左右反転させた後方画像を赤色の枠で囲うと共に、全周囲画像表示領域における後方画像の部分を空白とし、赤色で表示した表示画像を生成する。
図７は、後方画像を示す特定状況通知信号が入力された際の表示画像の一例を示す模式図である。
図７に示す例では、後方画像において被写体における特定の状況（危険人物）が検出されており、後方画像が左右反転された状態でメイン表示領域に表示され、赤色の枠で囲われていると共に、全周囲画像表示領域における後方画像の部分が空白となり、赤色で表示されている。
このように、後方画像を左右反転してメイン表示領域に表示することで、装着者は、後方であっても左右の何れに注意すべきかを直感的に把握することが可能となる。

表示制御部５５は、表示画像生成部５４によって生成された表示画像を出力部１８の液晶表示素子から投影し、ディスプレイ１８ａのハーフミラーに表示画像を表示する。

［動作］
次に、動作を説明する。
図８は、図３の機能的構成を有する図１の表示制御装置１が実行する画像表示処理の流れを説明するフローチャートである。
画像表示処理は、ユーザによる入力部１７への画像表示処理開始の操作により開始され、以降撮像部１６ａ〜１６ｄが所定のフレーム周期で撮像する毎に繰り返し実行される。

ステップＳ１において、画像表示処理を開始した時点の向きを基準として、画像取得部５１は、撮像部１６ａ〜１６ｄによって出力される撮像画像をそれぞれ取得する。
ステップＳ２において、動作検出部５２は、センサ部１９から出力されるセンサ出力を取得し、取得したセンサ出力に基づいて、装着者の動作を検出する。

ステップＳ３において、動作検出部５２は、センサ出力の変化が閾値以上であるか否かの判定を行う。なお、画像表示処理開始時はＮＯと判定する。
センサ出力の変化が閾値以上である場合、ステップＳ３においてＹＥＳと判定されて、処理はステップＳ４に移行する。
一方、センサ出力の変化が閾値以上でない場合、ステップＳ３においてＮＯと判定されて、処理はステップＳ５に移行する。

ステップＳ４において、表示画像生成部５４は、動作検出部５２から入力される一時変化通知信号に応じて、表示画像（メイン表示領域及び全周囲画像表示領域の画像）を保持し、一時停止した状態とする。ステップＳ４の後、処理はステップＳ２に移行する。

ステップＳ５において、状況検出部５３は、撮像部１６ａ〜１６ｄによって出力された撮像画像における被写体を解析する。
ステップＳ６において、状況検出部５３は、撮像部１６ａ〜１６ｄによって出力された撮像画像の被写体における特定の状況を検出する。例えば、状況検出部５３は、危険人物として登録されている人物、あるいは信頼できる人物として登録されていない人物が装着者に接近している状況や、危険物体として、高速で移動する自動車が装着者に接近している状況を検出する。
撮像部１６ａ〜１６ｄによって出力された撮像画像の被写体における特定の状況が検出されない場合、ステップＳ６においてＮＯと判定されて、処理はステップＳ７に移行する。
一方、撮像部１６ａ〜１６ｄによって出力された撮像画像の被写体における特定の状況が検出された場合、ステップＳ６においてＹＥＳと判定されて、状況検出部５３は、表示画像生成部５４に特定状況通知信号を通知し、処理はステップＳ９に移行する。

ステップＳ７において、表示画像生成部５４は、撮像部１６ａ〜１６ｄによって出力された撮像画像を加工し、撮像部１６ａから出力された前方画像をメイン表示領域に表示する共に全周囲画像表示領域のうち、メイン表示領域に表示する前方画像の部分を空白とした通常の表示画像を生成する（図５参照）。
ステップＳ８において、表示画像生成部５４により生成された通常の表示画像は、表示制御部５５によって、ディスプレイ１８ａに表示される。
ステップＳ９において、表示画像生成部５４は、状況検出部５３からの特定状況通知信号の通知を受けて、特定の状況が検出された場合における画面表示（異常画面表示）に移行する。

ステップＳ１０において、表示画像生成部５４は、特定の状況が検出された撮像画像が後方画像であるか否かの判定を行う。
特定の状況が検出された撮像画像が後方画像である場合、ステップＳ１０においてＹＥＳと判定されて、処理はステップＳ１１に移行する。
一方、特定の状況が検出された撮像画像が後方画像でない場合、ステップＳ１０においてＮＯと判定されて、処理はステップＳ１２に移行する。

ステップＳ１１において、表示画像生成部５４は、後方画像を左右反転したメイン表示領域の画像を生成する。
ステップＳ１２において、表示画像生成部５４は、被写体における特定の状況が検出された撮像画像をメイン表示領域に配置した表示画像を生成する。このとき、表示画像生成部５４は、メイン表示領域を赤色の枠で囲い、全周囲画像表示領域のうち、メイン表示領域に表示する撮像画像と同じ向きの部分を赤色で表示した表示画像を生成する。
ステップＳ１３において、表示画像生成部５４により生成された異常画面の表示画像は、表示制御部５５によって、通常の表示画像と入れ替えてディスプレイ１８ａに表示される。
また合わせて、画像記憶部７１には、状況検出部５３によって異常が検出されたときの画像（静止画像または動画像）が記憶される。
ステップＳ８及びステップＳ１３の後、画像表示処理が繰り返される。

このような処理により、装着者の全周囲における前方の画像がメイン表示領域に表示され、他の方向の画像が全周囲画像表示領域に表示される。このとき、全周囲画像表示領域のうち、メイン表示領域に表示されている撮像画像に対応する部分は、メイン表示領域に撮像画像が表示されていることを識別するために空白とされる。
そのため、装着者の全周囲の様子をわかりやすい形態で表示することができる。
また、特定の状況が検出された場合、特定の状況が検出された方向の画像がメイン表示領域に表示される。このとき、特定の状況が検出されたことを示すため、メイン表示領域が赤色の枠で囲われ、全周囲画像表示領域の空白とした部分が赤色で表示される。
そのため、特定の状況が発生した方向及び特定の状況の様子をわかりやすい形態で表示することができる。
また、装着者が急激な動作を行った場合、メイン表示領域及び全周囲画像表示領域の画像が保持され、一時停止した状態となる。
そのため、装着者が急激な動作を行った場合に、メイン表示領域及び全周囲画像表示領域の画像が頻繁に切り替わり、視認性が低下することを防ぐことができる。
このように、本実施形態に係る表示制御装置１によれば、異常に対してより迅速に対応することが可能なる。
また、移動可能な人物が撮像部を備えることで、監視のための撮像部の設置の自由度が高まり、かつ人物が移動可能であることによる影響に対応することができる。

［第２実施形態］
次に、本発明の第２実施形態について説明する。
本実施形態における表示制御装置１は、第１実施形態における表示制御装置１と同様の構成を備えている一方、表示画像生成部５４において生成される表示画像の形態が異なっている。
したがって、第１実施形態と異なる部分である表示画像生成部５４の構成について説明する。

表示画像生成部５４は、画像記憶部１７に記憶されている撮像部１６ａ〜１６ｄによって出力された撮像画像に基づいて、ディスプレイ１８ａに投影する表示画像を生成する。具体的には、表示画像生成部５４は、中央のメイン表示領域に大サイズの前方画像、後方画像、左側方画像、あるいは右側方画像の何れかを表示すると共に、メイン表示領域の上部に小サイズの前方画像、メイン表示領域の下部に上下及び左右を反転した（１８０度回転した）小サイズの後方画像、メイン表示領域の左側部に９０度左回転した小サイズの左側方画像、メイン表示領域の右側部に９０度右回転した小サイズの右側方画像を配置して、表示画像を生成する。なお、以下、メイン表示領域の周縁に表示された小サイズの撮像画像を総称して、適宜、「周縁画像」と呼ぶ。
図９は、表示画像生成部５４によって生成される表示画像の一例を示す模式図である。
図９に示す例では、ディスプレイ１８ａのハーフミラーの領域において、前方画像を表示するメイン表示領域が表示され、メイン表示領域の上部に小サイズの前方画像、メイン表示領域の下部に上下及び左右を反転した小サイズの後方画像、メイン表示領域の左側部に９０度左回転した小サイズの左側方画像、メイン表示領域の右側部に９０度右回転した小サイズの右側方画像が配置されている。また、周縁画像のうち、メイン表示領域に配置されている撮像画像は、メイン表示領域に配置されていることを示す枠（ここでは青色の枠）で囲われている。なお、メイン表示領域の周囲は、外光が透過して視認される風景（裸眼で見える風景）を表している。

また、表示画像生成部５４は、動作検出部５２から一時変化通知信号が入力された場合、メイン表示領域の画像及び周縁画像を保持し、一時停止した状態とする。そして、表示画像生成部５４は、動作検出部５２から一時変化通知信号を解除するための解除信号が入力された場合、メイン表示領域の画像及び周縁画像を保持した状態を終了し、通常通り、前方画像がメイン表示領域に表示された状態とする。
これにより、装着者が周囲を左右に振り返る等、急激な動作を行った場合に、メイン表示領域の画像及び周縁画像が頻繁に切り替わり、視認性が低下することを防ぐことができる。

また、表示画像生成部５４は、状況検出部５３から特定状況通知信号が入力された場合、全周囲画像表示領域において、被写体における特定の状況が検出された撮像画像をメイン表示領域に配置した表示画像を生成する。このとき、表示画像生成部５４は、周縁画像のうち、特定状況通知信号に対応してメイン表示領域に配置されている撮像画像を、特定状況通信号の入力に対応してメイン表示領域に表示されていることを示す枠（ここでは赤色の枠）で囲んで表示する。

さらに、表示画像生成部５４は、状況検出部５３から特定状況通知信号が入力された場合、特定の状況が検出された撮像画像の方向及び被写体の移動方向に応じて、撮像画像を左右反転させた状態でメイン表示領域に配置する。具体的には、表示画像生成部５４は、被写体における特定の状況が検出された撮像画像が後方画像であることを示す特定状況通知信号が入力された場合、後方画像を左右反転させた状態でメイン表示領域に配置する。また、表示画像生成部５４は、被写体における特定の状況が検出された撮像画像が左側方画像または右側方画像であることを示す特定状況通知信号が入力された場合であって、被写体の移動方向が後方から前方である場合、左側方画像または右側方画像を左右反転させた状態でメイン表示領域に配置する。なお、撮像画像における被写体の移動方向については、状況検出部５３において特定の状況の被写体が検出された際に、その移動方向を併せて検出し、表示画像生成部５４に検出した移動方向を通知すること等が可能である。
このように、特定の状況が検出された撮像画像の方向及び被写体の移動方向に応じて、撮像画像を左右反転させてメイン表示領域に配置することで、装着者は、左右の何れに注意すべきかを直感的に把握することが可能となる。

図１０は、前方画像を示す特定状況通知信号が入力された際の表示画像の一例を示す模式図である。なお、以下の図１０〜図１５における矢印は、特定の状況が検出された被写体の移動方向を示している。
図１０に示す例では、前方画像が左右反転されない状態でメイン表示領域に表示され、特定の状況が検出されていることを示すための赤色の枠で小サイズの前方画像が囲われている。
この場合、特定の状況が検出された被写体が装着者の前方であるため、前方画像における被写体の移動方向は装着者の直感と一致する。そのため、メイン表示領域の画像は左右反転されることなく表示される。

図１１は、後方画像を示す特定状況通知信号が入力された際の表示画像の一例を示す模式図である。
図１１に示す例では、後方画像が左右反転された状態でメイン表示領域に表示され、特定の状況が検出されていることを示すための赤色の枠で小サイズの後方画像が囲われている。
この場合、特定の状況が検出された被写体が装着者の後方であるため、後方画像における被写体の移動方向は装着者の直感と一致しない。そのため、メイン表示領域の画像が左右反転されて表示される。

図１２は、右側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が前方から後方へ移動する際の表示画像の一例を示す模式図である。
図１２に示す例では、右側方画像が左右反転されない状態でメイン表示領域に表示され、特定の状況が検出されていることを示すための赤色の枠で小サイズの右側方画像が囲われている。
この場合、特定の状況が検出された被写体の移動方向が前方から後方であるため、右側方画像における被写体の移動方向は装着者の直感と一致する。そのため、メイン表示領域の画像は左右反転されることなく表示される。

図１３は、左側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が前方から後方へ移動する際の表示画像の一例を示す模式図である。
図１３に示す例では、左側方画像が左右反転されない状態でメイン表示領域に表示され、特定の状況が検出されていることを示すための赤色の枠で小サイズの左側方画像が囲われている。
この場合、特定の状況が検出された被写体の移動方向が前方から後方であるため、左側方画像における被写体の移動方向は装着者の直感と一致する。そのため、メイン表示領域の画像は左右反転されることなく表示される。

図１４は、右側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が後方から前方へ移動する際の表示画像の一例を示す模式図である。
図１４に示す例では、右側方画像が左右反転された状態でメイン表示領域に表示され、特定の状況が検出されていることを示すための赤色の枠で小サイズの右側方画像が囲われている。
この場合、特定の状況が検出された被写体の移動方向が後方から前方であるため、右側方画像における被写体の移動方向は装着者の直感と一致しない。そのため、メイン表示領域の画像が左右反転されて表示される。

図１５は、左側方画像を示す特定状況通知信号が入力され、特定の状況が検出された被写体が後方から前方へ移動する際の表示画像の一例を示す模式図である。
図１５に示す例では、左側方画像が左右反転された状態でメイン表示領域に表示され、特定の状況が検出されていることを示すための赤色の枠で小サイズの左側方画像が囲われている。
この場合、特定の状況が検出された被写体の移動方向が後方から前方であるため、左側方画像における被写体の移動方向は装着者の直感と一致しない。そのため、メイン表示領域の画像が左右反転されて表示される。

このような処理により、装着者の全周囲における前方の画像がメイン表示領域に表示され、各方向の画像がメイン表示領域の周りに配置された周縁画像として表示される。
そのため、装着者の全周囲の様子をわかりやすい形態で表示することができる。
また、特定の状況が検出された場合、特定の状況が検出された方向の画像がメイン表示領域に表示される。このとき、特定の状況が検出されたことを示すため、メイン表示領域に表示されている周縁画像が赤色の枠で囲われる。
そのため、特定の状況が発生した方向及び特定の状況の様子をわかりやすい形態で表示することができる。
また、装着者が急激な動作を行った場合、メイン表示領域及び全周囲画像表示領域の画像が保持され、一時停止した状態となる。
そのため、装着者が急激な動作を行った場合に、メイン表示領域及び全周囲画像表示領域の画像が頻繁に切り替わり、視認性が低下することを防ぐことができる。
さらに、特定の状況が検出された撮像画像の方向及び被写体の移動方向に応じて、撮像画像が左右反転された状態でメイン表示領域に配置される。
そのため、装着者は、左右の何れに注意すべきかを直感的に把握することが可能となる。
このように、本実施形態に係る表示制御装置１によれば、異常に対してより迅速に対応することが可能なる。

［変形例１］
第１実施形態において、通常の表示状態では、前方画像をメイン表示領域に表示し、装着者の頭部の向きの変化に応じて、メイン表示領域の表示画像は撮像された画像に応じて逐次変化するものとして説明したが、メイン表示領域に表示する方向を固定することも可能である。
具体的には、表示画像生成部５４が、撮像部１６ａ〜１６ｄによって出力された撮像画像からパノラマ画像を生成し、動作検出部５２によって検出される装着者の頭部の向きに関わらず、固定的な方向や特定の被写体を含む方向の画像をメイン表示領域に配置する。即ち、表示画像生成部５４は、装着者の頭部の向きとは独立して、表示画像における前方を固定し、その方向の画像をメイン表示領域に表示する。
図１６は、メイン表示領域に表示する方向を固定する状態を示す模式図である。
図１６に示すように、装着者の頭部の向きにおける前後左右の方向とは独立して、表示画像における前後左右（固定前方、固定後方、固定左側方及び固定右側方）を設定することができる。
この場合、表示画像における前後左右それぞれの方向の画像は、撮像画像から生成されたパノラマ画像から切り出して表示される。
図１７は、撮像画像の方向と表示画像の方向との関係の一例を示す模式図である。
図１７においては、表示画像における前方画像が、撮像画像における前方画像及び右側方画像の一部をそれぞれ切り出して生成されている。
このような表示形態とすることにより、注目する方向や被写体の画像がメイン表示領域に継続して表示され、装着者が向きを変えても、装着者に対して、注目する方向や被写体の情報を安定してわかりやすく提示することができる。

［変形例２］
上記実施形態において、表示制御装置１は、装着者の片眼を覆うディスプレイ１８ａを備えるものとして説明したが、両眼を覆うディスプレイ１８ａとすることが可能である。即ち、表示制御装置１に装着者の右眼及び左眼をそれぞれ覆うディスプレイ１８ａを備え、右眼及び左眼それぞれに画像を視認させる構成とすることができる。この場合、表示画像生成部５４は、右眼用及び左眼用の表示領域に種々の形態で画像を表示することができる。
例えば、表示画像生成部５４は、右眼用の表示領域には、第１実施形態または第２実施形態に示すように、装着者の頭部の向きの変化に応じた方向の画像を表示し、左眼用の表示領域には、変形例１に示すように、固定された前方の画像を表示することができる。
また、状況検出部５３によって危険人物あるいは危険物体の移動方向を推測し、危険人物あるいは危険物体の移動方向が右方向であると推測された場合、表示画像生成部５４が、右眼用の表示領域に危険人物あるいは危険物体を含む画像を表示し、左眼用の表示領域に危険人物あるいは危険物体の移動先の方向の画像を表示することができる。なお、危険人物あるいは危険物体の移動方向が左方向であると推測された場合、右眼用の表示領域に危険人物あるいは危険物体を含む画像を表示し、左眼用の表示領域に危険人物あるいは危険物体の移動先の方向の画像を表示することができる。
このような処理とすることにより、装着者に対して、状況に応じて、種々の有用な情報を提示することができる。

［変形例３］
上述の実施形態において、状況検出部５３によって装着者が危険人物あるいは危険物体の方向へ移動しているか否か（例えば、位置の移動量（あるいは移動速度）が所定の閾値を超えるか否か）を判定し、危険人物あるいは危険物体の方向へ移動していると判定された場合、装着者が危険人物あるいは危険物体への接近あるいは追跡を行っているものとし、装着者をサポートする表示に切り替えることができる。
具体的には、危険人物あるいは危険物体への接近あるいは追跡に必要な画像は、前方画像のみとなるため、表示画像生成部５４によって、他の方向の画像の表示を行うことなく、メイン表示領域に前方画像における異常個所をズームアップして表示することが可能である。
また、表示制御装置１に地図データを備える等により、道路や通路等、移動可能な経路を判定することとし、危険人物あるいは危険物体の移動が可能な方向を矢印等で表示することにより、装着者に報知することが可能である。

以上のように構成される表示制御装置１は、出力部１８と、画像取得部５１と、動作検出部５２と、状況検出部５３と、表示画像生成部５４と、表示制御部５５と、を備える。
画像取得部５１は、人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する。
動作検出部５２又は状況検出部５３は、当該人物の動作、又は画像取得部５１により取得される複数の撮像画像内における被写体像の移動状況を検出する。
表示画像生成部５４及び表示制御部５５は、動作検出部５２又は状況検出部５３により検出される人物の動作、又は被写体像の移動状況に応じて、画像取得部５１により取得される複数の撮像画像のうちの何れかを、人物の動作に連動して当該人物が視認可能に表示方向が変化する出力部１８が切り替えて表示するように出力する制御を行う。
これにより、表示制御装置１を装着している人物の動作や、撮像画像内における被写体の移動状況に応じて、所定の撮像画像が出力部１８に切り替えて表示される。
したがって、異常に対してより迅速に対応することが可能なる。

また、表示制御装置１は、状況検出部５３を更に備える。
状況検出部５３は、複数の撮像画像内の各々における被写体像の移動状況が異常であるか否かを判別する。
表示画像生成部５４及び表示制御部５５は、状況検出部５３により被写体像の移動状況が異常であると判別された撮像画像を出力部１８が切り替えて表示するように出力する制御を行う。
これにより、異常が発生した方向及び異常の内容をわかりやすい形態で表示することができる。

状況検出部５３は、状況検出部５３により被写体像の移動状況が異常であると判別された場合、被写体像の移動方向を検出する。
表示画像生成部５４及び表示制御部５５は、状況検出部５３により検出される被写体像の移動方向に応じて、出力部１８が切り替えて表示する撮像画像を左右反転して表示するように出力する制御を行う。
これにより、異常が検出された被写体の移動方向に応じて、撮像画像が左右反転された状態で表示される。
そのため、装着者は、左右の何れに注意すべきかを直感的に把握することが可能となる。

動作検出部５２は、検出される人体の動作が所定の閾値を超えて急激であるか否かを判別する。
表示画像生成部５４及び表示制御部５５は、動作検出部５２による判別結果に応じて異なるように、出力部１８が切り替えて表示するように出力する制御を行う。
これにより、装着者が急激な動作を行った場合に、通常の表示の切り替えと異なる制御を行い、視認性の低下を防ぐための制御を行うことができる。

状況検出部５３は、人体の位置の移動量が所定の閾値を超えるか否かを判別する。
表示画像生成部５４及び表示制御部５５は、状況検出部５３による判別結果に応じて、出力部１８が切り替えて表示するように出力する制御とは異なる出力の制御を行う。
これにより、異常に対して接近等しようとする装着者をサポートする表示を行うことができる。

表示画像生成部５４は、動作検出部５２により検出される人体の動作に応じて、予め設定されている複数の撮像画像の撮像方向が維持されるように撮像画像を加工する。
表示制御部５５は、出力部１８が、表示画像生成部５４により加工された画像を表示するように出力する制御を行う。
これにより、注目する方向の画像が継続して同一の表示領域に表示され、装着者に対して、注目する方向の情報をわかりやすく提示することができる。

表示制御部５５は、出力部１８が、複数の撮像画像を並べて表示するように出力し、動作検出部５２により検出される人物の動作に応じて、そのうちの一つの撮像画像を他の撮像画像と識別可能に切り替えて表示するように出力する制御を行う。
これにより、装着者の周囲の様子をわかりやすい形態で表示することができる。

表示制御部５５は、出力部１８が切り替えて表示する撮像画像の撮像方向に応じて、左右反転して表示するように出力する制御を行う。
これにより、装着者は、左右の何れに注意すべきかを直感的に把握することが可能となる。

出力部１８は、人物の両眼各々が独立して視認可能な２つの表示領域からなり、表示制御部５５は、動作検出部５２により検出される人物の動作に応じて、２つの表示領域で、異なるように切り替えて表示するように出力する制御を行う。
これにより、装着者に対して、状況に応じて、種々の有用な情報を提示することができる。

また、表示制御装置１は、撮像部１６ａ〜１６ｄを備える。
撮像部１６ａ〜１６ｄは、撮像方向がそれぞれ異なる。
画像取得部５１は、撮像部１６ａ〜１６ｄが撮像する撮像画像を取得する。
出力部１８と複数の撮像部１６ａ〜１６ｄとは、当該表示制御装置１と一体である。
表示制御装置１は、人体に装着され、当該人体の動作に連動して、撮像部１６ａ〜１６ｄの撮像方向及び出力部１８の表示方向が変化する。
これにより、撮像部１６ａ〜１６ｄと出力部１８とが一体となった表示制御装置１において、表示制御装置１を装着している人物の動作や、撮像画像内における被写体の移動状況に応じて、所定の撮像画像が出力部１８に切り替えて表示される。
したがって、異常に対してより迅速に対応することが可能なる。

なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。

上述の実施形態では、４つの撮像部１６ａ〜１６ｄを備えるものとして説明したが、必要とする視野角を確保することができれば、撮像部の数は３つ以下とすることができる。反対に、５つ以上の撮像部を備えることとしてもよい。

また、上述の実施形態では、表示制御装置１を小型プロジェクタ方式の光学透過ヘッドマウントディスプレイとして構成したが、ホログラフィーを用いた立体表示を行う光学透過ヘッドマウントディスプレイとすることもできる。これらの光学透過ヘッドマウントディスプレイは、虚像投影方式とも呼ばれる。一方、表示制御装置１をレーザー光によって網膜に像を直接投影する網膜投影方式のヘッドマウントディスプレイとして構成することも可能である。
また、表示制御装置１は、ビデオ透過ヘッドマウントディスプレイ（ビデオシースルー方式）として構成することも可能である。表示制御装置１をビデオ透過ヘッドマウントディスプレイとした場合、装着すると外界の景色が直接視認されなくなるが、ディスプレイに外の様子が映し出される。

また、上述の実施形態では、表示制御装置１はヘルメット型の本体１Ａを備えるものとして説明したが、これに限られない。例えば、表示制御装置１の本体をヘッドバンド型に構成することとしてもよい。また、表示制御装置１を眼鏡型のユニットとして構成し、眼鏡型のユニットに撮像部を備えるものとしてもよい。表示制御装置１を眼鏡型のユニットとする場合、いわゆるスマートグラスの形態で表示制御装置１を実現することができる。

また、上述の実施形態では、撮像部１６ａ〜１６ｄ、ディスプレイ１８ａは、表示制御装置１と一体となっているものとして説明したが、これに限られない。例えば、撮像部１６ａ〜１６ｄの撮像方向と、ディスプレイ１８ａの表示方向の両方、又は何れかが人物の動作と連動してその方向が変化すればよいので、撮像部１６ａ〜１６ｄと、ディスプレイ１８ａの両方、または何れかは表示制御装置１の本体とは別体であってもよい。

また、上述の実施形態では、装着者周囲の画像を水平方向に亘って撮像することとして説明したが、これに限られない。例えば、装着者の上方や下方を撮像し、これらの撮像画像を含めて、状況検出部５３による特定の状況の検出や、表示画像生成部５４による表示画像の生成を行うこととしてもよい。この場合、前方、後方、左側方及び右側方の画像に加え、上方及び下方の画像を併せて表示する表示画像とし、３次元方向の周囲の画像を表示するものとできる。

また、本発明に係る表示制御装置１は、警備員のように監視を業務とする場合にとどまらず、主に屋外で一般のユーザが視界外での異常を検出できるようにするための技術として利用することができる。

また、上述の実施形態では、本発明が適用される表示制御装置１は、ヘッドマウントディスプレイを例として説明したが、特にこれに限定されない。
例えば、本発明は、表示機能を有する電子機器一般に適用することができる。具体的には、例えば、本発明は、ノート型のパーソナルコンピュータ、テレビジョン受像機、ビデオカメラ、携帯型ナビゲーション装置、携帯電話機、スマートフォン、ポータブルゲーム機等に適用可能である。

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図３の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が表示制御装置１に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図３の例に限定されない。
また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。

このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図１のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア３１は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、または光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ−Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ），Ｂｌｕ−ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ−Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図２のＲＯＭ１２や、図２の記憶部２０に含まれるハードディスク等で構成される。

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、
を備えることを特徴とする表示制御装置。
［付記２］
複数の撮像画像内の各々における被写体像の移動状況が異常であるか否かを判別する異常判別手段を更に備え、
前記表示制御手段は、前記異常判別手段により被写体像の移動状況が異常であると判別された撮像画像を前記表示手段が切り替えて表示するように出力する制御を行うことを特徴とする付記１に記載の表示制御装置。
［付記３］
前記検出手段は、前記異常判別手段により被写体像の移動状況が異常であると判別された場合、被写体像の移動方向を検出し、
前記表示制御手段は、前記検出手段により検出される被写体像の移動方向に応じて、前記表示手段が切り替えて表示する撮像画像を左右反転して表示するように出力する制御を行うことを特徴とする付記２に記載の表示制御装置。
［付記４］
前記検出手段により検出される人体の動作が所定の閾値を超えて急激であるか否かを判別する動作判別手段を更に備え、
前記表示制御手段は、前記動作判別手段による判別結果に応じて異なるように、前記表示手段が切り替えて表示するように出力する制御を行うことを特徴とする付記１に記載の表示制御装置。
［付記５］
前記動作判別手段は、人体の位置の移動量が所定の閾値を超えるか否かを判別し、
前記表示制御手段は、前記動作判別手段による判別結果に応じて、前記表示手段が切り替えて表示するように出力する制御とは異なる出力の制御を行うことを特徴とする付記４に記載の表示制御装置。
［付記６］
前記検出手段により検出される人体の動作に応じて、予め設定されている複数の前記撮像画像の撮像方向が維持されるように撮像画像を加工する画像加工手段を更に備え、
前記表示制御手段は、前記表示手段が、前記画像加工手段により加工された画像を表示するように出力する制御を行うことを特徴とする付記１に記載の表示制御装置。
［付記７］
前記表示制御手段は、前記表示手段が、複数の撮像画像を並べて表示するように出力し、前記動作判別手段により検出される人物の動作に応じて、そのうちの一つの撮像画像を他の撮像画像と識別可能に切り替えて表示するように出力する制御を行うことを特徴とする付記４に記載の表示制御装置。
［付記８］
前記表示制御手段は、前記表示手段が切り替えて表示する撮像画像の撮像方向に応じて、左右反転して表示するように出力する制御を行うことを特徴とする付記１から７のいずれか１つに記載の表示制御装置。
［付記９］
前記表示手段は、人物の両眼各々が独立して視認可能な２つの表示領域からなり、
前記表示制御手段は、前記検出手段により検出される人物の動作に応じて、前記２つの表示領域で、異なるように切り替えて表示するように出力する制御を行うことを特徴とする付記１から８のいずれか１つに記載の表示制御装置。
［付記１０］
撮像方向の異なる複数の撮像手段、を更に備え、
前記取得手段は、前記撮像手段が撮像する撮像画像を取得し、
前記表示手段と前記複数の撮像手段とは、当該表示制御装置と一体であり、
当該表示制御装置は、人体に装着され、当該人体の動作に連動して、前記撮像手段の撮像方向及び前記表示手段の表示方向が変化することを特徴とする付記１から９のいずれか１つに記載の表示制御装置。
［付記１１］
人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得処理と、
当該人物の動作、又は前記取得処理により取得される複数の撮像画像内における被写体像の移動状況を検出する検出処理と、
前記検出処理により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得処理により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段に切り替えて表示するように出力する制御を行う表示制御処理と、
を含むことを特徴とする表示制御方法。
［付記１２］
コンピュータに、
人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得機能と、
当該人物の動作、又は前記取得機能により取得される複数の撮像画像内における被写体像の移動状況を検出する検出機能と、
前記検出機能により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得機能により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段に切り替えて表示するように出力する制御を行う表示制御機能と、
を実現させることを特徴とするプログラム。

１・・・表示制御装置，１Ａ・・・本体，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６ａ〜１６ｄ・・・撮像部，１７・・・入力部，１８・・・出力部，１８ａ・・・ディスプレイ，１９・・・センサ部，２０・・・記憶部，２１・・・通信部，２２・・・ドライブ，３１・・・リムーバブルメディア，５１・・・画像取得部，５２・・・動作検出部，５３・・・状況検出部，５４・・・表示画像生成部，５５・・・表示制御部，７１・・・画像記憶部

Claims (17)

1. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
   当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
   前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、
   前記検出手段により検出される人物の動作が所定の閾値を超えているか否かを判別する動作判別手段と、を備え、
   前記表示制御手段は、前記動作判別手段による判別結果に応じて異なるように、前記表示手段が切り替えて表示するように出力する制御を行うことを特徴とする表示制御装置。
2. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
   当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
   前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、
   前記検出手段により検出される人物の位置の移動量が所定の閾値を超えるか否かを判別する動作判別手段と、を備え、
   前記表示制御手段は、前記動作判別手段による判別結果に応じて、前記表示手段が切り替えて表示するように出力する制御とは異なる出力の制御を行うことを特徴とする表示制御装置。
3. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
   当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
   前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、
   前記検出手段により検出される人物の動作に応じて、予め設定されている複数の前記撮像画像の撮像方向が維持されるように撮像画像を加工する画像加工手段と、を備え、
   前記表示制御手段は、前記表示手段が、前記画像加工手段により加工された画像を表示するように出力する制御を行うことを特徴とする表示制御装置。
4. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
   当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
   前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、を備え、
   前記表示制御手段は、前記表示手段が、複数の撮像画像を並べて表示するように出力し、前記検出手段により検出される人物の動作に応じて、そのうちの一つの撮像画像を他の撮像画像と識別可能に切り替えて表示するように出力する制御を行うことを特徴とする表示制御装置。
5. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得手段と、
   当該人物の動作、又は前記取得手段により取得される複数の撮像画像内における被写体像の移動状況を検出する検出手段と、
   前記検出手段により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得手段により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御手段と、を備え、
   前記表示手段は、人物の両眼各々が独立して視認可能な２つの表示領域からなり、
   前記表示制御手段は、前記検出手段により検出される人物の動作に応じて、前記２つの表示領域で、異なるように切り替えて表示するように出力する制御を行うことを特徴とする表示制御装置。
6. 複数の撮像画像内の各々における被写体像の移動状況が異常であるか否かを判別する異常判別手段を更に備え、
   前記表示制御手段は、前記異常判別手段により被写体像の移動状況が異常であると判別された撮像画像を前記表示手段が切り替えて表示するように出力する制御を行うことを特徴とする請求項１から５のいずれか１項に記載の表示制御装置。
7. 前記検出手段は、前記異常判別手段により被写体像の移動状況が異常であると判別された場合、被写体像の移動方向を検出し、
   前記表示制御手段は、前記検出手段により検出される被写体像の移動方向に応じて、前記表示手段が切り替えて表示する撮像画像を左右反転して表示するように出力する制御を行うことを特徴とする請求項６に記載の表示制御装置。
8. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得処理と、
   当該人物の動作、又は前記取得処理により取得される複数の撮像画像内における被写体像の移動状況を検出する検出処理と、
   前記検出処理により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得処理により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段に切り替えて表示するように出力する制御を行う表示制御処理と、
   前記検出処理により検出される人物の動作が所定の閾値を超えているか否かを判別する動作判別処理と、を含み、
   前記表示制御処理では、前記動作判別処理による判別結果に応じて異なるように、前記表示手段が切り替えて表示するように出力する制御が行われることを特徴とする表示制御方法。
9. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得処理と、
   当該人物の動作、又は前記取得処理により取得される複数の撮像画像内における被写体像の移動状況を検出する検出処理と、
   前記検出処理により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得処理により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御処理と、
   前記検出処理により検出される人物の位置の移動量が所定の閾値を超えるか否かを判別する動作判別処理と、を含み、
   前記表示制御処理では、前記動作判別処理による判別結果に応じて、前記表示手段が切り替えて表示するように出力する制御とは異なる出力の制御が行われることを特徴とする表示制御方法。
10. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得処理と、
    当該人物の動作、又は前記取得処理により取得される複数の撮像画像内における被写体像の移動状況を検出する検出処理と、
    前記検出処理により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得処理により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御処理と、
    前記検出処理により検出される人物の動作に応じて、予め設定されている複数の前記撮像画像の撮像方向が維持されるように撮像画像を加工する画像加工処理と、を含み、
    前記表示制御処理では、前記表示手段が、前記画像加工処理により加工された画像を表示するように出力する制御が行われることを特徴とする表示制御方法。
11. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得処理と、
    当該人物の動作、又は前記取得処理により取得される複数の撮像画像内における被写体像の移動状況を検出する検出処理と、
    前記検出処理により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得処理により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御処理と、を含み、
    前記表示制御処理では、前記表示手段が、複数の撮像画像を並べて表示するように出力し、前記検出処理により検出される人物の動作に応じて、そのうちの一つの撮像画像を他の撮像画像と識別可能に切り替えて表示するように出力する制御が行われることを特徴とする表示制御方法。
12. 人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得処理と、
    当該人物の動作、又は前記取得処理により取得される複数の撮像画像内における被写体像の移動状況を検出する検出処理と、
    前記検出処理により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得処理により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御処理と、を含み、
    前記表示手段は、人物の両眼各々が独立して視認可能な２つの表示領域からなり、
    前記表示制御処理では、前記検出処理により検出される人物の動作に応じて、前記２つの表示領域で、異なるように切り替えて表示するように出力する制御が行われることを特徴とする表示制御方法。
13. コンピュータに、
    人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得機能と、
    当該人物の動作、又は前記取得機能により取得される複数の撮像画像内における被写体像の移動状況を検出する検出機能と、
    前記検出機能により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得機能により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段に切り替えて表示するように出力する制御を行う表示制御機能と、
    前記検出機能により検出される人物の動作が所定の閾値を超えているか否かを判別する動作判別機能と、を実現させ、
    前記表示制御機能では、前記動作判別機能による判別結果に応じて異なるように、前記表示手段が切り替えて表示するように出力する制御が行われることを特徴とするプログラム。
14. コンピュータに、
    人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得機能と、
    当該人物の動作、又は前記取得機能により取得される複数の撮像画像内における被写体像の移動状況を検出する検出機能と、
    前記検出機能により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得機能により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御機能と、
    前記検出機能により検出される人物の位置の移動量が所定の閾値を超えるか否かを判別する動作判別機能と、を実現させ、
    前記表示制御機能では、前記動作判別機能による判別結果に応じて、前記表示手段が切り替えて表示するように出力する制御とは異なる出力の制御が行われることを特徴とするプログラム。
15. コンピュータに、
    人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得機能と、
    当該人物の動作、又は前記取得機能により取得される複数の撮像画像内における被写体像の移動状況を検出する検出機能と、
    前記検出機能により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得機能により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御機能と、
    前記検出機能により検出される人物の動作に応じて、予め設定されている複数の前記撮像画像の撮像方向が維持されるように撮像画像を加工する画像加工機能と、を実現させ、
    前記表示制御機能では、前記表示手段が、前記画像加工機能により加工された画像を表示するように出力する制御が行われることを特徴とするプログラム。
16. コンピュータに、
    人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得機能と、
    当該人物の動作、又は前記取得機能により取得される複数の撮像画像内における被写体像の移動状況を検出する検出機能と、
    前記検出機能により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得機能により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御機能と、を実現させ、
    前記表示制御機能では、前記表示手段が、複数の撮像画像を並べて表示するように出力し、前記検出機能により検出される人物の動作に応じて、そのうちの一つの撮像画像を他の撮像画像と識別可能に切り替えて表示するように出力する制御が行われることを特徴とするプログラム。
17. コンピュータに、
    人物の動作に連動して撮像方向が変化する、撮像方向の異なる複数の撮像画像を取得する取得機能と、
    当該人物の動作、又は前記取得機能により取得される複数の撮像画像内における被写体像の移動状況を検出する検出機能と、
    前記検出機能により検出される人物の動作、又は被写体像の移動状況に応じて、前記取得機能により取得される複数の撮像画像のうちの何れかを、前記人物の動作に連動して当該人物が視認可能に表示方向が変化する表示手段が切り替えて表示するように出力する制御を行う表示制御機能と、を実現させ、
    前記表示手段は、人物の両眼各々が独立して視認可能な２つの表示領域からなり、
    前記表示制御機能では、前記検出機能により検出される人物の動作に応じて、前記２つの表示領域で、異なるように切り替えて表示するように出力する制御が行われることを特徴とするプログラム。

Images