JP2023167906A - 映像表示装置および映像表示方法 - Google Patents

Abstract

【課題】車両の走行によって通過した位置の映像を即座に確認可能にすること。【解決手段】映像表示装置１０は、撮影された位置情報を含む映像を取得する映像取得部２１Ａと、車両の位置情報を取得する位置情報取得部２９Ａと、車両に設置された透過型表示パネル１４と、透過型表示パネル１４の表面で操作可能な操作部１５と、表示させる範囲を特定する特定部２４と、取得した映像を再生する再生制御部２７と、再生した映像における、特定した範囲の映像を透過型表示パネル１４に表示させる表示制御部２８とを備え、再生制御部２７は、操作が開始された場合、操作が開始されたときの車両の位置と同一の位置で過去に撮影された映像を表示させ、操作方向が車両の進行方向に沿った第一方向に操作された場合、映像を順方向で再生し、操作方向が車両の進行方向に沿った第一方向とは反対方向に操作された場合、映像を戻し方向に再生する。【選択図】図１０

Description

本発明は、映像表示装置および映像表示方法に関する。

車両の周囲の映像を撮影するシステムが実用化されており、例えば、ドライブレコーダとして用いられる。このようなシステムで撮影された映像は、イベント記録等による保存が行われない場合は、一時的に記録された後に、新たな映像が上書される。ドライブレコーダの映像を、基準点である消失点を基準に画面においてフリック操作を行うことで、映像の送り再生や戻し再生を行う技術が開示されている（例えば、特許文献１参照）。

特開２０２０‐０７８０８３号公報

特許文献１の技術は、車両の搭乗者が車両の走行中に車両の周囲を視認しているときに、車両の走行によって通過した位置の映像を即座に確認することは困難である。

本開示は、上記に鑑みてなされたものであって、車両の走行によって通過した位置の映像を即座に確認可能にすることを目的とする。

上述した課題を解決し、目的を達成するために、本開示に係る映像表示装置は、映像が撮影された位置情報を含む映像を取得する映像取得部と、移動体の位置情報を取得する位置情報取得部と、前記移動体に設置され、透過性を備える透過型表示パネルと、前記透過型表示パネルの表面で操作可能な操作部と、前記映像取得部が取得した映像において、前記透過型表示パネルに表示させる範囲を特定する特定部と、前記映像取得部が取得した映像を再生する再生制御部と、前記再生制御部が再生した映像における前記特定部が特定した範囲の映像を前記透過型表示パネルに表示させる表示制御部と、を備え、前記再生制御部は、前記操作部の操作が開始された場合に、前記映像取得部が取得した、前記操作部の操作が開始されたときの前記移動体の位置と同一の位置で過去に撮影された映像を前記透過型表示パネルに表示させ、前記操作部の操作方向が前記移動体の進行方向に沿った第一方向に操作された場合、前記映像を順方向で再生し、前記操作部の操作方向が前記移動体の進行方向に沿った前記第一方向とは反対方向に操作された場合、前記映像を戻し方向に再生する。

本開示に係る映像表示方法は、移動体に設置され、透過性を備える透過型表示パネルの表面で操作可能な操作部の操作が開始された場合に、前記操作部の操作が開始されたときの前記移動体の位置と同一の位置で過去に撮影された映像を前記透過型表示パネルに表示させるステップと、前記操作部の操作方向が前記移動体の進行方向に沿った第一方向に操作された場合、前記映像を順方向で再生し、前記操作部の操作方向が前記移動体の進行方向に沿った前記第一方向とは反対方向に操作された場合、前記映像を戻し方向に再生するステップとを映像表示装置が実行する。

本開示によれば、車両の走行によって通過した位置の映像を即座に確認可能にすることができるという効果を奏する。

図１は、第一実施形態に係る映像表示装置の構成例を示すブロック図である。 図２は、車両の窓ガラスの撮影画角の一例を説明する概略図である。 図３は、リヤドアガラスの一例を説明する概略図である。 図４は、リヤドアガラスの他の例を説明する概略図である。 図５は、撮影画角と特定範囲とを説明する概略図である。 図６は、第一実施形態における操作部における操作の一例を説明する概略図である。 図７は、第一実施形態に係る映像表示装置における処理の流れの一例を示すフローチャートである。 図８は、第一実施形態における操作と表示映像との関係の一例を示す図である。 図９は、第一実施形態における操作と表示映像との関係の他の例を示す図である。 図１０は、第二実施形態に係る映像表示装置の構成例を示すブロック図である。 図１１は、第二実施形態における操作部における操作の一例を説明する概略図である。 図１２は、第二実施形態に係る制御装置における処理の流れの一例を示すフローチャートである。 図１３は、第二実施形態における操作と表示映像との関係の一例を示す図である。 図１４は、第二実施形態における操作と表示映像との関係の他の例を示す図である。 図１５は、第三実施形態に係る映像表示装置の構成例を示すブロック図である。 図１６は、自車両と他車両との相対的な位置関係を説明する図である。 図１７は、第四実施形態における操作部における操作の一例を説明する概略図である。 図１８は、第四実施形態に係る制御装置における処理の流れの一例を示すフローチャートである。 図１９は、第四実施形態における操作と表示映像との関係の一例を示す図である。 図２０は、第四実施形態における操作と表示映像との関係の他の例を示す図である。

以下に添付図面を参照して、本開示に係る映像表示装置および映像表示方法の実施形態を詳細に説明する。なお、以下の実施形態により本発明が限定されるものではない。

［第一実施形態］
＜映像表示装置＞
図１は、第一実施形態に係る映像表示制御装置（以下、「制御装置」という。）２０の構成例を示すブロック図である。

本実施形態は、移動体の搭乗者が移動体の移動中に移動体の周囲を視認しているときに、移動体の移動によって通過した位置の状態や施設などを即座に確認することが困難であることを課題とする。本実施形態は、移動体の搭乗者が、移動体の移動によって通過した位置の状態や施設などを即座に確認可能にすることを目的とする。

映像表示装置１０は、例えば、車両、船舶、鉄道などの移動体の周囲の映像を再生して、移動体に配置された透過型表示パネル１４に表示させる。本実施形態では、映像表示装置１０は、車両の周囲の映像を戻し方向に再生して、車両に配置された透過型表示パネル１４に表示させる。以下の各実施形態においては、移動体の例として車両を用いて説明する。

戻し方向の再生とは、映像を時間の経過に沿った方向とは反対方向に再生することであり、言い換えると、巻き戻す方向に再生することである。

映像表示装置１０は、車両に載置されているものに加えて、可搬型で車両において利用可能な装置であってもよい。また、映像表示装置１０は、車両にあらかじめ設置されている装置やナビゲーション装置等の機能または構成を含んで実現されてもよい。映像表示装置１０は、カメラ１１と、記録部１２と、インターフェース部（以下、「ＩＦ部」という。）１３と、透過型表示パネル１４と、操作部１５と、制御装置２０とを有する。

カメラ１１は、車両の周辺を撮影するカメラである。カメラ１１は、一例としては、映像表示装置１０に固有のカメラ、または、俯瞰映像表示システムと共用した俯瞰映像用のカメラなどである。カメラ１１は、複数のカメラ群であってもよい。カメラ１１は、例えば、車両の前方、車両の右側方、車両の左側方、および、車両の後方を撮影可能な位置に配置されている。カメラ１１は、例えば、透過型表示パネル１４ごとに設けられ、透過型表示パネル１４越しに見た周辺の景色を撮影してもよい。つまり、カメラ１１は、本発明が適用可能な透過型表示パネル１４に対応した向きが撮影可能なカメラである。カメラ１１は、例えば、車両の各窓ガラスに対応して配置され、各窓ガラスから見た周辺の景色を撮影してもよい。本実施形態では、カメラ１１は、車両のアクセサリ電源がＯＮである間や、車両が動作している間、映像を常時撮影する。カメラ１１は、撮影した映像を制御装置２０の映像取得部２１に出力する。映像は、例えば毎秒２７．５フレームの画像から構成される動画像である。

図２は、車両の窓ガラスの撮影画角の一例を説明する概略図である。一例として、カメラ１１を構成する複数のカメラのうち、右側方を撮影する右カメラ１１１の撮影画角２００を説明する。右側方を撮影する右カメラ１１１は、例えば、右サイドミラーに配置されている。右側方を撮影する右カメラ１１１の撮影画角２００は、右リヤドアガラス１０４から乗員が車両の外部を視認できる視認範囲２０１を含む。

記録部１２は、映像表示装置１０におけるデータの一時記憶などに用いられる。記録部１２は、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリなどの半導体メモリ素子、または、メモリカードなどの記録部である。または、図示しない通信装置を介して無線接続される外部記録部であってもよい。記録部１２は、制御装置２０の記録制御部２２から出力された制御信号に基づいて、ループ記録映像を記録する。ループ記録映像とは、ループ記録された映像であり、ループ記録については後述する。

ＩＦ部１３は、ＣＡＮ（Ｃｏｎｔｒｏｌｌｅｒ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを介して、車両の車速情報を取得するためのインターフェースである。

透過型表示パネル１４は、一例としては、映像表示装置１０に固有の表示装置、または、ナビゲーションシステムを含む他のシステムと共用した表示装置などである。透過型表示パネル１４は、例えば、透過型の有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイが適切であるが、これに限定されず他の方式でもよい。透過型表示パネル１４は、車両の周囲、つまり車両の外周部に設置され、映像が表示されていないときは透過性を備える。透過型表示パネル１４は、車両の周囲の映像を表示させる。透過型表示パネル１４は、制御装置２０の表示制御部２８から出力された映像信号に基づいて、映像を表示する。透過型表示パネル１４は、カメラ１１が撮影している映像、または、記録部１２に記録された映像を表示する。

透過型表示パネル１４は、車両の窓ガラスに備えられているか、車両の窓ガラスを構成している。透過型表示パネル１４は、映像が表示されていないときは、可視光領域において、例えば６０％以上の透過率を有する。透過型表示パネル１４は、映像が表示されているときは、映像が表示されている範囲の透過率が、例えば２０％未満となるか、または透過しない。

透過型表示パネル１４は、車両の外部を視認可能な窓に適用可能である。透過型表示パネル１４は、例えば、図２に示す、車両のフロントガラス１０１、右フロントドアガラス１０２、左フロントドアガラス１０３、右リヤドアガラス１０４、左リヤドアガラス１０５、及び、リヤガラス１０６の少なくともいずれかに適用可能である。以下の説明では、透過型表示パネル１４を車両の右リヤドアガラス１０４に適用するものとして説明する。

図３は、リヤドアガラスの一例を説明する概略図である。図４は、リヤドアガラスの他の例を説明する概略図である。透過型表示パネル１４と操作部１５であるタッチパネル形状は、適用するガラスの全面形状と同一であってもよいし、適用するガラスの全面形状より小さい矩形で構成されてもよい。図３に示す例では、透過型表示パネル１４と操作部１５であるタッチパネル形状は、右リヤドアガラス１０４の全面形状と同一である。図４に示す例では、透過型表示パネル１４と操作部１５であるタッチパネル形状は、右リヤドアガラス１０４の全面形状より小さい矩形である。

操作部１５は、映像表示装置１０に対する各種操作を受付可能である。操作部１５は、透過型表示パネル１４の表面で操作可能である。操作部１５は、例えば、透過型表示パネル１４の表示画面上に重ねて配置されたタッチパネルである。例えば、操作部１５は、スマートフォンの画面のように、タッチ操作、スワイプ操作、及び、フリック操作などのタッチパネルに対する各種操作を受け付け可能である。例えば、操作部１５は、記録部１２に記録した映像を再生する操作を受付可能である。操作部１５は、操作情報を制御装置２０の操作制御部２５に出力する。

＜制御装置＞
制御装置２０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）などで構成された演算処理装置（制御装置）である。制御装置２０は、記憶されているプログラムをメモリにロードして、プログラムに含まれる命令を実行する。制御装置２０には図示しない内部メモリが含まれ、内部メモリは制御装置２０におけるデータの一時記憶などに用いられる。制御装置２０は、その構成およびプログラムによって実現される機能として、映像取得部２１と、記録制御部２２と、特定部２４と、操作制御部２５と、車速情報取得部２６と、再生制御部２７と、表示制御部２８とを有する。

映像取得部２１は、車両の周辺を撮影するカメラ１１が撮影した周辺の映像を取得する。映像取得部２１は、カメラ１１の撮影動作を制御する、撮影制御部として機能してもよい。

記録制御部２２は、カメラ１１が撮影した映像を記録部１２に記録する。記録制御部２２は、映像取得部２１によって取得された映像を、記録部１２に記録させる制御を行う。記録制御部２２は、車両のアクセサリ電源がＯＮである期間など、車両が動作している期間は、映像取得部２１によって取得された映像を上書き可能な映像として記録部１２に記録する。より詳しくは、記録制御部２２は、映像取得部２１によって取得された映像を記録部１２に記録し続け、記録部１２の容量が一杯になった場合、古い映像に新しい映像を上書きして記録するループ記録を行う。記録制御部２２は、撮影した映像を、戻し方向再生に必要な時間だけ記録できればよい。例えば５分間から１０分間程度の映像をループ記録すればよい。ループ記録可能な時間は、記録部１２の記録可能容量によって決定される。記録制御部２２は、カメラ１１が左右各々など複数ある場合、各々の映像をループ記録する。

特定部２４は、カメラ１１の画角に基づく映像から、予め決められた範囲を、透過型表示パネル１４に表示させる特定範囲として特定する。特定部２４は、車両のガラスに一番近い座席の搭乗者の平均的な顔（目）の位置から、ガラスを介して搭乗者が車外を視認できる範囲を特定する。特定部２４は、例えば、右リヤドアガラス１０４の場合、右後部座席に着座する搭乗者の平均的な顔（目）の位置から、右リヤドアガラス１０４を介して搭乗者が車外を視認できる範囲を特定する。

特定部２４は、図示しない車内のカメラが撮影した映像から、搭乗者の顔の位置および向き、目の位置および向きを検出し、目の位置および向きに合わせて、特定範囲を変更してもよい。特定部２４は、操作部１５の操作が開始されたときの搭乗者の顔の位置および向き、目の位置および向きを検出し、操作部１５の操作が開始されたときの範囲を特定し、操作部１５の操作中は特定範囲の映像を表示させてもよい。

図５は、カメラ１１の撮影画角と、特定部２４が特定した特定範囲とを説明する概略図である。特定部２４は、カメラ１１が撮影した映像２００において、透過型表示パネル１４に表示させる特定範囲２０２を特定する。特定部２４は、透過型表示パネル１４の形状に合わせて特定範囲２０２を特定する。例えば、透過型表示パネル１４が図３に示す形状である場合、特定部２４は、適用するガラスの全面形状と同一の形状の特定範囲２０２を特定する。例えば、透過型表示パネル１４が図４に示す形状である場合、特定部２４は、矩形状の特定範囲２０２を特定する。

操作制御部２５は、操作部１５が受け付けた操作の操作情報を取得する。操作制御部２５は、例えば、タッチ操作、スワイプ操作、及び、フリック操作などのタッチパネルに対する各種操作を示す操作情報を取得して制御信号を出力する。操作制御部２５は、例えば、進行方向に沿った操作を取得して操作情報を示す制御信号を出力する。

車両の進行方向に沿った操作とは、車両の前後いずれかの方向に対する操作である。例えば、映像の再生時に再生位置を指し示すシークバーに対する操作のように、前方から後方、または、後方から前方へのスワイプ操作のことである。従って、車両の側面に配置されているリヤドアガラスにおいては、車両の車室内側から見て左右方向の操作が、車両の進行方向に沿った操作である。

図６は、第一実施形態における操作部における操作の一例を説明する概略図である。図６は、一例として、右リヤドアガラス１０４を示す。操作制御部２５は、例えば、搭乗者がスマートフォンの画面のようなタッチ操作を行った場合、操作開始点Ｐ１１へのタッチ操作を示す制御信号を出力する。操作制御部２５は、例えば、ユーザがスマートフォンの画面のようなスワイプ操作を行った場合、矢印Ａ１で示すような後方から前方へのスワイプ操作を示す制御信号を出力する。

車両の進行方向は、基本は前進方向とする。車両の後退時には、本発明は適用されない。このため、車両の進行方向はセンシングが不要である。車両の右リヤドアガラス１０４に配置された透過型表示パネル１４の場合、例えば、車室内側から透過型表示パネル１４に向かって進行方向は左側と予め設定されている。車両の左リヤドアガラス１０５に設置された透過型表示パネル１４の場合、例えば、車室内側から透過型表示パネル１４に向かって進行方向は右側と予め設定されている。

車速情報取得部２６は、ＣＡＮ等を介して車両の車速を示す車速情報を取得する。車速情報取得部２６は、制御装置２０の必須の構成ではない。

再生制御部２７は、映像を再生するよう制御する。再生制御部２７は、記録部１２に記録された映像を再生するよう制御する。再生制御部２７は、操作制御部２５から出力された制御信号に基づいて、記録部１２に記録されたループ記録映像を再生するよう制御する。

再生制御部２７は、操作制御部２５から出力された制御信号に基づいて、映像を戻し方向再生するよう制御する。再生制御部２７は、操作部１５の操作が開始された場合に、操作部１５の操作が開始されたときの映像を透過型表示パネル１４に表示させ、操作部１５の操作方向が車両の進行方向に沿って操作された場合、記録制御部２２が記録した映像を、操作部１５の操作が開始されたときの映像から戻し方向に再生するよう制御する。再生制御部２７は、透過型表示パネル１４のタッチ操作がされると、タッチ操作されたときの映像を停止した状態で表示させ、その後、透過型表示パネル１４のスワイプ操作等がされると、表示中の映像を戻し方向再生するよう制御する。

再生制御部２７は、カメラ１１によって撮影中の映像をリアルタイムで再生するように制御してもよい。より詳しくは、再生制御部２７は、操作部１５の操作が開始された場合に、操作部１５の操作が開始されたときから撮影中の映像を透過型表示パネル１４に表示させ、操作部１５の操作方向が車両の進行方向に沿って操作された場合、記録制御部２２が記録した映像を戻し方向に再生するよう制御してもよい。再生制御部２７は、透過型表示パネル１４のタッチ操作がされると、タッチ操作されたときから撮影中の映像に切り替わり、その後、透過型表示パネル１４のスワイプ操作等がされると、表示中の映像を戻し方向再生するよう制御する。

再生制御部２７は、操作部１５の操作方向が車両の進行方向に沿って操作された場合の操作速度に基づき、映像を戻し方向に再生する速度を変化させてもよい。本実施形態では、再生制御部２７は、スワイプ操作の単位時間当たりの操作量、言い換えると操作速度に基づき、戻し方向に再生する速度を変化させる。再生制御部２７は、例えば、１００ｍｍ／ｓｅｃ程度の操作速度の場合、１倍速の戻し方向再生を行う。再生制御部２７は、例えば、５０ｍｍ／ｓｅｃ程度の操作速度の場合、０．５倍速の戻し方向再生を行う。再生制御部２７は、例えば、２００ｍｍ／ｓｅｃ程度の操作速度の場合、２倍速の戻し方向再生を行う。操作速度と再生速度とは、直線的に対応付けられていてもよく、段階的に対応付けられていてもよい。

再生制御部２７は、操作部１５の操作が開始されたときの車両の走行速度に基づき、映像を戻し方向に再生する速度を変化させてもよい。より詳しくは、再生制御部２７は、車速情報取得部２６が取得した車速情報から、操作部１５の操作が開始されたときの車両の走行速度に応じて、映像を戻し方向に再生する速度を変化させてもよい。再生制御部２７は、例えば、操作部１５の操作が開始された時点における車両の走行速度が０ｋｍ／ｈ以上２０ｋｍ／ｈ以下の場合、０．５倍速の戻し方向再生を行う。再生制御部２７は、操作部１５の操作が開始された時点における車両の走行速度が２０ｋｍ／ｈ以上６０ｋｍ／ｈ以下の場合、１倍速で戻し方向再生を行う。再生制御部２７は、操作部１５の操作が開始された時点における車両の走行速度が６０ｋｍ／ｈ以上の場合、２倍速で戻し方向再生を行う。車両の走行速度と再生速度とは、直線的に対応付けられていてもよく、段階的に対応付けられていてもよい。

表示制御部２８は、再生制御部２７が再生した映像における特定部２４が特定した範囲の映像を透過型表示パネル１４に表示させる。

表示制御部２８は、透過型表示パネル１４における映像の表示を制御する。表示制御部２８は、再生制御部２７からの制御信号に基づいて、映像を透過型表示パネル１４に出力させる映像信号を出力する。より詳しくは、表示制御部２８は、カメラ１１が撮影している映像、または、記録部１２に記録された映像の再生によって表示する映像信号を出力する。

＜制御装置における情報処理＞
次に、図７を用いて、制御装置２０における処理の流れについて説明する。映像表示装置１０が起動している間、図７に示すフローチャートの処理が実行される。

制御装置２０は、撮影、記録を開始する（ステップＳ１０１）。より詳しくは、映像表示装置１０は、カメラ１１による車両の周辺の撮影を開始する。そして、制御装置２０は、映像取得部２１によって、カメラ１１が撮影した車両の周辺の映像を取得する。そして、制御装置２０は、記録制御部２２によって、カメラ１１が撮影した映像を記録部１２にループ記録を行う。制御装置２０は、ステップＳ１０２へ進む。

制御装置２０は、操作が開始されたか否かを判定する（ステップＳ１０２）。より詳しくは、制御装置２０は、操作制御部２５によって、操作部１５に対するタッチ操作が受付された場合、操作が開始されたと判定する。制御装置２０は、操作制御部２５によって、操作が開始されたと判定する場合（ステップＳ１０２でＹｅｓ）、ステップＳ１０３に進む。制御装置２０は、操作制御部２５によって、操作が開始されたと判定しない場合（ステップＳ１０２でＮｏ）、ステップＳ１０８に進む。

操作が開始されたと判定する場合（ステップＳ１０２でＹｅｓ）、制御装置２０は、操作開始時点の映像を表示させる（ステップＳ１０３）。より詳しくは、制御装置２０は、特定部２４によって、カメラ１１の画角に基づく映像から、予め決められた範囲を、透過型表示パネル１４に表示させる範囲として特定する。制御装置２０は、再生制御部２７によって、操作部１５のタッチ操作が開始されたときの映像を再生するよう制御する。制御装置２０は、表示制御部２８によって、再生制御部２７からの制御信号に基づいて、操作部１５のタッチ操作が開始されたときの映像を透過型表示パネル１４に表示させる。制御装置２０は、ステップＳ１０４へ進む。

制御装置２０は、進行方向に沿ったスワイプ操作があるか否かを判定する（ステップＳ１０４）。より詳しくは、制御装置２０は、操作制御部２５によって、操作部１５に対する車両の進行方向に沿ったスワイプ操作が受付された場合、進行方向に沿ったスワイプ操作があると判定する。制御装置２０は、操作制御部２５によって、進行方向に沿ったスワイプ操作があると判定する場合（ステップＳ１０４でＹｅｓ）、ステップＳ１０５に進む。制御装置２０は、操作制御部２５によって、進行方向に沿ったスワイプ操作が開始されたと判定しない場合（ステップＳ１０４でＮｏ）、ステップＳ１０８に進む。

進行方向に沿ったスワイプ操作があると判定する場合（ステップＳ１０４でＹｅｓ）、映像の戻し方向再生を開始する（ステップＳ１０５）。より詳しくは、制御装置２０は、再生制御部２７によって、記録制御部２２が記録した映像を、操作部１５の操作が開始されたときの映像から戻し方向に再生する。制御装置２０は、表示制御部２８によって、再生制御部２７からの制御信号に基づいて、再生された映像を透過型表示パネル１４に表示させる。制御装置２０は、ステップＳ１０６へ進む。

制御装置２０は、操作が終了したか否かを判定する（ステップＳ１０６）。より詳しくは、制御装置２０は、操作制御部２５によって、ステップＳ１０４で開始されたスワイプ操作に対して、操作部１５から搭乗者の指が離れた場合、操作が終了したと判定する。制御装置２０は、操作制御部２５によって、操作が終了したと判定する場合（ステップＳ１０６でＹｅｓ）、ステップＳ１０７に進む。制御装置２０は、操作制御部２５によって、操作が開始されたと判定しない場合（ステップＳ１０６でＮｏ）、ステップＳ１０６の処理を再度実行する。

操作が終了したと判定する場合（ステップＳ１０６でＹｅｓ）、制御装置２０は、戻し方向再生を終了する（ステップＳ１０７）。より詳しくは、制御装置２０は、再生制御部２７によって、映像の戻し方向の再生を終了する。制御装置２０は、表示制御部２８によって、再生制御部２７からの制御信号に基づいて、映像を透過型表示パネル１４に表示させることを終了する。制御装置２０は、ステップＳ１０８へ進む。

制御装置２０は、撮影、記録を終了するか否かを判定する（ステップＳ１０８）。例えば、車両の電源や動力がＯＦＦにされたことや、操作部１５に対する終了操作がされたことなどで、撮影、記録を終了することが判定される。制御装置２０は、撮影、記録を終了すると判定された場合（ステップＳ１０８でＹｅｓ）、本処理を終了する。制御装置２０は、撮影、記録を終了すると判定されない場合（ステップＳ１０８でＮｏ）、ステップＳ１０２の処理を再度実行する。

図８は、第一実施形態における操作と表示映像との関係の一例を示す図である。図８は、右方向に向けて時間が経過していることを示す。記録制御部２２は、タッチ操作が検出された時刻ｔａ０の時点で、時刻ｔａ－２の時点より前からの映像を記録している。また、時刻ｔａ０の時点においてもカメラ１１による撮影は継続している。図８に示す例では、搭乗者が時刻ｔａ０の時点でタッチ操作を開始して、時刻ｔａ１の時点までタッチ操作した指の動きがない状態を示している。再生制御部２７は、時刻ｔａ０の時点から時刻ｔａ１の時点まで、時刻ｔａ０の時点の映像を静止画として再生し、表示制御部２８は、再生されている映像を透過型表示パネル１４に表示させる。

その後、搭乗者が時刻ｔａ１の時点から時刻ｔａ３の時点まで車両の進行方向にスワイプ操作を行う。再生制御部２７は、時刻ｔａ０の時点の映像から戻し方向再生を行い、時刻ｔａ１の時点から時刻ｔａ３の時点までの期間と同等の時間長の映像である時刻ｔａ０の時点から時刻ｔａ－２の時点までの映像を戻し方向再生する。時刻ｔａ２はスワイプ操作の途中経過の時点を示す。時刻ｔａ２の時点に対応する戻し方向再生箇所は時刻ｔａ－１の時点である。

スワイプ操作が終了した時刻ｔａ３の時点で、再生制御部２７は、再生を終了し、表示制御部２８は、映像の表示を終了する。映像の表示が終了することで、透過型表示パネル１４は透過状態となる。

スワイプ操作が終了した時刻ｔａ３の時点で操作部１５から指が離れた後も、再生制御部２７が、例えば１秒程度、戻し方向再生を継続してから、表示制御部２８は、映像の表示を終了させてもよい。

スワイプ操作が終了した時刻ｔａ３の時点では、表示制御部２８は、時刻ｔａ－２の時点の映像を静止画として、例えば１秒程度表示させてから、映像の表示を終了させてもよい。

時刻ｔａ３の時点より後に、同一方向に再度のスワイプ操作が行われた場合、再生制御部２７は、時刻ｔａ－２の時点からさらに遡る戻し方向再生を行う。

図８を用いて、スワイプ操作の操作速度に基づき、戻し方向に再生する速度を変化させる場合について説明する。例えば、０．５倍速の戻し方向再生を行う場合、時刻ｔａ３の時点では、時刻ｔａ－１の時点までの映像が戻し方向再生される。例えば、２倍速の戻し方向再生を行う場合、時刻ｔａ３の時点では、時刻ｔａ－２より前の時点の映像まで戻し方向再生される。

図９は、第一実施形態における操作と表示映像との関係の他の例を示す図である。図９においても、右方向に向けて時間が経過していることを示す。図９に示す例では、搭乗者が時刻ｔｂ０の時点でタッチ操作を開始して、時刻ｔｂ１の時点までタッチ操作した指の動きがない状態を示している。再生制御部２７は、時刻ｔｂ０の時点から撮影中の映像を再生し、表示制御部２８は、映像を透過型表示パネル１４に表示させる。その後、搭乗者が時刻ｔｂ１の時点から時刻ｔｂ３の時点まで車両の進行方向にスワイプ操作を行う。再生制御部２７は、時刻ｔｂ１の時点から映像の戻し方向再生を行う。再生制御部２７は、時刻ｔｂ１の時点から時刻ｔｂ３の時点までの期間の同等の時間長の映像である時刻ｔｂ１の時点から時刻ｔｂ２の時点までの期間の映像を戻し方向再生する。時刻ｔｂ２はスワイプ操作の途中経過の時点を示す。時刻ｔｂ２の時点に対応する戻し方向再生箇所は時刻ｔｂ１の時点である。

＜効果＞
上述したように、本実施形態では、操作部１５の操作が開始された場合に、操作部１５の操作が開始されたときの映像を透過型表示パネル１４に表示させる。本実施形態は、操作部１５の操作方向が車両の進行方向に沿って操作された場合、記録制御部２２が記録した映像を、操作部１５の操作が開始されたときの映像から戻し方向に再生する。本実施形態によれば、操作によって、映像を即時に戻し方向に再生することができる。本実施形態によれば、車両の搭乗者が、車両の走行によって通過した位置の状態や施設などを即座に確認可能にすることができる。

本実施形態は、操作部１５の操作が開始された場合に、操作部１５の操作が開始されたときから撮影中の映像を透過型表示パネル１４に表示させる。本実施形態は、操作部１５の操作方向が車両の進行方向に沿って操作された場合、記録制御部２２が記録した映像を戻し方向に再生する。本実施形態によれば、撮影中の画像から、車両の走行によって通過した位置の状態や施設などを即座に確認可能にすることができる。

本実施形態は、操作部１５の操作方向が車両の進行方向に沿って操作された場合の操作速度に基づき、映像を戻し方向に再生する速度を変化させる。本実施形態によれば、操作速度に応じて、映像の再生速度を直感的に変化させることができる。

本実施形態は、操作部１５の操作が開始されたときの車両の走行速度に基づき、映像を戻し方向に再生する速度を変化させる。本実施形態によれば、車両の走行速度に応じて、再生速度を適切に変化させることができる。

［第二実施形態］
図１０ないし図１４を参照しながら、本実施形態に係る映像表示装置１０について説明する。図１０は、第二実施形態に係る映像表示装置の構成例を示すブロック図である。図１１は、第二実施形態における操作部における操作の一例を説明する概略図である。図１２は、第二実施形態に係る制御装置における処理の流れの一例を示すフローチャートである。図１３は、第二実施形態における操作と表示映像との関係の一例を示す図である。図１４は、第二実施形態における操作と表示映像との関係の他の例を示す図である。

本実施形態は、車両の搭乗者が車両の走行中に車両の周囲を視認しているときに、車両が走行している位置を含む周辺の過去の状態を即座に確認することが困難であることを課題とする。本実施形態は、移動体の搭乗者が、移動体が移動している位置を含む周辺の過去の状態を即座に確認可能にすることを目的とする。

本実施形態では、映像表示装置１０Ａは、車両の位置と同一の位置で過去に撮影された映像を透過型表示パネル１４に表示させる。映像表示装置１０Ａは、操作方向に応じて、車両の周囲の映像を戻し方向再生または順方向再生して、透過型表示パネル１４に表示させる。

映像表示装置１０Ａは、基本的な構成は第一実施形態の映像表示装置１０と同様である。以下の説明においては、映像表示装置１０と同様の構成要素には、同一の符号または対応する符号を付し、その詳細な説明は省略する。本実施形態では、ＧＮＳＳ（Ｇｌｏｂａｌ Ｎａｖｉｇａｔｉｏｎ Ｓａｔｅｌｌｉｔｅ Ｓｙｓｔｅｍ）受信部１６Ａと、位置情報取得部２９Ａとを備える点と、映像取得部２１Ａと、記録制御部２２Ａと、特定部２４Ａと、再生制御部２７Ａとにおける処理が第一実施形態と異なる。

ＧＮＳＳ受信部１６Ａは、ＧＮＳＳ衛星からのＧＮＳＳ信号を受信するＧＮＳＳ受信機などで構成される。ＧＮＳＳ受信部１６Ａは、受信した位置情報信号を制御装置２０の位置情報取得部２９Ａに出力する。

位置情報取得部２９Ａは、車両の現在位置を示す位置情報を取得する。位置情報取得部２９Ａは、ＧＮＳＳ受信部１６Ａが受信したＧＮＳＳ信号に基づいて、車両の現在位置の位置情報を公知の方法によって算出する。

映像取得部２１Ａは、映像が撮影された位置情報を含む映像を取得する。

映像取得部２１Ａは、記録部１２に記録された映像を取得してもよい。

記録制御部２２Ａは、カメラ１１が撮影した映像を、撮影位置を対応付けて記録部１２に記録する。記録制御部２２Ａは、カメラ１１が撮影した映像を、位置情報取得部２９Ａが取得した位置情報とともに記録部１２に記録する。

特定部２４Ａは、映像取得部２１Ａが取得した映像において、透過型表示パネル１４に表示させる範囲を特定する。

再生制御部２７Ａは、映像取得部２１Ａが取得した映像を再生する。再生制御部２７Ａは、操作部１５の操作方向に応じて、順方向再生または戻し方向再生を行う。

順方向再生とは、これから走行する予定の場所の過去映像を再生することである。戻し方向再生とは、通過してきた場所の過去映像を再生することである。

図１１は、第二実施形態における操作部における操作の一例を説明する概略図である。図１１は、一例として、右リヤドアガラス１０４を示す。例えば、搭乗者がいわゆるシークバーのように、操作開始点Ｐ１１から、第一方向である矢印Ａ１の方向に沿ってスワイプ操作する。例えば、搭乗者がいわゆるシークバーのように、操作開始点Ｐ１２から、第一方向と反対方向である第二方向である矢印Ａ２の方向に沿ってスワイプ操作する。

再生制御部２７Ａは、操作部１５の操作が開始された場合に、映像取得部２１Ａが取得した、操作部１５の操作が開始されたときの車両の位置と同一の位置で過去に撮影された映像を透過型表示パネル１４に表示させ、操作部１５の操作方向が車両の進行方向に沿った第一方向に操作された場合、映像を順方向で再生し、操作部１５の操作方向が車両の進行方向に沿った第一方向とは反対方向に操作された場合、映像を戻し方向に再生する。再生制御部２７Ａは、例えば、車両の進行方向に沿った第一方向にスワイプ操作された場合、過去の映像を順方向で再生する。再生制御部２７Ａは、例えば、車両の進行方向に沿った第一方向と逆方向に向かってスワイプ操作された場合、過去の映像を戻し方向で再生する。

再生制御部２７Ａは、操作部１５の操作が開始されたときの車両の位置と同一の位置および進行方向で過去に撮影された映像を再生してもよい。

再生制御部２７Ａは、操作部１５が配置された窓ガラスに対応するカメラ１１によって、過去に撮影した映像を再生してもよい。再生制御部２７Ａは、例えば、右リヤドアガラス１０４の操作部１５が操作された場合、車両の右側を撮影するカメラ１１が、過去に撮影した映像を再生してもよい。

再生制御部２７Ａは、操作が開始されたときの車両の位置と同一の位置および進行方向で過去に撮影された映像映像が複数存在する場合、直近に撮影された映像を再生対象としてもよい。

再生制御部２７Ａは、同一方向のスワイプ操作が繰り返された場合、操作が開始されたときの車両の位置と同一の位置および進行方向で過去に撮影された複数の映像を、スワイプ操作ごとに古い映像となるように再生してもよい。

再生制御部２７Ａは、操作が開始されたときの車両の位置と同一の位置および進行方向で過去に撮影された映像映像が複数存在する場合、例えば、１年前など所定の期間前に撮影された映像を再生対象としてもよい。この場合、同一方向のスワイプ操作が繰り返された場合、さらに１年前など所定の期間前に撮影された映像を再生するなど、スワイプ操作ごとに古い映像となるように再生してもよい。

例えば、例えば、スマートフォンの画面のようなスワイプ操作の場合、前方から後方へ、言い換えると、第一方向へスワイプ操作した場合、順方向再生を行う。後方から前方へ、言い換えると、第一方向と反対方向へスワイプ操作した場合、戻し方向再生を行う。

再生制御部２７Ａは、操作部１５の操作方向が車両の進行方向に沿って操作された場合の操作速度に基づき、映像を再生する速度を変化させてもよい。本実施形態では、再生制御部２７Ａは、スワイプ操作の単位時間当たりの操作量、言い換えると操作速度に基づき、順方向再生または戻し方向に再生する速度を変化させる。再生制御部２７Ａは、例えば、１００ｍｍ／ｓｅｃ程度の操作速度の場合、１倍速で順方向再生または戻し方向再生を行う。再生制御部２７Ａは、例えば、５０ｍｍ／ｓｅｃ程度の操作速度の場合、０．５倍速の順方向再生または戻し方向再生を行う。再生制御部２７Ａは、例えば、２００ｍｍ／ｓｅｃ程度の操作速度の場合、２倍速の順方向再生または戻し方向再生を行う。操作速度と再生速度の対応は、直線的に対応付けられていてもよく、段階的に対応付けられていてもよい。

再生制御部２７Ａは、操作部１５の操作が開始されたときの車両の走行速度に基づき、映像を再生する速度を変化させてもよい。再生制御部２７Ａは、車速情報取得部２６が取得した車速情報から、操作部１５の操作が開始されたときの車両の走行速度に応じて、映像を順方向再生または戻し方向に再生する速度を変化させてもよい。再生制御部２７Ａは、例えば、操作部１５の操作が開始された時点における車両の走行速度が０ｋｍ／ｈ以上２０ｋｍ／ｈ以下の場合、０．５倍速の順方向再生または戻し方向再生を行う。再生制御部２７Ａは、例えば、操作部１５の操作が開始された時点における車両の走行速度が２０ｋｍ／ｈ以上６０ｋｍ／ｈ以下の場合、１倍速で順方向再生または戻し方向再生を行う。再生制御部２７Ａは、例えば、操作部１５の操作が開始された時点における車両の走行速度が６０ｋｍ／ｈ以上の場合、２倍速で順方向再生または戻し方向再生を行う。車両の走行速度と再生速度の対応は、直線的に対応付けられていてもよく、段階的に対応付けられていてもよい。

次に、図１２を用いて、制御装置２０Ａにおける処理の流れについて説明する。ステップＳ１１１、ステップＳ１１７の処理は、図７に示すフローチャートのステップＳ１０２、ステップＳ１０６と同様の処理を行う。

操作が開始されたと判定する場合（ステップＳ１１１でＹｅｓ）、制御装置２０Ａは、操作開始時点と同一の位置で過去に撮影された映像を表示させる（ステップＳ１１２）。より詳しくは、制御装置２０Ａは、特定部２４によって、過去に撮影された映像から、予め決められた範囲を、透過型表示パネル１４に表示させる範囲として特定する。制御装置２０Ａは、再生制御部２７Ａによって、映像取得部２１Ａが取得した、操作部１５の操作が開始されたときの車両の位置と同一の位置で過去に撮影された映像を再生するよう制御する。制御装置２０Ａは、表示制御部２８によって、再生制御部２７Ａからの制御信号に基づいて、映像を透過型表示パネル１４に表示させる。制御装置２０Ａは、ステップＳ１１３へ進む。

制御装置２０Ａは、スワイプ操作があるか否かを判定する（ステップＳ１１３）。より詳しくは、制御装置２０Ａは、操作制御部２５によって、操作部１５に対するスワイプ操作が受付された場合、スワイプ操作があると判定する。制御装置２０Ａは、操作制御部２５によって、スワイプ操作があると判定する場合（ステップＳ１１３でＹｅｓ）、ステップＳ１１４に進む。操作制御部２５によって、スワイプ操作があると判定しない場合（ステップＳ１１３でＮｏ）、ステップＳ１１９に進む。

スワイプ操作があると判定する場合（ステップＳ１１３でＹｅｓ）、制御装置２０Ａは、操作方向が第一方向であるか否かを判定する（ステップＳ１１４）。制御装置２０Ａは、スワイプ操作の操作方向が第一方向であると判定する場合（ステップＳ１１４でＹｅｓ）、ステップＳ１１５へ進む。制御装置２０Ａは、スワイプ操作の操作方向が第一方向であると判定しない場合（ステップＳ１１４でＮｏ）、ステップＳ１１６へ進む。

操作方向が第一方向であると判定する場合（ステップＳ１１４でＹｅｓ）、制御装置２０Ａは、順方向再生を開始する（ステップＳ１１５）。より詳しくは、制御装置２０Ａは、再生制御部２７Ａによって、操作部１５の操作が開始されたときの映像から順方向に再生するよう制御する。制御装置２０Ａは、表示制御部２８によって、再生制御部２７Ａからの制御信号に基づいて、映像を透過型表示パネル１４に表示させる。制御装置２０Ａは、ステップＳ１１７へ進む。

操作方向が第一方向であると判定しない場合（ステップＳ１１４でＮｏ）、制御装置２０Ａは、映像の戻し方向再生を開始する（ステップＳ１１６）。より詳しくは、制御装置２０Ａは、再生制御部２７Ａによって、操作部１５の操作が開始されたときの映像から戻し方向に再生するよう制御する。制御装置２０Ａは、表示制御部２８によって、再生制御部２７Ａからの制御信号に基づいて、映像を透過型表示パネル１４に表示させる。制御装置２０Ａは、ステップＳ１１７へ進む。

操作が終了したと判定する場合（ステップＳ１１７でＹｅｓ）、制御装置２０Ａは、再生を終了する（ステップＳ１１８）。より詳しくは、制御装置２０Ａは、再生制御部２７Ａによって、映像の再生を終了する。制御装置２０Ａは、表示制御部２８によって、再生制御部２７Ａからの制御信号に基づいて、映像を透過型表示パネル１４に表示させることを終了する。制御装置２０Ａは、ステップＳ１１９へ進む。

制御装置２０Ａは、終了するか否かを判定する（ステップＳ１１９）。例えば、車両の電源や動力がＯＦＦにされたことや、操作部１５に対する終了操作がされたことなどで、終了することが判定される。制御装置２０Ａは、終了すると判定された場合（ステップＳ１１９でＹｅｓ）、本処理を終了する。制御装置２０Ａは、終了すると判定されない場合（ステップＳ１１９でＮｏ）、ステップＳ１１３の処理を再度実行する。

図１３は、車両の進行方向に沿った第一方向にスワイプしたときの処理例を図示したものである。図１３は、右方向に向けて時間が経過していることを示す。再生制御部２７Ａは、タッチ操作が検出された時刻ｔａ０の時点における車両の位置情報と同一の位置情報を含む、過去に撮影され記録された映像を取得する。図１３に示す例では、搭乗者は、時刻ｔａ０の時点でタッチ操作を開始し時刻ｔａ１の時点までタッチ操作した指の動きがない状態を示している。再生制御部２７Ａは、過去の映像における、時刻ｔａ０の時点と同一の位置情報および進行方向を含む時刻ｔＶａ０の時点の映像を静止画として再生し、表示制御部２８は、映像を透過型表示パネル１４に表示させる。

その後、搭乗者が時刻ｔａ１の時点から時刻ｔａ２の時点まで車両の進行方向に沿った第一方向にスワイプ操作を行う。再生制御部２７Ａは、時刻ｔＶａ０の時点から順方向再生を行い、時刻ｔａ１の時点から時刻ｔａ２の時点までの期間と同等の時間長の映像である時刻ｔＶａ０から時刻ｔＶａ１までの映像を順方向再生する。

スワイプ操作が終了した時刻ｔａ２の時点で、再生制御部２７は、再生を終了し、表示制御部２８は映像の表示を終了する。映像の表示が終了することで、透過型表示パネル１４は透過状態となる。

スワイプ操作が終了した時刻ｔａ２の時点で操作部１５から指が離れた後も、再生制御部２７Ａが、例えば１秒程度、戻し方向再生を継続してから、表示制御部２８は、映像の表示を終了させてもよい。

スワイプ操作が終了した時刻ｔａ２の時点では、表示制御部２８は、時刻ｔＶａ１の時点の映像を静止画として、例えば１秒程度表示させてから、映像の表示を終了させてもよい。

時刻ｔａ２の時点より後に、同一方向に再度のスワイプ操作が行われた場合、再生制御部２７Ａが、時刻ｔＶａ１の時点からさらに順方向で再生を行ってもよい。

図１４は、車両の進行方向とは反対方向にスワイプしたときの処理例を図示したものである。図１４においても、右方向に向けて時間が経過していることを示す。再生制御部２７Ａは、タッチ操作が検出された時刻ｔｂ０の時点における車両の位置情報と同一の位置情報を含む過去に撮影され記録された映像を取得する。図１４に示す例では、搭乗者が時刻ｔｂ０の時点でタッチ操作を開始し時刻ｔｂ１の時点までタッチ操作した指の動きがない。再生制御部２７Ａは、過去の映像における時刻ｔｂ０の時点と同一の位置情報および進行方向を含む時刻ｔＶｂ０の映像を静止画として再生し、表示制御部２８は、映像を透過型表示パネル１４に表示させる。

その後、搭乗者が時刻ｔｂ１の時点から時刻ｔｂ２の時点まで車両の進行方向に沿って第一方向とは反対方向にスワイプ操作を行う。再生制御部２７Ａは、時刻ｔＶｂ０の時点から戻し方向再生を行い、時刻ｔｂ１の時点から時刻ｔｂ２の時点までの期間と同等の時間長の映像である時刻ｔＶｂ０の時点から時刻ｔＶｂ－１の時点までの映像を戻し方向に再生する。

スワイプ操作が終了した時刻ｔｂ２の時点で、再生制御部２７Ａは、再生を終了し、表示制御部２８は映像の表示を終了する。映像の表示が終了することで、透過型表示パネル１４は透過状態となる。

スワイプ操作が終了した時刻ｔｂ２の時点で操作部１５から指が離れた後も、再生制御部２７Ａが、例えば１秒程度、戻し方向の再生を継続してから、表示制御部２８は、映像の表示を終了させてもよい。

スワイプ操作が終了した時刻ｔｂ２の時点では、表示制御部２８は、時刻ｔＶｂ－１の時点の映像を静止画として、例えば１秒程度表示させてから、映像の表示を終了させてもよい。

時刻ｔｂ２の時点より後に、同一方向に再度のスワイプ操作が行われた場合、再生制御部２７Ａは、時刻ｔＶｂ－１の時点からさらに戻し方向で再生を行ってもよい。

上述したように、本実施形態では、操作部１５の操作が開始された場合に、映像取得部２１Ａが取得した、操作部１５の操作が開始されたときの車両の位置と同一の位置で過去に撮影された映像を透過型表示パネル１４に表示させる。本実施形態では、操作部１５の操作方向が車両の進行方向に沿った第一方向に操作された場合、映像を順方向で再生し、操作部１５の操作方向が車両の進行方向に沿った第一方向とは反対方向に操作された場合、映像を戻し方向に再生する。本実施形態によれば、操作方向に応じて、映像を即時に戻し方向または順方向に再生することができる。本実施形態によれば、車両の搭乗者が、車両が走行している位置を含む周辺の過去の状態を即座に確認可能にすることができる。

本実施形態では、カメラ１１が撮影した映像を、位置情報とともに記録部１２に記録する。本実施形態によれば、車両が走行している位置を含む周辺の過去の映像を容易に取得可能である。

本実施形態では、操作部１５の操作方向が車両の進行方向に沿って操作された場合の操作速度、または、操作部１５の操作が開始されたときの車両の移動速度に基づき、映像を再生する速度を変化させる。本実施形態によれば、操作速度に応じて、映像の再生速度を直感的に変化させることができる。

［第三実施形態］
図１５を参照しながら、本実施形態に係る映像表示装置１０について説明する。図１５は、第三実施形態に係る映像表示装置の構成例を示すブロック図である。映像表示装置１０Ｂは、外部サーバに蓄積された、他車両で撮影された過去の映像を透過型表示パネル１４に表示させる。映像表示装置１０Ｂは、基本的な構成は第二実施形態の映像表示装置１０Ａと同様である。本実施形態では、通信部１７Ｂを備える点と、映像取得部２１Ｂにおける処理が第二実施形態と異なる。

他車両に搭載された図示しないカメラで撮影された映像は、撮影時の時刻情報、位置情報、進行方向などを示す情報とともに、他車両の図示しない通信部を介して、図示しない外部サーバに蓄積されている。

外部サーバは、複数の車両に搭載されたカメラによって撮影された映像を蓄積する。外部サーバは、各車両に搭載された映像表示装置１０Ｂからの映像の取得要求に応じて、蓄積された映像を映像表示装置１０Ｂへ送信する。より詳しくは、外部サーバは、車両の映像表示装置１０Ｂから、映像の取得要求とともに、車両の現在位置と進行方向とを示す情報を受信する。外部サーバは、蓄積された他車両において過去に撮影された映像から、受信した車両の現在位置と同一の位置が含まれ、受信した車両の進行方向と同一の進行方向の映像を検出する。外部サーバは、複数の映像が検出された場合、例えば、直近の過去、または、所定期間前の過去などの所定の条件に応じて映像を選択する。そして、外部サーバは、検出した映像を映像表示装置１０Ｂへ送信する。

通信部１７Ｂは、通信ユニットである。通信部１７Ｂは、インターネットまたは携帯電話回線などいずれの方法で通信を行ってもよい。通信部１７Ｂは、図示しない通信網を介して外部サーバとデータを通信可能に接続する。通信部１７Ｂは、外部サーバから他車両において撮影された映像を受信する。

映像取得部２１Ｂは、他車両において撮影された映像を取得する。映像取得部２１Ｂは、操作部１５の操作が開始された場合に、通信部１７Ｂによる通信を用いて、自車両の現在位置情報と進行方向を示す情報を映像の取得要求とともに外部サーバに送信する。映像取得部２１Ｂは、外部サーバから、他車両において過去に撮影された、現在位置と同一の位置が含まれ、同一の進行方向の映像を取得する。

再生制御部２７Ｂは、外部サーバから、他通信部１７Ｂが受信し映像取得部２１Ｂが取得した映像を、操作部１５の操作方向に合わせて再生する。本実施形態における制御装置２０Ｂの処理は、図１２で示される第二実施形態における処理に対して、再生される映像を、操作開始地点と同一位置で他車両において過去に撮影された映像の再生に置き換えた処理である。また、図１３および図１４においては、操作開始地点と同一位置で他車両において撮影された過去の映像が表示映像となる。

上述したように、本実施形態では、他の移動体において撮影された映像を用いて、車両が走行している位置を含む周辺の過去の状態を即座に確認可能にすることができる。

［第四実施形態］
図１６ないし図２０を参照しながら、本実施形態に係る映像表示装置１０Ｂについて説明する。図１６は、自車両と他車両との相対的な位置関係を説明する図である。図１７は、第四実施形態における操作部における操作の一例を説明する概略図である。。図１８は、第四実施形態に係る制御装置における処理の流れの一例を示すフローチャートである。図１９は、第四実施形態における操作と表示映像との関係の一例を示す図である。図２０は、第四実施形態における操作と表示映像との関係の他の例を示す図である。

本実施形態は、移動体の搭乗者が移動体の移動中に移動体の周囲を視認しているときに、移動体の移動によって通過した位置の現在の状態や、これから移動する予定の現在の状態を即座に確認することが困難であることを課題とする。本実施形態は、移動体の搭乗者が移動体の移動中に移動体の周囲を視認しているときに、移動体の移動によって通過した位置の現在の状態や、これから移動する予定の現在の状態を即座に確認可能にすることを目的とする。

本実施形態では、映像表示装置１０Ｂは、操作方向に応じて、車両の進行方向に存在する他車両が撮影している映像、または、車両の進行方向と反対方向に存在する他車両が撮影している映像を再生して、透過型表示パネル１４に表示させる。映像表示装置１０Ｂは、基本的な構成は第三実施形態の映像表示装置１０Ｂと同様である。本実施形態では、映像取得部２１Ｂと、再生制御部２７Ｂとにおける処理が第三実施形態と異なる。

外部サーバは、複数の車両に搭載されたカメラによって撮影された映像を取得する。外部サーバは、各車両に搭載された映像表示装置１０Ｂからの映像の取得要求に応じて、取得した映像を映像表示装置１０Ｂへ送信する。より詳しくは、外部サーバは、車両の映像表示装置１０Ｂから、映像の取得要求とともに、車両の現在位置と進行方向とを示す情報を受信する。外部サーバは、蓄積された他車両において撮影された映像から、受信した現在位置から所定範囲内で、同一道路を走行している他車両で、映像を送信可能な他車両を検出する。そして、外部サーバは、検出した他車両からの映像を検出する。そして、外部サーバは、検出した映像を映像表示装置１０Ｂへ送信する。

映像取得部２１Ｂは、操作部１５の操作が行われた場合に、車両の進行方向または進行方向とは反対方向に存在する他車両が撮影している映像を取得可能な状態としてもよい。

映像取得部２１Ｂは、車両の周囲を走行している他車両から、他車両の周囲を撮影した、位置情報を含む映像を取得する。映像取得部２１Ｂは、通信部１７Ｂによる無線通信を用いて外部サーバと通信を行い、他車両が撮影している映像を取得する。映像取得部２１Ｂは、操作部１５の操作が開始された場合に、車両の周囲を走行している他車両が撮影している映像の取得を開始する。

映像取得部２１Ｂは、操作部１５の操作回数に応じて、車両との距離が離れた他車両からの映像を取得してもよい。映像取得部２１Ｂは、例えば、操作部１５が１回操作されるごとに、１台ずつ離れた他車両で撮影された映像を取得してもよい。

映像取得部２１Ｂは、操作部１５の操作量または操作速度が大きいほど、車両との距離が離れた他車両からの映像を取得してもよい。映像取得部２１Ｂは、例えば、スワイプ操作の単位時間当たりの操作量、言い換えると操作速度に基づき、自車両との距離が離れた他車両から映像を取得して再生してもよい。映像取得部２１Ｂは、例えば、１００ｍｍ／ｓｅｃ未満の操作速度の場合、直近の他車両、または１００ｍ以内に存在する他車両から映像を取得して再生する。映像取得部２１Ｂは、例えば、１００ｍｍ／ｓｅｃ以上の操作速度の場合、直近から２番目の他車両、または１００ｍ以上２００ｍ以内に存在する他車両から映像を取得して再生する。

映像取得部２１Ｂは、操作部１５の操作が開始されたときの車両の走行速度が速いほど、車両との距離が離れた他車両から映像を取得してもよい。映像取得部２１Ｂは、例えば、操作部１５の操作が開始された時点における車両の走行速度が０ｋｍ／ｈ以上２０ｋｍ／ｈ以下の場合、直近の他車両、または１００ｍ以内に存在する他車両から映像を取得する。映像取得部２１Ｂは、例えば、操作部１５の操作が開始された時点における車両の走行速度が２０ｋｍ／ｈ以上６０ｋｍ／ｈ以下の場合、直近から２番目の他車両、または１００ｍ以上２００ｍ以内に存在する他車両から映像を取得する。映像取得部２１Ｂは、操作部１５の操作が開始された時点における車両の走行速度が６０ｋｍ／ｈ以上の場合、直近から３番目の他車両、または２００ｍ以上５００ｍ以内に存在する他車両から映像を取得する。

再生制御部２７Ｂは、操作部１５の操作方向が車両の進行方向に沿った第一方向に操作された場合、車両の進行方向に存在する他車両が撮影している映像を再生し、操作部１５の操作方向が車両の進行方向に沿った第一方向とは反対方向に操作された場合、車両の進行方向と反対方向に存在する他車両が撮影している映像を再生する。

再生制御部２７Ｂは、操作部１５の操作方向に応じて、車両の前方他車両から取得した映像、または、後方他車両から取得した映像を再生する。前方他車両から取得した映像の再生は、これから走行する予定の場所の映像の再生である。後方他車両から取得した映像の再生は、通過してきた場所の車両の通過後の映像の再生である。

例えば、いわゆるシークバーのように前方から後方へ操作した場合、前方他車両から取得した映像を再生し、後方から前方へ操作した場合、後方他車両から取得した映像を再生する。

例えば、スマートフォンの画面のように前方から後方へ、言い換えると、第一方向へスワイプ操作を行った場合、前方他車両から取得した映像を再生し、後方から前方へ、言い換えると、第一方向と反対方向へスワイプ操作を行った場合、後方他車両から取得した映像を再生する。

図１７は一例として、右リヤドアガラス１０４を示す。例えば、搭乗者がいわゆるシークバーのように、操作開始点Ｐ１１から、第一方向である矢印Ａ１の方向に沿ってスワイプ操作する。例えば、搭乗者がいわゆるシークバーのように、操作開始点Ｐ１２から、第一方向と反対方向である第二方向である矢印Ａ２の方向に沿ってスワイプ操作する。

再生制御部２７Ｂは、同一方向に再度のスワイプ操作が行われた場合、時刻ｔＶｃ０の時点から時刻ｔＶｃ１の時点までの期間で再生した他車両より自車両との距離が離れた他車両から映像を取得して再生する。再生制御部２７Ｂは、例えば、１回目のスワイプ操作で、他車両Ｖａが撮影している映像を再生し、２回目のスワイプ操作で、他車両Ｖｂが撮影している映像を再生する。他車両Ｖａ、他車両Ｖｂは、いずれも自車両Ｖと同一道路を同一方向に向かって走行している。映像の取得を可能とする他車両との距離は、制限されてもよい。例えば、自車両から１ｋｍ以内の他車両とする。

再生制御部２７Ｂは、操作部１５の操作量または操作速度が大きいほど、車両との距離が離れた他車両からの映像を再生してもよい。再生制御部２７Ｂは、例えば、スワイプ操作の単位時間当たりの操作量、言い換えると操作速度に基づき、自車両との距離が離れた他車両から映像を生してもよい。再生制御部２７Ｂは、例えば、１００ｍｍ／ｓｅｃ未満の操作速度の場合、直近の他車両、または１００ｍ以内に存在する他車両から映像を再生する。再生制御部２７Ｂは、例えば、１００ｍｍ／ｓｅｃ以上の操作速度の場合、直近から２番目の他車両、または１００ｍ以上２００ｍ以内に存在する他車両から映像を再生する。

再生制御部２７Ｂは、車速情報取得部２６が取得した車速情報から、操作部１５の操作が開始されたときの車両の走行速度に応じて、自車両との距離が離れた他車両から映像を取得して再生する。再生制御部２７Ｂは、例えば、操作部１５の操作が開始された時点における車両の走行速度が０ｋｍ／ｈ以上２０ｋｍ／ｈ以下の場合、、直近の他車両、または１００ｍ以内に存在する他車両から映像を再生する。再生制御部２７Ｂは、例えば、操作部１５の操作が開始された時点における車両の走行速度が２０ｋｍ／ｈ以上６０ｋｍ／ｈ以下の場合、直近から２番目の他車両、または１００ｍ以上２００ｍ以内に存在する他車両から映像を再生する。再生制御部２７Ｂは、例えば、操作部１５の操作が開始された時点における車両の走行速度が６０ｋｍ／ｈ以上の場合、直近から３番目の他車両、または２００ｍ以上５００ｍ以内に存在する他車両から映像を再生する。

次に、図１８を用いて、制御装置２０における処理の流れについて説明する。ステップＳ１２１、ステップＳ１２３、ステップＳ１２４、ステップＳ１２７ないしステップＳ１２９の処理は、図１２に示すフローチャートのステップＳ１１１、ステップＳ１１３、ステップＳ１１４、ステップＳ１１７ないしステップＳ１１９と同様の処理を行う。

操作が開始されたと判定する場合（ステップＳ１２１でＹｅｓ）、制御装置２０Ｂは、外部サーバに、周囲を走行している他車両が撮影している映像の取得を要求する（ステップＳ１２２）。より詳しくは、制御装置２０Ｂは、映像取得部２１Ｂによって、外部サーバに対して、車両の周囲を走行している他車両の周囲を撮影した、位置情報を含む映像を取得可能な状態とする。制御装置２０Ｂは、ステップＳ１２３へ進む。

操作方向が第一方向であると判定する場合（ステップＳ１２４でＹｅｓ）、進行方向に存在する他車両が撮影している映像を取得し、映像の再生を開始する（ステップＳ１２５）。より詳しくは、制御装置２０Ｂは、映像取得部２１Ｂによって、進行方向に存在する他車両が撮影している映像を取得する。制御装置２０Ｂは、特定部２４によって、進行方向に存在する他車両が撮影している映像から、予め決められた範囲を、透過型表示パネル１４に表示させる範囲として特定する。制御装置２０Ｂは、再生制御部２７Ｂによって、映像取得部２１Ｂによって取得した、進行方向に存在する他車両が撮影している映像を再生する。制御装置２０Ｂは、表示制御部２８によって、再生制御部２７Ｂからの制御信号に基づいて、映像を透過型表示パネル１４に表示させる。制御装置２０Ｂは、ステップＳ１２７へ進む。

操作方向が第一方向であると判定しない場合（ステップＳ１２４でＮｏ）、進行方向の反対方向に存在する他車両が撮影している映像を取得し、映像の再生を開始する（ステップＳ１２６）。より詳しくは、制御装置２０Ｂは、映像取得部２１Ｂによって、進行方向の反対方向に存在する他車両が撮影している映像を取得する。制御装置２０Ｂは、特定部２４によって、進行方向の反対方向に存在する他車両が撮影している映像から、予め決められた範囲を、透過型表示パネル１４に表示させる範囲として特定する。制御装置２０Ｂは、再生制御部２７Ｂによって、映像取得部２１Ｂによって取得した、進行方向の反対方向に存在する他車両が撮影している映像を再生する。制御装置２０Ｂは、表示制御部２８によって、再生制御部２７Ｂからの制御信号に基づいて、映像を透過型表示パネル１４に表示させる。制御装置２０Ｂは、ステップＳ１２７へ進む。

図１９、図２０は、車両の操作部１５の操作を行ったときの処理例を図示したものである。映像取得部２１Ｂは、タッチ操作が検出された時刻ｔｃ０の時点で、外部サーバに、車両の周囲において、同一の道路を同一方向に走行している他車両からの映像の取得要求を行う。図１９、図２０に示す例では、搭乗者は、時刻ｔｃ０の時点でタッチ操作を開始し時刻ｔｃ１の時点までタッチ操作した指の動きがない。再生制御部２７Ｂは、時刻ｔｃ０の時点では、取得要求した映像の選択および再生を行わない。

図１９に示す例では、搭乗者は、時刻ｔｃ１の時点から時刻ｔｃ２の時点までの期間で、車両の進行方向である第一方向にスワイプ操作を行う。再生制御部２７Ｂは、進行方向に存在する他車両から取得した映像を選択し、時刻ｔｃ１の時点から順方向再生を行い、時刻ｔｃ１の時点から時刻ｔｃ２の時点までの期間と同等の時間長の映像である時刻ｔＶｃ０の時点から時刻ｔＶｃ１の時点までの映像を再生する。

図２０に示す例では、搭乗者は、時刻ｔｃ１の時点から時刻ｔｃ２の時点までの期間で、車両の進行方向である第一方向と反対方向にスワイプ操作を行う。再生制御部２７Ｂは、進行方向の反対方向に存在する他車両から取得した映像を選択し、時刻ｔｃ１の時点から順方向再生を行い、時刻ｔｃ１の時点から時刻ｔｃ２の時点までの期間と同等の時間長の映像である時刻ｔＶｃ０の時点から時刻ｔＶｃ１の時点までの映像を再生する。

図１９、図２０に示す例では、スワイプ操作が終了した時刻ｔｃ２の時点で、表示制御部２８は、映像の表示を終了する。映像の表示が終了することで、透過型表示パネル１４は透過状態となる。

図１９、図２０に示す例では、スワイプ操作が終了した時刻ｔｃ２の時点で操作部１５から指が離れた後も、再生制御部２７Ｂは、例えば１秒程度は他車両から取得した映像の再生が継続してから、表示制御部２８は、映像の表示を終了させてもよい。

図１９、図２０に示す例では、スワイプ操作が終了した時刻ｔｃ２の時点では、表示制御部２８は、時刻ｔＶｃ１の時点の映像を静止画として、例えば１秒程度表示させてから、映像の表示を終了させてもよい。

上述したように、本実施形態では、操作部１５の操作方向が車両の進行方向に沿った第一方向に操作された場合、車両の進行方向に存在する他車両が撮影している映像を再生し、操作部１５の操作方向が車両の進行方向に沿った第一方向とは反対方向に操作された場合、車両の進行方向と反対方向に存在する他車両が撮影している映像を再生する。本実施形態によれば、車両の搭乗者が車両の走行中に車両の周囲を視認しているときに、車両の走行によって通過した位置の現在の状態や、これから走行する予定の現在の状態を即座に確認可能にすることができる。

本実施形態は、操作部１５の操作回数に応じて、車両との距離が離れた他車両からの映像を取得することができる。

本実施形態は、操作部１５の操作量または操作速度が大きいほど、車両との距離が離れた他車両からの映像を取得することができる。

本実施形態は、操作部１５の操作が開始されたときの車両の移動速度が速いほど、車両との距離が離れた他車両から映像を取得することができる。

本開示に係る映像表示装置１０は、上述した実施形態以外にも種々の異なる形態にて実施されてもよい。

図示した映像表示装置１０の各構成要素は、機能概念的なものであり、必ずしも物理的に図示の如く構成されていなくてもよい。すなわち、各装置の具体的形態は、図示のものに限られず、各装置の処理負担や使用状況などに応じて、その全部または一部を任意の単位で機能的または物理的に分散または統合してもよい。

映像表示装置１０の構成は、例えば、ソフトウェアとして、メモリにロードされたプログラムなどによって実現される。上記実施形態では、これらのハードウェアまたはソフトウェアの連携によって実現される機能ブロックとして説明した。すなわち、これらの機能ブロックについては、ハードウェアのみ、ソフトウェアのみ、または、それらの組み合わせによって種々の形で実現できる。

上記した構成要素には、当業者が容易に想定できるもの、実質的に同一のものを含む。さらに、上記した構成は適宜組み合わせが可能である。また、本発明の要旨を逸脱しない範囲において構成の種々の省略、置換または変更が可能である。

＜変形例＞
上記では、操作部１５に対するタッチ操作、スワイプ操作、及び、フリック操作について説明したが、これに限定されない。例えば、透過型表示パネル１４に近接した手の動きを車室内カメラ（例えば、各透過型表示パネルの上方に設置）撮影し、手の軌跡で操作を行ってもよい。この場合、手を透過型表示パネル１４に近接させ（操作開始）、車両の進行方向とは反対側に手を移動させる操作に適用してもよい。または、スマートリングのような指輪型デバイスを用いたジェスチャー操作に適用してもよい。

第四実施形態においては、映像の取得は、対象となる他車両、外部サーバ、または、自車両のストリーミングが適切であり、自車両において他車両映像の記録は行わない。

１０ 映像表示装置
１１ カメラ
１２ 記録部
１３ ＩＦ部
１４ 透過型表示パネル
１５ 操作部
１６Ａ ＧＮＳＳ受信部
２０ 制御装置（映像表示制御装置）
２１ 映像取得部
２２ 記録制御部
２４ 特定部
２５ 操作制御部
２６ 車速情報取得部
２７ 再生制御部
２８ 表示制御部
２９Ａ 位置情報取得部
１０１ フロントガラス
１０２ 右フロントドアガラス
１０３ 左フロントドアガラス
１０４ 右リヤドアガラス
１０５ 左リヤドアガラス
１０６ リヤガラス
２００ 画角
２０１ 視認範囲
２０２ 特定範囲

Claims (5)

1. 映像が撮影された位置情報を含む映像を取得する映像取得部と、
   移動体の位置情報を取得する位置情報取得部と、
   前記移動体に設置され、透過性を備える透過型表示パネルと、
   前記透過型表示パネルの表面で操作可能な操作部と、
   前記映像取得部が取得した映像において、前記透過型表示パネルに表示させる範囲を特定する特定部と、
   前記映像取得部が取得した映像を再生する再生制御部と、
   前記再生制御部が再生した映像における前記特定部が特定した範囲の映像を前記透過型表示パネルに表示させる表示制御部と、
   を備え、
   前記再生制御部は、前記操作部の操作が開始された場合に、前記映像取得部が取得した、前記操作部の操作が開始されたときの前記移動体の位置と同一の位置で過去に撮影された映像を前記透過型表示パネルに表示させ、前記操作部の操作方向が前記移動体の進行方向に沿った第一方向に操作された場合、前記映像を順方向で再生し、前記操作部の操作方向が前記移動体の進行方向に沿った前記第一方向とは反対方向に操作された場合、前記映像を戻し方向に再生する、
   映像表示装置。
2. 移動体の周囲を撮影する撮影部と、
   前記撮影部が撮影した映像を、前記位置情報取得部が取得した位置情報とともに記録部に記録する記録制御部と、
   をさらに備え、
   前記映像取得部は、前記記録部に記録された映像を取得する、
   請求項１に記載の映像表示装置。
3. 前記映像取得部は、他の移動体において撮影された映像を取得する、
   請求項１に記載の映像表示装置。
4. 前記再生制御部は、前記操作部の操作方向が前記移動体の進行方向に沿って操作された場合の操作速度、または、前記操作部の操作が開始されたときの前記移動体の移動速度に基づき、前記映像を再生する速度を変化させる、
   請求項１または２に記載の映像表示装置。
5. 移動体に設置され、透過性を備える透過型表示パネルの表面で操作可能な操作部の操作が開始された場合に、前記操作部の操作が開始されたときの前記移動体の位置と同一の位置で過去に撮影された映像を前記透過型表示パネルに表示させるステップと、
   前記操作部の操作方向が前記移動体の進行方向に沿った第一方向に操作された場合、前記映像を順方向で再生し、前記操作部の操作方向が前記移動体の進行方向に沿った前記第一方向とは反対方向に操作された場合、前記映像を戻し方向に再生するステップと、
   を映像表示装置が実行する映像表示方法。
   

Images