JP7419450B1 - 情報処理システム、情報処理装置、情報処理方法、プログラム - Google Patents

Abstract

【課題】移動体や歩行者等の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理システム、情報処理装置、情報処理方法、プログラムを提供する。【解決手段】カメラで撮影された映像をサーバを介してユーザ端末に表示する情報処理システムは、前記カメラにより撮影された映像を取得し、所定期間内における前記カメラの複数の位置を示す位置情報を取得し、前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡Ｋを生成し、マップを取得し、移動軌跡Ｋが前記マップ上に重畳された状態で、前記マップと前記映像を前記ユーザ端末に表示する。【選択図】図７

Description

特許法第３０条第２項適用 サイト掲載日：令和３年１１月９日、掲載サイトのアドレス：ｈｔｔｐｓ：／／ｓａｆｉｅ．ｃｏ．ｊｐ／ｎｅｗｓ／１４５４／ サイト掲載日：令和３年１１月４日、掲載サイトのアドレス：ｈｔｔｐｓ：／／ｓｕｐｐｏｒｔ．ｓａｆｉｅ．ｌｉｎｋ／ｈｃ／ｊａ／ａｒｔｉｃｌｅｓ／４４０８６５９２５２６２１－Ｓａｆｉｅ－Ｐｏｃｋｅｔ２－％Ｅ３％８３％９Ｅ％Ｅ３％８３％８３％Ｅ３％８３％９７％Ｅ３％８３％９３％Ｅ３％８３％Ａ５％Ｅ３％８３％ＢＣ％Ｅ３％８２％Ａ２％Ｅ３％８３％ＢＣ％Ｅ３％８１％ＡＥ％Ｅ４％ＢＤ％ＢＦ％Ｅ３％８１％８４％Ｅ６％９６％Ｂ９ サイト掲載日：令和３年１１月１５日、掲載サイトのアドレス：ｈｔｔｐｓ：／／ｓｓｌ４．ｅｉｒ－ｐａｒｔｓ．ｎｅｔ／ｄｏｃ／４３７５／ｔｄｎｅｔ／２０４９９５３／００．ｐｄｆ サイト掲載日：令和３年１２月２３日、掲載サイトのアドレス：ｈｔｔｐｓ：／／ｎｏｔｅ．ｃｏｍ／ｏｎｕｋｉ０６／ｎ／ｎｆ３１ｅ１ｄ７０５０５０

本開示は、情報処理システム、情報処理装置および情報処理方法に関する。さらに、本開示は、当該情報処理方法をコンピュータに実行させるためのプログラムに関する。

特許文献１では、車両の事故原因等を解析するために、走行中の車両の周囲環境を示す映像データを記録するように構成されたドライブレコーダが開示されている。車両に搭載されたドライブレコーダは、映像データを撮像するように構成されたカメラに接続されている。また、カメラにより撮像された映像データは、持ち運び可能なメモリカードに保存される。メモリカードがパソコン等のユーザ端末（再生装置）に接続されることで、メモリカードに保存された映像データがユーザ端末に転送された後、ユーザ端末の表示画面上にドライブレコーダの映像が再生される。このように、車両の所有者や管理者（以下、ユーザという。）は、車両に搭載されたドライブレコーダの映像をユーザ端末上で確認することができる。

特開２０１０－１３０１１４号公報

ところで、特許文献１に開示されたドライブレコーダでは、ユーザは、ドライブレコーダの映像をユーザ端末上で確認するために、ドライブレコーダからメモリカードを一旦取り外した上で、ユーザ端末に当該メモリカードを接続する必要がある。このように、ユーザ端末上において映像を確認するには手間がかかってしまう。

また、ユーザは、ドライブレコーダの映像を通じて、所定期間内における車両等の移動体の周囲環境を把握することができるものの、ドライブレコーダの映像だけでは、当該映像がマップ上のどの位置から撮像されたものであるのかを直感的且つ俯瞰的に把握することはできない。さらに、当該映像がマップ上のどのような移動経路に沿って撮像されたものであるかをユーザが把握できない状況では、ユーザは、当該映像だけでは車両等の移動体の総合的な移動状況等を直感的且つ俯瞰的には把握し難い。上記観点より、移動体の移動状況を示す映像が表示される映像表示画面のユーザビリティをさらに改善する余地がある。

本開示は、移動体や歩行者等の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理システム、情報処理装置、情報処理方法、プログラムを提供することを目的とする。

本開示の一態様に係る情報処理システムは、カメラで撮影された映像をサーバを介してユーザ端末に表示するシステムである。当該情報処理システムは、前記カメラにより撮影された映像を取得し、所定期間内における前記カメラの複数の位置を示す位置情報を取得し、前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡を生成し、マップを取得し、前記移動軌跡が前記マップ上に重畳された状態で、前記マップと前記映像を前記ユーザ端末に表示する。

上記構成によれば、移動軌跡がマップ上に重畳された状態でマップと映像とがユーザ端末に表示される。このように、ユーザは、マップ上に重畳された移動軌跡を見ることで、映像がマップ上のどの位置から撮像されたものであるかを直感的且つ俯瞰的に把握することができる。さらに、ユーザは、当該映像がマップ上のどのような移動経路に沿って撮像されたものであるかを直感的に把握することができる。また、ユーザは、通信ネットワークを介してサーバに通信可能に接続されたユーザ端末上（即ち、オンライン上）において、カメラの映像を手間なく確認することができる。したがって、オンライン上において移動体や歩行者等の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理システムを提供することができる。

また、前記情報処理システムは、前記ユーザ端末に対するユーザの入力操作に応じて、前記移動軌跡上の所定の位置を選択し、選択された前記所定の位置に関連付けられた画像フレームを含む映像を表示してもよい。

上記構成によれば、ユーザは、移動軌跡上の所定の位置を選択することで、当該選択された所定の位置に関連付けられた映像フレームを含む映像を容易に確認することが可能となる。このように、ユーザは、ユーザ端末を通じて、所望の位置におけるカメラの映像を容易に確認することができる。

また、前記情報処理システムは、前記移動軌跡上に配置されたピンを表示し、前記ピンによって示された位置に関連付けられた画像フレームを含む映像を表示してもよい。

上記構成によれば、ユーザは、移動軌跡上に配置されたピンの位置を見ることで、現在表示されているカメラの映像がマップ上のどの位置から撮像されたものであるかを直感的且つ俯瞰的に把握することができる。

また、前記情報処理システムは、前記移動軌跡に沿って前記ピンを自動的に移動させ、前記移動軌跡上における前記ピンの移動に追従して、前記ピンによって示された位置に関連付けられた画像フレームを表示してもよい。

上記構成によれば、移動軌跡上におけるピンの移動に追従して、ピンによって示された位置に関連付けられた画像フレームが表示される。このように、ユーザは、移動軌跡上に沿って移動するピンを見ることで、現在表示されているカメラの映像がマップ上のどの位置から撮像されたものであるかを直感的且つ俯瞰的に把握することができる。

また、前記情報処理システムは、前記ユーザ端末に対するユーザの入力操作に応じて前記所定期間を決定してもよい。

上記構成によれば、ユーザによって所定期間が指定された上で、当該指定された所定期間におけるカメラの位置情報が取得される。その後、当該指定された所定期間における位置情報に基づいて取得される移動軌跡がマップ上に表示される。このように、ユーザは、所望の期間におけるカメラの移動軌跡（特に、カメラと共に移動する移動体の移動軌跡）を容易に確認することができる。

また、前記情報処理システムは、２つの異なる時刻によって規定される時間帯、特定の日付、または異なる２つの日付によって規定される期間の指定を通じて、前記所定期間を決定してもよい。

上記構成によれば、ユーザは、２つの異なる時刻によって規定される時間帯、特定の日付、または異なる２つの日付によって規定される期間の指定を通じて、所望の期間におけるカメラの移動軌跡（特に、カメラと共に移動する移動体の移動軌跡）を容易に確認することができる。

また、前記情報処理システムは、前記移動軌跡上の所定の線分に関連付けられた前記カメラの移動速度を取得し、前記移動速度に応じて、前記所定の線分の視覚的態様を決定してもよい。

上記構成によれば、ユーザは、所定の線分の視覚的態様を見ることでカメラ（またはカメラと共に移動する移動体）の移動速度を容易に把握することができる。

また、前記位置情報は、第１位置を示す第１位置情報と、前記第１位置とは異なる第２位置を示すと共に、前記第１位置情報の次に取得される第２位置情報と、を含んでもよい。前記移動軌跡は、前記第１位置と前記第２位置とを結ぶ線分を含んでもよい。前記情報処理システムは、前記線分の長さと、前記第１位置情報の取得時刻と前記第２位置情報の取得時刻との間の時間間隔とに基づいて、前記線分に関連付けられた前記カメラの移動速度を決定してもよい。

上記構成によれば、第１線分の長さと、第１位置情報の取得時刻と第２位置情報の取得時刻との間の時間間隔とに基づいて、第１線分に関連付けられたカメラの移動速度が決定される。このように、カメラの位置情報のみからカメラの移動速度を算出することができる。

また、前記位置情報は、第１位置を示す第１位置情報と、前記第１位置とは異なる第２位置を示すと共に、前記第１位置情報の次に取得される第２位置情報とを含んでもよい。前記第１位置情報の取得時刻と前記第２位置情報の取得時刻との間の時間間隔が所定の時間間隔よりも大きい場合に、前記第１位置と前記第２位置とを結ぶ線分は、前記移動軌跡に含まれなくてもよい。

上記構成によれば、第１位置情報の取得時刻と第２位置情報の取得時刻との間の時間間隔が所定の時間間隔よりも大きい場合には、第１位置と第２位置とを結ぶ線分がカメラ（または移動体）の移動軌跡に含まれない。このように、位置情報によって決定されるカメラの移動軌跡が実際のカメラの移動軌跡と異なってしまう状況を好適に防止することが可能となる。例えば、車両（特に、カメラが搭載された車両）がトンネル内を走行中の場合には、ＧＰＳ等から位置情報を取得することができない。かかる状況において、車両がトンネル内に進入する手前において第１位置情報が取得される一方、車両がトンネルを出た後に第２位置情報が取得される場合では、第１位置と第２位置とを結ぶ線分が、トンネルの実際の経路に一致していないことは明らかとなる。このように、第１位置と第２位置とを結ぶ線分が移動軌跡から除外されることで、違和感がない移動軌跡（換言すれば、より現実に即した移動軌跡）をマップ上に表示することが可能となる。

また、前記情報処理システムは、前記ユーザ端末に対するユーザの入力操作に応じて、前記移動軌跡上の第１位置を決定し、前記第１位置に関連付けられた第１画像フレームを前記マップ上に表示してもよい。

上記構成によれば、ユーザは、マップ上に表示された第１画像フレームを見ることで、第１位置における周辺環境を直ぐに把握することができる。

また、前記情報処理システムは、前記映像及び前記位置情報に基づいて、所定のイベントの発生を特定すると共に、前記所定のイベントが発生した場所を特定し、前記所定のイベントが発生した場所に基づいて、前記所定のイベントに関連する情報を前記マップ上に表示してもよい。

上記構成によれば、ユーザは、マップ上のどの位置において所定のイベント（例えば、交通事故等）が発生したのかを直ぐに把握することができる。

また、前記情報処理システムは、前記移動軌跡上の所定の線分に関連付けられた前記カメラの移動速度を取得し、前記移動速度と所定の速度との間の比較結果に基づいて、前記所定の線分の視覚的態様を変更してもよい。

上記構成によれば、ユーザは、所定の線分の視覚的態様を見ることで、所定の線分に関連付けられたカメラの移動速度に関連する情報を容易に把握することができる。

また、前記情報処理システムは、前記移動速度が制限速度よりも大きい場合に、前記所定の線分の視覚的態様を変更してもよい。

上記構成によれば、ユーザは、所定の線分の視覚的態様を見ることで、所定の線分において移動体が制限速度を超えて走行していたことを容易に把握することができる。

また、前記情報処理システムは、前記移動軌跡上の第１位置に関連付けられた前記カメラの移動速度を取得し、前記移動速度と所定の速度との間の比較結果に基づいて、前記移動速度に関連する情報を前記マップ上に表示してもよい。

上記構成によれば、ユーザは、カメラの移動速度に関連する情報を見ることで、第１位置における移動速度に関連する情報を容易に把握することができる。

また、前記情報処理システムは、前記カメラが移動しているかどうかを示すデータを前記カメラから受信し、前記データに基づいて、前記カメラが移動しているかどうかを判定してもよい。前記情報処理システムは、第１期間内において前記カメラが移動していると判定した場合に、前記第１期間内における前記位置情報を前記ユーザ端末に送信し、第２期間内において前記カメラが移動していないと判定した場合に、前記第２期間内における前記位置情報を前記ユーザ端末に送信しなくてもよい。

上記構成によれば、第１期間内においてカメラが移動している場合には、第１期間内における位置情報がユーザ端末に送信される。その一方で、第２期間内においてカメラが移動していない場合には、第２期間内における位置情報がユーザ端末に送信されない。このように、カメラ（又は移動体）が移動していない期間内における位置情報がユーザ端末に送信されないため、実際にはカメラが動いていない状況において、ＧＰＳの精度に起因してカメラの移動軌跡が乱れてしまうことが好適に防止されうる。

また、前記カメラは、移動体に搭載されている、又は人に装着されていてもよい。

上記構成によれば、移動体または人の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理システムを提供することができる。

本開示の一態様に係る情報処理装置は、通信ネットワークを介してカメラ及びユーザ端末に通信可能に接続されており、プロセッサと、コンピュータ可読命令を記憶するメモリと、を備える。前記コンピュータ可読命令が前記プロセッサによって実行されると、前記情報処理装置は、前記カメラによって撮影された映像を受信し、所定期間内における前記カメラの複数の位置を示す位置情報を受信し、前記位置情報及び前記映像を前記ユーザ端末に送信する。前記カメラの移動軌跡がマップ上に重畳された状態で、前記マップと前記映像が前記ユーザ端末に表示される。前記移動軌跡は、前記位置情報に基づいて生成されると共に、前記カメラの複数の位置を結ぶ線分により構成される。

上記構成によれば、移動体や歩行者等の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理装置を提供することができる。

本開示の一態様に係る情報処理方法は、ユーザ端末によって実行される。前記ユーザ端末は、通信ネットワークを介してサーバに通信可能に接続される。前記サーバは、前記通信ネットワークを介してカメラに通信可能に接続される。前記情報処理方法は、前記カメラによって撮影された映像を前記サーバから受信するステップと、所定期間内における前記カメラの複数の位置を示す位置情報を前記サーバから受信するステップと、前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡を生成するステップと、マップを取得するステップと、前記移動軌跡が前記マップ上に重畳された状態で、前記マップと前記映像を前記ユーザ端末に表示するステップと、を含む。

上記によれば、移動体や歩行者等の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理方法を提供することができる。

また、上記情報処理方法をユーザ端末に実行させるためのプログラムが提供されてもよい。

本開示によれば、移動体や歩行者等の移動状況をより直感的且つ俯瞰的に把握可能とする情報処理システム、情報処理装置、情報処理方法、プログラムを提供することができる。

本開示の実施形態（以下、本実施形態という。）に係る情報処理システムの構成の一例を示す図である。 カメラのハードウェア構成の一例を示す図である。 サーバのハードウェア構成の一例を示す図である。 ユーザ端末のハードウェア構成の一例を示す図である。 本実施形態に係る情報処理システムによって実行される一連の処理を説明するためのシーケンス図である。 カメラの位置情報と映像の構成の一例を説明するための図である。 カメラの移動軌跡がマップ上に表示された映像表示画面の一例を示す図（その１）である。 カメラの移動軌跡がマップ上に表示された映像表示画面の一例を示す図（その２）である。 ユーザによって指定された指定期間における移動軌跡を表示するための処理を説明するためのフローチャートである。 カレンダが表示された映像表示画面の一例を示す図である。 移動軌跡の一部を模式的に示した図である。 移動軌跡を構成する線分の一部の視覚的態様が変更された状態を示す図である。 カメラの移動速度に関連する情報が表示された状態を示す図である。 カメラの移動軌跡がマップ上に表示された映像表示画面の一例を示す図（その３）である。 映像の縮小画面がマップ上に表示された映像表示画面の一例を示す図である。 イベント情報がマップ上に表示された映像表示画面の一例を示す図である。 カメラが移動している期間における位置情報のみをユーザ端末に送信する処理を説明するためのフローチャートである。 カメラ移動している期間若しくはカメラが移動していない期間とカメラの位置情報との間の関係を示す図である。 カメラが移動している期間における位置情報とカメラが移動していない期間における位置情報の両方に基づいて生成された移動軌跡の一例を示す模式図である。 カメラが移動している期間における位置情報のみに基づいて生成された移動軌跡の一例を示す模式図である。

以下、本実施形態に係る情報処理システム１ついて図面を参照しながら説明する。図１は、本実施形態に係る情報処理システム１の構成の一例を示す図である。図１に示すように、情報処理システム１は、カメラ２と、サーバ３と、ユーザ端末４と、外部サーバ５とを備える。これらは通信ネットワーク６に接続されている。例えば、カメラ２は、通信ネットワーク６を介してサーバ３に通信可能に接続されている。また、カメラ２は、車両８（移動体の一例）に搭載されている、又は車両８の乗員の身体の一部に装着されているものとする。ユーザ端末４は、通信ネットワーク６を介してサーバ３に通信可能に接続されている。

尚、本実施形態の説明では、カメラ２は、車両８に搭載されている又は乗員の身体の一部に装着されているため、後述するカメラ２の位置や移動軌跡は、車両８の位置や移動軌跡と一致する。また、カメラ２は、車両８以外の電車、船舶、飛行機、無人航空機（ドローン）等の移動体に搭載されてもよいし、人、または動物（ペット）の身体の一部に装着されていてもよい。さらに、車両８は、四輪自動車に限定されるものではなく、二輪自動車や三輪自動車を含むものとする。このように、車両８に取り付けられる車輪の数は特に限定されるものではない。

また、本実施形態では、説明の便宜上、単一のカメラ２が情報処理システム１に設けられているが、情報処理システム１に設けられているカメラ２の台数は特に限定されるものではない。例えば、ユーザＵに関連付けられた複数のカメラ２が情報処理システム１に設けられてもよい。この場合、複数のカメラ２の各々が複数の車両８のうちの対応する一つに搭載されてもよい。さらに、複数のユーザがユーザ端末を通じてサーバ３にアクセスする場合であっては、複数のユーザの各々は、複数のカメラ２のうちの少なくとも一つに関連付けられている。換言すれば、複数のユーザの各々は、複数のカメラ２のうちの少なくとも一つの映像提供サービスに係る契約（例えば、サブスクリプション契約等）やサーバ３の利用に係る契約を締結してもよい。

通信ネットワーク６は、例えば、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネット、無線コアネットワークのうちの少なくとも一つによって構成されている。

次に、図２を参照してカメラ２のハードウェア構成について以下に説明する。カメラ２は、周辺環境を示す映像を撮影すると共に、当該撮影された映像を通信ネットワーク６を介してサーバ３に送信するように構成されている。図２に示すように、カメラ２は、制御部２０と、記憶装置２１と、位置情報取得部２２と、ＲＴＣ（Ｒｅａｌ Ｔｉｍｅ Ｃｌｏｃｋ）２３と、慣性センサ２４と、通信部２５と、入力操作部２６と、撮像部２７と、音声入力部２８と、ＰＴＺ機構２９とを備える。これらの要素は通信バス３９に接続されている。また、カメラ２にはバッテリ（図示せず）が内蔵されてもよい。

制御部２０は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令（プログラム）を記憶するように構成されている。例えば、メモリは、各種プログラム等が格納されたＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やプロセッサにより実行される各種プログラム等が格納される複数ワークエリアを有するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等から構成される。プロセッサは、例えば、ＣＰＵ(Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ)、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）及びＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）のうちの少なくとも一つにより構成される。ＣＰＵは、複数のＣＰＵコアによって構成されてもよい。ＧＰＵは、複数のＧＰＵコアによって構成されてもよい。プロセッサは、記憶装置２１又はＲＯＭに組み込まれた各種プログラムから指定されたプログラムをＲＡＭ上に展開し、ＲＡＭとの協働で各種処理を実行するように構成されてもよい。

記憶装置２１は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、フラッシュメモリ等の記憶装置（ストレージ）であって、プログラムや各種データ（映像データや位置情報等）を格納するように構成されている。位置情報取得部２２は、カメラ２の現在位置（経度θ、緯度φ）に関する情報を取得するように構成されており、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信機である。例えば、位置情報取得部２２は、所定の時間間隔（例えば、１０秒）毎にカメラ２の現在位置に関する情報を取得してもよい。なお、カメラ２が移動体に存在する場合では、移動体の周辺環境の状況（特に、無線通信の状況）に応じて、カメラ２が通信ネットワーク６に一時的に接続されない状況が想定される。かかる状況であっても、記憶装置２１に映像データや位置情報等が保存されているため、カメラ２が通信ネットワーク６に再接続されたときに、これらのデータがカメラ２からサーバ３に送信されてもよい。このように、移動体がトンネル内を移動中であっても、トンネル内の様子を示す映像データを通信ネットワーク６を介してサーバ３に送信することができる。

ＲＴＣ２３は、現在時刻を示す情報を取得するように構成されている。この点において、制御部２０は、ＲＴＣ２３により取得された現在時刻を示す情報と、位置情報取得部２２により取得されたカメラ２の現在位置を示す情報とに基づいて、カメラ２の位置情報を取得する。この点において、図６に示すように、カメラ２の位置情報は、カメラ２の位置Ｘｎ（経度θｎ、緯度φｎ）を示す情報と、カメラ２の位置が取得された時刻ｔｎを示す情報とを含む（ｎは一以上の整数）。カメラ２の位置Ｘｎとカメラ２の位置が取得された時刻ｔｎは互いに関連付けられている。例えば、カメラ２の位置情報において、カメラ２の位置Ｘ１（緯度θ１、経度φ１）と、位置Ｘ１が取得された時刻ｔ１とは互いに関連付けられている。同様に、カメラ２の位置Ｘ２（緯度θ２、経度φ２）と、位置Ｘ２が取得された時刻ｔ２は互いに関連付けられている。このように、カメラ２の位置情報は、カメラ２の複数の位置Ｘｎに関する情報と、各々が複数の位置Ｘｎの対応する一つに関連付けられた複数の時刻ｔｎに関する情報により構成される。なお、ＲＴＣに代わって、ＮＴＰを用いて現在時刻を示す情報が取得されてもよい。

慣性センサ２４は、カメラ２（より、具体的にはカメラ２が搭載された車両８）が移動しているかどうかを示すデータ（例えば、加速度データ等）を取得するように構成されている。慣性センサ２４は、例えば、カメラ２（車両８）の加速度を示す加速度データを取得するように構成された加速度センサであってもよい。

通信部２５は、カメラ２を通信ネットワーク６に接続するように構成されている。通信部２５は、例えば、基地局や無線ＬＡＮルータ等の外部機器と無線通信するための無線通信モジュールを含んでいる。無線通信モジュールは、送受信アンテナと、信号処理回路とを備える。無線通信モジュールは、Ｗｉ－Ｆｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信規格に対応した無線通信モジュールであってもよいし、ＳＩＭ（Ｓｕｂｓｃｒｉｂｅｒ Ｉｄｅｎｔｉｔｙ Ｍｏｄｕｌｅ）を用いた第Ｘ世代移動体通信システム（例えば、ＬＴＥ等の第４世代移動通信システム）に対応する無線通信モジュールであってもよい。

入力操作部２６は、操作者の入力操作を受け付けると共に、操作者の入力操作に応じた操作信号を生成するように構成されている。撮像部２７は、カメラ２の周辺環境を示す映像を撮像するように構成されている。特に、撮像部２７は、カメラ２の周辺環境を示す映像信号を生成するように構成されており、光学系と、イメージセンサと、アナログ処理回路とを備える。光学系は、例えば、光学レンズと、カラーフィルタとを含む。イメージセンサは、ＣＣＤ（Ｃｈａｒｇｅ－Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）又はＣＭＯＳ（相補型ＭＯＳ）等によって構成される。アナログ処理回路は、イメージセンサによって光電変換された映像信号（アナログ信号）を処理するように構成され、例えば、増幅器及びＡＤ変換器を含む。制御部２０は、撮像部２７から送信された映像信号（デジタル信号）に基づいて映像データ（画像データの一例）を生成する。映像データのフレームレートは、例えば、３０ｆｐｓである。

図６に示すように、本実施形態では、カメラ２の映像（映像データ）は、複数の画像フレーム（静止画像）によって構成された画像情報と、音声情報と、時刻情報とによって構成されている。制御部２０は、撮像部２７から取得された映像信号と、音声入力部２８から取得された音声信号と、ＲＴＣ２３から取得された現在時刻を示す情報とに基づいて、画像情報と、音声情報と、時刻情報とによって構成された映像（映像データ）を生成する。また、複数の画像フレームの各々は、当該画像フレームが取得された時刻と関連付けられている。例えば、画像フレームＦ１は、画像フレームＦ１が取得された時刻と関連付けられている。同様に、画像フレームＦ２は、画像フレームＦ２が取得された時刻と関連付けられている。

音声入力部２８は、カメラ２の周囲の音声を表す音声信号を生成するように構成されている。音声入力部２８は、例えば、マイクロフォンである。

ＰＴＺ機構２９は、パン（Ｐａｎｏｒａｍａｃ）機構と、チルト（Ｔｉｌｔ）機構と、ズーム（Ｚｏｏｍ）機構とを備える。パン機構は、水平方向におけるカメラ２の向きを変更するように構成されている。チルト機構は、垂直方向におけるカメラ２の向きを変更するように構成されている。ズーム機構は、カメラ２の画角を変更することで、撮像対象物を示す画像を拡大（ズームイン）または縮小（ズームアウト）するように構成されている。ズーム機構は、撮像部２７に含まれる光学レンズの焦点距離を変更することで光学的にカメラ２の画角を変更してもよいし、デジタル的にカメラ２の画角を変更してもよい。本実施形態では、ユーザ端末４に対するユーザＵの入力操作に応じて、カメラ２をパン、チルト及び／又はチルトを指示する指示信号がユーザ端末４からサーバ３を介してカメラ２に送信される。この場合、制御部２０は、受信した指示信号に応じてＰＴＺ機構２９を駆動させることで、カメラ２のパン・チルト・ズームの各機能（ＰＴＺ機能）をリアルタイムで実現させる。このように、ユーザ端末４の遠隔操作を通じてカメラ２のＰＴＺ機能を実現することができる。なお、カメラ２は、ＰＴＺ機構２９を備えていなくてもよい。

カメラ２は、通信ネットワーク６を介してカメラ２の周辺環境を示す映像（映像データストリーム）をサーバ３にリアルタイムに送信することができる。また、カメラ２は、通信ネットワーク６を介してカメラ２の位置情報、カメラ２の向き情報、およびカメラ２の移動を示すデータ（加速度データ等）をサーバ３に送信することができる。

尚、本実施形態では、カメラ２は、間接的に通信ネットワーク６に接続されていてもよい。例えば、通信部２５は、Ｗｉ－Ｆｉ等の近距離無線通信によって車両８の通信モジュールと通信可能に接続されている一方、車両８の通信モジュールが通信ネットワーク６に直接的に接続されていてもよい。このように、カメラ２は、車両８の通信モジュールを介して通信ネットワーク６に間接的に接続されていてもよい。

次に、図３を参照してサーバ３のハードウェア構成について以下に説明する。サーバ３は、各カメラに関連するカメラ情報テーブルと、映像データと、各ユーザに関連するユーザ情報テーブルとを管理する管理サーバとして機能する。カメラ情報テーブルは、各カメラのネットワークアドレス（例えば、ＩＰアドレス）、識別情報、設定情報、および位置情報を含んでもよい。ユーザ情報テーブルは、各ユーザの属性情報および契約情報と、各ユーザに関連付けられたカメラの識別情報とを含んでもよい。

さらに、サーバ３は、ユーザ端末４からのリクエストに応じて映像表示画面を表示するためのデータ（後述する）を送信するＷＥＢサーバとしても機能する。このように、サーバ３は、ＳａａＳ（Ｓｙｓｔｅｍ ａｓ ａ Ｓｅｒｖｉｃｅ）を提供するためのサーバとして機能しており、複数のサーバによって構成されていてもよい。また、サーバ３は、オンプレミスで構築されてもよいし、クラウドサーバであってもよい。

サーバ３は、通信ネットワーク６を介してカメラ２及びユーザ端末４に通信可能に接続されており、ユーザ端末４からのリクエストに応じてカメラ２の映像データを送信するように構成されている。サーバ３は、制御部３０と、記憶装置３１と、通信部３３と、入力操作部３４と、表示部３５とを備える。これらの要素は通信バス３６に接続されている。

制御部３０は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令（プログラム）を記憶するように構成されている。例えば、メモリは、ＲＯＭ及びＲＡＭにより構成されている。プロセッサは、例えば、ＣＰＵ、ＭＰＵ及びＧＰＵのうちの少なくとも一つにより構成される。

記憶装置３１は、例えば、ＨＤＤ、ＳＳＤ、フラッシュメモリ等の記憶装置（ストレージ）であって、プログラムや各種データを格納するように構成されている。記憶装置３１には、各種データベースが構築されている。特に、記憶装置３１には、各カメラに関連するカメラ情報テーブル、各カメラによって撮像された映像データ、各ユーザに関連するユーザ情報テーブルが保存されてもよい。

通信部３３は、サーバ３を通信ネットワーク６に接続するように構成されている。具体的には、通信部３３は、通信ネットワーク６上の外部端末と通信するための各種有線接続端子を含んでもよい。入力操作部３４は、例えば、表示部３５上に重ねて配置されたタッチパネル、マウス、及び／又はキーボード等であって、操作者の入力操作を受け付けると共に、操作者の入力操作に応じた操作信号を生成するように構成されている。表示部３５は、例えば、液晶パネル又は有機ＥＬパネルによって構成されている。

次に、図４を参照してユーザ端末４のハードウェア構成について以下に説明する。ユーザ端末４は、例えば、パーソナルコンピュータ、スマートフォン、タブレット又はユーザ端末４のユーザＵに装着されたウェアラブルデバイス（例えば、ＡＲグラスやヘッドマウントディスプレイ）であってもよい。ユーザ端末４は、ＷＥＢサーバから送信されたデータを表示するためのＷＥＢブラウザを有してもよい。ユーザ端末４は、制御部４０と、記憶装置４１と、通信部４３と、入力操作部４４と、表示部４５とを備える。これらの要素は通信バス４６に接続されている。

制御部４０は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令（プログラム）を記憶するように構成されている。例えば、メモリは、ＲＯＭ及びＲＡＭにより構成されている。プロセッサは、例えば、ＣＰＵ、ＭＰＵ及びＧＰＵのうちの少なくとも一つにより構成される。

記憶装置４１は、例えば、ＨＤＤ、ＳＳＤ、フラッシュメモリ等の記憶装置（ストレージ）であって、プログラムや各種データを格納するように構成されている。通信部４３は、ユーザ端末４を通信ネットワーク６に接続するように構成されている。通信部４３は、基地局または無線ＬＡＮルータと無線通信するための無線通信モジュール及び／又は有線接続端子を備える。入力操作部４４は、例えば、表示部４５上に重ねて配置されたタッチパネル、マウス、及び／又はキーボード等であって、ユーザＵの入力操作を受け付けると共に、ユーザＵの入力操作に応じた操作信号を生成するように構成されている。表示部４５は、例えば、液晶パネル又は有機ＥＬパネルによって構成されている。本実施形態では、カメラ２の映像とマップを含む映像表示画面５０（図７参照）が表示部４５に表示される。

（情報処理システム１によって実行される一連の処理）
次に、図５を参照して本実施形態に係る情報処理システム１によって実行される一連の処理について以下に説明する。本例では、カメラ２がユーザＵに関連付けられている。換言すれば、ユーザＵは、通信ネットワーク６を介したカメラ２の映像提供サービスに係る契約を締結している。尚、サーバ３の各処理はサーバ３の制御部３０により実行される。同様に、ユーザ端末４の各処理はユーザ端末４の制御部４０により実行される。

図５に示すように、ステップＳ１において、サーバ３は、通信ネットワーク６を通じてカメラ２から映像（映像データ）と、カメラ２の位置情報及び向き情報を受信する。また、サーバ３は、受信した映像と位置情報等を記憶装置３１に保存する。ここで、カメラ２は、リアルタイムで映像データストリームをサーバ３に送信し続ける一方で、所定の時間間隔で位置情報をサーバ３に送信してもよい。ここで、カメラ２の向き情報は、水平方向におけるカメラ２の向きを示す情報を含んでもよい。

次に、ステップＳ２において、ユーザ端末４は、ユーザＵの入力操作を通じてユーザＵのログイン情報（例えば、ログインＩＤとログインパスワード）をサーバ３に送信する。ステップＳ３において、サーバ３は、ユーザ端末４から送信されたログイン情報に基づいてユーザＵを認証する。尚、ユーザＵの認証はログイン認証に限定されるものではなく、様々な認証方法が適用されてもよい。サーバ３は、ユーザＵの認証を実行した後に、ユーザ情報テーブルを参照することで、ユーザＵに関連付けられたカメラ２を特定する。

ステップＳ４において、サーバ３は、通信ネットワーク６を介して、図７に示す映像表示画面５０を表示するためのデータ（以下、映像表示用データという。）と、カメラ２の映像データと、カメラ２の位置情報及び向き情報をユーザ端末４に送信する。また、本ステップでは、カメラ２が移動しているかどうかを示す加速度データがカメラ２からサーバ３に送信されてもよい。

映像表示用データは、映像表示画面５０をユーザ端末４のＷＥＢブラウザ上に表示するためのファイル（例えば、ＨＴＭＬファイル、ＣＳＳファイル、プログラムファイル等）であってもよい。ここで、プログラムファイルは、ＪａｖａＳｃｒｉｐｔファイルであってもよい。当該プログラムファイルは、ステップＳ５及びＳ６の処理をユーザ端末４の制御部４０に実行させるためのプログラムのファイルとして機能する。また、当該プログラムファイルは、フラッシュメモリ等のコンピュータ可読記憶媒体に保存されていてもよい。尚、映像表示用データ（ＨTＭLファイル等）は一回だけ送信されてもよい。その一方で、カメラ２の映像データは、ストリーミング形式で送信されてもよい。

特に、サーバ３は、記憶装置３１内に保存された映像データのうち所定期間の映像データをストリーミング形式でユーザ端末４に送信してもよい。同様に、サーバ３は、記憶装置３１内に保存されたカメラ２の位置情報のうち所定期間の位置情報をユーザ端末４に送信してもよい。例えば、サーバ３は、初期状態として２０２２年５月５日の０時から２４時の間の映像データ及び位置情報をユーザ端末４に送信してもよい。

次に、ステップＳ５において、ユーザ端末４は、サーバ３から送信された所定期間内におけるカメラ２の位置情報を受信した上で、当該位置情報に基づいてカメラ２の移動軌跡Ｋ（図７参照）を生成する。移動軌跡Ｋは、カメラ２の複数の位置を結ぶ線分により構成されている。例えば、図１１に示すように、位置Ｘ１、Ｘ２、Ｘ３を示す情報がカメラ２の位置情報に含まれている場合には、移動軌跡Ｋは、位置Ｘ１と位置Ｘ２を結ぶ線分Ｌ１と、位置Ｘ２と位置Ｘ３を結ぶ線分Ｌ２とを含む。ユーザ端末４は、サーバ３から送信されたプログラムファイル（コンピュータ可読命令）を実行することで、移動軌跡Ｋの生成処理を実行する。また、カメラ２は車両８と共に移動するため、カメラ２の移動軌跡は、車両８の移動軌跡と一致するものである。以降の説明では、カメラ２の移動軌跡Ｋを車両８の移動軌跡Ｋという場合がある。

ステップＳ６において、ユーザ端末４は、マップ（図７参照）を外部サーバ５から取得する。この点において、ユーザ端末４は、カメラ２の位置情報に基づいて、映像表示用データに含まれるＡＰＩ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｇｒａｍｍｉｎｇ Ｉｎｔｅｒｆａｃｅ）を通じて、カメラ２の移動軌跡Ｋをカバーするマップを外部サーバ５から取得する。外部サーバ５から取得されるマップは、例えば、アメリカ合衆国カリフォルニア州に本社があるＧｏｏｇｌｅ ＬＬＣ社が提供するＧｏｏｇｌｅマップであってもよいし、株式会社ゼンリン社等の他のマップ提供会社によって提供されるマップであってもよい。また、マップは、ユーザ端末４の記憶装置４１に予め保存されてもよい。マップの種類は、道路を含むマップに特に限定されるものではなく、工事現場、工場、農場、牧場等の私有地の内部を示すマップであってもよい。

ステップＳ７において、ユーザ端末４（より具体的には、ユーザ端末４上で動作するＷＥＢブラウザ）は、映像表示用データと、映像と、マップと、移動軌跡Ｋに基づいて、映像とマップを含む映像表示画面５０（図７参照）を表示部４５に表示する。図７に示すように、映像表示画面５０には、マップ表示領域５１と、映像表示領域５２と、タイムライン５３とがそれぞれ設けられている。マップは、マップ表示領域５１に表示される。映像は、映像表示領域５２に表示される。タイムライン５３上に表示されている日時は、映像表示領域５２に現在表示されている映像（映像フレーム）の日時に対応する。また、ユーザＵがスライダ５８の操作を通じてタイムライン５３上の所望の日時を指定することで、当該指定された日時に対応する映像フレームを含む映像が映像表示領域５２に表示される。

また、映像表示画面５０のマップ表示領域５１では、カメラ２の移動軌跡Ｋがマップ上に重畳されている。上記したように、初期状態として２０２２年５月５日の０時から２４時の間の移動軌跡Ｋがマップ上に重畳されている。移動軌跡Ｋ上にはピンＰが配置されている。ピンＰは、移動軌跡Ｋを構成するカメラ２の複数の位置のいずれか一つを指定している。また、ピンＰによって示された位置に関連付けられた画像フレームを含む映像が映像表示領域５２に表示される。また、ピンＰに視覚的に関連付けられた表示領域６３内に、カメラ２のデバイス名を示す情報と、ピンＰによって示された位置が取得された時刻に関する情報が表示される。

また、ユーザＵは、ドラッグ＆ドロップ操作により移動軌跡Ｋ上におけるピンＰの位置を変更することで、当該変更されたピンＰの位置に関連付けられた画像フレームを含む映像を映像表示領域５２に表示させることができる。

上記したように、カメラ２の位置情報は、カメラ２の複数の位置Ｘｎに関する情報と、各々が複数の位置Ｘｎの対応する一つに関連付けられた複数の時刻ｔｎに関する情報とにより構成されている。このため、例えば、ピンＰがカメラ２の位置Ｘ２を示す場合には、位置Ｘ２に関連付けられた時刻ｔ２（換言すれば、ＧＰＳ等によって位置Ｘ２が取得された時刻ｔ２）がユーザ端末４によって特定される。その後、ユーザ端末４は、時刻ｔ２に関連付けられた画像フレーム（即ち、時刻ｔ２に取得された画像フレーム）を含む映像データをサーバ３から受信した上で、時刻ｔ２に関連付けられた映像フレームを含む映像を映像表示領域５２に表示する。

さらに、ユーザＵのドラッグ＆ドロップ操作によって移動軌跡Ｋ上におけるピンＰの位置が位置Ｘ２から位置Ｘｍ（ｍは３以上の整数）に移動した場合には（図８参照）、位置Ｘｍに関連付けられた時刻ｔｍがユーザ端末によって特定される。その後、ユーザ端末４は、時刻ｔｍに関連付けられた画像フレームを含む映像データをサーバ３から受信した上で、時刻ｔｍに関連付けられた映像フレームを含む映像を映像表示領域５２に表示する。また、図７及び図８に示すように、ピンＰの位置と、映像表示領域５２に表示される映像と、タイムライン５３上におけるスライダ５８の位置は、それぞれ連動している。即ち、ピンＰの位置の変動に応じて、映像表示領域５２に表示される映像（映像フレーム）も切り替わると共に、タイムライン５３上におけるスライダ５８の位置も変動する。一方、スライダ５８の位置を動かすことで、映像表示領域５２に表示される映像（映像フレーム）も切り替わると共に、ピンＰの位置が変動する。

また、本実施形態では、ピンＰの位置と映像表示領域５２に表示される映像（画像フレーム）が互いに連動している。時間経過に伴い、カメラ２の位置が変動すると共に、再生される映像が変化するためである。このように、映像表示領域５２に表示される映像（画像フレーム）が連続的に切り替わることで、ピンＰの位置が自動的に変化する。即ち、ユーザ端末４は、映像表示領域５２における映像の再生に伴い、移動軌跡Ｋ上に沿ってピンＰを自動的に移動させると共に、タイムライン５３上においてスライダ５８を自動的に移動させる。換言すれば、ユーザ端末４は、移動軌跡Ｋ上におけるピンＰの移動に追従して、ピンＰによって示された位置に関連付けられた画像フレームを含む映像を映像表示領域５２に表示する。または、ユーザ端末４は、タイムライン５３上におけるスライダ５８の移動に追従して、スライダ５８によって示された時刻に関連付けられた画像フレームを含む映像を映像表示領域５２に表示する。

本実施形態によれば、移動軌跡Ｋがマップ上に重畳された状態で、マップと映像とが同時に表示された映像表示画面５０がユーザ端末４の表示部４５に表示される。このように、ユーザＵは、マップ上に重畳された移動軌跡Ｋを見ることで、映像がマップ上のどの位置から撮像されたものであるかを直感的且つ俯瞰的に把握することができる。さらに、ユーザＵは、当該映像がマップ上のどのような移動経路に沿って撮影されたものであるかを直感的に把握することができる。また、ユーザＵは、通信ネットワーク６を介してサーバ３に通信可能に接続されたユーザ端末４上（即ち、オンライン上）において、カメラ２の映像を手間なく確認することができる。したがって、オンライン上において車両８の稼働状況をより直感的且つ俯瞰的に把握可能とする情報処理システム１を提供することができる。

また、ユーザＵは、移動軌跡Ｋ上に配置されたピンＰを見ることで、現在表示されているカメラ２の映像がマップ上のどの位置から撮影されたものであるかを直感的且つ俯瞰的に把握することができる。

さらに、移動軌跡Ｋ上におけるピンＰの移動に追従して、ピンＰによって示された位置に関連付けられた映像フレームを含む映像が映像表示画面５０に表示される。このように、ユーザＵは、移動軌跡Ｋ上に沿って移動するピンＰを見ることで、現在表示されているカメラ２の映像がマップ上のどの位置から撮影されたものであるかを直感的且つ俯瞰的に把握することができる。

また、ユーザＵは、ピンＰを移動させることで、移動軌跡Ｋ上の所望の位置を選択することができる。この結果、ユーザＵは、当該選択された所望の位置に関連付けられた映像フレームを含む映像を容易に且つ素早く確認することができる。このように、ユーザＵは、マップ上に表示されたピンＰに対するドラッグ＆ドロップ操作を通じて、所望の位置におけるカメラ２の映像を容易に確認することができる。

尚、本実施形態の説明では、ステップＳ５及びＳ６の各処理がユーザ端末４側によって実行されているが、これらの処理はサーバ３側若しくはカメラ２側で実行されてもよい。この点において、サーバ３は、ステップＳ３においてユーザ認証を実行した後に、カメラ２の位置情報に基づいて、カメラ２の移動軌跡Ｋを生成した上で、ＡＰＩを通じて移動軌跡Ｋをカバーするマップを外部サーバ５から取得する。その後、サーバ３は、映像表示用データと、カメラ２の映像と、移動軌跡Ｋが重畳されたマップと、カメラ２の位置情報とをユーザ端末４に送信する。この結果、映像表示画面５０がユーザ端末４に表示される。

また、カメラ２は、カメラ２の位置情報に基づいて、カメラ２の移動軌跡Ｋを生成した上で、移動軌跡Ｋを示す情報をサーバ３に送信してもよい。その後、サーバ３は、映像表示用データと、カメラ２の映像と、移動軌跡Ｋが重畳されたマップと、カメラ２の位置情報とをユーザ端末４に送信してもよい。

また、本実施形態では、マップは外部サーバ５から取得されているが、サーバ３の記憶装置３１内にマップデータが予め保存されていてもよい。

また、本実施形態の説明では、ユーザ端末４においてカメラ２の移動軌跡が生成されると共に、外部サーバからマップが取得される。その後、ユーザ端末４において移動軌跡がマップ上に重畳された映像表示画面が生成される。一方で、これらの一連の処理の全部または一部は、サーバ３及び／又はカメラ２によって実行されてもよい。

（ユーザにより指定された指定期間における移動軌跡を表示するための処理）
次に、ユーザＵによって指定された指定期間における移動軌跡Ｋを表示するための処理について図９及び図１０を参照して説明する。図９は、ユーザＵによって指定された指定期間における移動軌跡Ｋを表示するための処理を説明するためのフローチャートである。図１０は、日付を指定可能なカレンダ５５が表示された映像表示画面５０の一例を示す図である。

図９に示すように、ステップＳ１０において、ユーザ端末４は、ユーザＵの入力操作を通じて指定期間を決定する。例えば、図１０に示すように、ユーザＵがカレンダ５５を通じて所望の日付（本例では、２０２２年５月６日）を指定したときに、ユーザ端末４は指定期間（２０２２年５月６日の０時から２４時）を決定する。

次に、ステップＳ１１において、ユーザ端末４は、指定期間に関する情報を通信ネットワーク６を介してサーバ３に送信する。その後、サーバ３は、指定期間に関する情報の受信に応じて、記憶装置３１に保存されたカメラ２の位置情報のうち当該指定期間内のカメラ２の位置情報を取り出すと共に、記憶装置３１に保存された映像データのうち当該指定期間内の映像データを取り出す。その後、サーバ３は、当該指定期間内の位置情報及び映像データを通信ネットワーク６を介してユーザ端末４に送信する。このように、ユーザ端末４は、指定期間内における位置情報及び映像データをサーバ３から受信する（ステップＳ１２）。

次に、ユーザ端末４は、指定期間内における位置情報に基づいて、カメラ２の移動軌跡Ｋを生成する（ステップＳ１３）。その後、ユーザ端末４は、移動軌跡Ｋが重畳されたマップと映像が同時に表示された映像表示画面５０（図８参照）を表示部４５に表示する（ステップＳ１４）。

本実施形態によれば、ユーザＵによって指定期間が指定された上で、当該指定期間におけるカメラ２の位置情報及び映像データがサーバ３からユーザ端末４に送信される。その後、指定期間における位置情報に基づいて指定期間内の移動軌跡Ｋがマップ上に表示される。このように、ユーザＵは、映像表示画面５０に対する入力操作を通じて、所望の期間内の移動軌跡Ｋ及び映像を容易に確認することができる。

尚、本例では、ユーザＵがカレンダ５５を通じて特定の日付を指定したときに、ユーザ端末４によって指定期間が決定されているが、本実施形態はこれに限定されるものではない。この点において、ユーザＵの入力操作を通じて２つの異なる時刻によって規定される時間帯が指定されたときに、ユーザ端末４によって指定期間が決定されてもよい。例えば、初期状態として２０２２年５月５日の０時から２４時の間の時間帯における移動軌跡Ｋと映像が映像表示画面５０に表示される場合を想定する。この場合、ユーザＵの入力操作によって、１０時から２０時の間の時間帯が指定されたときに、ユーザ端末４によって指定期間（２０２２年５月５日の１０時から２０時の間の時間帯）が決定されてもよい。

さらに、ユーザＵの入力操作を通じて異なる２つの日付によって規定される期間が指定されたときに、ユーザ端末４によって指定期間が決定されてもよい。例えば、カレンダ５５を通じて２０２２年５月５日から２０２２年５月８日の間の期間が指定されたときに、ユーザ端末４によって指定期間（２０２２年５月５日の０時から２０２２年５月８日の２４時の間の期間）が決定されてもよい。

（カメラの移動速度に応じて移動軌跡の視覚的態様を変更する処理）
次に、カメラ２の移動速度に応じて移動軌跡Ｋの視覚的態様を変更する処理について図１１及び図１２を参照して以下に説明する。図１１は、移動軌跡Ｋの一部を模式的に示した図である。図１２は、移動軌跡Ｋを構成する線分Ｌ１の視覚的態様が変更された状態を示す図である。図１３は、カメラ２の移動速度に関連する情報が表示された状態を示す図である。尚、図１１から図１３では、説明の便宜上、移動軌跡Ｋが重畳されるマップについての図示は省略されている。

移動軌跡Ｋは、互いに隣接する２つの位置を結ぶ複数の線分によって構成されている。図１１に示すように、位置Ｘ１と位置Ｘ２を結ぶ線分Ｌ１と位置Ｘ２と位置Ｘ３を結ぶ線分Ｌ２は、移動軌跡Ｋの一部を構成している。線分Ｌ１，Ｌ２には、カメラ２の移動方向を示す矢印が付されている。例えば、カメラ２は、位置Ｘ１から位置Ｘ２に向けて移動することから、カメラ２が位置Ｘ１からＸ２に向けて移動する移動方向を示す矢印が線分Ｌ１に付されている。図１１では、移動軌跡Ｋを構成する所定の線分の長さが大きい程、当該所定の線分に関連付けられたカメラ２の移動速度は大きくなる。換言すれば、所定の線分に関連付けられた移動速度に応じて、当該所定の線分の長さ（視覚的態様の一例）が変化している。

例えば、線分Ｌ１の長さは線分Ｌ２の長さよりも長いため、線分Ｌ１に関連付けられたカメラ２の移動速度Ｖ１は、線分Ｌ２に関連付けられたカメラ２の移動速度Ｖ２よりも大きい。ここで、ユーザ端末４は、カメラ２の位置情報に基づいて移動速度Ｖ１，Ｖ２を決定する。より具体的には、ユーザ端末４は、線分Ｌ１の長さ｜Ｘ２－Ｘ１｜と、位置Ｘ１が取得された時刻ｔ１と位置Ｘ２が取得された時刻ｔ２との間の時間間隔（ｔ２－ｔ１）とに基づいて、線分Ｌ１に関連付けられた移動速度Ｖ１を決定する（Ｖ１＝｜ｘ２－ｘ１｜／（ｔ２－ｔ１））。同様に、ユーザ端末４は、線分Ｌ２の長さ｜Ｘ３－Ｘ２｜と、位置Ｘ２が取得された時刻ｔ２と位置Ｘ３が取得された時刻ｔ３との間の時間間隔（ｔ３－ｔ２）とに基づいて、線分Ｌ２に関連付けられた移動速度Ｖ２を決定する（Ｖ２＝｜ｘ３－ｘ２｜／（ｔ３－ｔ２））。また、位置情報取得部２２によりカメラ２の現在位置が一定の時間間隔毎（例えば、１０秒）に取得される場合には、所定の線分に関連付けられたカメラ２の移動速度は、所定の線分の長さと正比例する。つまり、移動速度Ｖ１，Ｖ２の比と線分Ｌ１，Ｌ２の長さの比は等しくなる（Ｖ１：Ｖ２＝線分Ｌ１の長さ：線分Ｌ２の長さ）。このように、本実施形態によれば、ユーザＵは、移動軌跡Ｋを構成する各線分の長さを見ることで、各線分の区間における車両８（カメラ２）の移動速度を容易に把握することができる。

また、図１２に示すように、カメラ２の移動速度に応じて移動軌跡Ｋを構成する一部の線分の表示色（視覚的態様の一例）を変更してもよい。より具体的には、ユーザ端末４は、所定の線分に関連付けられた移動速度と所定の速度（例えば、制限速度）との間の比較結果に基づいて、所定の線分の表示色を変更してもよい。図１２に示す一例では、ユーザ端末４は、線分Ｌ１に関連付けられた移動速度Ｖ１が制限速度（法定速度等）よりも大きい場合に、線分Ｌ１の表示色を変更してもよい。例えば、初期状態として移動軌跡Ｋの表示色が第１表示色である場合に、線分Ｌ１の表示色が第１表示色から当該第１表示色とは異なる第２表示色に変更されてもよい。このように、本実施形態によれば、ユーザＵは、表示色が変更された線分Ｌ１を視認することで、線分Ｌ１の区間において車両８が制限速度を超えて走行していたことを容易に把握することができる。

また、図１３に示すように、カメラ２の移動速度に関連する情報がマップ（図１３では図示せず）に表示されてもよい。より具体的には、カメラの移動速度に関連する情報が移動軌跡Ｋを構成する線分と視覚的に関連付けられた状態で、当該情報がマップ上に表示されてもよい。図１３に示す一例では、線分Ｌ１に関連付けられた移動速度Ｖ１が制限速度よりも大きい場合に、移動速度Ｖ１に関連する情報（即ち、移動速度Ｖ１が制限速度を超えていることを示す情報）が線分Ｌ１に視覚的に関連付けられた状態でマップ上に表示されてもよい。また、位置Ｘ３において車両８（カメラ２）が一定期間の間停止している場合に、車両８が停止していたことを示す情報が位置Ｘ３と視覚的に関連付けられた状態でマップ上に表示されてもよい。このように、本実施形態によれば、ユーザＵは、マップ上に表示された車両８の移動速度に関連する情報を見ることで、車両８の移動速度に関連する情報を容易に把握することができる。

（一部の線分を移動軌跡Ｋから除外することを決定する処理）
次に、図１４を参照することで一部の線分を移動軌跡Ｋから除外することを決定する処理について以下に説明する。図１４に示す一例では、互いに隣接する位置Ｘ６と位置Ｘ７とを結ぶ線分が移動軌跡Ｋには含まれていない。この点において、ユーザ端末４は、カメラ２の位置情報に基づいて、位置Ｘ６が取得された時刻ｔ６と位置Ｘ７が取得された時刻ｔ７との間の時間間隔が所定の時間間隔（例えば、１５秒）よりも大きいと判定した場合に、位置Ｘ６と位置Ｘ７とを結ぶ線分を移動軌跡Ｋから除外することを決定してもよい。例えば、位置Ｘ６と位置Ｘ７との間の区間Ｓにおいてトンネルが存在する場合、車両８がトンネル内を走行中の間においてカメラ２に搭載されたＧＰＳ受信機（位置情報取得部２２の一例）はＧＰＳ衛星から電波を受信することができない。このため、区間Ｓにおいてカメラ２は位置情報を取得することができない。また、車両８がトンネルに進入する前に位置Ｘ６を示す情報がＧＰＳ受信機により取得される一方、車両８がトンネルを出た後に位置Ｘ７を示す情報がＧＰＳ受信機により取得される場合では、位置Ｘ６が取得された時刻ｔ６と位置Ｘ７が取得された時刻ｔ７との間の時間間隔は大きくなってしまう。

このような場合では、位置Ｘ６と位置Ｘ７とを結ぶ線分は、区間Ｓ内のトンネルの実際の経路（特に、カーブを含むトンネルの経路）とは一致しない虞がある。このように、図１４に示すように、位置Ｘ６と位置Ｘ７とを結ぶ線分が移動経路Ｋから除外されることで、違和感のない移動経路Ｋ（換言すれば、より実態に即した移動経路）をマップ上に表示することが可能となる。

また、図１５に示すように、映像（映像フレーム）の縮小画面がマップ上に表示されてもよい。より具体的には、ユーザＵがマウスポインタによって移動軌跡Ｋ上の任意の位置を指定した場合に、当該指定された位置に関連付けられた映像フレームの縮小画面が表示領域５９内に表示されてもよい。図１５に示す例では、ピンＰの付近の位置がユーザＵによって指定された場合に、当該指定された位置に関連付けられた映像フレームの縮小画面が表示領域５９内に表示される。

（イベント情報の表示）
次に、図１６を参照してイベント情報をマップ上に表示する処理について以下に説明する。図１６は、イベント情報として事故情報がマップ上に表示された映像表示画面５０の一例を示す図である。この点において、サーバ３は、カメラ２の映像データ及び位置情報に基づいて、事故（所定のイベントの一例）を特定すると共に、事故が発生した場所を特定する。より具体的には、サーバ３は、映像データに含まれる音声情報から事故の発生を特定すると共に、事故が発生した時刻を特定する。次に、サーバ３は、事故が発生した時刻とカメラ２の位置情報に基づいて、事故が発生した場所を特定する。その後、サーバ３は、事故情報と、事故が発生した場所を示す情報をユーザ端末４に送信する。ユーザ端末４は、事故情報と、事故が発生した場所を示す情報に基づいて、事故情報をマップ上に表示する。例えば、図１６に示すように、事故が発生した場所が位置Ｘ８である場合、事故情報が移動軌跡Ｋ上の位置Ｘ８と視覚的に関連付けられた状態で、事故情報がマップ上に表示されてもよい。

（カメラが移動している期間における位置情報のみをユーザ端末に送信する処理）
次に、図１７から図２０を参照して、カメラ２が移動している期間における位置情報のみをユーザ端末４に送信する処理について以下に説明する。図１７は、カメラ２が移動している期間Ｔａにおける位置情報のみをユーザ端末４に送信する処理を説明するためのフローチャートである。図１８は、カメラ２が移動している期間Ｔａ若しくはカメラ２が移動していない期間Ｔｂとカメラ２の位置情報との間の関係を示す図である。図１９は、カメラ２が移動している期間Ｔａにおける位置情報とカメラ２が移動していない期間Ｔｂにおける位置情報の両方に基づいて生成された移動軌跡Ｋ１の一例を示す模式図である。図２０は、カメラ２が移動している期間Ｔａにおける位置情報のみに基づいて生成された移動軌跡Ｋ２の一例を示す模式図である。

図１７に示すように、ステップＳ２０において、サーバ３は、通信ネットワーク６を介してカメラ２（車両８）が移動しているかどうかを示す移動データをカメラ２から受信する。ここで、移動データは、加速度データであってもよい。加速度データは、例えば、カメラ２の加速度の値の時間変化を示すデータである。即ち、加速度データは、各時刻におけるカメラ２の加速度の値を示すデータである。また、図５のステップＳ４の処理に示すように、サーバ３は、カメラ２の位置情報及び向き情報と共に、当該移動データをカメラ２から受信してもよい。

次に、サーバ３は、当該受信した移動データに基づいてカメラ２が移動しているかどうかを判定した上で（ステップＳ２１）、移動データに基づいてカメラ２が移動している期間Ｔａとカメラ２が移動していない期間Ｔｂとを特定する（ステップＳ２２）。その後、サーバ３は、期間Ｔａ，Ｔｂに関する情報と、カメラ２の位置情報とに基づいて、期間Ｔａにおける位置情報と、期間Ｔｂにおける位置情報とを分類する（図１８参照）。ステップＳ２３において、サーバ３は、期間Ｔａにおける位置情報をユーザ端末４に送信する一方で、期間Ｔｂにおける位置情報をユーザ端末４に送信しない。このように、ユーザ端末４は、期間Ｔａにおける位置情報のみをサーバ３から受信した上で、期間Ｔａにおける位置情報のみに基づいて移動軌跡Ｋ２（図２０参照）を生成する。

この点において、例えば、図１９及び図２０に示すように、期間Ｔａにおける位置情報及び期間Ｔｂにおける位置情報の両方に基づいて生成された移動軌跡Ｋ１は、期間Ｔａにおける位置情報のみに基づいて生成された移動軌跡Ｋ２と比較して、乱れた軌跡となっている。この理由としては、カメラ２が移動していない期間Ｔｂにおいて取得された位置Ｘ１３，Ｘ１４，Ｘ１５がＧＰＳの精度の低下に起因してそれぞれ異なっているためである。つまり、カメラ２が移動していない期間Ｔｂにおける位置Ｘ１３，Ｘ１４，Ｘ１５の位置は本来であれば一定となるはずであるが、ＧＰＳの精度の低下により位置Ｘ１３，Ｘ１４，Ｘ１５が実際には一定とはならない。このため、期間Ｔｂにおける位置情報を用いて移動軌跡が生成される場合では、図１９に示すように、移動軌跡が乱れてしまう虞がある。

本実施形態によれば、期間Ｔｂにおける位置情報がユーザ端末４に送信されないため、実際にはカメラ２が移動していない状況において、ＧＰＳの精度に起因してカメラ２の移動軌跡が乱れてしまうことを好適に防止することができる。

以上、本発明の実施形態について説明をしたが、本発明の技術的範囲が本実施形態の説明によって限定的に解釈されるべきではない。本実施形態は一例であって、特許請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は特許請求の範囲に記載された発明の範囲及びその均等の範囲に基づいて定められるべきである。

本実施形態によれば、カメラ２が車両８（移動体の一例）に搭載されているため、ユーザＵは、移動軌跡が表示された映像表示画面５０を通じて車両８の移動状況を直感的且つ俯瞰的に把握することができる。これと同様に、カメラ２が人（特に、歩行者や走行者）に装着されている場合では、ユーザＵは、移動軌跡が表示された映像表示画面５０を通じて歩行者等の走行状況を直感的且つ俯瞰的に把握することができる。

１：情報処理システム、２：カメラ、３：サーバ、４：ユーザ端末、５：外部サーバ、６：通信ネットワーク、８：車両、２０：制御部、２１：記憶装置、２２：位置情報取得部、２４：慣性センサ、２５：通信部、２６：入力操作部、２７：撮像部、２８：音声入力部、２９：ＰＴＺ機構、３０：制御部、３１：記憶装置、３３：通信部、３４：入力操作部、３５：表示部、４０：制御部、４１：記憶装置、４３：通信部、４４：入力操作部、４５：表示部、５０：映像表示画面、５１：マップ表示領域、５２：映像表示領域、５３：タイムライン、５５：カレンダ、５８：スライダ、５９：表示領域、６３：表示領域

Claims (19)

1. カメラで撮影された映像をユーザ端末に表示する情報処理システムであって、
   前記カメラにより撮影された映像を取得し、
   前記カメラの複数の位置を示す位置情報を取得し、
   前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡を生成し、
   マップを取得し、
   前記移動軌跡が前記マップ上に表示された状態で、前記マップと前記映像を前記ユーザ端末に表示し、
   前記移動軌跡に沿って移動し、前記カメラを示すオブジェクトを前記マップ上に表示し、
   前記オブジェクトの移動に連動して、前記オブジェクトに対応する位置で撮影された映像を表示し、
   ユーザの指示に応じて、前記移動軌跡上の所定の位置を選択し、
   前記オブジェクトを前記所定の位置に表示し、
   前記オブジェクトの位置で撮影された映像を表示し、
   前記位置情報は、
   第１位置を示す第１位置情報と、
   前記第１位置とは異なる第２位置を示すと共に、前記第１位置情報の次に取得される第２位置情報と、
   を含み、
   前記情報処理システムは、
   前記第１位置情報の取得時刻と前記第２位置情報の取得時刻との間の時間間隔が所定の時間間隔よりも大きい場合に、前記第１位置と前記第２位置とを結ぶ第１線分を前記移動軌跡から除外し、
   前記第１線分が除外された移動軌跡を前記マップ上に表示する、情報処理システム。
2. 前記情報処理システムは、
   前記移動軌跡に沿って前記オブジェクトを自動的に移動させる、
   請求項１に記載の情報処理システム。
3. 前記情報処理システムは、
   ユーザの指示に応じて所定期間を決定し、
   前記所定期間内における前記移動軌跡を前記ユーザ端末に表示する、
   請求項１または２に記載の情報処理システム。
4. 前記所定期間は、２つの異なる時刻によって規定される時間帯、特定の日付、または異なる２つの日付によって規定される、請求項３に記載の情報処理システム。
5. 前記情報処理システムは、
   前記カメラの移動速度を取得し、
   前記移動速度に応じて、前記移動軌跡の視覚的態様を決定する、
   請求項１または２に記載の情報処理システム。
6. 前記情報処理システムは、
   前記映像を前記オブジェクトの位置に対応付けて前記マップ上に表示する、
   請求項１または２に記載の情報処理システム。
7. 前記情報処理システムは、
   前記映像及び前記位置情報に基づいて、所定のイベントの発生を特定すると共に、前記所定のイベントが発生した場所を特定し、
   前記所定のイベントが発生した場所に基づいて、前記所定のイベントに関連する情報を前記マップ上に表示する、
   請求項１または２に記載の情報処理システム。
8. 前記情報処理システムは、
   前記カメラの移動速度を取得し、
   前記移動速度と所定の速度との間の比較結果に基づいて、前記移動軌跡の視覚的態様を変更する、
   請求項１または２に記載の情報処理システム。
9. 前記情報処理システムは、
   前記移動速度が制限速度よりも大きい場合に、前記移動軌跡の視覚的態様を変更する、
   請求項８に記載の情報処理システム。
10. 前記情報処理システムは、
    前記カメラの移動速度を取得し、
    前記移動速度と所定の速度との間の比較結果に基づいて、前記移動速度に関連する情報を前記マップ上に表示する、
    請求項１または２に記載の情報処理システム。
11. 前記情報処理システムは、
    移動データに基づいて、前記カメラが移動しているかどうかを判定し、
    前記カメラが移動していると判定した箇所の前記位置情報のみに基づいて、前記移動軌跡を生成する、
    請求項１または２に記載の情報処理システム。
12. 前記カメラは、移動体に搭載されている、又は人に装着されている、
    請求項１または２に記載の情報処理システム。
13. カメラで撮影された映像をユーザ端末に表示する情報処理システムであって、
    前記カメラにより撮影された映像を取得し、
    前記カメラの複数の位置を示す位置情報を取得し、
    前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡を生成し、
    マップを取得し、
    前記移動軌跡が前記マップ上に表示された状態で、前記マップと前記映像を前記ユーザ端末に表示し、
    ユーザの指示に応じて、前記移動軌跡上の所定の位置を選択し、
    前記所定の位置に前記カメラを示すオブジェクトを表示し、
    前記オブジェクトの位置で撮影された映像から前記映像の表示を開始し、
    前記位置情報は、
    第１位置を示す第１位置情報と、
    前記第１位置とは異なる第２位置を示すと共に、前記第１位置情報の次に取得される第２位置情報と、
    を含み、
    前記情報処理システムは、
    前記第１位置情報の取得時刻と前記第２位置情報の取得時刻との間の時間間隔が所定の時間間隔よりも大きい場合に、前記第１位置と前記第２位置とを結ぶ第１線分を前記移動軌跡から除外し、
    前記第１線分が除外された移動軌跡を前記マップ上に表示する、情報処理システム。
14. カメラで撮影された映像をユーザ端末に表示する情報処理システムであって、
    前記カメラにより撮影された映像を取得し、
    前記カメラの複数の位置を示す位置情報を取得し、
    前記カメラが移動しているかどうかを示す移動データを前記カメラから受信し、
    前記カメラから受信した移動データに基づいて、前記カメラが移動している第１期間と、前記カメラが移動していない第２期間とを特定し、
    前記カメラが移動している前記第１期間における前記位置情報のみに基づいて、前記カメラの移動軌跡を生成し、
    マップを取得し、
    前記移動軌跡が前記マップ上に表示された状態で、前記マップと前記映像を前記ユーザ端末に表示する、
    情報処理システム。
15. ユーザ端末によって実行される情報処理方法であって、
    前記ユーザ端末は、通信ネットワークを介してカメラに通信可能に接続され、
    前記情報処理方法は、
    前記カメラによって撮影された映像を受信するステップと、
    前記カメラの複数の位置を示す位置情報を受信するステップと、
    前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡を生成するステップと、
    マップを取得するステップと、
    前記移動軌跡が前記マップ上に表示された状態で、前記マップと前記映像を前記ユーザ端末に表示するステップと、
    を含み、
    前記マップと前記映像を表示するステップは、
    前記移動軌跡に沿って移動し、前記カメラを示すオブジェクトを前記マップ上に表示するステップと、
    前記オブジェクトの移動に連動して、前記オブジェクトに対応する位置で撮影された映像を表示するステップと、
    ユーザの指示に応じて、前記移動軌跡上の所定の位置を選択するステップと、
    前記オブジェクトを前記所定の位置に表示するステップと、
    前記オブジェクトの位置で撮影された映像を表示するステップと、
    を含み、
    前記位置情報は、
    第１位置を示す第１位置情報と、
    前記第１位置とは異なる第２位置を示すと共に、前記第１位置情報の次に取得される第２位置情報と、
    を含み、
    前記情報処理方法は、
    前記第１位置情報の取得時刻と前記第２位置情報の取得時刻との間の時間間隔が所定の時間間隔よりも大きい場合に、前記第１位置と前記第２位置とを結ぶ第１線分を前記移動軌跡から除外するステップと、
    前記第１線分が除外された移動軌跡を前記マップ上に表示するステップと、
    をさらに含む、
    情報処理方法。
16. ユーザ端末によって実行される情報処理方法であって、
    前記ユーザ端末は、通信ネットワークを介してカメラに通信可能に接続され、
    前記情報処理方法は、
    前記カメラによって撮影された映像を受信するステップと、
    前記カメラの複数の位置を示す位置情報を受信するステップと、
    前記位置情報に基づいて、前記カメラの複数の位置を結ぶ線分により構成された移動軌跡を生成するステップと、
    マップを取得するステップと、
    前記移動軌跡が前記マップ上に表示された状態で、前記マップと前記映像を表示するステップと、
    を含み、
    前記マップと前記映像を表示するステップは、
    ユーザの指示に応じて、前記移動軌跡上の所定の位置を選択するステップと、
    前記カメラを示すオブジェクトを前記所定の位置に表示するステップと、
    前記オブジェクトの位置で撮影された映像から前記映像の表示を開始するステップと、
    を含み、
    前記位置情報は、
    第１位置を示す第１位置情報と、
    前記第１位置とは異なる第２位置を示すと共に、前記第１位置情報の次に取得される第２位置情報と、
    を含み、
    前記情報処理方法は、
    前記第１位置情報の取得時刻と前記第２位置情報の取得時刻との間の時間間隔が所定の時間間隔よりも大きい場合に、前記第１位置と前記第２位置とを結ぶ第１線分を前記移動軌跡から除外するステップと、
    前記第１線分が除外された移動軌跡を前記マップ上に表示するステップと、
    をさらに含む、
    情報処理方法。
17. カメラで撮影された映像をユーザ端末に表示する情報処理システムによって実行される情報処理方法であって、
    前記カメラにより撮影された映像を取得するステップと、
    前記カメラの複数の位置を示す位置情報を取得するステップと、
    前記カメラが移動しているかどうかを示す移動データを前記カメラから受信するステップと、
    前記カメラから受信した移動データに基づいて、前記カメラが移動している第１期間と、前記カメラが移動していない第２期間とを特定するステップと、
    前記カメラが移動している前記第１期間における前記位置情報のみに基づいて、前記カメラの移動軌跡を生成するステップと、
    マップを取得するステップと、
    前記移動軌跡が前記マップ上に表示された状態で、前記マップと前記映像を前記ユーザ端末に表示するステップと、
    ユーザの指示に応じて、前記移動軌跡上の所定の位置を選択するステップと、
    前記カメラを示すオブジェクトを前記所定の位置に表示するステップと、
    前記オブジェクトの位置で撮影された映像を表示するステップと、
    を含む、
    情報処理方法。
18. 請求項１５又は１６に記載の情報処理方法を前記ユーザ端末に実行させるプログラム。
19. 請求項１７に記載の情報処理方法を前記情報処理システムに実行させるプログラム。

Images