JP2021190925A - 処理装置、撮像装置、及び処理方法 - Google Patents

Abstract

【課題】複数の撮像部で取得された全ての撮影画像に対するデータの改竄や偽造を抑制することができる処理装置、撮像装置、及び処理方法を提供すること。【解決手段】処理装置は、第１の撮像部及び第２の撮像部を備える撮像装置からの画像データを処理する処理装置であって、第１の撮像部によって取得される第１の画像データに関する情報を取得する取得部と、第１の画像データに関する情報が付随するように第２の撮像部によって取得される第２の画像データを加工する加工部とを有する。【選択図】図１

Description

本発明は、処理装置、撮像装置、及び処理方法に関する。

近年、複数の撮像部で装着者の周囲を撮影可能な多眼型ウェアラブルカメラが提案されている。このような撮像装置を、例えば工事現場の施工状況の撮影や、事件現場の撮影に用いた場合、撮影後、一定の時間が経過してから記録画像に改竄がなく、信憑性の高い画像であることを示す必要がある。特許文献１には、撮影画像の改竄や偽造を防止するために、撮影画像に対し、時間や場所等の付随情報を画像情報とは不可分に重畳するカメラが開示されている。

特開２０００−１９６９８４号公報

特許文献１のカメラでは、複数の撮像部のうち個々の撮像部で取得された撮影画像の偽造を防止可能であるが、複数の撮像部で取得された全ての撮影画像に対する、同時出力する際に各々の表示タイミングを変更する等のデータの改竄や偽造を防ぐことができない。

本発明は、複数の撮像部で取得された全ての撮影画像に対するデータの改竄や偽造を抑制することができる処理装置、撮像装置、及び処理方法を提供することを目的とする。

本発明の一側面としての処理装置は、処理装置は、第１の撮像部及び第２の撮像部を備える撮像装置からの画像データを処理する処理装置であって、第１の撮像部によって取得される第１の画像データに関する情報を取得する取得部と、第１の画像データに関する情報が付随するように第２の撮像部によって取得される第２の画像データを加工する加工部とを有することを特徴とする。

また、本発明の他の側面としての撮像装置は、第１の撮像部と、第１の撮像部と異なる撮影方向を向くように配置された第２の撮像部と、第１の撮像部によって取得される第１の画像データに関する情報を取得する取得部と、第１の画像データに関する情報が付随するように第２の撮像部によって取得される第２の画像データを加工する加工部とを有することを特徴とする。

また、本発明の他の側面としての処理方法は、第１の撮像部及び第２の撮像部を備える撮像装置からの画像データを処理するための処理方法であって、第１の撮像部によって取得される第１の画像データに関する情報を取得するステップと、第１の画像データに関する情報が付随するように第２の撮像部によって取得される第２の画像データを加工するステップとを有することを特徴とする。

本発明によれば、複数の撮像部で取得された全ての撮影画像に対するデータの改竄や偽造を抑制することができる処理装置、撮像装置、及び処理方法を提供することができる。

本発明の実施形態に係る撮像装置の説明図である。 撮像装置のブロック図である。 画像データの取得から加工画像の記録までの処理を示すフローチャートである。 画像データの一例を示す図である。 加工画像の一例を示す図である。 加工画像をクライアント装置に送信するまでの処理を示すフローチャートである。

以下、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。各図において、同一の部材については同一の参照番号を付し、重複する説明は省略する。

図１は、本発明の実施形態に係る撮像装置１００の説明図である。図１（Ａ）は、撮像装置１００の外観図である。図１（Ｂ）及び図１（Ｃ）はそれぞれ、撮像装置１００を装着した装着者１１０を背面側及び前面側から見た図である。

撮像装置１００は、複数の撮像部１０１ａ〜１０１ｄ（以下、まとめて「撮像部１０１」とも呼ぶ）を有する。複数の撮像部１０１ａ〜１０１ｄは、装着者１１０の周囲を撮影可能となるように、互いに別の撮影方向を向くように配置されている。本実施形態では、４つの撮像部が９０度ごとに異なる撮影方向を向くように配置されており、３６０°撮影可能であるが、本発明はこれに限定されない。撮像部の個数は２つ以上であればよく、撮影方向は任意の方向でよいものとする。

連結部１０２ａは、撮像部１０１ａ，１０１ｂを接続する。連結部１０２ｂは、撮像部１０１ｂ，１０１ｃを接続する。連結部１０２ｃは、撮像部１０１ｃ，１０１ｄを接続する。装着者１１０が撮像装置１００を装着する際、連結部１０２ａ，１０２ｃは装着者１１０の肩で安定して固定される。以下の説明では、連結部１０２ａ〜１０２ｃをまとめて「連結部１０２」とも呼ぶ。

ケーブル１０４は、連結部１０２ｂに設けられ、電気的信号を制御部１０３に伝搬する。撮像部１０１と制御部１０３は、連結部１０２及びケーブル１０４を介して各種信号を送受信可能に構成され、例えば撮像部１０１で撮影された映像信号や、撮像部１０１に対する撮像パラメータが適時通信される。

制御部１０３は、不図示の固定部材によって、装着者１１０の腰周辺等に安定して固定される。

図２は、撮像装置１００のブロック図である。撮像部１０１ａ〜１０１ｄはそれぞれ、撮像光学系２０１ａ〜２０１ｄ、撮像素子２０２ａ〜２０２ｄ、及び画像処理部２０３ａ〜２０３ｄを有する。以下の説明では、撮像光学系２０１ａ〜２０１ｄをまとめて「撮像光学系２０１」とも呼ぶ。また、撮像素子２０２ａ〜２０２ｄをまとめて「撮像素子２０２」とも呼ぶ。また、画像処理部２０３ａ〜２０３ｄをまとめて「画像処理部２０３」とも呼ぶ）
撮像光学系２０１は、不図示の複数のレンズや保持部材から構成されるが、それに限定されるものではない。撮像光学系２０１は、レンズ駆動用のモータを有し、ズームやフォーカス位置を調整可能に構成されていてもよいし、可視光や赤外光等の複数の波長成分を含む光を集光可能に構成されていてもよい。

撮像光学系２０１を透過した光は、撮像素子２０２にて結像され、電気的な可視光信号に変換される。撮像素子２０２から出力された可視光信号は、画像処理部２０３に伝達される。本実施形態では、撮像素子２０２は可視光領域の光に対して感度を有するが、これに限定されるものではなく、例えば赤外光等の非可視光領域に感度を有してもよい。

制御部（処理装置）１０３は、システムコントローラ（制御部）２０４、画像分析部（取得部）２０５、画像加工部（加工部）２０６、記憶部２０７、および通信部２０８を有する。

画像処理部２０３は、可視光信号に対して現像処理、カラーバランス処理、ガンマ処理、及びノイズ低減処理等の各種画像処理を行い、画像データを生成する。画像処理部２０３から出力された画像データは、システムコントローラ２０４を介して、画像分析部２０５に伝達される。

画像分析部２０５は、取得した画像データに対する各種分析を行い、画像データに関する情報（画像評価値）を取得する。本実施形態では、画像分析部２０５は、画像データの所定領域における色平均値を算出する。しかしながら、本発明はこれに限定されない。画像分析部２０５は、例えば平均輝度値を算出してもよいし、他の色や輝度値に関する情報を算出してもよい。また、画像分析部２０５は、平均値ではなく、ヒストグラム等を生成してもよい。

画像加工部２０６では、システムコントローラ２０４の指示に基づき画像データを加工する。本実施形態では、画像加工部２０６は、画像データの所定領域に対して特定の色や文字を重畳した、又は合成処理を施した加工画像を生成する。

加工画像は、記憶部２０７にて一時的に保存され、通信部２０８を介してクライアント装置３０１に送信される。本実施形態では、記憶部２０７は、ＳＤカードであるが、それに限定されるものではなく、ＵＳＢフラッシュメモリ等の記録媒体や、可搬型でない記録媒体であってもよい。

通信部２０８は、加工画像を通信プロトコルに準拠して変換した上で、ネットワーク３００を介して、クライアント装置３０１に送信する。より詳細には、通信部２０８は、Ｈ．２６４やＨ．２６５等の圧縮符号化処理を行う。また、通信部２０８は、クライアント装置３０１から、撮像装置１００に対する各種パラメータの設定コマンド等を受信し、システムコントローラ２０４に出力すると同時に、クライアント装置３０１に対し、レスポンスの送信も行う。

ネットワーク３００は、ネットワーク上のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）であり、Ｅｔｈｅｒｎｅｔ（登録商標）等の通信規格を満足するルータ、スイッチ、及びケーブル等から構成される。撮像装置１００は、ネットワーク３００を介して、クライアント装置３０１、他の撮像装置、及びサーバー等の外部装置と接続可能である。なお、ネットワーク３００は、撮像装置１００とクライアント装置３０１との間の通信を行うことができるものであれば、通信規格、規模、及び構成を問わない。例えば、ＬＡＮは、有線ＬＡＮ、無線ＬＡＮ、及びＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）等により構成されていてもよい。また、ネットワーク上のクラウドを介する構成としてもよい。

クライアント装置３０１は、ＰＣ（パーソナルコンピュータ）や携帯端末等であり、ネットワーク３００を経由して撮像装置１００と相互に通信可能である。クライアント装置３０１は、不図示の制御ツールを用いて、撮像装置１００からの映像を受信、表示、及び録画することができる。更に、クライアント装置３０１は、撮像装置１００を制御するための各種設定コマンドを送信可能であり、更には通信部２０８によって出力されたレスポンスを受信することによって、撮像装置１００の情報を取得することも可能である。

システムコントローラ２０４は、ＣＰＵや不図示のメモリ等で構成され、撮像装置１００の各構成要素を統括的に制御すると共に、各種パラメータの設定等を行う。メモリは、システムコントローラ２０４が実行するプログラム格納領域や、プログラム実行中のワーク領域として用いられ、更にはシステムコントローラ２０４が撮像装置１００の各構成要素を制御するための各種パラメータの初期値を保持する。

図３は、システムコントローラ２０４が実施する、画像データの取得から加工画像の記録までの処理を示すフローチャートである。図４は、撮像部１０１から出力される画像データ４００の一例を示している。図５は、記憶部２０７に保存される加工画像４０４の一例を示している。

ステップＳ１０１では、システムコントローラ２０４は、撮像部１０１から画像データ４００を取得する。画像データ４００は、撮像部１０１ａ〜１０１ｄの出力画像４０１ａ〜４０１ｄから成る。出力画像４０１ａ〜４０１ｄにはそれぞれ、画像分析領域４０２ａ〜４０２ｄ、及び画像加工領域４０３ａ〜４０３ｄが予め定められている。画像分析領域、及び画像加工領域は、任意の位置、形状、及び大きさでよく、図４に示される範囲に限定するものではない。

ステップＳ１０２では、システムコントローラ２０４は、画像分析部２０５から画像分析領域４０２ａ〜４０２ｄにおける画像評価値を取得する。本実施形態では、画像分析部２０５は、画像分析領域４０２ａ〜４０２ｄにおける画像評価値として色平均値を算出する。なお、画像分析部２０５は、色平均値ではなく、例えば平均輝度値や、他の色や輝度値に関する情報等を算出してもよい。また、画像分析部２０５は、平均値ではなく、ヒストグラムを生成してもよい。

ステップＳ１０３では、システムコントローラ２０４は、画像加工部２０６にステップＳ１０２で取得した画像評価値を用いて画像加工領域４０３ａ〜４０３ｄに加工を施させる。本実施形態では、画像加工部２０６は、画像分析領域４０２ａ〜４０２ｄにおける色平均値を用いて、対応する出力画像ではない出力画像内の画像加工領域４０３ａ〜４０３ｄに対して所定の加工を施す。例えば、画像加工部２０６は、出力画像４０１ａ内の画像分析領域４０２ａにおける色平均値を用いて、出力画像４０１ｂ内の画像加工領域４０３ｂに対して加工を施す。同様に、画像加工部２０６は、画像分析領域４０２ｂ，４０２ｃ，４０３ｄにおける色平均値を用いて画像加工領域４０３ｃ，４０３ｄ，４０３ａに対して加工を施す。なお、画像分析領域と画像加工領域の組合せは上記の組合せに限定されるものではなく、任意の組合せでよいものとする。

本実施形態では、画像加工部２０６は、色平均値を数値データとして対象とする画像加工領域内に記載する。例えば、（赤，緑，青）＝（６４，１２８，１９２）のように、画像データ４００内に上書きするように表示される。なお、画像加工領域の加工方法はこれに限定するものではない。例えば、色平均値と同じ色になるように画像加工領域の色を変色してもよいし、ハッシュ関数を用いたハッシュ値を記載してもよい。また、画像評価値は、画像データ４００に対する上書きではなく、重畳や合成等の任意の方法で表現すればよい。

ステップＳ１０４では、システムコントローラ２０４は、生成された加工画像４０４を記憶部２０７に保存する。

図６は、システムコントローラ２０４が実施する、加工画像４０４をクライアント装置３０１に送信するまでの処理を示すフローチャートである。

ステップＳ２０１では、システムコントローラ２０４は、記憶部２０７に保存された加工画像４０４を読み出す。

ステップＳ２０２では、システムコントローラ２０４は、画像分析部２０５から画像分析領域４０２ａ〜４０２ｄにおける画像評価値を再取得する。

ステップＳ２０３では、システムコントローラ２０４は、ステップＳ２０２で再取得した画像評価値と、加工画像４０４に表記された画像評価値とが一致するかどうかを判断する。一致する場合、ステップＳ２０４に進み、一致しない場合、ステップＳ２０５に進む。

ステップＳ２０４では、システムコントローラ２０４は、加工画像４０４をクライアント装置３０１に送信する。

ステップＳ２０５では、システムコントローラ２０４は、クライアント装置３０１に対して、エラー通知を送信し、加工画像４０４の送信を中断する。エラー通知には、一致しない旨の情報や、データが改竄された可能性がある旨の情報等が含まれていてもよい。

このように、第１の出力画像における画像評価値を、第２の出力画像内に付随させることで、互いの画像データの信憑性を撮影後、一定の時間が経過してから示すことができる。例えば、再取得した画像評価値と、加工画像に表記された評価値とが一致しない場合、出力画像のいずれかが編集された可能性が高く、データの改竄を検出することが可能になる。

なお、本実施形態では、加工画像を送信する際に、システムコントローラ２０４によりデータの改竄を検出しているが、本発明はこれに限定されない。例えば、クライアント装置３０１における不図示の制御部が画像分析及びデータ照合を実施してもよい。

また、本実施形態では、画像データの信憑性に関する情報を外部装置に送信するが、撮像装置１００の不図示の表示部に表示するようにしてもよい。
［その他の実施例］
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。

１００ 撮像装置
１０１ 撮像部
１０３ 制御部（処理装置）
２０５ 画像分析部（取得部）
２０６ 画像加工部（加工部）

Claims (7)

1. 第１の撮像部及び第２の撮像部を備える撮像装置からの画像データを処理する処理装置であって、
   前記第１の撮像部によって取得される第１の画像データに関する情報を取得する取得部と、
   前記第１の画像データに関する情報が付随するように前記第２の撮像部によって取得される第２の画像データを加工する加工部とを有することを特徴とする処理装置。
2. 前記加工部により加工された前記第２の画像データを記憶する記憶部と、
   前記記憶部から前記第２の画像データを読み出して外部装置に送信可能な制御部とを更に有し、
   前記制御部は、
   前記記憶部から前記第２の画像データを読み出す場合、前記取得部から前記第１の画像データに関する情報を取得し、
   前記取得部から取得した前記第１の画像データに関する情報と、前記第２の画像データに付随する前記第１の画像データに関する情報とが一致する場合、前記第２の画像データを前記外部装置に送信し、
   前記取得部から取得した前記第１の画像データに関する情報と、前記第２の画像データに付随する前記第１の画像データに関する情報とが一致しない場合、エラー通知を前記外部装置に送信することを特徴とする請求項１に記載の処理装置。
3. 前記第１の画像データに関する情報は、前記第１の画像データの所定の領域における色に関する情報であることを特徴とする請求項１又は２に記載の処理装置。
4. 前記第１の画像データに関する情報は、前記第１の画像データの所定の領域における輝度値に関する情報であることを特徴とする請求項１又は２に記載の処理装置。
5. 前記第１の画像データは、第１の画像分析領域、および第１の画像加工領域を含み、
   前記第２の画像データは、第２の画像分析領域、および第２の画像加工領域を含み、
   前記取得部は、前記第１の画像分析領域に関する情報を取得し、
   前記加工部は、前記第１の画像分析領域に関する情報を用いて前記第２の画像加工領域を加工することを特徴とする請求項１乃至４の何れか一項に記載の処理装置。
6. 第１の撮像部と、
   前記第１の撮像部と異なる撮影方向を向くように配置された第２の撮像部と、
   前記第１の撮像部によって取得される第１の画像データに関する情報を取得する取得部と、
   前記第１の画像データに関する情報が付随するように前記第２の撮像部によって取得される第２の画像データを加工する加工部とを有することを特徴とする撮像装置。
7. 第１の撮像部及び第２の撮像部を備える撮像装置からの画像データを処理するための処理方法であって、
   前記第１の撮像部によって取得される第１の画像データに関する情報を取得するステップと、
   前記第１の画像データに関する情報が付随するように前記第２の撮像部によって取得される第２の画像データを加工するステップとを有することを特徴とする処理方法。
   

Images