JP6278806B2 - 撮像システム及び撮像方法 - Google Patents

Description

本発明は、撮像システム及び撮像方法に関する。

従来、被写体を撮像装置で撮像した際に特定の条件で被写体にぼかしやモザイク処理を行い、被写体のプライバシの保護を図る技術がある。例えば特許文献１に記載の画像処理装置は、撮像画像から顔の検出を行い、顔又はその背景に対してモザイク・ぼかし等のプライバシ保護処理を行うようになっている。また、例えば特許文献２に記載の撮像装置は、撮像画像中の顔面積の大きさに基づいて被写体の優先順位を設定し、主要な被写体と判断された被写体の顔部分にはモザイク処理を行わず、主要でない被写体と判断された被写体の顔部分にモザイク処理を行うようになっている。

特開２００９−１９４６８７号公報 特開２００９−２８４２３５号公報

ところで、近年では、近年、眼鏡型や腕時計型といったユーザの体の一部に装着可能な装着デバイスの開発が盛んになってきている。かかる装着デバイスにも撮像装置が搭載されることが考えられるが、装着デバイスによる撮像のユーザ利便性を鑑みると、被写体である第三者の認知なしに撮像が行われてしまう場面が多発するおそれがある。また、装着デバイスに搭載されるアプリケーションによっては、装着デバイスのユーザの操作なしに被写体である第三者が撮像されてしまうことも考えられる。

本発明は、上記課題の解決のためになされたものであり、装着デバイスのユーザの意図に依らずに被写体である第三者のプライバシを保護できる撮像システム及び撮像方法を提供することを目的とする。

上記課題の解決のため、本発明に係る撮像システムは、撮像を行う撮像手段を有し、ユーザの身体の一部に装着可能な装着デバイスと、撮像手段の被写体となる第三者が装着可能なマーカと、を備えて構成される撮像システムであって、マーカは、撮像手段による撮像画像中の所定位置にプライバシ保護用画像の表示を指示する指示情報を含むパターン部を有し、装着デバイスは、撮像手段によって取得された撮像画像中にマーカが存在するか否かを判断するマーカ判断手段と、マーカ判断手段によって撮像画像中にマーカが存在すると判断された場合に、パターン部が示す指示情報に基づいて撮像画像中の所定位置にプライバシ保護用画像を重畳する撮像画像加工手段と、を備える。

この撮像システムでは、第三者がマーカを装着している場合に、装着デバイスで撮像された撮像画像中の所定位置にプライバシ保護用画像が重畳されるようになっている。つまり、この撮像システムでは、撮像画像中のプライバシ保護処理は、被写体である第三者の意思に基づいて装着デバイス側で自動的に行われるので、装着デバイスのユーザの意図に依らずに被写体である第三者のプライバシを保護できる。

また、マーカの形状寸法は統一されており、撮像画像加工手段は、撮像画像中のマーカの大きさに基づいて装着デバイスとマーカとの距離を検出し、当該距離に基づいてプライバシ保護用画像を重畳する所定位置を決定してもよい。この場合、撮像画像中の所定位置にプライバシ保護用画像を好適に重畳できる。

また、マーカは、当該マーカを特定するための特定情報を装着デバイスに送信する特定情報送信手段を有し、撮像画像加工手段は、装着デバイスと特定情報によって特定されるマーカとの距離を検出してプライバシ保護用画像を重畳する所定位置を決定してもよい。この場合、撮像画像中に複数のマーカが検出される場合であっても、撮像画像中の所定位置にプライバシ保護用画像を好適に重畳できる。

また、マーカにおけるパターン部には、当該マーカを特定するための特定情報が指示情報に関連付けられており、撮像画像加工手段は、装着デバイスと特定情報によって特定されるマーカとの距離を検出してプライバシ保護用画像を重畳する所定位置を決定してもよい。この場合、撮像画像中に複数のマーカが検出される場合であっても、撮像画像中の所定位置にプライバシ保護用画像を好適に重畳できる。

また、装着デバイスは、特定情報によって特定されるマーカに対し、マーカ判断手段によって撮像画像中にマーカが存在すると判断された場合に通知情報を送信する通知情報送信手段を更に備えていてもよい。こうすると、装着デバイスによってマーカが検出されたことをマーカ側で把握できる。

また、マーカは、通知情報送信手段から通知情報を受信したことを報知する報知手段を更に備えていてもよい。こうすると、装着デバイスによってマーカが検出されたことを被写体である第三者側で把握できる。

また、本発明に係る撮像方法は、撮像を行う撮像手段を有し、ユーザの身体の一部に装着可能な装着デバイスと、撮像手段の被写体となる第三者が装着可能なマーカと、を用いた撮像方法であって、撮像手段による撮像画像中の所定位置にプライバシ保護用画像の表示を指示する指示情報を含むパターン部をマーカに設け、装着デバイスにおいて、マーカ判断手段が、撮像手段によって取得された撮像画像中にマーカが存在するか否かを判断し、撮像画像加工手段が、マーカ判断手段によって撮像画像中にマーカが存在すると判断された場合に、パターン部が示す指示情報に基づいて撮像画像中の所定位置にプライバシ保護用画像を重畳する。

この撮像方法では、第三者がマーカを装着している場合に、装着デバイスで撮像された撮像画像中の所定位置にプライバシ保護用画像が重畳されるようになっている。つまり、この撮像方法では、撮像画像中のプライバシ保護処理は、被写体である第三者の意思に基づいて装着デバイス側で自動的に行われるので、装着デバイスのユーザの意図に依らずに被写体である第三者のプライバシを保護できる。

本発明によれば、装着デバイスのユーザの意図に依らずに被写体である第三者のプライバシを保護できる。

本発明の一実施形態に係る撮像システムの概要を示す図である。 マーカの構成の一例を示す図である。 図１に示した撮像システムの機能的な構成要素を示す図である。 プライバシ保護用画像が重畳された撮像画像の一例を示す図である。 図１に示した撮像システムの動作を示すシーケンスである。

以下、図面を参照しながら、本発明に係る撮像システム及び撮像方法の好適な実施形態について詳細に説明する。

図１は、本発明の一実施形態に係る撮像システムの概要を示す図である。同図に示すように撮像システム１は、撮像部（撮像手段）２０１を備えると共に、例えばユーザＹの頭部に装着可能な眼鏡型の装着デバイス２０と、装着デバイス２０の被写体となる第三者Ｘが装着するマーカ１０とを備えて構成されている。この撮像システム１は、装着デバイス２０によって第三者Ｘの撮像が行われた場合であっても、撮像画像においてマーカ１０を装着した第三者Ｘのプライバシ処理が自動的になされる機能を有している。

マーカ１０は、第三者Ｘがプライバシ保護の意思を表示するために装着するカード型の部材である。マーカ１０は、例えばストラップ付きのケースなどに入れられ、第三者Ｘが首から下げて携帯できるようになっている。このマーカ１０は、例えば図２に示すように、矩形の本体部１１を備えている。本体部１１の幅・長さといった形状寸法は、規格によって統一されており、いずれの第三者Ｘが装着するマーカ１０もすべて同一の形状寸法となっている。

本体部１１の一面側には、例えばパターン部１２と、報知部（報知手段）１３とが設けられている。パターン部１２は、例えば二次元コードなどにより、撮像部２０１による撮像画像中の所定位置にプライバシ保護用画像の表示を指示する指示情報が印字されている部分である。指示情報には、例えば撮像画像中のマーカ１０の位置に対してどの位置にプライバシ保護用画像を表示させるかといった情報、表示させるプライバシ保護用画像の形状・寸法・模様に関する情報などが含まれている。また、報知部１３は、例えばＬＥＤなどの光源装置によって構成されている。報知部１３は、装着デバイス２０によってマーカ１０を装着している第三者Ｘが撮像されたことを第三者Ｘに報知するようになっている（詳細は後述する）。

図３は、撮像システム１の機能的な構成要素を示すブロック図である。同図に示すように、マーカ１０は、機能的な構成要素として、特定情報送信部（特定情報送信手段）１０１と、通知情報受信部１０２とを有している。

特定情報送信部１０１は、マーカ１０を特定するための特定情報を装着デバイス２０に送信する部分である。特定情報は、例えばマーカ１０のＩＤ情報であり、複数の文字列などによって構成されている。特定情報送信部１０１は、所定の通信範囲をもってマーカ１０の周囲に特定情報を随時送信する。

通知情報受信部１０２は、装着デバイス２０から通知情報を受信する部分である。通知情報には、マーカ１０を装着している第三者Ｘが装着デバイス２０によって撮像されたことを示す情報が含まれている。通知情報受信部１０２は、装着デバイス２０から通知情報を受信した場合に、報知部１３を所定のパターンで駆動する。

装着デバイス２０は、撮像部（撮像手段）２０１と、マーカ判断部（マーカ判断手段）２０２と、特定情報受信部２０３と、撮像画像加工部（撮像画像加工手段）２０４と、画像格納部２０５と、通知情報送信部（通知情報送信手段）２０６とを有している。

撮像部２０１は、撮像を行う部分である。撮像部２０１は、例えばユーザＹの所定の操作或いは自動で装着デバイス２０の前方を撮像し、撮像画像を取得する。撮像部２０１は、取得した撮像画像をマーカ判断部２０２に出力する。

マーカ判断部２０２は、撮像部２０１によって取得された撮像画像中にマーカ１０が存在するか否かを判断する部分である。マーカ判断部２０２は、例えばマーカ１０の形状又はマーカ１０のパターン部１２の検出によって、撮像画像中にマーカ１０が存在するか否かを判断する。マーカ判断部２０２は、判断結果を示す判断結果情報を撮像画像と共に撮像画像加工部２０４に出力する。また、マーカ判断部２０２は、撮像画像中にマーカ１０が存在すると判断した場合に、判断結果情報を通知情報送信部２０６に出力する。

特定情報受信部２０３は、マーカ１０が送信している特定情報を受信する部分である。特定情報受信部２０３は、受信した特定情報を撮像画像加工部２０４に出力する。また、特定情報受信部２０３は、受信した特定情報を通知情報送信部２０６に出力する。

撮像画像加工部２０４は、撮像画像中の所定位置にプライバシ保護用画像を重畳する部分である。撮像画像加工部２０４は、マーカ判断部２０２から判断結果情報と撮像画像とを受け取ると、判断結果情報を参照し、撮像画像中にマーカ１０が存在しない旨の判断結果情報を受け取った場合には、撮像画像に加工を行わずに画像格納部２０５に格納する。

一方、撮像画像加工部２０４は、撮像画像中にマーカ１０が存在する旨の判断結果情報を受け取った場合には、特定情報受信部２０３から受け取った特定情報に基づいて撮像画像中のマーカ１０を特定する。そして、撮像画像加工部２０４は、撮像画像中のマーカ１０の大きさに基づいて装着デバイス２０とマーカ１０との距離や撮像部２０１の光軸に対する角度などを検出し、当該距離に基づいてプライバシ保護用画像を重畳する。このとき、撮像画像加工部２０４は、マーカ１０のパターン部１２を解析し、パターン部１２に含まれる指示情報に基づいて、撮像画像中のマーカ１０に対するプライバシ保護用画像の表示位置や、表示させるプライバシ保護用画像の形状・寸法・模様などを決定する。

図４は、プライバシ保護用画像が重畳された撮像画像の一例を示す図である。同図に示す例では、マーカ１０を装着した第三者Ｘの顔部周辺の画像が装着デバイス２０によって撮像されており、マーカ１０の上方で且つ第三者Ｘの両目を含む横長の略長方形状領域に、プライバシ保護用画像Ｐが重畳されている。撮像画像加工部２０４は、加工後の撮像画像を画像格納部２０５に格納する。

通知情報送信部２０６は、撮像画像中にマーカ１０が存在すると判断された場合に通知情報を送信する部分である。通知情報送信部２０６は、特定情報受信部２０３からマーカ１０の特定情報を受け取ると共に、マーカ判断部２０２から撮像画像中にマーカ１０が存在する旨の判断結果情報を受け取る。そして、通知情報送信部２０６は、マーカ判断部２０２から判断結果情報を受け取った場合に、特定情報によって特定されるマーカ１０に向けて通知情報を送信する。

続いて、上述した撮像システム１の動作について説明する。図５は、撮像システム１の動作を示すシーケンスである。

同図に示すように、第三者Ｘが装着するマーカ１０は、当該マーカ１０を特定するための特定情報を周囲に送信している。特定情報の通信距離内に装着デバイス２０が位置すると、当該装着デバイス２０に向けて特定情報の送信がなされる（ステップＳ０１）。次に、装着デバイス２０においてマーカ１０を装着した第三者Ｘの撮像がなされると（ステップＳ０２）、取得した撮像画像中にマーカ１０が存在するか否かの判断がなされる（ステップＳ０３）。

撮像画像中にマーカ１０が存在すると判断された場合、装着デバイス２０からマーカ１０に対して通知情報が送信され（ステップＳ０４）、通知情報を受信したマーカ１０では、報知部１３におけるＬＥＤの点灯などによって、第三者Ｘに対する通知情報の報知がなされる（ステップＳ０５）。

また、装着デバイス２０では、撮像画像中におけるマーカ１０のパターン部１２の解析がなされ（ステップＳ０６）、撮像画像中のマーカ１０に対するプライバシ保護用画像の表示位置や、表示させるプライバシ保護用画像の形状・寸法・模様などが決定される。そして、装着デバイス２０では、プライバシ保護用画像が撮像画像に重畳され（ステップＳ０７）、撮像画像の格納がなされる（ステップＳ０８）。

以上説明したように、撮像システム１では、第三者Ｘがマーカ１０を装着している場合に、装着デバイス２０で撮像された撮像画像中の所定位置にプライバシ保護用画像が重畳されるようになっている。つまり、この撮像システム１では、撮像画像中のプライバシ保護処理は、被写体である第三者Ｘの意思に基づいて装着デバイス２０側で自動的に行われるので、装着デバイス２０のユーザＹの意図に依らずに被写体である第三者Ｘのプライバシを保護できる。

また、撮像システム１では、マーカ１０の形状寸法が統一されており、撮像画像加工部２０４は、撮像画像中のマーカ１０の大きさに基づいて装着デバイス２０とマーカ１０との距離を検出し、当該距離に基づいてプライバシ保護用画像を重畳する所定位置を決定する。これにより、プライバシ保護用画像を重畳させる処理が簡便なものとなり、撮像画像中の所定位置にプライバシ保護用画像を好適に重畳できる。また、第三者Ｘは、パターン部１２の異なるマーカ１０を付け替えることで、撮像画像に表示するプライバシ保護用画像の表示位置等を簡単に調整することができる。なお、撮像画像加工部２０４におけるプライバシ保護用画像の重畳には、公知の顔認識技術等を組み合わせてもよい。

また、撮像システム１では、マーカ１０が特定情報を装着デバイス２０に送信している。このため、撮像画像中に複数のマーカ１０が検出される場合であっても、撮像画像中の所定位置にプライバシ保護用画像を好適に重畳できる。

さらに、撮像システムでは、装着デバイス２０において撮像画像中にマーカ１０が存在すると判断された場合にマーカ１０に通知情報を送信し、通知情報を受信したマーカ１０は、報知部１３によって通知情報を受信したことを報知するようになっている。これにより、装着デバイス２０によってマーカ１０が検出されたことを被写体である第三者Ｘ側で把握できる。なお、報知部１３による通知情報の報知は、ＬＥＤの点灯に限らず、振動や音などによるものであってもよい。

本発明は、上記実施形態に限られるものではない。例えば上記実施形態では、眼鏡型の装着デバイス２０を例示したが、腕時計型やネックレス型など、ユーザＹの身体の他の部位に装着可能な装着デバイスであってもよい。また、上記実施形態では、第三者Ｘがストラップ付きのケースなどによってマーカ１０を携帯している例を示したが、マーカ１０の設置箇所は任意であってよい。

また、上記実施形態では、特定情報を送信する特定情報送信部１０１をマーカ１０に設けているが、特定情報送信部１０１を設ける代わりに、パターン部１２が示す指示情報に特定情報を関連付けてもよい。この場合、装着デバイス２０がパターン部１２を解析する際に、マーカ１０の特定を行うことが可能となる。

また、上記実施形態では、プライバシ保護用画像を重畳した撮像画像を画像格納部２０５に格納したが、プライバシ保護用画像を重畳した撮像画像とプライバシ保護用画像を重畳する前の元の撮像画像とを関連付けて画像格納部２０５に格納してもよい。例えば装着デバイス２０をドライブレコーダなどとして用いる場合、元の撮像画像の活用が可能となる。なお、このような場合、元の撮像画像についてはユーザＹの通常の操作では閲覧できないようにすることが好適である。

１…撮像システム、１０…マーカ、１２…パターン部、１３…報知部（報知手段）、２０…装着デバイス、１０１…特定情報送信部（特定情報送信手段）、２０１…撮像部（撮像手段）、２０２…マーカ判断部（マーカ判断手段）、２０４…撮像画像加工部（撮像画像加工手段）、２０６…通知情報送信部（通知情報送信手段）、Ｐ…プライバシ保護用画像、Ｘ…第三者、Ｙ…ユーザ。

Claims (6)

1. 撮像を行う撮像手段を有し、ユーザの身体の一部に装着可能な装着デバイスと、
   前記撮像手段の被写体となる第三者が装着可能なマーカと、を備えて構成される撮像システムであって、
   前記マーカは、前記撮像手段による撮像画像中の所定位置にプライバシ保護用画像の表示を指示する指示情報を含むパターン部を有し、
   前記装着デバイスは、
   前記撮像手段によって取得された撮像画像中に前記マーカが存在するか否かを判断するマーカ判断手段と、
   前記マーカ判断手段によって前記撮像画像中に前記マーカが存在すると判断された場合に、前記パターン部が示す指示情報に基づいて前記撮像画像中の所定位置にプライバシ保護用画像を重畳する撮像画像加工手段と、
   前記マーカ判断手段によって前記撮像画像中に前記マーカが存在すると判断された場合に、当該マーカに対して通知情報を送信する通知情報送信手段と、を備える撮像システム。
2. 前記マーカの形状寸法は統一されており、
   前記撮像画像加工手段は、前記撮像画像中の前記マーカの大きさに基づいて前記装着デバイスと前記マーカとの距離を検出し、当該距離に基づいて前記プライバシ保護用画像を重畳する所定位置を決定する請求項１記載の撮像システム。
3. 前記マーカは、当該マーカを特定するための特定情報を前記装着デバイスに送信する特定情報送信手段を有し、
   前記撮像画像加工手段は、前記装着デバイスと前記特定情報によって特定されるマーカとの距離を検出して前記プライバシ保護用画像を重畳する所定位置を決定する請求項２記載の撮像システム。
4. 前記マーカにおける前記パターン部には、当該マーカを特定するための特定情報が前記指示情報に関連付けられており、
   前記撮像画像加工手段は、前記装着デバイスと前記特定情報によって特定されるマーカとの距離を検出して前記プライバシ保護用画像を重畳する所定位置を決定する請求項２記載の撮像システム。
5. 前記マーカは、前記通知情報送信手段から通知情報を受信したことを報知する報知手段を更に備える請求項１〜４のいずれか一項記載の撮像システム。
6. 撮像を行う撮像手段を有し、ユーザの身体の一部に装着可能な装着デバイスと、
   前記撮像手段の被写体となる第三者が装着可能なマーカと、を用いた撮像方法であって、
   前記撮像手段による撮像画像中の所定位置にプライバシ保護用画像の表示を指示する指示情報を含むパターン部を前記マーカに設け、
   前記装着デバイスにおいて、
   マーカ判断手段が、前記撮像手段によって取得された撮像画像中に前記マーカが存在するか否かを判断し、
   撮像画像加工手段が、前記マーカ判断手段によって前記撮像画像中に前記マーカが存在すると判断された場合に、前記パターン部が示す指示情報に基づいて前記撮像画像中の所定位置にプライバシ保護用画像を重畳し、
   通知情報送信手段が、前記マーカ判断手段によって前記撮像画像中に前記マーカが存在すると判断された場合に、当該マーカに対して通知情報を送信する撮像方法。

Images