JP2013246743A5 - 情報処理システム、方法およびコンピュータ読み取り可能な記録媒体 - Google Patents

Description

なお、本実施形態に係る画像処理装置における画像処理は、表示画面全体に対応する表示領域に表示される画像、または、表示領域における一部の領域に表示される画像と、撮像画像とを、単に合成することに限られない。

上記のように、操作対象オブジェクトが配置される領域に撮像画像を合成させないことによって、本実施形態に係る画像処理装置は、操作対象オブジェクトの視認性が合成によって低下する可能性を低減させることができる。

本実施形態に係る画像処理装置は、例えば、撮像画像を平滑化することによって、あたかも画家が描いたような絵画調の効果（例えば、筆触効果等）が撮像画像に対して与える。より具体的には、本実施形態に係る画像処理装置は、例えば、画像におけるエッジのベクトル方向（または、当該ベクトルと、画像の垂直方向や水平方向などの基準方向との角度）を算出し、当該ベクトル方向に基づいて、エッジ保存平滑化フィルタの強弱を調整する。そして、本実施形態に係る画像処理装置は、調整されたエッジ保存平滑化フィルタを用いて撮像画像を平滑化することによって、絵画調の効果を撮像画像に対して与える。ここで、本実施形態に係るエッジ保存平滑化フィルタとしては、例えば、バイラテラルフィルタ（bilateral filter）などのようなエッジを保存することが可能な平滑化フィルタが挙げられる。なお、本実施形態に係る画像処理装置における、絵画調の効果を撮像画像に対して与えるための処理は、上記に限られない。本実施形態に係る画像処理装置は、絵画調の効果を撮像画像に対して与えることが可能な任意の技術を用いることが可能である。

図９は、本実施形態に係る画像処理装置における画像処理の一例を示す流れ図である。ここで、図９は、本実施形態に係る画像処理装置が、本実施形態に係る画像処理として、上記（３）の処理（近距離判定処理）および上記（４）の処理（通知処理）を行う場合の処理の一例を示している。また、図９では、例えば、ステップＳ１００〜Ｓ１０８の処理が、上記（３）の処理（近距離判定処理）に該当し、また、ステップＳ１１０の処理が、上記（４）の処理（通知処理）に該当する。

本実施形態に係る画像処理装置は、ステップＳ１０２において決定された動き方向に基づいて、動き面積を算出する（Ｓ１０４）。本実施形態に係る画像処理装置は、例えば、決定された動き方向に対応する、同一の動き方向を有する動きベクトルに対応する領域の面積を算出し、算出された面積を動き面積とする。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
表示画面全体に対応する表示領域に表示される画像、または、前記表示領域における一部の領域に表示される画像と、ユーザにジェスチャ動作をフィードバックするための撮像画像とを合成する画像処理部と、
合成された画像を、表示画面に表示させる表示制御部と、
を備える、画像処理装置。
（２）
前記表示領域に表示される画像と、前記表示領域における一部の領域に表示される画像とには、ジェスチャ認識の結果に応じて操作される操作対象オブジェクトが含まれ、
前記画像処理部は、前記操作対象オブジェクトが配置される領域には、前記撮像画像を合成させない、（１）に記載の画像処理装置。
（３）
前記画像処理部は、
前記撮像画像からジェスチャ認識が行われる認識対象オブジェクトを検出し、
検出された前記認識対象オブジェクトの位置に基づいて、ジェスチャ認識の結果に応じて操作される操作対象オブジェクトを、前記撮像画像が合成される前記表示領域に表示される画像、または、前記撮像画像が合成される前記表示領域における一部の領域に表示される画像に配置する、（１）、または（２）に記載の画像処理装置。
（４）
前記画像処理部は、
前記撮像画像からジェスチャ認識が行われる認識対象オブジェクトを検出し、
検出された前記認識対象オブジェクトの動きに基づいて、前記表示領域に表示される画像、または、前記表示領域における一部の領域に表示される画像に、ジェスチャ認識の結果に応じて操作される操作対象オブジェクトを新たに配置する、（１）〜（３）のいずれか１つに記載の画像処理装置。
（５）
前記画像処理部は、前記撮像画像の可視化の程度を変化させ、可視化の程度を変化させた撮像画像と、表示画面全体に対応する表示領域に表示される画像、または、前記表示領域における一部の領域に表示される画像とを合成する、（１）〜（４）のいずれか１つに記載の画像処理装置。
（６）
前記撮像画像に基づいて、前記撮像画像に含まれる動きがあるオブジェクトと、前記撮像画像を撮像した撮像装置との間の距離が、近距離であるかを判定する近距離判定部と、
前記距離に関する判定結果に基づいて、前記距離に関する判定結果を、ユーザに対して選択的に通知させる通知処理部と、
をさらに備える、（１）〜（５）のいずれか１つに記載の画像処理装置。
（７）
前記近距離判定部は、
前記撮像画像に基づき算出される前記オブジェクトの動きを示す動き情報に基づいて、前記撮像画像における特定の動き方向に対応する領域の面積を算出し、
算出された前記面積と所定の閾値とに基づいて、前記オブジェクトと前記撮像装置との間の距離が、近距離であるかを判定し、
前記通知処理部は、近距離であると判定された場合に、前記距離に関する判定結果をユーザに対して通知させる、（６）に記載の画像処理装置。
（８）
コンピュータを、
表示画面全体に対応する表示領域に表示される画像、または、前記表示領域における一部の領域に表示される画像と、ユーザにジェスチャ動作をフィードバックするための撮像画像とを合成する手段、
合成された画像を、表示画面に表示させる手段、
として機能させるためのプログラム。

Claims (20)

1. 撮像デバイスによって記録され、ジェスチャを認識する対象である対象オブジェクトに対応する画像データを取得し、
   前記対象オブジェクトによるジェスチャの認識のために対象オブジェクトと撮像デバイスとの距離が十分ではないかどうかを決定し、
   前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないと決定されたとき、通知を出力するように構成されている、電気回路を備える、情報処理システム。
2. 前記電気回路は、取得された画像データに基づいて、前記対象オブジェクトと撮像デバイスとの距離を決定するように構成されている、請求項１に記載の情報処理システム。
3. 前記電気回路は、センサと前記対象オブジェクトとの距離を検出する前記センサの出力に基づいて、前記対象オブジェクトと撮像デバイスとの距離を決定するように構成されている、請求項１に記載の情報処理システム。
4. 前記電気回路は、前記対象オブジェクトによるジェスチャの認識のために前記距離が小さすぎるとき、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないと決定するように構成されている、請求項１に記載の情報処理システム。
5. 前記電気回路は、
   前記対象オブジェクトと撮像デバイスとの距離を決定し、
   前記距離を、所定の閾値と比較し、
   前記距離が前記所定の閾値よりも小さいとき、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないと決定するように構成されている、請求項１に記載の情報処理システム。
6. 前記電気回路は、取得された画像データに基づいて、前記対象オブジェクトの動きに対応する動き情報を算出するように構成されている、請求項１に記載の情報処理システム。
7. 前記電気回路により算出される前記動き情報は、前記対象オブジェクトに対応する動きベクトルである、請求項６に記載の情報処理システム。
8. 前記電気回路は、算出された前記対象オブジェクトの動きに対応する動き情報に基づいて、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないかどうかを決定するように構成されている、請求項６に記載の情報処理システム。
9. 前記電気回路は、前記動き情報が、前記対象オブジェクトによるジェスチャの認識のために前記距離が小さすぎることを示すとき、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないかどうかを決定するように構成されている、請求項６に記載の情報処理システム。
10. 前記電気回路は、取得された画像データと、前記動き情報に基づく前記対象オブジェクトの動きの軌跡に対応する図形の通知とを表示するための表示を制御するように構成されている、請求項６に記載の情報処理システム。
11. 前記電気回路は、前記通知としての、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないことを示す図形の通知を表示するための表示を、制御するように構成されている、請求項１に記載の情報処理システム。
12. 前記電気回路は、前記通知としての、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの前記距離が小さすぎることを示す図形の通知を表示するための表示を、制御するように構成されている、請求項４に記載の情報処理システム。
13. 前記電気回路は、取得された前記画像データと、前記通知としての、表示された取得された前記画像データに含まれる前記対象オブジェクトの位置に基づく、取得された前記画像データに重ね合わせた図形の通知とを、表示するための表示を、制御するように構成されている、請求項１に記載の情報処理システム。
14. 前記電気回路は、前記通知としての、表示された取得された前記画像データに含まれる前記対象オブジェクトに重ね合わせた図形の通知を表示するための表示を、制御するように構成されている、請求項１３に記載の情報処理システム。
15. 前記電気回路は、表示された取得された前記画像データに含まれる前記対象オブジェクトの中心に対応する位置の通知を表示するための表示を、制御するように構成されている、請求項１４に記載の情報処理システム。
16. 前記電気回路は、取得された前記画像データと、前記通知としての、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの前記距離が小さすぎることを示す、前記対象オブジェクトに重ねられた図形の通知と、を表示するための表示を、制御するように構成されている、請求項４に記載の情報処理システム。
17. 前記電気回路は、前記通知としての、前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないことを示す、前記動き情報に対応する図形の通知を表示するための表示を、制御するように構成されている、請求項６に記載の情報処理システム。
18. 前記電気回路は、前記通知としての音声を出力させるために、スピーカを制御するように構成されている、請求項１に記載の情報処理システム。
19. 撮像デバイスによって記録され、ジェスチャを認識する対象である対象オブジェクトに対応する画像データを取得し、
    前記対象オブジェクトによるジェスチャの認識のために対象オブジェクトと撮像デバイスとの距離が十分ではないかどうかを決定し、
    前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないと決定されたとき、通知を出力する、
    情報処理システムにより実行される、方法。
20. コンピュータに、
    撮像デバイスによって記録され、ジェスチャを認識する対象である対象オブジェクトに対応する画像データを取得させ、
    前記対象オブジェクトによるジェスチャの認識のために対象オブジェクトと撮像デバイスとの距離が十分ではないかどうかを決定させ、
    前記対象オブジェクトによるジェスチャの認識のために前記対象オブジェクトと撮像デバイスとの距離が十分ではないと決定されたとき、通知を出力させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。