JP6898872B2 - 撮像支援システムと撮像支援方法及び撮像支援プログラム - Google Patents
撮像支援システムと撮像支援方法及び撮像支援プログラム Download PDFInfo
- Publication number
- JP6898872B2 JP6898872B2 JP2018006446A JP2018006446A JP6898872B2 JP 6898872 B2 JP6898872 B2 JP 6898872B2 JP 2018006446 A JP2018006446 A JP 2018006446A JP 2018006446 A JP2018006446 A JP 2018006446A JP 6898872 B2 JP6898872 B2 JP 6898872B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- instruction information
- operation mode
- guidance
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 101
- 238000000034 method Methods 0.000 title claims description 89
- 238000001514 detection method Methods 0.000 claims description 326
- 238000000926 separation method Methods 0.000 claims description 103
- 230000005236 sound signal Effects 0.000 claims description 94
- 230000008859 change Effects 0.000 claims description 33
- 230000002093 peripheral effect Effects 0.000 claims description 28
- 230000008569 process Effects 0.000 claims description 27
- 238000012937 correction Methods 0.000 claims description 22
- 238000004364 calculation method Methods 0.000 claims description 19
- 238000005259 measurement Methods 0.000 claims description 17
- 230000007423 decrease Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 34
- 230000001771 impaired effect Effects 0.000 description 22
- 238000010586 diagram Methods 0.000 description 12
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 230000001965 increasing effect Effects 0.000 description 7
- 238000004904 shortening Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001755 vocal effect Effects 0.000 description 2
- 235000010044 Hernandia moerenhoutiana Nutrition 0.000 description 1
- 244000084296 Hernandia moerenhoutiana Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 235000009508 confectionery Nutrition 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- PVFZKRMYBKEXBN-UHFFFAOYSA-N piperidine;piperidine-1-carbodithioic acid Chemical compound C1CCNCC1.SC(=S)N1CCCCC1 PVFZKRMYBKEXBN-UHFFFAOYSA-N 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Description
前記対象物検出部は、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出し、前記誘導制御部には、基準値K1及びK2(0<K1<K2≦1)が設定され、前記誘導制御部は、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイスと前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成する撮像支援システムである。
前記誘導制御部は、ピント調整の判定が不適切から適切に切り替わったときの動作モードの変更は、ピント調整の判定が切り替わった直後の前記面積比率Kの値Kxと前記基準値K2とを比較して、Kx<K2の場合は、動作モードを変更する前に、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という補助動作を速やかに行い、その後、前記面積比率Kが低下してKx-α(αは正の定数)以下になったタイミングで動作モードを変更し、Kx≧K2の場合は、前記補助動作を行うことなく速やかに動作モードを変更し、ピント調整の判定が不適切から適切に切り替わったとき以外の動作モードの変更は、前記面積比率K及び前記ピント調節の判定に基づいて速やかに行う、という構成にしてもよい。
前記対象物検出ステップにおいて、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出し、前記誘導制御ステップにおいて、あらかじめ基準値K1及びK2(0<K1<K2≦1)を設定し、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成する撮像支援方法である。
ピント調整の判定が不適切から適切に切り替わったときの動作モードの変更は、ピント調整の判定が切り替わった直後の前記面積比率Kの値Kxと前記基準値K2とを比較して、Kx<K2の場合は、動作モードを変更する前に、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という補助動作を速やかに行い、その後、前記面積比率Kが低下してKx-α(αは正の定数)以下になったタイミングで動作モードを変更し、Kx≧K2の場合は、前記補助動作を行うことなく速やかに動作モードを変更し、ピント調整の判定が不適切から適切に切り替わったとき以外の動作モードの変更は、前記面積比率K及び前記ピント調節の判定に基づいて速やかに行う、という構成にしてもよい。
12 主スマートデバイス
14,24 対象物検出部
14a 撮像装置
14b 慣性計測装置
14c 深度計測装置
16,26,32 誘導制御部
18,20,28,38 信号出力部
42 副スマートデバイス
D 位置ずれ
D1 位置ずれDに関する基準値
GA 画像エリア
K 面積比率
K1,K2 面積比率Kに関する基準値
Kx ピント調整の判定が切り替わった直後の面積比率の値
L 離間距離
Pg 画像エリアの中央部
Pw 検出対象物エリアの中央部
W 検出対象物
WA 検出対象物エリア
AR(0) 中央領域
AR(1)〜AR(8) 周辺領域
α 正の定数
Claims (29)
- 検出対象物を所定の画像エリアに撮像するための撮像装置を有し、前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出部と、内部に前記対象物検出部が搭載された主スマートデバイスと、前記対象物検出部の検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御部と、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力部とを備え、
前記対象物検出部は、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出するとともに、前記検出対象物領域の中心部と前記画像エリアの中心部との位置ずれDを算出し、
前記誘導制御部は、使用者に知らせるべき前記誘導指示情報を、前記面積比率K及び前記位置ずれDの大小に基づいて作成するブロックであって、前記誘導制御部には、基準値K1及びK2(0<K1<K2≦1)が設定され、前記誘導制御部は、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイスと前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成し、
前記信号出力部は、前記主スマートデバイスと前記検出対象物の位置関係を遠近方向に誘導する内容の前記誘導指示情報が作成されると、その内容を振動信号の強弱によって使用者に知覚させ、遠近方向と直角な左右方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の音量によって使用者に知覚させ、遠近方向と直角な上下方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の種類又は高低又はその両方によって使用者に知覚させることを特徴とする撮像支援システム。 - 検出対象物を所定の画像エリアに撮像するための撮像装置を有し、前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出部と、内部に前記対象物検出部が搭載された主スマートデバイスと、前記対象物検出部の検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御部と、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力部とを備え、
前記対象物検出部は、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出するとともに、前記検出対象物領域の中心部と前記画像エリアの中心部との位置ずれDを算出し、
前記誘導制御部は、使用者に知らせるべき前記誘導指示情報を、前記面積比率K及び前記位置ずれDの大小に基づいて作成するブロックであって、前記誘導制御部には、基準値K1及びK2(0<K1<K2≦1)が設定され、前記誘導制御部は、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイスと前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成し、
前記信号出力部は、前記主スマートデバイスと前記検出対象物の位置関係を遠近方向に誘導する内容の前記誘導指示情報が作成されると、その内容を振動信号の強弱によって使用者に知覚させ、遠近方向と直角な左右方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の音量によって使用者に知覚させ、遠近方向と直角な上下方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の種類又は高低又はその両方によって使用者に知覚させ、遠近方向と直角な適宜の方角に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号のテンポによって使用者に知覚させることを特徴とする撮像支援システム。 - 検出対象物を所定の画像エリアに撮像するための撮像装置を有し、前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出部と、内部に前記対象物検出部が搭載された主スマートデバイスと、前記対象物検出部の検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御部と、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力部とを備え、
前記対象物検出部は、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出するとともに、前記検出対象物領域の中心部と前記画像エリアの中心部との位置ずれDを算出し、
前記誘導制御部は、使用者に知らせるべき前記誘導指示情報を、前記面積比率K及び前記位置ずれDの大小に基づいて作成するブロックであって、前記誘導制御部には、基準値K1及びK2(0<K1<K2≦1)が設定され、前記誘導制御部は、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイスと前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成し、
前記信号出力部は、前記主スマートデバイスと前記検出対象物の位置関係を遠近方向に誘導する内容の前記誘導指示情報が作成されると、その内容を振動信号の強弱によって使用者に知覚させ、遠近方向と直角な左右方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の種類又は高低又はその両方によって使用者に知覚させ、遠近方向と直角な上下方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号のテンポによって使用者に知覚させることを特徴とする撮像支援システム。 - 前記対象物検出部は、前記面積比率Kを算出する処理を所定の周期で実行し、前回の算出結果と今回の算出結果との差が規定値を超えた時、今回の算出結果を破棄する請求項1乃至3のいずれか記載の撮像支援システム。
- 前記誘導制御部は、前記対象物検出部から前記面積比率Kの情報が出力されない時、及び前記面積比率K=0の時、使用者に対して、前記撮像装置で前記検出対象物を撮像する操作をやり直すことを促す再操作指示情報を作成し、
前記信号出力部は、前記再操作指示情報に基づいて音信号、振動信号又はその両方を生成し、使用者が知覚可能に出力する請求項1乃至4のいずれか記載の撮像支援システム。 - 前記誘導制御部には、あらかじめ少なくとも以下の3つの動作モードが設定され、
第一の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係が0<K<K1の時、使用者に対して、前記主スマートデバイスと前記検出対象物との離間距離Lを短くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第二の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK1≦K<K2の時、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という動作モードであり、
第三の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK2≦K≦1の時、使用者に対して、前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
前記誘導制御部は、前記面積比率Kに基づいて動作モードを速やかに変更する請求項1乃至3のいずれか記載の撮像支援システム。 - 前記対象物検出部には、前記撮像装置が取得した画像データを分析してピント調整が適切か不適切かを判定する機能が設けられ、
前記誘導制御部には、あらかじめ少なくとも以下の4つの動作モードが設定され、
第一の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係が0<K<K1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記主スマートデバイスと前記検出対象物との離間距離Lを短くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第二の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK1≦K<K2で且つピント調整が適切と判定された時、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という動作モードであり、
第三の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK2≦K≦1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第四の動作モードは、ピント調整が不適切と判定された時、前記面積比率Kの大小に関係なく、使用者に対して、ピント調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
前記誘導制御部は、前記面積比率K及び前記ピント調節の判定に基づいて動作モードを速やかに変更する請求項1乃至3のいずれか記載の撮像支援システム。 - 前記誘導制御部には、基準値D1(D1>0)が設定され、前記誘導制御部は、前記面積比率K及び前記位置ずれDと前記基準値K1及びD1との関係が、0<K<K1で且つD≦D1の時、使用者に対して、前記位置ずれDの修正が不要であることを知らせる前記誘導指示情報を作成し、0<K<K1で且つD>D1の時、使用者に対して、D≦D1になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成する請求項1乃至3のいずれか記載の撮像支援システム。
- 前記誘導制御部は、前記対象物検出部から前記位置ずれDの情報が出力されない時、使用者に対して、前記撮像装置で前記検出対象物を撮像する操作をやり直すことを促す再操作指示情報を作成し、
前記信号出力部は、前記再操作指示情報に基づいて音信号、振動信号又はその両方を生成し、使用者が知覚可能に出力する請求項8記載の撮像支援システム。 - 前記誘導制御部には、前記画像エリア内を仮想的に区分した複数の領域が定義され、前記複数の領域は、前記画像エリアの中心部からの距離が前記基準値D1以下の領域である中央領域と、前記中央領域の周りを放射状に分割した複数の周辺領域であり、
前記誘導制御部は、前記面積比率K及び前記位置ずれDと前記基準値K1及びD1との関係が0<K<K1で且つD>D1の時、前記検出対象物領域の中心部が前記複数の周辺領域の中のどの周辺領域に位置しているかという内容を前記誘導指示情報に盛り込む請求項8又は9記載の撮像支援システム。 - 検出対象物を所定の画像エリアに撮像するための撮像装置を有し、前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出部と、内部に前記対象物検出部が搭載された主スマートデバイスと、前記対象物検出部の検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御部と、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力部とを備え、
前記対象物検出部は、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出し、
前記誘導制御部には、基準値K1及びK2(0<K1<K2≦1)が設定され、前記誘導制御部は、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイスと前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成する動作を行い、
さらに、前記対象物検出部には、前記撮像装置が取得した画像データを分析してピント調整が適切か不適切かを判定する機能が設けられ、
前記誘導制御部には、あらかじめ少なくとも以下の4つの動作モードが設定され、
第一の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係が0<K<K1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記主スマートデバイスと前記検出対象物との離間距離Lを短くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第二の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK1≦K<K2で且つピント調整が適切と判定された時、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という動作モードであり、
第三の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK2≦K≦1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第四の動作モードは、ピント調整が不適切と判定された時、前記面積比率Kの大小に関係なく、使用者に対して、ピント調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
前記誘導制御部は、ピント調整の判定が不適切から適切に切り替わったときの動作モードの変更は、ピント調整の判定が切り替わった直後の前記面積比率Kの値Kxと前記基準値K2とを比較して、Kx<K2の場合は、動作モードを変更する前に、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という補助動作を速やかに行い、その後、前記面積比率Kが低下してKx-α(αは正の定数)以下になったタイミングで動作モードを変更し、Kx≧K2の場合は、前記補助動作を行うことなく速やかに動作モードを変更し、ピント調整の判定が不適切から適切に切り替わったとき以外の動作モードの変更は、前記面積比率K及び前記ピント調節の判定に基づいて速やかに行うことを特徴とする撮像支援システム。 - 前記対象物検出部には、前記主スマートデバイスのぶれを検出するための慣性計測装置が設けられ、前記対象物検出部は、前記主スマートデバイスのぶれが規定値を超えると、取得した画像データを破棄する請求項1乃至11のいずれか記載の撮像支援システム。
- 前記対象物検出部には、前記画像エリアに撮像された複数の物体の、前記主スマートデバイスとの間の距離の違いを検出する深度計測装置が設けられ、
前記対象物検出部は、前記深度計測装置の検出結果に基づいて、前記画像エリアに撮像された物体の中の、前記検出対象物に関係のないノイズ情報をマスクして、前記検出対象物領域を特定する請求項1乃至12のいずれか記載の撮像支援システム。 - 前記誘導制御部及び前記信号出力部は、前記主スマートデバイスの内部に搭載されている請求項1乃至13のいずれか記載の撮像支援システム。
- 前記誘導制御部及び前記信号出力部は、前記主スマートデバイスと通信が可能な副スマートデバイスの内部に搭載されている請求項1乃至13のいずれか記載の撮像支援システム。
- 主スマートデバイスに搭載された撮像装置を使用して検出対象物を所定の画像エリアに撮像する操作を補助する撮像支援方法において、
前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出ステップと、前記対象物検出ステップの検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御ステップと、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力ステップとを備え、
前記対象物検出ステップにおいて、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出するとともに、前記検出対象物領域の中心部と前記画像エリアの中心部との位置ずれDを算出し、
前記誘導制御ステップは、使用者に知らせるべき前記誘導指示情報を、前記面積比率K及び前記位置ずれDの大小に基づいて作成するステップであって、あらかじめ基準値K1及びK2(0<K1<K2≦1)を設定し、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成し、
前記信号出力ステップにおいて、前記主スマートデバイスと前記検出対象物の位置関係を遠近方向に誘導する内容の前記誘導指示情報が作成されると、その内容を振動信号の強弱によって使用者に知覚させ、遠近方向と直角な左右方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の音量によって使用者に知覚させ、遠近方向と直角な上下方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の種類又は高低又はその両方によって使用者に知覚させることを特徴とする撮像支援方法。 - 主スマートデバイスに搭載された撮像装置を使用して検出対象物を所定の画像エリアに撮像する操作を補助する撮像支援方法において、
前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出ステップと、前記対象物検出ステップの検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御ステップと、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力ステップとを備え、
前記対象物検出ステップにおいて、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出するとともに、前記検出対象物領域の中心部と前記画像エリアの中心部との位置ずれDを算出し、
前記誘導制御ステップは、使用者に知らせるべき前記誘導指示情報を、前記面積比率K及び前記位置ずれDの大小に基づいて作成するブロックであって、あらかじめ基準値K1及びK2(0<K1<K2≦1)を設定し、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成し、
前記信号出力ステップにおいて、前記主スマートデバイスと前記検出対象物の位置関係を遠近方向に誘導する内容の前記誘導指示情報が作成されると、その内容を振動信号の強弱によって使用者に知覚させ、遠近方向と直角な左右方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の音量によって使用者に知覚させ、遠近方向と直角な上下方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の種類又は高低又はその両方によって使用者に知覚させ、遠近方向と直角な適宜の方角に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号のテンポによって使用者に知覚させることを特徴とする撮像支援方法。 - 主スマートデバイスに搭載された撮像装置を使用して検出対象物を所定の画像エリアに撮像する操作を補助する撮像支援方法において、
前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出ステップと、前記対象物検出ステップの検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御ステップと、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力ステップとを備え、
前記対象物検出ステップにおいて、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出するとともに、前記検出対象物領域の中心部と前記画像エリアの中心部との位置ずれDを算出し、
前記誘導制御ステップは、使用者に知らせるべき前記誘導指示情報を、前記面積比率K及び前記位置ずれDの大小に基づいて作成するステップであって、あらかじめ基準値K1及びK2(0<K1<K2≦1)を設定し、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成し、
前記信号出力ステップにおいて、前記主スマートデバイスと前記検出対象物の位置関係を遠近方向に誘導する内容の前記誘導指示情報が作成されると、その内容を振動信号の強弱によって使用者に知覚させ、遠近方向と直角な左右方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号の種類又は高低又はその両方によって使用者に知覚させ、遠近方向と直角な上下方向に誘導する内容の前記誘導指示情報が作成されると、その内容を、非言語音で成る音信号のテンポによって使用者に知覚させることを特徴とする撮像支援方法。 - 前記対象物検出ステップにおいて、前記面積比率Kを算出する処理を所定の周期で実行し、前回の算出結果と今回の算出結果との差が規定値を超えた時、今回の算出結果を破棄する請求項16乃至18のいずれか記載の撮像支援方法。
- 前記誘導制御ステップにおいて、前記対象物検出ステップを実行した結果、前記面積比率Kの情報が得られなかった時、及び前記面積比率K=0の時、使用者に対して、前記撮像装置で前記検出対象物を撮像する操作をやり直すことを促す再操作指示情報を作成し、
前記信号出力ステップにおいて、前記再操作指示情報に基づいて音信号、振動信号又はその両方を生成し、使用者が知覚可能に出力する請求項16乃至19のいずれか記載の撮像支援方法。 - 前記誘導制御ステップにおいて、あらかじめ少なくとも以下の3つの動作モードを設定し、
第一の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係が0<K<K1の時、使用者に対して、前記主スマートデバイスと前記検出対象物との離間距離Lを短くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第二の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK1≦K<K2の時、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という動作モードであり、
第三の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK2≦K≦1の時、使用者に対して、前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
前記面積比率Kに基づいて動作モードを速やかに変更する請求項16乃至18のいずれか記載の撮像支援方法。 - 前記対象物検出ステップにおいて、前記撮像装置が取得した画像データを分析してピント調整が適切か不適切かを判定し、
前記誘導制御ステップにおいて、あらかじめ少なくとも以下の4つの動作モードを設定し、
第一の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係が0<K<K1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記主スマートデバイスと前記検出対象物との離間距離Lを短くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第二の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK1≦K<K2で且つピント調整が適切と判定された時、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という動作モードであり、
第三の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK2≦K≦1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第四の動作モードは、ピント調整が不適切と判定された時、前記面積比率Kの大小に関係なく、使用者に対して、ピント調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
前記面積比率K及び前記ピント調節の判定に基づいて動作モードを速やかに変更する請求項16乃至18のいずれか記載の撮像支援方法。 - 前記誘導制御ステップにおいて、あらかじめ基準値D1(D1>0)を設定し、前記面積比率K及び前記位置ずれDと前記基準値K1及びD1との関係が、0<K<K1で且つD≦D1の時、使用者に対して、前記位置ずれDの修正が不要であることを知らせる前記誘導指示情報を作成し、0<K<K1で且つD>D1の時、使用者に対して、D≦D1になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成する請求項16乃至18のいずれか記載の撮像支援方法。
- 前記誘導制御ステップにおいて、前記対象物検出ステップで前記位置ずれDの情報が出力されない時、使用者に対して、前記撮像装置で前記検出対象物を撮像する操作をやり直すことを促す再操作指示情報を作成し、
前記信号出力ステップにおいて、前記再操作指示情報に基づいて音信号、振動信号又はその両方を生成し、使用者が知覚可能に出力する請求項23記載の撮像支援方法。 - 前記誘導制御ステップにおいて、あらかじめ前記画像エリア内を仮想的に区分した複数の領域を定義し、前記複数の領域は、前記画像エリアの中心部からの距離が前記基準値D1以下の領域である中央領域と、前記中央領域の周りを放射状に分割した複数の周辺領域であり、
前記面積比率K及び前記位置ずれDと前記基準値K1及びD1との関係が0<K<K1で且つD>D1の時、前記検出対象物領域の中心部が前記複数の周辺領域の中のどの周辺領域に位置しているかという内容を前記誘導指示情報に盛り込む請求項23又は24記載の撮像支援方法。 - 主スマートデバイスに搭載された撮像装置を使用して検出対象物を所定の画像エリアに撮像する操作を補助する撮像支援方法において、
前記撮像装置が取得した画像データに基づいて前記検出対象物の状態を検出する対象物検出ステップと、前記対象物検出ステップの検出結果に基づいて使用者に知らせるべき誘導指示情報を作成する誘導制御ステップと、前記誘導指示情報に基づいて音信号又は振動信号又はその両方を生成し、使用者が知覚できるように出力する信号出力ステップとを備え、
前記対象物検出ステップにおいて、前記画像データを分析して、前記画像エリアの中の、前記検出対象物が撮像されている検出対象物領域を特定し、前記画像エリアに対する前記検出対象物領域の面積比率K(0≦K≦1)を算出し、
前記誘導制御ステップにおいて、あらかじめ基準値K1及びK2(0<K1<K2≦1)を設定し、前記面積比率KがK1≦K<K2の関係を満たさない時、使用者に対して、K1≦K<K2になるように前記主スマートデバイス及び前記検出対象物の位置関係を変化させることを促す前記誘導指示情報を作成する処理を行い、
さらに、前記対象物検出ステップにおいて、前記撮像装置が取得した画像データを分析してピント調整が適切か不適切かを判定し、
前記誘導制御ステップにおいて、あらかじめ少なくとも以下の4つの動作モードを設定し、
第一の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係が0<K<K1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記主スマートデバイスと前記検出対象物との離間距離Lを短くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第二の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK1≦K<K2で且つピント調整が適切と判定された時、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という動作モードであり、
第三の動作モードは、前記面積比率Kと前記基準値K1及びK2との関係がK2≦K≦1で且つピント調整が適切と判定された時、使用者に対して、ズーム調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
第四の動作モードは、ピント調整が不適切と判定された時、前記面積比率Kの大小に関係なく、使用者に対して、ピント調節のために前記離間距離Lを長くすることを促す前記誘導指示情報を作成する、という動作モードであり、
ピント調整の判定が不適切から適切に切り替わったときの動作モードの変更は、ピント調整の判定が切り替わった直後の前記面積比率Kの値Kxと前記基準値K2とを比較して、Kx<K2の場合は、動作モードを変更する前に、使用者に対して、前記離間距離Lの修正が不要であることを知らせる前記誘導指示情報を作成する、という補助動作を速やかに行い、その後、前記面積比率Kが低下してKx-α(αは正の定数)以下になったタイミングで動作モードを変更し、Kx≧K2の場合は、前記補助動作を行うことなく速やかに動作モードを変更し、
ピント調整の判定が不適切から適切に切り替わったとき以外の動作モードの変更は、前記面積比率K及び前記ピント調節の判定に基づいて速やかに行うことを特徴とする撮像支援方法。 - 前記対象物検出ステップにおいて、慣性計測装置を使用して前記主スマートデバイスのぶれを検出し、前記対象物検出ステップにおいて、前記主スマートデバイスのぶれが規定値を超えると、取得した画像データを破棄する請求項16乃至26のいずれか記載の撮像支援方法。
- 前記対象物検出ステップにおいて、深度計測装置を使用して、前記画像エリアに撮像された複数の物体の、前記主スマートデバイスとの間の距離の違いを検出し、その検出結果に基づいて、前記画像エリアに撮像された物体の中の、前記検出対象物に関係のないノイズ情報をマスクして、前記検出対象物領域を特定する請求項16乃至27のいずれか記載の撮像支援方法。
- 請求項16乃至28のいずれか記載の撮像支援方法を実行させるための各ステップ実行用プログラムにより構成された撮像支援プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018006446A JP6898872B2 (ja) | 2018-01-18 | 2018-01-18 | 撮像支援システムと撮像支援方法及び撮像支援プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018006446A JP6898872B2 (ja) | 2018-01-18 | 2018-01-18 | 撮像支援システムと撮像支援方法及び撮像支援プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019124864A JP2019124864A (ja) | 2019-07-25 |
JP6898872B2 true JP6898872B2 (ja) | 2021-07-07 |
Family
ID=67398819
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018006446A Active JP6898872B2 (ja) | 2018-01-18 | 2018-01-18 | 撮像支援システムと撮像支援方法及び撮像支援プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6898872B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10838056B1 (en) | 2019-12-25 | 2020-11-17 | NextVPU (Shanghai) Co., Ltd. | Detection of target |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4242533B2 (ja) * | 1999-12-27 | 2009-03-25 | オリンパス株式会社 | バーコード読取装置 |
JP4682820B2 (ja) * | 2005-11-25 | 2011-05-11 | ソニー株式会社 | オブジェクト追跡装置及びオブジェクト追跡方法、並びにプログラム |
JP4889351B2 (ja) * | 2006-04-06 | 2012-03-07 | 株式会社トプコン | 画像処理装置及びその処理方法 |
JP4820221B2 (ja) * | 2006-06-29 | 2011-11-24 | 日立オートモティブシステムズ株式会社 | 車載カメラのキャリブレーション装置およびプログラム |
JP5484184B2 (ja) * | 2010-04-30 | 2014-05-07 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP5639832B2 (ja) * | 2010-09-30 | 2014-12-10 | 任天堂株式会社 | 情報処理プログラム、情報処理方法、情報処理システム、及び情報処理装置 |
JP6172901B2 (ja) * | 2012-08-06 | 2017-08-02 | オリンパス株式会社 | 撮像装置 |
KR102092571B1 (ko) * | 2013-01-04 | 2020-04-14 | 삼성전자 주식회사 | 카메라를 구비하는 장치의 인물 촬영장치 및 방법 |
JP2016212811A (ja) * | 2015-05-13 | 2016-12-15 | 国立大学法人金沢大学 | 実物大画像生成プログラム、実物大画像生成装置、及び、実物大画像生成方法 |
JP6643843B2 (ja) * | 2015-09-14 | 2020-02-12 | オリンパス株式会社 | 撮像操作ガイド装置および撮像装置の操作ガイド方法 |
JP2017069776A (ja) * | 2015-09-30 | 2017-04-06 | カシオ計算機株式会社 | 撮像装置、判定方法及びプログラム |
JP6310597B2 (ja) * | 2017-04-28 | 2018-04-11 | オリンパス株式会社 | 撮像装置及び対象物確認方法 |
-
2018
- 2018-01-18 JP JP2018006446A patent/JP6898872B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019124864A (ja) | 2019-07-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4127296B2 (ja) | 撮像装置、および撮像装置制御方法、並びにコンピュータ・プログラム | |
EP3404363B1 (en) | Laser receiver using a smart device | |
EP3038345B1 (en) | Auto-focusing method and auto-focusing device | |
JP6739064B1 (ja) | 撮像装置 | |
CN104717429A (zh) | 具有倾斜或透视校正的图像捕捉设备 | |
US8836841B2 (en) | Electronic apparatus | |
JP2005348181A (ja) | 撮影装置及びその制御方法並びに制御用プログラム | |
US9600871B2 (en) | Image correcting apparatus, image correcting method and computer readable recording medium recording program thereon | |
CN110475073A (zh) | 用于视频记录和编辑助理的方法 | |
US20100145232A1 (en) | Methods and apparatuses for correcting sport postures captured by a digital image processing apparatus | |
US7894716B2 (en) | Optical apparatus with a plurality of selectable auto-focus areas within a focus-range | |
JP6898872B2 (ja) | 撮像支援システムと撮像支援方法及び撮像支援プログラム | |
CN209982563U (zh) | 靶标获取设备 | |
US9692962B2 (en) | Control device, optical apparatus, imaging apparatus, and control method | |
KR20220052922A (ko) | 정보 처리 장치, 정보 처리 방법 및 정보 처리 프로그램 | |
JP2021027584A (ja) | 画像処理装置、画像処理方法およびプログラム | |
KR101195370B1 (ko) | 초점 정보 제공 장치 및 초점 조절 장치 | |
JP2010066728A (ja) | 撮像装置および撮像装置の制御方法 | |
US11468586B2 (en) | Three-dimensional measurement apparatus, image capturing apparatus, control method, and recording medium | |
JP2017174094A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018151685A (ja) | 動き量算出プログラム、動き量算出方法、動き量算出装置及び業務支援システム | |
JP6722733B2 (ja) | 判定装置および判定方法 | |
JP2016123637A (ja) | 画像処理装置、画像処理方法及びプログラム | |
KR102010782B1 (ko) | 멀티미디어 장치의 인식 범위로 컨트롤러의 위치를 보정하도록 유도하는 방법, 이를 위한 멀티미디어 장치 및 타겟 추적 장치 | |
US20220148208A1 (en) | Image processing apparatus, image processing method, program, and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191009 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201225 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210518 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210611 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6898872 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |