JP2005322071A - 指示動作認識装置、指示動作認識方法及び指示動作認識プログラム - Google Patents
指示動作認識装置、指示動作認識方法及び指示動作認識プログラム Download PDFInfo
- Publication number
- JP2005322071A JP2005322071A JP2004140284A JP2004140284A JP2005322071A JP 2005322071 A JP2005322071 A JP 2005322071A JP 2004140284 A JP2004140284 A JP 2004140284A JP 2004140284 A JP2004140284 A JP 2004140284A JP 2005322071 A JP2005322071 A JP 2005322071A
- Authority
- JP
- Japan
- Prior art keywords
- display
- image
- user
- movement
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Position Input By Displaying (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
Abstract
【解決手段】 制御部16により、ディスプレイ14の表示領域に表示画像が表示された状態において導出された前記表示領域上の位置に基づいて利用者により当該表示画像が指定されたか否かを判断し、表示画像が指定されたと判断した場合、撮像画像に基づいて前記利用者の手又は指先の移動動作を検出し、検出した移動動作が予め定められた範囲内で行われているときは、当該移動動作における移動方向に応じて予め定められた前記表示画像の表示状態の変更を、検出された移動動作に関する量に応じて行い、前記移動動作が前記予め定められた範囲を超えたときは、それまでの前記表示画像の表示状態の変更を継続して行うようにディスプレイ14を制御する。
【選択図】 図1
Description
なお、(1)式における座標(x,y,z)は球面上の任意の点の座標である。特徴点のn個の3次元座標データを(xi,yi,zi)とし(i=1,2,・・・,n)、これらを(1)式に代入して最小二乗法の極値を座標値X及び半径Rでとると、以下のようになる。
14 ディスプレイ
16 制御部
18 記憶部
20A ビデオカメラ
20B ビデオカメラ
28 凹面鏡
Claims (12)
- 予め定められた表示画像を表示する表示手段と、
互いに異なる複数の方向から利用者を撮像する撮像手段と、
前記撮像手段による撮像によって得られた撮像画像に基づいて前記利用者が前記表示手段の表示領域に対して指し示す方向を特定し、特定した方向に基づいて前記利用者により指し示された前記表示手段の表示領域上の位置を導出する導出手段と、
前記撮像画像に基づいて前記利用者の手又は指先の移動動作を検出する検出手段と、
前記表示手段の表示領域に前記表示画像が表示された状態において前記導出手段により導出された前記表示領域上の位置に基づいて前記利用者により当該表示画像が指定されたか否かを判断する判断手段と、
前記判断手段によって前記表示画像が指定されたと判断された場合、それ以降に前記検出手段によって検出された移動動作が予め定められた範囲内で行われているときは、当該移動動作における移動方向に応じて予め定められた前記表示画像の表示状態の変更を検出された移動動作に関する量に応じて行い、前記移動動作が前記予め定められた範囲を超えたときは、それまでの前記表示画像の表示状態の変更を継続して行うように前記表示手段を制御する制御手段と、
を備えた指示動作認識装置。 - 前記表示状態を、前記表示画像の前記表示領域内における表示位置、回転角度、及び表示倍率の少なくとも1つとした
請求項1記載の指示動作認識装置。 - 前記表示画像を、3次元立体画像とし、
前記回転角度を、前記3次元立体画像の前記移動方向と同一方向への、当該3次元立体画像の中心付近を通る、前記表示手段における表示面に平行な軸を中心とした回転角度とした
請求項2記載の指示動作認識装置。 - 前記表示状態を、前記表示画像の前記表示領域内における表示位置、回転角度、及び表示倍率の3種類とし、
前記表示位置の変更動作及び前記表示倍率の変更動作を行う動作モードを第1の動作モードとし、前記回転角度の変更動作及び前記表示倍率の変更動作を行う動作モードを第2の動作モードとして、
前記判断手段は、前記検出手段によって検出された移動動作が予め定められたクリック動作であったか否かを更に判断し、
前記判断手段によって前記クリック動作であったと判断される毎に前記第1の動作モードと前記第2の動作モードとが含まれた複数の動作モードの間で動作モードを切り替える切替手段を更に備え、
前記制御手段は、前記切替手段による切り替え後の動作モードに応じて前記表示状態の変更を行うように前記表示手段を制御する
請求項2又は請求項3記載の指示動作認識装置。 - 前記判断手段は、前記検出手段によって検出された移動動作が前記表示画像の初期表示状態への復帰を示す動作として予め定められた初期復帰動作であったか否かを更に判断し、
前記制御手段は、前記判断手段によって前記初期復帰動作であったと判断された場合に前記表示画像を初期表示状態に復帰させるように前記表示手段を制御する
請求項1乃至請求項4の何れか1項記載の指示動作認識装置。 - 前記制御手段は、前記表示画像が含まれる領域を取り囲む所定形状の枠を表示するように前記表示手段を更に制御すると共に、前記導出手段によって導出された前記表示領域上の位置が前記枠の内部に位置するときに前記表示画像の表示状態の変更を行い、前記表示領域上の位置が前記枠の外側に移動したときに当該表示状態の変更を停止する
請求項1乃至請求項5の何れか1項記載の指示動作認識装置。 - 予め定められた表示画像を表示する表示手段と、互いに異なる複数の方向から利用者を撮像する撮像手段と、前記撮像手段による撮像によって得られた撮像画像に基づいて前記利用者が前記表示手段の表示領域に対して指し示す方向を特定し、特定した方向に基づいて前記利用者により指し示された前記表示手段の表示領域上の位置を導出する導出手段と、を備えた指示動作認識装置の指示動作認識方法であって、
前記表示手段の表示領域に前記表示画像が表示された状態において前記導出手段により導出された前記表示領域上の位置に基づいて前記利用者により当該表示画像が指定されたか否かを判断し、
前記表示画像が指定されたと判断した場合、前記撮像画像に基づいて前記利用者の手又は指先の移動動作を検出し、検出した移動動作が予め定められた範囲内で行われているときは、当該移動動作における移動方向に応じて予め定められた前記表示画像の表示状態の変更を検出された移動動作に関する量に応じて行い、前記移動動作が前記予め定められた範囲を超えたときは、それまでの前記表示画像の表示状態の変更を継続して行うように前記表示手段を制御する
指示動作認識方法。 - 前記表示状態を、前記表示画像の前記表示領域内における表示位置、回転角度、及び表示倍率の3種類とし、
前記表示位置の変更動作及び前記表示倍率の変更動作を行う動作モードを第1の動作モードとし、前記回転角度の変更動作及び前記表示倍率の変更動作を行う動作モードを第2の動作モードとして、
前記検出した移動動作が予め定められたクリック動作であったか否かを更に判断し、
前記クリック動作であったと判断する毎に前記第1の動作モードと前記第2の動作モードとが含まれた複数の動作モードの間で動作モードを切り替え、
前記切り替え後の動作モードに応じて前記表示状態の変更を行うように前記表示手段を制御する
請求項7記載の指示動作認識方法。 - 前記検出した移動動作が前記表示画像の初期表示状態への復帰を示す動作として予め定められた初期復帰動作であったか否かを更に判断し、
前記初期復帰動作であったと判断した場合に前記表示画像を初期表示状態に復帰させるように前記表示手段を制御する
請求項7又は請求項8記載の指示動作認識方法。 - 予め定められた表示画像を表示する表示手段と、互いに異なる複数の方向から利用者を撮像する撮像手段と、を備えた指示動作認識装置において前記利用者による指示動作を認識するための指示動作認識プログラムであって、
前記撮像手段による撮像によって得られた撮像画像に基づいて前記利用者が前記表示手段の表示領域に対して指し示す方向を特定し、特定した方向に基づいて前記利用者により指し示された前記表示手段の表示領域上の位置を導出する導出ステップと、
前記撮像画像に基づいて前記利用者の手又は指先の移動動作を検出する検出ステップと、
前記表示手段の表示領域に前記表示画像が表示された状態において前記導出ステップにより導出された前記表示領域上の位置に基づいて前記利用者により当該表示画像が指定されたか否かを判断する判断ステップと、
前記判断ステップによって前記表示画像が指定されたと判断された場合、それ以降に前記検出ステップによって検出された移動動作が予め定められた範囲内で行われているときは、当該移動動作における移動方向に応じて予め定められた前記表示画像の表示状態の変更を検出された移動動作に関する量に応じて行い、前記移動動作が前記予め定められた範囲を超えたときは、それまでの前記表示画像の表示状態の変更を継続して行うように前記表示手段を制御する制御ステップと、
をコンピュータに実行させる指示動作認識プログラム。 - 前記表示状態を、前記表示画像の前記表示領域内における表示位置、回転角度、及び表示倍率の3種類とし、
前記表示位置の変更動作及び前記表示倍率の変更動作を行う動作モードを第1の動作モードとし、前記回転角度の変更動作及び前記表示倍率の変更動作を行う動作モードを第2の動作モードとして、
前記判断ステップは、前記検出ステップによって検出された移動動作が予め定められたクリック動作であったか否かを更に判断し、
前記判断ステップによって前記クリック動作であったと判断される毎に前記第1の動作モードと前記第2の動作モードとが含まれた複数の動作モードの間で動作モードを切り替える切替ステップを更に備え、
前記制御ステップは、前記切替ステップによる切り替え後の動作モードに応じて前記表示状態の変更を行うように前記表示手段を制御する
請求項10記載の指示動作認識プログラム。 - 前記判断ステップは、前記検出ステップによって検出された移動動作が前記表示画像の初期表示状態への復帰を示す動作として予め定められた初期復帰動作であったか否かを更に判断し、
前記制御ステップは、前記判断ステップによって前記初期復帰動作であったと判断された場合に前記表示画像を初期表示状態に復帰させるように前記表示手段を制御する
請求項10又は請求項11記載の指示動作認識プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004140284A JP4563723B2 (ja) | 2004-05-10 | 2004-05-10 | 指示動作認識装置及び指示動作認識プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004140284A JP4563723B2 (ja) | 2004-05-10 | 2004-05-10 | 指示動作認識装置及び指示動作認識プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005322071A true JP2005322071A (ja) | 2005-11-17 |
JP4563723B2 JP4563723B2 (ja) | 2010-10-13 |
Family
ID=35469305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004140284A Expired - Fee Related JP4563723B2 (ja) | 2004-05-10 | 2004-05-10 | 指示動作認識装置及び指示動作認識プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4563723B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009054131A (ja) * | 2007-08-24 | 2009-03-12 | National Chiao Tung Univ | 制御装置および方法 |
KR100947502B1 (ko) | 2007-02-22 | 2010-03-17 | 엠텍비젼 주식회사 | 피사체 움직임 감지 장치 및 방법 |
JP2011203944A (ja) * | 2010-03-25 | 2011-10-13 | Denso Wave Inc | 光学的情報読取装置及び情報処理端末 |
JP2011258195A (ja) * | 2010-06-09 | 2011-12-22 | Boeing Co | ジェスチャーに基づくマン−マシンインターフェース |
JP2012155678A (ja) * | 2011-01-28 | 2012-08-16 | Konica Minolta Holdings Inc | 表示システム、表示処理装置、表示方法、および表示プログラム |
WO2012133226A1 (ja) * | 2011-03-25 | 2012-10-04 | 京セラ株式会社 | 電子機器、制御方法および制御プログラム |
US9684372B2 (en) | 2012-11-07 | 2017-06-20 | Samsung Electronics Co., Ltd. | System and method for human computer interaction |
EP3388921A1 (en) | 2017-04-11 | 2018-10-17 | FUJIFILM Corporation | Control device of head mounted display; operation method and operation program thereof; and image display system |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101526049B1 (ko) * | 2013-06-19 | 2015-06-04 | 동명대학교산학협력단 | 가상 생태공원 가시화 시스템 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11134089A (ja) * | 1997-10-29 | 1999-05-21 | Takenaka Komuten Co Ltd | ハンドポインティング装置 |
JP2003029925A (ja) * | 2001-07-13 | 2003-01-31 | Sharp Corp | 情報機器装置及びマウスの制御方法 |
JP2003076489A (ja) * | 2001-09-04 | 2003-03-14 | Alps Electric Co Ltd | 座標入力装置 |
JP2003330613A (ja) * | 2002-05-13 | 2003-11-21 | Mobile Computing Technologies:Kk | 携帯型情報端末装置、表示制御情報、及び表示制御方法 |
-
2004
- 2004-05-10 JP JP2004140284A patent/JP4563723B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11134089A (ja) * | 1997-10-29 | 1999-05-21 | Takenaka Komuten Co Ltd | ハンドポインティング装置 |
JP2003029925A (ja) * | 2001-07-13 | 2003-01-31 | Sharp Corp | 情報機器装置及びマウスの制御方法 |
JP2003076489A (ja) * | 2001-09-04 | 2003-03-14 | Alps Electric Co Ltd | 座標入力装置 |
JP2003330613A (ja) * | 2002-05-13 | 2003-11-21 | Mobile Computing Technologies:Kk | 携帯型情報端末装置、表示制御情報、及び表示制御方法 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100947502B1 (ko) | 2007-02-22 | 2010-03-17 | 엠텍비젼 주식회사 | 피사체 움직임 감지 장치 및 방법 |
JP2009054131A (ja) * | 2007-08-24 | 2009-03-12 | National Chiao Tung Univ | 制御装置および方法 |
JP2011203944A (ja) * | 2010-03-25 | 2011-10-13 | Denso Wave Inc | 光学的情報読取装置及び情報処理端末 |
US9569010B2 (en) | 2010-06-09 | 2017-02-14 | The Boeing Company | Gesture-based human machine interface |
JP2016076275A (ja) * | 2010-06-09 | 2016-05-12 | ザ・ボーイング・カンパニーThe Boeing Company | ジェスチャーに基づくマン−マシンインターフェース |
JP2011258195A (ja) * | 2010-06-09 | 2011-12-22 | Boeing Co | ジェスチャーに基づくマン−マシンインターフェース |
JP2012155678A (ja) * | 2011-01-28 | 2012-08-16 | Konica Minolta Holdings Inc | 表示システム、表示処理装置、表示方法、および表示プログラム |
WO2012133226A1 (ja) * | 2011-03-25 | 2012-10-04 | 京セラ株式会社 | 電子機器、制御方法および制御プログラム |
JP2012203736A (ja) * | 2011-03-25 | 2012-10-22 | Kyocera Corp | 電子機器、制御方法および制御プログラム |
US9430081B2 (en) | 2011-03-25 | 2016-08-30 | Kyocera Corporation | Electronic device, control method, and control program |
US9684372B2 (en) | 2012-11-07 | 2017-06-20 | Samsung Electronics Co., Ltd. | System and method for human computer interaction |
EP3388921A1 (en) | 2017-04-11 | 2018-10-17 | FUJIFILM Corporation | Control device of head mounted display; operation method and operation program thereof; and image display system |
JP2018180840A (ja) * | 2017-04-11 | 2018-11-15 | 富士フイルム株式会社 | ヘッドマウントディスプレイの制御装置とその作動方法および作動プログラム、並びに画像表示システム |
US10429941B2 (en) | 2017-04-11 | 2019-10-01 | Fujifilm Corporation | Control device of head mounted display, operation method and operation program thereof, and image display system |
Also Published As
Publication number | Publication date |
---|---|
JP4563723B2 (ja) | 2010-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4608326B2 (ja) | 指示動作認識装置及び指示動作認識プログラム | |
US9921663B2 (en) | Moving object detecting apparatus, moving object detecting method, pointing device, and storage medium | |
KR101844390B1 (ko) | 사용자 인터페이스 제어를 위한 시스템 및 기법 | |
US8933882B2 (en) | User centric interface for interaction with visual display that recognizes user intentions | |
JP5614014B2 (ja) | 情報処理装置、表示制御方法及び表示制御プログラム | |
JP3114813B2 (ja) | 情報入力方法 | |
US9342925B2 (en) | Information processing apparatus, information processing method, and program | |
CN116719413A (zh) | 用于操纵环境中的对象的方法 | |
US20170153713A1 (en) | Head mounted display device and control method | |
US20130335324A1 (en) | Computer vision based two hand control of content | |
US20140123077A1 (en) | System and method for user interaction and control of electronic devices | |
US20140139429A1 (en) | System and method for computer vision based hand gesture identification | |
JP6618276B2 (ja) | 情報処理装置、その制御方法、プログラム、及び記憶媒体 | |
US20140267004A1 (en) | User Adjustable Gesture Space | |
JP2004094653A (ja) | 情報入力システム | |
JP2009251702A (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
JP2004246814A (ja) | 指示動作認識装置 | |
JP4563723B2 (ja) | 指示動作認識装置及び指示動作認識プログラム | |
JP2016103137A (ja) | ユーザインタフェース装置、画像処理装置及び制御用プログラム | |
WO2013145572A1 (en) | Display control device, display control method, and program | |
JPWO2020080107A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP5558899B2 (ja) | 情報処理装置、その処理方法及びプログラム | |
JP2003228458A (ja) | 指示動作認識装置及び方法 | |
JP2003280813A (ja) | ポインティングデバイス、ポインタ制御装置、ポインタ制御方法及びその方法を記録した記録媒体 | |
JP2006323454A (ja) | 三次元指示入力システム、三次元指示入力装置、三次元指示入力方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20070301 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070305 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20070301 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090421 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090428 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090629 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100727 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100729 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130806 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |