JP2006209359A - 指示動作認識装置、指示動作認識方法及び指示動作認識プログラム - Google Patents
指示動作認識装置、指示動作認識方法及び指示動作認識プログラム Download PDFInfo
- Publication number
- JP2006209359A JP2006209359A JP2005018846A JP2005018846A JP2006209359A JP 2006209359 A JP2006209359 A JP 2006209359A JP 2005018846 A JP2005018846 A JP 2005018846A JP 2005018846 A JP2005018846 A JP 2005018846A JP 2006209359 A JP2006209359 A JP 2006209359A
- Authority
- JP
- Japan
- Prior art keywords
- user
- virtual screen
- display
- fingertip
- instruction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Position Input By Displaying (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】 ディスプレイ14による表示画像に対して利用者により行われる指示動作を認識するにあたり、ビデオカメラ20A、20Bによって互いに異なる複数の方向から利用者を撮像し、制御部16により、当該撮像によって得られた撮像画像に基づいて前記利用者が所定部位により指し示すことができる方向に予め定められたサイズとされた仮想スクリーンをディスプレイ14の表示領域に対応するものとして設け、前記撮像画像に基づいて前記利用者により指し示された前記仮想スクリーン上の位置を特定し、特定した前記仮想スクリーン上の位置をディスプレイ14の表示領域上の位置に変換することにより前記利用者によるディスプレイ14の表示領域における指示位置を導出する。
【選択図】 図1
Description
(a)まず、次の(6)式によってカメラ座標系Oの原点を仮想スクリーン生成時の指先特徴点の座標Pに移動させる。
14 ディスプレイ
16 制御部(仮想スクリーン設定手段、特定手段、導出手段、取消手段、クリック動作判定手段)
18 記憶部
20A ビデオカメラ(撮像手段)
20B ビデオカメラ(撮像手段)
28 凹面鏡
40 仮想スクリーン
80 利用者
Claims (17)
- 表示手段と、
互いに異なる複数の方向から利用者を撮像する撮像手段と、
前記撮像手段による撮像によって得られた撮像画像に基づいて前記利用者が所定部位により指し示すことができる方向に予め定められたサイズとされた仮想スクリーンを前記表示手段の表示領域に対応するものとして設ける仮想スクリーン設定手段と、
前記撮像画像に基づいて前記利用者により指し示された前記仮想スクリーン上の位置を特定する特定手段と、
前記特定手段によって特定された前記仮想スクリーン上の位置を前記表示手段の表示領域上の位置に変換することにより前記利用者による前記表示手段の表示領域における指示位置を導出する導出手段と、
備えた指示動作認識装置。 - 前記所定部位を前記利用者の指先とした
請求項1記載の指示動作認識装置。 - 前記仮想スクリーンのサイズを、前記利用者の身長が高くなるほど大きくなるか、又は前記利用者の腕の長さが長くなるほど大きくなるように定める
請求項2記載の指示動作認識装置。 - 前記仮想スクリーン設定手段は、前記利用者の指先が所定期間静止されたときに前記仮想スクリーンを設ける
請求項2又は請求項3記載の指示動作認識装置。 - 前記仮想スクリーン設定手段によって設けられた前記仮想スクリーンを、前記利用者の指先が所定位置に位置されたときに取り消す取消手段
を更に備えた請求項2乃至請求項4の何れか1項記載の指示動作認識装置。 - 前記所定位置を前記撮像手段による撮像範囲外の位置とした
請求項5記載の指示動作認識装置。 - 前記仮想スクリーン設定手段は、スクリーン面の中心が前記利用者の指先と前記表示手段の表示領域における水平方向中心線上の任意の位置とを結んだ仮想線に垂直となる方向、スクリーン面が前記利用者の指先と前記表示手段の表示領域の中心とを結んだ仮想線に垂直となる方向、及びスクリーン面が前記利用者の腕の任意位置と指先とを結んだ仮想線又は当該仮想線の延長線に垂直となる方向の何れかの方向に前記仮想スクリーンを設ける
請求項2乃至請求項6の何れか1項記載の指示動作認識装置。 - 前記撮像画像に基づいて前記利用者の指先により予め定められたクリック動作が行われたか否かを判定するクリック動作判定手段
を更に備えた請求項2乃至請求項7の何れか1項記載の指示動作認識装置。 - 前記クリック動作判定手段は、前記利用者の指先が所定方向に対して所定速度以上で移動したか否かを判定することによって前記クリック動作が行われたか否かを判定する
請求項8記載の指示動作認識装置。 - 前記所定方向を、前記仮想スクリーンに対する法線方向、前記仮想スクリーン設定手段による前記仮想スクリーンの設定時における前記利用者の腕の任意位置と指先とを結んだ直線のベクトル方向、及び前記表示手段の表示領域に対する法線方向の少なくとも1つの方向とした
請求項9記載の指示動作認識装置。 - 前記仮想スクリーンのアスペクト比を前記表示手段の表示領域と同一とした
請求項1乃至請求項10の何れか1項記載の指示動作認識装置。 - 表示手段による表示画像に対して利用者により行われる指示動作を認識する指示動作認識方法であって、
互いに異なる複数の方向から利用者を撮像し、
前記撮像によって得られた撮像画像に基づいて前記利用者が所定部位により指し示すことができる方向に予め定められたサイズとされた仮想スクリーンを前記表示手段の表示領域に対応するものとして設け、
前記撮像画像に基づいて前記利用者により指し示された前記仮想スクリーン上の位置を特定し、
特定した前記仮想スクリーン上の位置を前記表示手段の表示領域上の位置に変換することにより前記利用者による前記表示手段の表示領域における指示位置を導出する
指示動作認識方法。 - 前記所定部位を前記利用者の指先とした
請求項12記載の指示動作認識方法。 - 前記仮想スクリーンのサイズを、前記利用者の身長が高くなるほど大きくなるか、又は前記利用者の腕の長さが長くなるほど大きくなるように定める
請求項13記載の指示動作認識方法。 - 表示手段による表示画像に対して利用者により行われる指示動作を認識する指示動作認識プログラムであって、
互いに異なる複数の方向から利用者を撮像する撮像ステップと、
前記撮像ステップによる撮像によって得られた撮像画像に基づいて前記利用者が所定部位により指し示すことができる方向に予め定められたサイズとされた仮想スクリーンを前記表示手段の表示領域に対応するものとして設ける仮想スクリーン設定ステップと、
前記撮像画像に基づいて前記利用者により指し示された前記仮想スクリーン上の位置を特定する特定ステップと、
前記特定ステップによって特定された前記仮想スクリーン上の位置を前記表示手段の表示領域上の位置に変換することにより前記利用者による前記表示手段の表示領域における指示位置を導出する導出ステップと、
をコンピュータに実行させる指示動作認識プログラム。 - 前記所定部位を前記利用者の指先とした
請求項15記載の指示動作認識プログラム。 - 前記仮想スクリーンのサイズを、前記利用者の身長が高くなるほど大きくなるか、又は前記利用者の腕の長さが長くなるほど大きくなるように定める
請求項16記載の指示動作認識プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005018846A JP4608326B2 (ja) | 2005-01-26 | 2005-01-26 | 指示動作認識装置及び指示動作認識プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005018846A JP4608326B2 (ja) | 2005-01-26 | 2005-01-26 | 指示動作認識装置及び指示動作認識プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006209359A true JP2006209359A (ja) | 2006-08-10 |
JP4608326B2 JP4608326B2 (ja) | 2011-01-12 |
Family
ID=36966163
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005018846A Expired - Fee Related JP4608326B2 (ja) | 2005-01-26 | 2005-01-26 | 指示動作認識装置及び指示動作認識プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4608326B2 (ja) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100851977B1 (ko) | 2006-11-20 | 2008-08-12 | 삼성전자주식회사 | 가상 평면을 이용하여 전자 기기의 사용자 인터페이스를제어하는 방법 및 장치. |
KR100959516B1 (ko) | 2008-06-04 | 2010-05-27 | 텔코웨어 주식회사 | 영상인식을 이용한 공간지각 사용자 인터페이스 방법 및 그장치 |
WO2011018901A1 (ja) * | 2009-08-12 | 2011-02-17 | 島根県 | 画像認識装置および操作判定方法並びにプログラム |
CN102033702A (zh) * | 2009-10-05 | 2011-04-27 | 日立民用电子株式会社 | 影像显示装置及其显示控制方法 |
WO2013035553A1 (ja) * | 2011-09-07 | 2013-03-14 | 日東電工株式会社 | ユーザインタフェース表示装置 |
JP2013242850A (ja) * | 2012-04-27 | 2013-12-05 | Nitto Denko Corp | 表示入力装置 |
JP2014082605A (ja) * | 2012-10-15 | 2014-05-08 | Canon Marketing Japan Inc | 情報処理装置、その制御方法及びプログラム |
JP2014142695A (ja) * | 2013-01-22 | 2014-08-07 | Ricoh Co Ltd | 情報処理装置、システム、画像投影装置、情報処理方法およびプログラム |
JP2014170337A (ja) * | 2013-03-04 | 2014-09-18 | Mitsubishi Electric Corp | 情報表示制御装置、情報表示装置および情報表示制御方法 |
US9081430B2 (en) | 2011-04-22 | 2015-07-14 | Panasonic Intellectual Property Corporation Of America | Pointing control device, integrated circuit thereof and pointing control method |
JP2016118947A (ja) * | 2014-12-22 | 2016-06-30 | 日本ユニシス株式会社 | 角度調整可能な仮想平面を用いた空間手書き入力システム |
JP2016134022A (ja) * | 2015-01-20 | 2016-07-25 | エヌ・ティ・ティ アイティ株式会社 | 仮想タッチパネルポインティングシステム |
JP2018128917A (ja) * | 2017-02-09 | 2018-08-16 | 株式会社Nttドコモ | 入力システム |
EP3316075B1 (en) * | 2016-10-26 | 2021-04-07 | Harman Becker Automotive Systems GmbH | Combined eye and gesture tracking |
JP7240766B1 (ja) | 2021-11-11 | 2023-03-16 | Trouvez合同会社 | 非接触入力装置 |
JP7452917B2 (ja) | 2021-03-10 | 2024-03-19 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11161415A (ja) * | 1997-11-28 | 1999-06-18 | Seiko Epson Corp | 入力方法および入力装置 |
JP2004246856A (ja) * | 2002-12-18 | 2004-09-02 | National Institute Of Advanced Industrial & Technology | インタフェース装置 |
JP2004246814A (ja) * | 2003-02-17 | 2004-09-02 | Takenaka Komuten Co Ltd | 指示動作認識装置 |
-
2005
- 2005-01-26 JP JP2005018846A patent/JP4608326B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11161415A (ja) * | 1997-11-28 | 1999-06-18 | Seiko Epson Corp | 入力方法および入力装置 |
JP2004246856A (ja) * | 2002-12-18 | 2004-09-02 | National Institute Of Advanced Industrial & Technology | インタフェース装置 |
JP2004246814A (ja) * | 2003-02-17 | 2004-09-02 | Takenaka Komuten Co Ltd | 指示動作認識装置 |
Cited By (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100851977B1 (ko) | 2006-11-20 | 2008-08-12 | 삼성전자주식회사 | 가상 평면을 이용하여 전자 기기의 사용자 인터페이스를제어하는 방법 및 장치. |
KR100959516B1 (ko) | 2008-06-04 | 2010-05-27 | 텔코웨어 주식회사 | 영상인식을 이용한 공간지각 사용자 인터페이스 방법 및 그장치 |
KR101347232B1 (ko) * | 2009-08-12 | 2014-01-03 | 시마네켄 | 화상인식장치 및 조작판정방법, 그리고 컴퓨터 판독가능한 매체 |
WO2011018901A1 (ja) * | 2009-08-12 | 2011-02-17 | 島根県 | 画像認識装置および操作判定方法並びにプログラム |
JP2011039844A (ja) * | 2009-08-12 | 2011-02-24 | Shimane Prefecture | 画像認識装置および操作判定方法並びにプログラム |
US9535512B2 (en) | 2009-08-12 | 2017-01-03 | Shimane Prefectural Government | Image recognition apparatus, operation determining method and computer-readable medium |
JP4701424B2 (ja) * | 2009-08-12 | 2011-06-15 | 島根県 | 画像認識装置および操作判定方法並びにプログラム |
CN102473041A (zh) * | 2009-08-12 | 2012-05-23 | 岛根县 | 图像识别装置、操作判断方法以及程序 |
US8890809B2 (en) | 2009-08-12 | 2014-11-18 | Shimane Prefectural Government | Image recognition apparatus, operation determining method and computer-readable medium |
US9400560B2 (en) | 2009-10-05 | 2016-07-26 | Hitachi Maxell, Ltd. | Image display device and display control method thereof |
CN102033702A (zh) * | 2009-10-05 | 2011-04-27 | 日立民用电子株式会社 | 影像显示装置及其显示控制方法 |
US9081430B2 (en) | 2011-04-22 | 2015-07-14 | Panasonic Intellectual Property Corporation Of America | Pointing control device, integrated circuit thereof and pointing control method |
WO2013035553A1 (ja) * | 2011-09-07 | 2013-03-14 | 日東電工株式会社 | ユーザインタフェース表示装置 |
JP2013069272A (ja) * | 2011-09-07 | 2013-04-18 | Nitto Denko Corp | ユーザインタフェース表示装置 |
JP2013242850A (ja) * | 2012-04-27 | 2013-12-05 | Nitto Denko Corp | 表示入力装置 |
JP2014082605A (ja) * | 2012-10-15 | 2014-05-08 | Canon Marketing Japan Inc | 情報処理装置、その制御方法及びプログラム |
JP2014142695A (ja) * | 2013-01-22 | 2014-08-07 | Ricoh Co Ltd | 情報処理装置、システム、画像投影装置、情報処理方法およびプログラム |
JP2014170337A (ja) * | 2013-03-04 | 2014-09-18 | Mitsubishi Electric Corp | 情報表示制御装置、情報表示装置および情報表示制御方法 |
JP2016118947A (ja) * | 2014-12-22 | 2016-06-30 | 日本ユニシス株式会社 | 角度調整可能な仮想平面を用いた空間手書き入力システム |
JP2016134022A (ja) * | 2015-01-20 | 2016-07-25 | エヌ・ティ・ティ アイティ株式会社 | 仮想タッチパネルポインティングシステム |
EP3316075B1 (en) * | 2016-10-26 | 2021-04-07 | Harman Becker Automotive Systems GmbH | Combined eye and gesture tracking |
JP2018128917A (ja) * | 2017-02-09 | 2018-08-16 | 株式会社Nttドコモ | 入力システム |
JP7452917B2 (ja) | 2021-03-10 | 2024-03-19 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
JP7240766B1 (ja) | 2021-11-11 | 2023-03-16 | Trouvez合同会社 | 非接触入力装置 |
JP2023071396A (ja) * | 2021-11-11 | 2023-05-23 | Trouvez合同会社 | 非接触入力装置 |
Also Published As
Publication number | Publication date |
---|---|
JP4608326B2 (ja) | 2011-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4608326B2 (ja) | 指示動作認識装置及び指示動作認識プログラム | |
KR101844390B1 (ko) | 사용자 인터페이스 제어를 위한 시스템 및 기법 | |
KR102098277B1 (ko) | 시선 추적을 이용한 시인성 개선 방법, 저장 매체 및 전자 장치 | |
US9342925B2 (en) | Information processing apparatus, information processing method, and program | |
KR101606628B1 (ko) | 포인팅 방향 검출 장치 및 그 방법과, 프로그램 및 컴퓨터 판독가능한 매체 | |
JP5614014B2 (ja) | 情報処理装置、表示制御方法及び表示制御プログラム | |
JP3997566B2 (ja) | 描画装置、及び描画方法 | |
CN116324680A (zh) | 用于操纵环境中的对象的方法 | |
WO2013035554A1 (ja) | 入力体の動き検出方法およびそれを用いた入力デバイス | |
US8416189B2 (en) | Manual human machine interface operation system and method thereof | |
JP4513830B2 (ja) | 描画装置、及び描画方法 | |
NO339941B1 (no) | System og fremgangsmåte for et gestbasert styringssystem | |
US20120319945A1 (en) | System and method for reporting data in a computer vision system | |
JP2004094653A (ja) | 情報入力システム | |
WO2017147748A1 (zh) | 一种可穿戴式系统的手势控制方法以及可穿戴式系统 | |
JP2013156889A (ja) | 移動制御装置、移動制御装置の制御方法、及びプログラム | |
JP2009251702A (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
US20090251492A1 (en) | Storage medium storing image conversion program and image conversion apparatus | |
JP2016103137A (ja) | ユーザインタフェース装置、画像処理装置及び制御用プログラム | |
JP2009258884A (ja) | ユーザインタフェイス | |
JP2004246814A (ja) | 指示動作認識装置 | |
KR20200040716A (ko) | 시선 추적을 이용한 시인성 개선 방법, 저장 매체 및 전자 장치 | |
JP4563723B2 (ja) | 指示動作認識装置及び指示動作認識プログラム | |
KR20040027764A (ko) | 두 눈에서 반사되는 빛을 추적하여 단말기를 조작하는방법, 및 그 장치 | |
JP2022525326A (ja) | 2次元カメラを利用して客体制御を支援する方法、システムおよび非一過性のコンピュータ読み取り可能な記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071227 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100104 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100302 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20101005 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101008 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131015 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |