JP2008059283A - 操作検出装置とそのプログラム - Google Patents
操作検出装置とそのプログラム Download PDFInfo
- Publication number
- JP2008059283A JP2008059283A JP2006235441A JP2006235441A JP2008059283A JP 2008059283 A JP2008059283 A JP 2008059283A JP 2006235441 A JP2006235441 A JP 2006235441A JP 2006235441 A JP2006235441 A JP 2006235441A JP 2008059283 A JP2008059283 A JP 2008059283A
- Authority
- JP
- Japan
- Prior art keywords
- operator
- detected
- image
- region
- pointing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Position Input By Displaying (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】ビデオカメラ2は人物3の頭上に設置され、ライト4で照らされた状態の人物3を撮像する。操作検出装置1は、カメラ入力I/F12によりビデオカメラ2により撮像された画像データを取得する。制御部11は、手領域検出プログラム14aを実行し、肌色抽出により人物3の手の領域を検出する。続いて、影抽出プログラム14bにより、手の領域の画像から影部分を抽出する。さらに、制御部11は、指差し検出プログラム14cを実行して、ハフ変換により影部分のエッジを線分として複数検出し、検出された線分の中から、鋭角を成す交点を検出することで、その交点の位置を指差し位置として検出する。
【選択図】 図1
Description
第1の構成は、前記検出された線分同士が成す鋭角の二等分線を求め、この二等分線が前記操作者の特定部位の輪郭と交わる位置を検出し、検出された位置に基づいて指差し動作が前記操作者により行われたか前記操作者以外により行われたかを判定する手段をさらに具備することを特徴とする。
このように構成すると、色情報により操作者の特定部位の判別が困難な場合でも、確実に手の領域を検出することが可能となる。
このように構成することにより、明るさが変化する動画が投影される場合であっても、指差し位置を正確に検出することが可能となる。
(第1の実施形態)
この発明の第1の実施形態は、例えば、手の平に投影された画像を指差すような指差し動作が行われた場合に、指差し動作とその位置の検出、さらに指差し動作を行った人物を特定するものである。
人物3が存在する空間に、ビデオカメラ2と、ライト4とが配置される。ライト4は、人物3を照らすように配置され、人物3が手の所望の位置を指差した際に指差した指の影がくっきりと現れる様、ライト4の光量を調整しておく。また、ライト4は、色温度の高い昼光色を用いる。ビデオカメラ2は人物3の頭上に設置され、ライト4で照らされた状態の人物3を撮像する。
この発明の第2の実施形態は、照明手段としてプロジェクタを用いると共に、さらに赤外線カメラを設置し、赤外線カメラにより得られる赤外線画像から手の領域を抽出するものである。
図5は、この発明の第2の実施形態に係わる操作検出装置の構成を示すブロック図である。なお、同図において、上記第1の実施形態の図1と同一部分には同一符号を付し、詳しい説明については省略する。
この実施形態では、制御部11は、手領域検出プログラム14aにより赤外線カメラ5により得られる赤外線画像データを用いて手の領域を検出する。赤外線カメラ5で撮像すると、撮像対象の温度分布を得ることができるため、温度の高い人の肌の領域を抽出することができる。そして抽出された領域の中から、ある閾値より大きくある閾値より小さい大きさの領域を手の領域であるとして検出する。これによりプロジェクタ6により手に静止画像が提示されている場合でも、確実に手の領域を抽出することができる。
この発明の第3の実施形態は、上記第2の実施形態と同様に照明手段としてプロジェクタを設け、プロジェクタにより投影される動画によってできる影を検出することにより指差し動作を検出するものである。
図6は、この発明の第3の実施形態に係わる操作検出装置の構成を示すブロック図である。なお、同図において、上記第2の実施形態の図5と同一部分には同一符号を付し、詳しい説明については省略する。
制御部11は手領域検出プログラム14aを実行して、ビデオカメラ2により得られた画像データを例えばHSV変換し、その中でH成分(色成分)とS成分(彩度成分)がそれぞれある閾値より大きくある閾値より小さい場合に肌色として検出する。
Claims (8)
- 照明手段及び撮像手段と共に使用される操作検出装置であって、
前記照明手段により照らされた状態で操作者を前記撮像手段に撮像させる手段と、
前記撮像手段により得られる操作者の画像データをもとに、前記操作者の特定部位の領域を検出する手段と、
前記検出された操作者の特定部位の領域から影の部分を抽出する手段と、
前記抽出された影の部分の中から、エッジが直線を成す線分を複数検出し、検出された線分同士が鋭角に交わる点を検出し、この交点を前記操作者の特定部位の領域内における指差し位置として検出する手段と
を具備することを特徴とする操作検出装置。 - 前記検出された線分同士が成す鋭角の二等分線を求め、この二等分線が前記操作者の特定部位の輪郭と交わる位置を検出し、検出された位置に基づいて指差し動作が前記操作者により行われたか前記操作者以外により行われたかを判定する手段をさらに具備することを特徴とする請求項1記載の操作検出装置。
- 前記操作者の赤外線画像を取得する手段をさらに具備し、
前記操作者の特定部位の領域を検出する手段は、前記取得された赤外線画像が表す温度分布に基づいて前記操作者の特定部位の領域を検出することを特徴とする請求項1記載の操作検出装置。 - 前記照明手段に投影装置が用いられ、この投影装置から動画が投影される場合に、
前記操作者を前記撮像手段に撮像させる手段は、前記動画の明るさが所定の閾値以上の場合に、前記操作者を前記撮像手段に撮像させることを特徴とする請求項1記載の操作検出装置。 - 照明手段及び撮像手段と共に使用される、コンピュータを備える操作検出装置で使用されるプログラムであって、
前記照明手段により照らされた状態で操作者を前記撮像手段に撮像させる処理と、
前記撮像手段により得られる操作者の画像データをもとに、前記操作者の特定部位の領域を検出する処理と、
前記検出された操作者の特定部位の領域から影の部分を抽出する処理と、
前記抽出された影の部分の中から、エッジが直線を成す線分を複数検出し、検出された線分同士が鋭角に交わる点を検出し、この交点を前記操作者の特定部位の領域内における指差し位置として検出する処理と
を前記コンピュータに実行させることを特徴とするプログラム。 - 前記検出された線分同士が成す鋭角の二等分線を求め、この二等分線が前記操作者の特定部位の輪郭と交わる位置を検出し、検出された位置に基づいて指差し動作が前記操作者により行われたか前記操作者以外により行われたかを判定する処理をさらに備えることを特徴とする請求項5記載のプログラム。
- 前記操作検出装置が前記操作者の赤外線画像を取得する手段をさらに具備し、
前記操作者の特定部位の領域を検出する処理は、前記取得された赤外線画像が表す温度分布に基づいて前記操作者の特定部位の領域を検出することを特徴とする請求項5記載のプログラム。 - 前記照明手段に投影装置が用いられ、この投影装置により動画が投影される場合に、
前記操作者を前記撮像手段に撮像させる処理は、前記動画の明るさが所定の閾値以上の場合に、前記操作者を前記撮像手段に撮像させることを特徴とする請求項5記載のプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006235441A JP4733600B2 (ja) | 2006-08-31 | 2006-08-31 | 操作検出装置とそのプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006235441A JP4733600B2 (ja) | 2006-08-31 | 2006-08-31 | 操作検出装置とそのプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008059283A true JP2008059283A (ja) | 2008-03-13 |
JP4733600B2 JP4733600B2 (ja) | 2011-07-27 |
Family
ID=39241943
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006235441A Expired - Fee Related JP4733600B2 (ja) | 2006-08-31 | 2006-08-31 | 操作検出装置とそのプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4733600B2 (ja) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011080952A (ja) * | 2009-10-09 | 2011-04-21 | Osaka Univ | 距離測定装置、距離測定方法、距離測定プログラム、およびコンピュータ読み取り可能な記録媒体 |
JP2011118533A (ja) * | 2009-12-01 | 2011-06-16 | Tokyo Denki Univ | タッチ位置入力装置及びタッチ位置入力方法 |
JP2011196713A (ja) * | 2010-03-17 | 2011-10-06 | Fujitsu Ltd | 算出装置、プログラム及び算出方法 |
JP2013171490A (ja) * | 2012-02-22 | 2013-09-02 | Tokyo Denki Univ | タッチ位置入力装置及びタッチ位置入力方法 |
JP2013257861A (ja) * | 2012-05-18 | 2013-12-26 | Ricoh Co Ltd | 画像処理装置、画像処理プログラム、画像処理方法 |
US20140253513A1 (en) * | 2013-03-11 | 2014-09-11 | Hitachi Maxell, Ltd. | Operation detection device, operation detection method and projector |
WO2015052765A1 (ja) | 2013-10-08 | 2015-04-16 | 日立マクセル株式会社 | 投射型映像表示装置、操作検出装置及び投射型映像表示方法 |
JP2015529372A (ja) * | 2012-09-21 | 2015-10-05 | アマゾン・テクノロジーズ、インコーポレイテッド | ディスプレイ一体型カメラアレイ |
JP2017021861A (ja) * | 2016-11-01 | 2017-01-26 | 日立マクセル株式会社 | プロジェクタ及びヘッドマウント型表示装置 |
US10152177B2 (en) | 2013-03-11 | 2018-12-11 | Maxell, Ltd. | Manipulation detection apparatus, manipulation detection method, and projector |
US10521050B2 (en) | 2014-11-13 | 2019-12-31 | Maxell, Ltd. | Projection video display apparatus and video display method |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11345087A (ja) * | 1998-03-31 | 1999-12-14 | Seiko Epson Corp | プレゼンテ―ションシステム及び位置検出方法 |
-
2006
- 2006-08-31 JP JP2006235441A patent/JP4733600B2/ja not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11345087A (ja) * | 1998-03-31 | 1999-12-14 | Seiko Epson Corp | プレゼンテ―ションシステム及び位置検出方法 |
Non-Patent Citations (1)
Title |
---|
CSNG200600128015, 石井 陽子 Yoko ISHII, "情報との出会いを演出する手の平表示インタフェース Palm Display Interface that Dramatizes a Meeting w", 電子情報通信学会技術研究報告 Vol.105 No.256 IEICE Technical Report, 20050825, 第105巻, 89〜93頁, JP, 社団法人電子情報通信学会 The Institute of Electro * |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011080952A (ja) * | 2009-10-09 | 2011-04-21 | Osaka Univ | 距離測定装置、距離測定方法、距離測定プログラム、およびコンピュータ読み取り可能な記録媒体 |
JP2011118533A (ja) * | 2009-12-01 | 2011-06-16 | Tokyo Denki Univ | タッチ位置入力装置及びタッチ位置入力方法 |
JP2011196713A (ja) * | 2010-03-17 | 2011-10-06 | Fujitsu Ltd | 算出装置、プログラム及び算出方法 |
JP2013171490A (ja) * | 2012-02-22 | 2013-09-02 | Tokyo Denki Univ | タッチ位置入力装置及びタッチ位置入力方法 |
JP2013257861A (ja) * | 2012-05-18 | 2013-12-26 | Ricoh Co Ltd | 画像処理装置、画像処理プログラム、画像処理方法 |
JP2015529372A (ja) * | 2012-09-21 | 2015-10-05 | アマゾン・テクノロジーズ、インコーポレイテッド | ディスプレイ一体型カメラアレイ |
CN104049792A (zh) * | 2013-03-11 | 2014-09-17 | 日立麦克赛尔株式会社 | 操作检测装置和操作检测方法 |
US20140253513A1 (en) * | 2013-03-11 | 2014-09-11 | Hitachi Maxell, Ltd. | Operation detection device, operation detection method and projector |
US9367176B2 (en) | 2013-03-11 | 2016-06-14 | Hitachi Maxell, Ltd. | Operation detection device, operation detection method and projector |
CN104049792B (zh) * | 2013-03-11 | 2017-07-11 | 日立麦克赛尔株式会社 | 操作检测装置和操作检测方法 |
US10152177B2 (en) | 2013-03-11 | 2018-12-11 | Maxell, Ltd. | Manipulation detection apparatus, manipulation detection method, and projector |
US10514806B2 (en) | 2013-03-11 | 2019-12-24 | Maxell, Ltd. | Operation detection device, operation detection method and projector |
WO2015052765A1 (ja) | 2013-10-08 | 2015-04-16 | 日立マクセル株式会社 | 投射型映像表示装置、操作検出装置及び投射型映像表示方法 |
US10025430B2 (en) | 2013-10-08 | 2018-07-17 | Maxell, Ltd. | Projection type image display device, manipulation detection device and projection type image display method |
US10719171B2 (en) | 2013-10-08 | 2020-07-21 | Maxell, Ltd. | Projection type image display device, manipulation detection device and projection type image display method |
US10521050B2 (en) | 2014-11-13 | 2019-12-31 | Maxell, Ltd. | Projection video display apparatus and video display method |
US10915186B2 (en) | 2014-11-13 | 2021-02-09 | Maxell, Ltd. | Projection video display apparatus and video display method |
JP2017021861A (ja) * | 2016-11-01 | 2017-01-26 | 日立マクセル株式会社 | プロジェクタ及びヘッドマウント型表示装置 |
Also Published As
Publication number | Publication date |
---|---|
JP4733600B2 (ja) | 2011-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4733600B2 (ja) | 操作検出装置とそのプログラム | |
US10394334B2 (en) | Gesture-based control system | |
US11190678B2 (en) | Information processing apparatus, information processing method, and program | |
JP5624530B2 (ja) | コマンド発行装置、方法及びプログラム | |
JP6323040B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP5197777B2 (ja) | インターフェイス装置、方法、およびプログラム | |
JP5205187B2 (ja) | 入力システム及び入力方法 | |
JP6723814B2 (ja) | 情報処理装置、その制御方法、プログラム、及び記憶媒体 | |
JPH0844490A (ja) | インターフェイス装置 | |
JP2012079138A (ja) | ジェスチャ認識装置 | |
US20140053115A1 (en) | Computer vision gesture based control of a device | |
JP2004078977A (ja) | インターフェイス装置 | |
JP2009003576A (ja) | 機器制御装置及び制御方法 | |
JP6632298B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP5558899B2 (ja) | 情報処理装置、その処理方法及びプログラム | |
JP4972013B2 (ja) | 情報提示装置、情報提示方法、情報提示プログラムおよびそのプログラムを記録した記録媒体 | |
JP2012003724A (ja) | 三次元指先位置検出方法、三次元指先位置検出装置、及びプログラム | |
KR20210003515A (ko) | 인터렉티브모드를지원하는증강현실구현장치 | |
KR101861096B1 (ko) | 사용자의 손 동작을 인식하여 화면에 표시되는 정보를 제어하는 방법 및 장치 | |
KR20180017897A (ko) | 스티커 영상을 위한 오브젝트 추출 방법 및 그 장치 | |
Vančo et al. | Gesture identification for system navigation in 3D scene | |
JP6057407B2 (ja) | タッチ位置入力装置及びタッチ位置入力方法 | |
KR101998786B1 (ko) | 가상공간을 위한 비접촉식 손가락 입력 장치 및 방법 | |
Xie et al. | Hand posture recognition using kinect | |
WO2018150757A1 (ja) | 情報処理システム、情報処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080725 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100610 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100629 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100820 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110419 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110422 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140428 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4733600 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |