JP6514889B2 - 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 - Google Patents
情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 Download PDFInfo
- Publication number
- JP6514889B2 JP6514889B2 JP2014257227A JP2014257227A JP6514889B2 JP 6514889 B2 JP6514889 B2 JP 6514889B2 JP 2014257227 A JP2014257227 A JP 2014257227A JP 2014257227 A JP2014257227 A JP 2014257227A JP 6514889 B2 JP6514889 B2 JP 6514889B2
- Authority
- JP
- Japan
- Prior art keywords
- information processing
- detection target
- processing apparatus
- change
- recognition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 78
- 238000003672 processing method Methods 0.000 title claims description 7
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 238000001514 detection method Methods 0.000 claims description 116
- 230000008859 change Effects 0.000 claims description 92
- 238000012545 processing Methods 0.000 claims description 57
- 230000002123 temporal effect Effects 0.000 claims description 43
- 238000012937 correction Methods 0.000 claims description 33
- 238000003384 imaging method Methods 0.000 claims description 25
- 238000000034 method Methods 0.000 description 60
- 230000008569 process Effects 0.000 description 47
- 238000006073 displacement reaction Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 11
- 230000001133 acceleration Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 2
- 238000012905 input function Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
- G06V40/113—Recognition of static hand signs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Image Analysis (AREA)
Description
好ましくは、補正手段は、検出手段による検出値が予め定められた条件を満たしている場合に、検出対象の位置の時間的変化を補正する。
まず、本実施の形態に従う携帯型端末1の使用形態について説明する。図1は、本実施の形態に従う携帯型端末1の使用形態の一例を示す模式図である。
本実施の形態に従う携帯型端末1は、各種の計測技術を用いて、携帯型端末1を操作するユーザの体全体または一部(手など)の状態や動作(ジェスチャ)を認識し、その認識結果に応じた処理を実行する。
次に、本実施の形態に従う携帯型端末1の装置構成について説明する。図4は、本実施の形態に従う携帯型端末1の装置構成を示すブロック図である。
次に、本実施の形態に従う携帯型端末1において実行される認識処理の処理手順について説明する。
次に、本実施の形態に従う携帯型端末1において実行される認識処理に含まれる認識位置の補正処理(図5のステップS8〜S12)について説明する。図6は、本実施の形態に従う携帯型端末1において実行される認識処理に含まれる認識位置の補正処理を説明する模式図である。図6の縦軸は、入力画像内での検出対象の変位量を1次元の量に換算した値を示し、図6の横軸は時間を示す。
次に、本実施の形態に従う携帯型端末1の認識処理を実現するための機能構成について説明する。
上述の補正処理では、携帯型端末1の姿勢が変化すれば、検出対象の認識位置をその変化に応じて補正する処理を例示した。但し、このような検出対象の認識位置を補正する処理を予め定められた条件に適合した場合にのみ実行するようにしてもよい。言い換えれば、携帯型端末1の姿勢が変化しても、ある条件に適合した場合には、認識位置を補正しないようにしてもよい。すなわち、補正モジュール158(図7)は、位置ずれ検出モジュール156による検出値が予め定められた条件を満たしている場合に、検出対象の位置の時間的変化を補正するようにしてもよい。以下、このような補正処理の実行を制限する処理例について説明する。
ジャイロセンサ138や加速度センサ136などの各種センサで検出された携帯型端末1の姿勢の情報が適切に検出されたものであるか否かを判断し、適切なものである場合に限って、認識モジュール150から出力される認識位置を補正するようにしてもよい。
画像処理技術を用いて携帯型端末1の姿勢を検出する場合には、その検出結果が適切なものであるか否かを判断し、適切なものである場合に限って、認識モジュール150から出力される認識位置を補正するようにしてもよい。
本実施の形態に従う携帯型端末1は、ジャイロセンサなどを用いて自端末の姿勢の変化を検出し、その姿勢の変化に応じて、認識される検出対象の位置の時間的変化を補正する。このような補正処理を実行することで、携帯型端末1を操作中にユーザが携帯型端末1の向きなどを変えたとしても、ジェスチャ操作を誤認識する可能性を低減できる。
Claims (8)
- 可搬型の情報処理装置であって、
撮像部と、
前記撮像部によって取得された画像内のユーザの一部を含む検出対象を認識するとともに、当該検出対象の認識位置の時間的変化を出力する認識手段と、
前記情報処理装置の姿勢の変化を検出する検出手段と、
前記検出対象の認識位置の時間的変化に応じた処理を実行する処理手段と、
前記情報処理装置の姿勢の変化に応じて、前記認識手段により出力される前記検出対象の位置の時間的変化を補正する補正手段とを備え、
前記補正手段は、前記検出手段による検出値が予め定められた条件を満たしている場合に、前記検出対象の位置の時間的変化を補正し、
前記予め定められた条件は、前記情報処理装置の姿勢の単位時間あたりの変化量が予め定められた範囲内にあることを含む、情報処理装置。 - 前記検出手段は、ジャイロセンサを含む、請求項1に記載の情報処理装置。
- 前記補正手段は、前記認識手段による前記検出対象の認識開始時における姿勢を基準とした変化量を用いて、前記検出対象の位置の時間的変化を補正する、請求項1または2に記載の情報処理装置。
- 画像を表示する表示手段と、
前記撮像部によって取得される画像内の所定位置に前記検出対象を位置付けるための情報を、前記撮像部によって取得される画像とともに、前記表示手段に表示するキャリブレーション手段とをさらに備える、請求項3に記載の情報処理装置。 - 前記予め定められた条件は、前記撮像部によって取得された画像内のユーザ以外の背景の部分についての類似度が所定の信頼度を有していることを含む、請求項1〜4のいずれか1項に記載の情報処理装置。
- 可搬型の情報処理装置で実行される情報処理プログラムであって、前記情報処理装置は撮像部を含んでおり、前記情報処理プログラムは前記情報処理装置に、
前記撮像部によって取得された画像内のユーザの一部を含む検出対象を認識するとともに、当該検出対象の認識位置の時間的変化を出力するステップと、
前記情報処理装置の姿勢の変化を検出するステップと、
前記検出対象の認識位置の時間的変化に応じた処理を実行するステップと、
前記情報処理装置の姿勢の変化に応じて、出力される前記検出対象の位置の時間的変化を補正するステップとを実行させ、
前記補正するステップは、前記検出するステップによる検出値が予め定められた条件を満たしている場合に、前記検出対象の位置の時間的変化を補正するステップを含み、
前記予め定められた条件は、前記情報処理装置の姿勢の単位時間あたりの変化量が予め定められた範囲内にあることを含む、情報処理プログラム。 - 可搬型の情報処理装置を含む情報処理システムであって、
撮像部と、
情報処理プログラムを実行するプロセッサとを備え、前記プロセッサは情報処理プログラムを実行することで、
前記撮像部によって取得された画像内のユーザの一部を含む検出対象を認識するとともに、当該検出対象の認識位置の時間的変化を出力する認識手段と、
前記情報処理装置の姿勢の変化を検出する検出手段と、
前記検出対象の認識位置の時間的変化に応じた処理を実行する処理手段と、
前記情報処理装置の姿勢の変化に応じて、前記認識手段により出力される前記検出対象の位置の時間的変化を補正する補正手段とを実現し、
前記補正手段は、前記検出手段による検出値が予め定められた条件を満たしている場合に、前記検出対象の位置の時間的変化を補正し、
前記予め定められた条件は、前記情報処理装置の姿勢の単位時間あたりの変化量が予め定められた範囲内にあることを含む、情報処理システム。 - 可搬型の情報処理装置で実行される情報処理方法であって、前記情報処理装置は撮像部を含んでおり、前記情報処理方法は、
前記撮像部によって取得された画像内のユーザの一部を含む検出対象を認識するとともに、当該検出対象の認識位置の時間的変化を出力するステップと、
前記情報処理装置の姿勢の変化を検出するステップと、
前記検出対象の認識位置の時間的変化に応じた処理を実行するステップと、
前記情報処理装置の姿勢の変化に応じて、出力される前記検出対象の位置の時間的変化を補正するステップとを含み、
前記補正するステップは、前記検出するステップによる検出値が予め定められた条件を満たしている場合に、前記検出対象の位置の時間的変化を補正するステップを含み、
前記予め定められた条件は、前記情報処理装置の姿勢の単位時間あたりの変化量が予め定められた範囲内にあることを含む、情報処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014257227A JP6514889B2 (ja) | 2014-12-19 | 2014-12-19 | 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 |
US14/816,398 US9697419B2 (en) | 2014-12-19 | 2015-08-03 | Information processing apparatus, non-transitory storage medium encoded with computer readable information processing program, information processing system, and information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014257227A JP6514889B2 (ja) | 2014-12-19 | 2014-12-19 | 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016118868A JP2016118868A (ja) | 2016-06-30 |
JP6514889B2 true JP6514889B2 (ja) | 2019-05-15 |
Family
ID=56130028
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014257227A Active JP6514889B2 (ja) | 2014-12-19 | 2014-12-19 | 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9697419B2 (ja) |
JP (1) | JP6514889B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019054037A1 (ja) * | 2017-09-12 | 2019-03-21 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5380789B2 (ja) * | 2007-06-06 | 2014-01-08 | ソニー株式会社 | 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム |
JP4884417B2 (ja) * | 2008-04-01 | 2012-02-29 | 富士フイルム株式会社 | 携帯型電子装置及びその制御方法 |
JP5597064B2 (ja) * | 2010-08-26 | 2014-10-01 | キヤノン株式会社 | 情報処理装置およびその方法 |
JP5766956B2 (ja) * | 2011-01-13 | 2015-08-19 | オリンパス株式会社 | ジェスチャ入力装置 |
JP2012212237A (ja) * | 2011-03-30 | 2012-11-01 | Namco Bandai Games Inc | 画像生成システム、サーバシステム、プログラム及び情報記憶媒体 |
US20120326966A1 (en) | 2011-06-21 | 2012-12-27 | Qualcomm Incorporated | Gesture-controlled technique to expand interaction radius in computer vision applications |
CN103782255B (zh) * | 2011-09-09 | 2016-09-28 | 泰利斯航空电子学公司 | 交通工具娱乐系统的眼动追踪控制 |
JP5821526B2 (ja) * | 2011-10-27 | 2015-11-24 | ソニー株式会社 | 画像処理装置、画像処理方法及びプログラム |
-
2014
- 2014-12-19 JP JP2014257227A patent/JP6514889B2/ja active Active
-
2015
- 2015-08-03 US US14/816,398 patent/US9697419B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016118868A (ja) | 2016-06-30 |
US20160180542A1 (en) | 2016-06-23 |
US9697419B2 (en) | 2017-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9940521B2 (en) | Visibility enhancement devices, systems, and methods | |
EP3062286B1 (en) | Optical distortion compensation | |
US20100103099A1 (en) | Pointing device using camera and outputting mark | |
JP5966535B2 (ja) | 情報処理装置、プログラム及び情報処理方法 | |
US20110175802A1 (en) | Method and system for operating electric apparatus | |
US20150262002A1 (en) | Gesture recognition apparatus and control method of gesture recognition apparatus | |
JP2016151798A (ja) | 情報処理装置および方法、並びにプログラム | |
US20160274670A1 (en) | Gesture input apparatus, gesture input method, and program for wearable terminal | |
US20190384419A1 (en) | Handheld controller, tracking method and system using the same | |
JP2012208705A (ja) | 画像操作装置、画像操作方法およびプログラム | |
US20170262163A1 (en) | Apparatus, method and storage medium for correcting page image | |
US20130076854A1 (en) | Image processing apparatus, image processing method, and computer readable medium | |
WO2020054760A1 (ja) | 画像表示制御装置および画像表示制御用プログラム | |
JP2016177491A (ja) | 入力装置、指先位置検出方法及び指先位置検出用コンピュータプログラム | |
JP2011095985A (ja) | 画像表示装置 | |
JP5863034B2 (ja) | 情報端末装置 | |
JP2017083916A (ja) | ジェスチャー認識装置、ヘッドマウントディスプレイ、および携帯端末 | |
JP2017191426A (ja) | 入力装置、入力制御方法、コンピュータプログラム、及び記憶媒体 | |
JP6514889B2 (ja) | 情報処理装置、情報処理プログラム、情報処理システム、および情報処理方法 | |
US9785253B2 (en) | Pointing device using camera and outputting mark | |
JP2011095984A (ja) | 画像表示装置 | |
JP6452585B2 (ja) | 情報処理装置および位置情報取得方法 | |
JP5947999B2 (ja) | タッチスクリーンに対する操作精度を向上する方法、電子機器およびコンピュータ・プログラム | |
KR101627049B1 (ko) | 단말기 | |
JP6170696B2 (ja) | 画像処理装置及び画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180725 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180828 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181018 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190402 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190415 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6514889 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |