JP2011054118A - 表示制御装置、表示制御方法及び表示制御プログラム - Google Patents
表示制御装置、表示制御方法及び表示制御プログラム Download PDFInfo
- Publication number
- JP2011054118A JP2011054118A JP2009204958A JP2009204958A JP2011054118A JP 2011054118 A JP2011054118 A JP 2011054118A JP 2009204958 A JP2009204958 A JP 2009204958A JP 2009204958 A JP2009204958 A JP 2009204958A JP 2011054118 A JP2011054118 A JP 2011054118A
- Authority
- JP
- Japan
- Prior art keywords
- operator
- coordinate system
- screen
- range
- hand
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 29
- 238000004364 calculation method Methods 0.000 claims description 19
- 230000010365 information processing Effects 0.000 claims 1
- 230000006870 function Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 10
- 210000000887 face Anatomy 0.000 description 9
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 8
- 238000001514 detection method Methods 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 4
- 210000000245 forearm Anatomy 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
- G06F3/005—Input arrangements through a video camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Abstract
【解決手段】画面座標系のXd−Yd平面上での操作者の体の中心位置はそのままに、この中心位置を操作者座標系の原点として、この原点からの手の位置をもとに、ポインタPoの表示位置を算出する。また操作者の手が容易に届く範囲を判別して、この範囲とGUI画面130の大きさをもとに、この範囲の端まで手を動かしたときに、ポインタPoが画面の端に移動するように手の位置に対するスケーリングの割合を設定する。
【選択図】図15
Description
1.実施の形態
2.他の実施の形態
[1−1.実施の形態の概要]
まず、実施の形態の概要を説明する。因みに、この概要を説明した後、本実施の形態の具体例の説明に移る。
[1−2−1.多人数同時操作システムの構成]
次に、本実施の形態の具体例を説明する。図2において100は、同時に複数の操作者が操作することを想定した多人数同時操作システムを示す。
次に、図3を用いて、TV受像機101及びステレオカメラ102のハードウェア構成について説明する。
次に、TV受像機101のディスプレイ119に表示されるGUI画面と、このGUI画面上での操作について詳しく説明する。尚、ここでは、説明を簡単にする為、一人の操作者が操作する例を説明してから、複数の操作者が操作する例をすることとする。
h’y=hy−by……(2)
py=syh’y+by……(4)
……(5)
py=−1(py<−1)、py=py(−1≦py≦1)、py=1(py>1)
……(6)
……(11)
ここで、ポインタPoの表示に係わる処理の手順(これをポインタ表示処理手順とも呼ぶ)について説明する。因みに、このポインタ表示処理手順は、TV受像機101のCPU111が、不揮発性メモリ112に書き込まれているプログラムに従って実行するポインタ表示処理の手順である。
以上の構成において、TV受像機101のCPU111は、ステレオカメラ102で撮像したカメラ画像から、TV受像機101の前方にいる操作者の顔と手を検出する。
[2−1.他の実施の形態1]
尚、上述した実施の形態の具体例では、操作者の体の左右方向がカメラ座標系のXc軸に対して平行(すなわち体の前後方向がカメラ座標系のZc軸に対して平行)であることを前提として、ポインタPoの位置(px、py、pz)を算出した。
+sinθ(hz−bz)+αbzbx)……(13)
h’’y=hy……(14)
h’’z=sinθ(αhzhx−αbzbx)−cosθ(bz−hz)
+bz……(15)
h’y=h’’y−by……(18)
h’z=bz−h’’z……(19)
また上述した実施の形態の具体例では、操作者座標系での操作者の手の位置に対するスケーリングの割合sx、sy、szは、操作範囲内で一定とした。これに限らず、スケーリングの割合sx、sy、szを操作範囲内で変化させるようにしてもよい。
さらに上述した実施の形態の具体例では、TV受像機101が、人間の平均的な顔と体の大きさの関係をもとに、カメラ画像から検出した操作者の顔領域の大きさから、操作者の体の大きさを推定して、操作範囲を自動的に判別するようにした。
さらに上述した実施の形態の具体例では、ステレオカメラ102で撮像したカメラ画像から操作者の手の位置を検出して、この手の位置をもとにポインタPoのGUI画面130上での表示位置を算出するようにした。
また上述した実施の形態の具体例では、TV受像機101に対して、ステレオカメラ102が外部接続されるようにした。これに限らず、TV受像機101にステレオカメラ102を内蔵させるようにしてもよい。
さらに上述した実施の形態の具体例では、上下左右方向にくわえて奥行き方向を仮想的に有する3次元画面としてのGUI画面130に本発明を適用するようにした。これに限らず、ポインタ操作し得る画面であれば、上下左右方向のみの2次元画面に本発明を適用してもよく、また適用することができる。
さらに、上述した実施の形態の具体例では、表示制御装置としてのTV受像機101に、認識部、算出部、制御部、判別部としてのCPU111を設けるようにした。
さらに上述した実施の形態の具体例では、各種処理を実行するためのプログラムを、TV受像機101の不揮発性メモリ112に書き込んでおくようにした。
さらに本発明は、上述した実施の形態の概要及び具体例と他の実施の形態とに限定されるものではない。すなわち本発明は、上述した実施の形態の概要及び具体例と他の実施の形態の一部または全部を任意に組み合わせた形態、もしくは一部を抽出した形態にもその適用範囲が及ぶものである。
Claims (10)
- 操作者の位置と当該操作者の操作手段の位置とを認識する認識部と、
画面に設定された画面座標系での上記操作者の位置を操作者座標系の原点とし、当該操作者座標系の原点からの上記操作手段の位置に所定の関数を乗じて、当該操作手段に対応する表示情報の画面座標系での位置を算出する算出部と、
上記算出部が算出した上記画面座標系での位置に、上記表示情報を表示させる制御部と
を具える表示制御装置。 - 上記認識部は、
カメラ画像から上記操作者の位置と上記操作手段の位置とを認識し、
上記算出部は、
上記画面座標系と同一座標系として設定された上記カメラ画像の画像座標系での上記操作者の位置を操作者座標系の原点とし、当該操作者座標系の原点からの上記操作手段の位置に所定の関数を乗じて、当該操作手段に対応する表示情報の画面座標系での位置を算出する
請求項1に記載の表示制御装置。 - さらに上記操作手段の操作範囲を判別する判別部を具え、
上記算出部は、
上記判別部により判別された操作範囲と上記画面のサイズとに基づく関数を、上記操作者座標系の原点からの上記操作手段の位置に乗じる
請求項2に記載の表示制御装置。 - 上記操作手段の位置は、上記操作者の手の位置であり
上記認識部は、
上記カメラ画像から上記操作者の体の大きさを認識し、
上記判別部は、
上記認識部により認識された上記操作者の体の大きさをもとに、上記操作者の位置から手が届く範囲を推定して、当該範囲を上記操作手段の操作範囲とする
請求項3に記載の表示制御装置。 - 上記認識部は、
上記カメラ画像から上記操作者の顔を認識し、
上記判別部は、
上記認識部により認識された上記操作者の顔から当該操作者の年齢を推定して、当該年齢をもとに、当該顔の大きさから体の大きさを推定する
請求項4に記載の表示制御装置。 - 上記認識部は、
上記カメラ画像から上記操作手段によるジェスチャ操作を認識し、
上記判別部は、
上記認識部により上記操作範囲を指定する為のジェスチャ操作が認識されると、当該ジェスチャ操作により示された範囲を上記操作範囲とする
請求項3に記載の表示制御装置。 - 上記画面座標系は、上下左右方向にくわえて奥行き方向を有する3次元座標系であり、
上記認識部は、
カメラ画像から上記操作者の位置及び体の大きさと、上記操作手段の位置とにくわえて、当該操作者の位置から当該操作手段までの距離を認識し、
上記算出部は、
上記画像座標系での上記操作者の位置を操作者座標系の原点とし、当該操作者座標系の原点からの上記操作手段の位置に所定の関数を乗じて、当該操作手段に対応する表示情報の画面座標系での上下左右方向の位置を算出すると共に、上記操作者の位置から上記操作手段までの距離に所定の関数を乗じて、当該操作手段に対応する表示情報の画面座標系での奥行き方向の位置を算出し、
上記判別部は、
上記認識部により認識された上記操作者の体の大きさをもとに上記操作者の位置から手が届く上下左右方向の範囲と奥行き方向の範囲を推定して、当該範囲を上記操作手段の操作範囲とする
請求項4に記載の表示制御装置。 - 上記認識部は、
カメラ画像から上記操作者の腕の長さを認識し、
上記判別部は、
上記操作範囲の奥行き方向の範囲を、腕の長さ/√2の範囲とする
請求項7に記載の表示制御装置。 - 情報処理装置が、
操作者の位置と当該操作者の操作手段の位置とを認識し、
画面に設定された画面座標系での上記操作者の位置を操作者座標系の原点とし、当該操作者座標系の原点からの上記操作手段の位置に所定の関数を乗じて、当該操作手段に対応する表示情報の画面座標系での位置を算出し、
算出した上記画面座標系での位置に、上記表示情報を表示させる
表示制御方法。 - コンピュータに、
操作者の位置と当該操作者の操作手段の位置とを認識する認識ステップと、
画面に設定された画面座標系での上記操作者の位置を操作者座標系の原点とし、当該操作者座標系の原点からの上記操作手段の位置に所定の関数を乗じて、当該操作手段に対応する表示情報の画面座標系での位置を算出する算出ステップと、
上記算出ステップで算出した上記画面座標系での位置に、上記表示情報を表示させる表示ステップと
を実行させるための表示制御プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009204958A JP5614014B2 (ja) | 2009-09-04 | 2009-09-04 | 情報処理装置、表示制御方法及び表示制御プログラム |
US12/806,966 US9342142B2 (en) | 2009-09-04 | 2010-08-25 | Display control apparatus, display control method, and display control program |
CN2010102667064A CN102012778A (zh) | 2009-09-04 | 2010-08-27 | 显示控制设备、显示控制方法以及显示控制程序 |
US15/095,308 US9830004B2 (en) | 2009-09-04 | 2016-04-11 | Display control apparatus, display control method, and display control program |
US15/784,314 US10606380B2 (en) | 2009-09-04 | 2017-10-16 | Display control apparatus, display control method, and display control program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009204958A JP5614014B2 (ja) | 2009-09-04 | 2009-09-04 | 情報処理装置、表示制御方法及び表示制御プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011054118A true JP2011054118A (ja) | 2011-03-17 |
JP2011054118A5 JP2011054118A5 (ja) | 2012-10-11 |
JP5614014B2 JP5614014B2 (ja) | 2014-10-29 |
Family
ID=43647353
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009204958A Expired - Fee Related JP5614014B2 (ja) | 2009-09-04 | 2009-09-04 | 情報処理装置、表示制御方法及び表示制御プログラム |
Country Status (3)
Country | Link |
---|---|
US (3) | US9342142B2 (ja) |
JP (1) | JP5614014B2 (ja) |
CN (1) | CN102012778A (ja) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013206272A (ja) * | 2012-03-29 | 2013-10-07 | Sony Corp | 情報処理装置、情報処理方法及びコンピュータプログラム |
WO2013175845A1 (en) * | 2012-05-23 | 2013-11-28 | Kabushiki Kaisha Toshiba | Information processing apparatus, information processing method, and program |
WO2013175844A1 (en) * | 2012-05-23 | 2013-11-28 | Kabushiki Kaisha Toshiba | Information processing apparatus, information processing method, and program |
JP2014203417A (ja) * | 2013-04-10 | 2014-10-27 | コニカミノルタ株式会社 | 制御装置及び操作制御方法並びに操作制御プログラム |
JP5709227B2 (ja) * | 2011-04-28 | 2015-04-30 | Necソリューションイノベータ株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP5769277B2 (ja) * | 2011-04-27 | 2015-08-26 | Necソリューションイノベータ株式会社 | 入力装置、入力方法及びプログラム |
JP5928757B2 (ja) * | 2012-11-06 | 2016-06-01 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置 |
WO2016103769A1 (ja) * | 2014-12-26 | 2016-06-30 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
JP2017004553A (ja) * | 2016-08-22 | 2017-01-05 | ソニー株式会社 | 情報処理装置、情報処理方法及びコンピュータプログラム |
WO2019054037A1 (ja) * | 2017-09-12 | 2019-03-21 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019164440A (ja) * | 2018-03-19 | 2019-09-26 | 株式会社リコー | 情報処理装置及び情報処理方法 |
JP2019200566A (ja) * | 2018-05-16 | 2019-11-21 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
Families Citing this family (70)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2455841A3 (en) * | 2010-11-22 | 2015-07-15 | Samsung Electronics Co., Ltd. | Apparatus and method for selecting item using movement of object |
WO2012129669A1 (en) * | 2011-03-28 | 2012-10-04 | Gestsure Technologies Inc. | Gesture operated control for medical information systems |
US9189825B2 (en) * | 2011-04-12 | 2015-11-17 | Lg Electronics Inc. | Electronic device and method for displaying stereoscopic image |
JP5298161B2 (ja) * | 2011-06-13 | 2013-09-25 | シャープ株式会社 | 操作装置及び画像形成装置 |
US11048333B2 (en) * | 2011-06-23 | 2021-06-29 | Intel Corporation | System and method for close-range movement tracking |
DE102011112618A1 (de) * | 2011-09-08 | 2013-03-14 | Eads Deutschland Gmbh | Interaktion mit einem dreidimensionalen virtuellen Szenario |
CN102999152B (zh) * | 2011-09-09 | 2016-06-29 | 康佳集团股份有限公司 | 一种手势动作识别方法和系统 |
US9142182B2 (en) * | 2011-10-07 | 2015-09-22 | Lg Electronics Inc. | Device and control method thereof |
TWI437467B (zh) | 2011-10-11 | 2014-05-11 | Ind Tech Res Inst | 顯示控制裝置及顯示控制方法 |
JP2013097593A (ja) * | 2011-11-01 | 2013-05-20 | Sony Corp | 情報処理装置、情報処理方法及びプログラム |
US9164579B2 (en) * | 2011-11-15 | 2015-10-20 | Lg Electronics Inc. | Electronic device for granting authority based on context awareness information |
US8847881B2 (en) * | 2011-11-18 | 2014-09-30 | Sony Corporation | Gesture and voice recognition for control of a device |
EP2788839A4 (en) * | 2011-12-06 | 2015-12-16 | Thomson Licensing | METHOD AND SYSTEM FOR RESPONDING TO USER GESTURES FOR SELECTION OF OBJECTS DISPLAYED IN THREE DIMENSIONS |
US8638989B2 (en) | 2012-01-17 | 2014-01-28 | Leap Motion, Inc. | Systems and methods for capturing motion in three-dimensional space |
US9679215B2 (en) | 2012-01-17 | 2017-06-13 | Leap Motion, Inc. | Systems and methods for machine control |
US8693731B2 (en) | 2012-01-17 | 2014-04-08 | Leap Motion, Inc. | Enhanced contrast for object detection and characterization by optical imaging |
US9070019B2 (en) | 2012-01-17 | 2015-06-30 | Leap Motion, Inc. | Systems and methods for capturing motion in three-dimensional space |
US11493998B2 (en) | 2012-01-17 | 2022-11-08 | Ultrahaptics IP Two Limited | Systems and methods for machine control |
US9501152B2 (en) | 2013-01-15 | 2016-11-22 | Leap Motion, Inc. | Free-space user interface and control using virtual constructs |
US10691219B2 (en) | 2012-01-17 | 2020-06-23 | Ultrahaptics IP Two Limited | Systems and methods for machine control |
US20150253428A1 (en) | 2013-03-15 | 2015-09-10 | Leap Motion, Inc. | Determining positional information for an object in space |
JP2013207356A (ja) * | 2012-03-27 | 2013-10-07 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
TWI454966B (zh) * | 2012-04-24 | 2014-10-01 | Wistron Corp | 手勢控制方法及手勢控制裝置 |
US8994650B2 (en) | 2012-04-27 | 2015-03-31 | Qualcomm Incorporated | Processing image input to communicate a command to a remote display device |
TW201405443A (zh) | 2012-07-17 | 2014-02-01 | Wistron Corp | 手勢輸入系統及方法 |
TWI475496B (zh) * | 2012-10-16 | 2015-03-01 | Wistron Corp | 手勢控制裝置及於手勢控制裝置中設定及取消手勢操作區域之方法 |
US9285893B2 (en) | 2012-11-08 | 2016-03-15 | Leap Motion, Inc. | Object detection and tracking with variable-field illumination devices |
TWI488092B (zh) | 2012-12-07 | 2015-06-11 | Pixart Imaging Inc | 光學式觸控裝置及其操作方法 |
US10609285B2 (en) | 2013-01-07 | 2020-03-31 | Ultrahaptics IP Two Limited | Power consumption in motion-capture systems |
US9465461B2 (en) | 2013-01-08 | 2016-10-11 | Leap Motion, Inc. | Object detection and tracking with audio and optical signals |
US9459697B2 (en) | 2013-01-15 | 2016-10-04 | Leap Motion, Inc. | Dynamic, free-space user interactions for machine control |
US10241639B2 (en) | 2013-01-15 | 2019-03-26 | Leap Motion, Inc. | Dynamic user interactions for display control and manipulation of display objects |
JP2014137627A (ja) * | 2013-01-15 | 2014-07-28 | Sony Corp | 入力装置、出力装置および記憶媒体 |
SE536902C2 (sv) * | 2013-01-22 | 2014-10-21 | Crunchfish Ab | Skalbar inmatning från spårat objekt i beröringsfritt användargränssnitt |
CN104063041B (zh) * | 2013-03-21 | 2018-02-27 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
US10620709B2 (en) | 2013-04-05 | 2020-04-14 | Ultrahaptics IP Two Limited | Customized gesture interpretation |
US9916009B2 (en) | 2013-04-26 | 2018-03-13 | Leap Motion, Inc. | Non-tactile interface systems and methods |
US9747696B2 (en) | 2013-05-17 | 2017-08-29 | Leap Motion, Inc. | Systems and methods for providing normalized parameters of motions of objects in three-dimensional space |
CN103399629B (zh) * | 2013-06-29 | 2017-09-19 | 华为技术有限公司 | 获取手势屏幕显示坐标的方法和装置 |
US10281987B1 (en) | 2013-08-09 | 2019-05-07 | Leap Motion, Inc. | Systems and methods of free-space gestural interaction |
US9721383B1 (en) | 2013-08-29 | 2017-08-01 | Leap Motion, Inc. | Predictive information for free space gesture control and communication |
US9632572B2 (en) | 2013-10-03 | 2017-04-25 | Leap Motion, Inc. | Enhanced field of view to augment three-dimensional (3D) sensory space for free-space gesture interpretation |
US9996638B1 (en) | 2013-10-31 | 2018-06-12 | Leap Motion, Inc. | Predictive information for free space gesture control and communication |
US9134764B2 (en) * | 2013-12-20 | 2015-09-15 | Sony Corporation | Apparatus and method for controlling a display based on a manner of holding the apparatus |
KR102215072B1 (ko) * | 2014-01-03 | 2021-02-10 | 삼성전자주식회사 | 디스플레이 장치 및 이의 제어 방법 |
US9613262B2 (en) | 2014-01-15 | 2017-04-04 | Leap Motion, Inc. | Object detection and tracking for providing a virtual device experience |
US20150309681A1 (en) * | 2014-04-23 | 2015-10-29 | Google Inc. | Depth-based mode switching for touchless gestural interfaces |
CN104317385A (zh) * | 2014-06-26 | 2015-01-28 | 青岛海信电器股份有限公司 | 一种手势识别方法和系统 |
CN204480228U (zh) | 2014-08-08 | 2015-07-15 | 厉动公司 | 运动感测和成像设备 |
CN105487646A (zh) * | 2014-09-16 | 2016-04-13 | 洪永川 | 一种手势遥控智能终端系统 |
CN105407371A (zh) * | 2014-09-16 | 2016-03-16 | 洪永川 | 一种电视系统 |
CN105407262A (zh) * | 2014-09-16 | 2016-03-16 | 洪永川 | 一种摄像头 |
CN105491209A (zh) * | 2014-09-16 | 2016-04-13 | 洪永川 | 一种智能终端系统 |
CN105491426A (zh) * | 2014-09-16 | 2016-04-13 | 洪永川 | 一种手势遥控电视系统 |
CN105404387A (zh) * | 2014-09-16 | 2016-03-16 | 洪永川 | 手势遥控智能终端系统 |
CN105491425A (zh) * | 2014-09-16 | 2016-04-13 | 洪永川 | 识别手势及遥控电视的方法 |
CN105630142A (zh) * | 2014-11-07 | 2016-06-01 | 中兴通讯股份有限公司 | 一种发布和传递识别信息的方法和装置及信息识别系统 |
US11061540B2 (en) * | 2015-01-21 | 2021-07-13 | Logmein, Inc. | Remote support service with smart whiteboard |
US9696795B2 (en) | 2015-02-13 | 2017-07-04 | Leap Motion, Inc. | Systems and methods of creating a realistic grab experience in virtual reality/augmented reality environments |
CN108369477B (zh) * | 2015-12-22 | 2021-10-29 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
US10537814B2 (en) * | 2015-12-27 | 2020-01-21 | Liwei Xu | Screen coding methods and camera based game controller for video shoot game |
JP6340464B1 (ja) * | 2017-09-27 | 2018-06-06 | 株式会社Cygames | プログラム、情報処理方法、情報処理システム、頭部装着型表示装置、情報処理装置 |
US11875012B2 (en) | 2018-05-25 | 2024-01-16 | Ultrahaptics IP Two Limited | Throwable interface for augmented reality and virtual reality environments |
CN109520415A (zh) * | 2018-09-18 | 2019-03-26 | 武汉移动互联工业技术研究院有限公司 | 通过摄像头实现六自由度传感的方法及系统 |
US20200167005A1 (en) * | 2018-11-28 | 2020-05-28 | Seiko Epson Corporation | Recognition device and recognition method |
CN111949111B (zh) * | 2019-05-14 | 2022-04-26 | Oppo广东移动通信有限公司 | 交互控制方法、装置、电子设备及存储介质 |
CN111949134A (zh) * | 2020-08-28 | 2020-11-17 | 深圳Tcl数字技术有限公司 | 人机交互方法、设备及计算机可读存储介质 |
TWI813907B (zh) * | 2020-09-30 | 2023-09-01 | 優派國際股份有限公司 | 觸控顯示裝置及其操作方法 |
CN112731030A (zh) * | 2020-12-23 | 2021-04-30 | 深圳市优必选科技股份有限公司 | 一种电子元器件的检测方法、装置、终端设备及存储介质 |
CN114911384B (zh) * | 2022-05-07 | 2023-05-12 | 青岛海信智慧生活科技股份有限公司 | 镜子显示器及其远程控制方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000267800A (ja) * | 1999-01-12 | 2000-09-29 | Takenaka Komuten Co Ltd | 動作認識装置 |
JP2004258714A (ja) * | 2003-02-24 | 2004-09-16 | Toshiba Corp | 画像表示装置 |
JP2007072564A (ja) * | 2005-09-05 | 2007-03-22 | Sony Computer Entertainment Inc | マルチメディア再生装置、メニュー操作受付方法およびコンピュータプログラム |
WO2009018161A1 (en) * | 2007-07-27 | 2009-02-05 | Gesturetek, Inc. | Enhanced camera-based input |
WO2009108894A1 (en) * | 2008-02-27 | 2009-09-03 | Gesturetek, Inc. | Enhanced input using recognized gestures |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4272711B2 (ja) * | 1995-05-15 | 2009-06-03 | キヤノン株式会社 | 画像生成方法及び装置 |
JP3968477B2 (ja) * | 1997-07-07 | 2007-08-29 | ソニー株式会社 | 情報入力装置及び情報入力方法 |
US7227526B2 (en) * | 2000-07-24 | 2007-06-05 | Gesturetek, Inc. | Video-based image control system |
JP4241763B2 (ja) * | 2006-05-29 | 2009-03-18 | 株式会社東芝 | 人物認識装置及びその方法 |
US8060841B2 (en) * | 2007-03-19 | 2011-11-15 | Navisense | Method and device for touchless media searching |
US8233677B2 (en) * | 2007-07-04 | 2012-07-31 | Sanyo Electric Co., Ltd. | Image sensing apparatus and image file data structure |
JP5412812B2 (ja) | 2007-12-07 | 2014-02-12 | ソニー株式会社 | 入力装置、制御装置、制御システム、及びハンドヘルド装置 |
US20090201249A1 (en) * | 2007-12-07 | 2009-08-13 | Sony Corporation | Input apparatus, control apparatus, control system, and handheld apparatus |
US8126221B2 (en) * | 2008-02-14 | 2012-02-28 | Ecole Polytechnique Federale De Lausanne (Epfl) | Interactive device and method for transmitting commands from a user |
CN101344816B (zh) * | 2008-08-15 | 2010-08-11 | 华南理工大学 | 基于视线跟踪和手势识别的人机交互方法及装置 |
US8145594B2 (en) * | 2009-05-29 | 2012-03-27 | Microsoft Corporation | Localized gesture aggregation |
-
2009
- 2009-09-04 JP JP2009204958A patent/JP5614014B2/ja not_active Expired - Fee Related
-
2010
- 2010-08-25 US US12/806,966 patent/US9342142B2/en not_active Expired - Fee Related
- 2010-08-27 CN CN2010102667064A patent/CN102012778A/zh active Pending
-
2016
- 2016-04-11 US US15/095,308 patent/US9830004B2/en not_active Expired - Fee Related
-
2017
- 2017-10-16 US US15/784,314 patent/US10606380B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000267800A (ja) * | 1999-01-12 | 2000-09-29 | Takenaka Komuten Co Ltd | 動作認識装置 |
JP2004258714A (ja) * | 2003-02-24 | 2004-09-16 | Toshiba Corp | 画像表示装置 |
JP2007072564A (ja) * | 2005-09-05 | 2007-03-22 | Sony Computer Entertainment Inc | マルチメディア再生装置、メニュー操作受付方法およびコンピュータプログラム |
WO2009018161A1 (en) * | 2007-07-27 | 2009-02-05 | Gesturetek, Inc. | Enhanced camera-based input |
WO2009108894A1 (en) * | 2008-02-27 | 2009-09-03 | Gesturetek, Inc. | Enhanced input using recognized gestures |
Cited By (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9323339B2 (en) | 2011-04-27 | 2016-04-26 | Nec Solution Innovators, Ltd. | Input device, input method and recording medium |
JP5769277B2 (ja) * | 2011-04-27 | 2015-08-26 | Necソリューションイノベータ株式会社 | 入力装置、入力方法及びプログラム |
JP5709227B2 (ja) * | 2011-04-28 | 2015-04-30 | Necソリューションイノベータ株式会社 | 情報処理装置、情報処理方法及びプログラム |
US9329673B2 (en) | 2011-04-28 | 2016-05-03 | Nec Solution Innovators, Ltd. | Information processing device, information processing method, and recording medium |
US10037078B2 (en) | 2012-03-29 | 2018-07-31 | Sony Corporation | Information processing apparatus, information processing method, and computer program |
US10437324B2 (en) | 2012-03-29 | 2019-10-08 | Sony Corporation | Information processing apparatus, information processing method, and computer program |
JP2013206272A (ja) * | 2012-03-29 | 2013-10-07 | Sony Corp | 情報処理装置、情報処理方法及びコンピュータプログラム |
JP2013246514A (ja) * | 2012-05-23 | 2013-12-09 | Toshiba Corp | 情報処理装置、情報処理方法、およびプログラム |
WO2013175844A1 (en) * | 2012-05-23 | 2013-11-28 | Kabushiki Kaisha Toshiba | Information processing apparatus, information processing method, and program |
WO2013175845A1 (en) * | 2012-05-23 | 2013-11-28 | Kabushiki Kaisha Toshiba | Information processing apparatus, information processing method, and program |
JP5928757B2 (ja) * | 2012-11-06 | 2016-06-01 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置 |
JPWO2014073384A1 (ja) * | 2012-11-06 | 2016-09-08 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置 |
JP2014203417A (ja) * | 2013-04-10 | 2014-10-27 | コニカミノルタ株式会社 | 制御装置及び操作制御方法並びに操作制御プログラム |
JPWO2016103769A1 (ja) * | 2014-12-26 | 2017-11-02 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
US9836130B2 (en) | 2014-12-26 | 2017-12-05 | Nextedge Technology K.K. | Operation input device, operation input method, and program |
WO2016103769A1 (ja) * | 2014-12-26 | 2016-06-30 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
JP2017004553A (ja) * | 2016-08-22 | 2017-01-05 | ソニー株式会社 | 情報処理装置、情報処理方法及びコンピュータプログラム |
WO2019054037A1 (ja) * | 2017-09-12 | 2019-03-21 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
JP2019164440A (ja) * | 2018-03-19 | 2019-09-26 | 株式会社リコー | 情報処理装置及び情報処理方法 |
JP2019200566A (ja) * | 2018-05-16 | 2019-11-21 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
JP7186999B2 (ja) | 2018-05-16 | 2022-12-12 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP5614014B2 (ja) | 2014-10-29 |
US20110057875A1 (en) | 2011-03-10 |
US9830004B2 (en) | 2017-11-28 |
CN102012778A (zh) | 2011-04-13 |
US10606380B2 (en) | 2020-03-31 |
US9342142B2 (en) | 2016-05-17 |
US20160224128A1 (en) | 2016-08-04 |
US20180046263A1 (en) | 2018-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5614014B2 (ja) | 情報処理装置、表示制御方法及び表示制御プログラム | |
JP6057396B2 (ja) | 3次元ユーザインタフェース装置及び3次元操作処理方法 | |
US8933882B2 (en) | User centric interface for interaction with visual display that recognizes user intentions | |
TWI649675B (zh) | Display device | |
JP5936155B2 (ja) | 3次元ユーザインタフェース装置及び3次元操作方法 | |
JP4608326B2 (ja) | 指示動作認識装置及び指示動作認識プログラム | |
US20140139429A1 (en) | System and method for computer vision based hand gesture identification | |
CN103150009B (zh) | 信息处理装置和信息处理方法 | |
CN111353930B (zh) | 数据处理方法及装置、电子设备及存储介质 | |
KR20120068253A (ko) | 사용자 인터페이스의 반응 제공 방법 및 장치 | |
US20150339859A1 (en) | Apparatus and method for navigating through volume image | |
WO2021154558A1 (en) | Augmented reality map curation | |
KR101330531B1 (ko) | 3차원 카메라를 이용한 가상 터치 방법 및 장치 | |
JP2004265222A (ja) | インタフェース方法、装置、およびプログラム | |
TW201606574A (zh) | 操作畫面顯示裝置、操作畫面顯示方法以及非暫時性之記錄媒體 | |
JP2017191426A (ja) | 入力装置、入力制御方法、コンピュータプログラム、及び記憶媒体 | |
JP4563723B2 (ja) | 指示動作認識装置及び指示動作認識プログラム | |
JP6632298B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6643825B2 (ja) | 装置及び方法 | |
JP2000306106A (ja) | 3次元有向体の定位方法及び画像処理装置 | |
JP2021189659A (ja) | 情報処理装置及びユーザの入力操作に基づく情報処理方法並びに該方法を実行するためのコンピュータプログラム | |
CN106095088B (zh) | 一种电子设备及其图像处理方法 | |
US20230343052A1 (en) | Information processing apparatus, information processing method, and program | |
JP2024100835A (ja) | 拡張現実マップキュレーション | |
JP2018109911A (ja) | 表示装置、指示検出装置及び画像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120828 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120828 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130523 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130611 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130806 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140516 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20140526 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140812 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140825 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5614014 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |