JP2011209965A - 情報処理装置、情報処理方法、およびプログラム - Google Patents
情報処理装置、情報処理方法、およびプログラム Download PDFInfo
- Publication number
- JP2011209965A JP2011209965A JP2010076301A JP2010076301A JP2011209965A JP 2011209965 A JP2011209965 A JP 2011209965A JP 2010076301 A JP2010076301 A JP 2010076301A JP 2010076301 A JP2010076301 A JP 2010076301A JP 2011209965 A JP2011209965 A JP 2011209965A
- Authority
- JP
- Japan
- Prior art keywords
- image
- finger
- target device
- user
- operation target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 57
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000000034 method Methods 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 17
- 238000013500 data storage Methods 0.000 description 32
- 238000004891 communication Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 15
- 238000000605 extraction Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 5
- 238000003786 synthesis reaction Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 241000985694 Polypodiopsida Species 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
- G06F3/005—Input arrangements through a video camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00352—Input means
- H04N1/00381—Input by recognition or interpretation of visible user gestures
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
- G02B2027/0174—Head mounted characterised by optical features holographic
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Signal Processing (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Selective Calling Equipment (AREA)
- Studio Devices (AREA)
Abstract
【解決手段】ユーザUが携帯する情報処理装置1においては、カメラ11により撮影された画像に基づいて、ユーザUが見ている物体が何であるのかが物体認識により認識される。情報処理装置1には物体の認識用のデータが記憶されている。また、ユーザUが操作対象機器21を見ていることが検出された場合、操作対象機器21のGUIデータに基づいて、ボタンなどの操作画像がディスプレイ12に表示される。情報処理装置1には、機器の操作に用いられる操作画像を表示するためのGUIデータが記憶されている。ユーザは、ディスプレイ12に表示されたボタンを仮想的に押すことによって、操作対象機器21を操作することが可能になる。本発明は、携帯型のコンピュータに適用することができる。
【選択図】図1
Description
[MR(Mixed Reality)システム]
図1は、本発明の一実施形態に係る情報処理装置を用いたMRシステムの外観例を示す図である。
図5は、情報処理装置1のハードウェア構成例を示すブロック図である。
ここで、図8のフローチャートを参照して、操作画像を表示する情報処理装置1の処理について説明する。図8の処理は、例えば、カメラ11により撮影が行われている間、繰り返し行われる。
操作画像の表示をユーザUが好みに応じてカスタマイズすることができるようにしてもよい。
図18は、携帯端末の外観の例を示す図である。
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または汎用のパーソナルコンピュータなどに、プログラム記録媒体からインストールされる。
Claims (8)
- 操作対象機器の外観の特徴を表すデータと、前記操作対象機器の操作に用いられる操作画像のデータを記憶する記憶手段と、
カメラにより撮影された画像を取得する取得手段と、
前記画像に含まれる物体を、前記記憶手段に記憶されている前記特徴量のデータに基づいて認識する認識手段と、
前記画像に含まれる物体が前記操作対象機器であると前記認識手段により認識された場合、前記記憶手段に記憶されている前記操作画像のデータに基づいて前記操作画像を表示させる表示制御手段と
を備える情報処理装置。 - 前記表示制御手段は、前記画像に含まれる前記操作対象機器の、前記画像上の位置に対応するディスプレイの位置に、前記操作画像を表示させる
請求項1に記載の情報処理装置。 - 前記カメラにより撮影された前記画像に含まれる前記ユーザの指の前記画像上の位置を認識する指認識手段と、
前記指認識手段により認識された前記ユーザの指の前記画像上の位置が、ディスプレイに表示された前記操作画像の位置に対応する位置である場合、前記操作画像を用いた操作を指示するコマンドを前記操作対象機器に送信する制御手段と
をさらに備える請求項1に記載の情報処理装置。 - 前記指認識手段は、前記画像に含まれる前記ユーザの指の前記画像上の大きさをさらに認識し、
前記制御手段は、前記ユーザの指の前記画像上の位置が、前記ディスプレイに表示された前記操作画像の位置に対応する位置にあり、その位置で、前記ユーザの指の前記画像上の大きさが、直前の大きさより小さくなり再度大きくなったタイミングで、前記コマンドを送信する
請求項3に記載の情報処理装置。 - 前記指認識手段は、前記画像に含まれる前記ユーザの指の前記画像上の大きさをさらに認識し、
前記制御手段は、前記ユーザの指の前記画像上の位置が、前記ディスプレイに表示された前記操作画像の位置に対応する位置にあり、その位置で、前記ユーザの指の前記画像上の大きさが、直前の大きさより小さくなったタイミングで、前記コマンドを送信する
請求項3に記載の情報処理装置。 - 前記操作画像の表示に関する設定の内容を表す設定情報を記憶する設定情報記憶手段をさらに備え、
前記表示制御手段は、前記設定情報の内容に従って前記操作画像の表示を制御する
請求項1に記載の情報処理装置。 - 操作対象機器の外観の特徴を表すデータと、前記操作対象機器の操作に用いられる操作画像のデータを記憶し、
カメラにより撮影された画像を取得し、
前記画像に含まれる物体を、記憶している前記特徴量のデータに基づいて認識し、
前記画像に含まれる物体が前記操作対象機器であると認識した場合、記憶している前記操作画像のデータに基づいて前記操作画像を表示させる
ステップを含む情報処理方法。 - 操作対象機器の外観の特徴を表すデータと、前記操作対象機器の操作に用いられる操作画像のデータを記憶し、
カメラにより撮影された画像を取得し、
前記画像に含まれる物体を、記憶している前記特徴量のデータに基づいて認識し、
前記画像に含まれる物体が前記操作対象機器であると認識した場合、記憶している前記操作画像のデータに基づいて前記操作画像を表示させる
ステップを含む処理をコンピュータに実行させるプログラム。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010076301A JP5743416B2 (ja) | 2010-03-29 | 2010-03-29 | 情報処理装置、情報処理方法、およびプログラム |
EP11153634.8A EP2372495B1 (en) | 2010-03-29 | 2011-02-08 | Remote control of a target device using a camera and a display |
US13/049,445 US9058057B2 (en) | 2010-03-29 | 2011-03-16 | Information processor, information processing method and program |
KR1020110025181A KR20110109883A (ko) | 2010-03-29 | 2011-03-22 | 정보 처리 장치, 정보 처리 방법 및 프로그램 |
CN201110074093.9A CN102207819B (zh) | 2010-03-29 | 2011-03-22 | 信息处理器和信息处理方法 |
US14/708,680 US9891715B2 (en) | 2010-03-29 | 2015-05-11 | Information processor, information processing method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010076301A JP5743416B2 (ja) | 2010-03-29 | 2010-03-29 | 情報処理装置、情報処理方法、およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011209965A true JP2011209965A (ja) | 2011-10-20 |
JP2011209965A5 JP2011209965A5 (ja) | 2013-03-21 |
JP5743416B2 JP5743416B2 (ja) | 2015-07-01 |
Family
ID=44484929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010076301A Expired - Fee Related JP5743416B2 (ja) | 2010-03-29 | 2010-03-29 | 情報処理装置、情報処理方法、およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US9058057B2 (ja) |
EP (1) | EP2372495B1 (ja) |
JP (1) | JP5743416B2 (ja) |
KR (1) | KR20110109883A (ja) |
CN (1) | CN102207819B (ja) |
Cited By (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013120502A (ja) * | 2011-12-07 | 2013-06-17 | Fujitsu Ltd | 画像処理装置、画像処理方法 |
JP2013161267A (ja) * | 2012-02-06 | 2013-08-19 | Sony Corp | 情報処理装置、情報処理方法及びプログラム |
JP2013205920A (ja) * | 2012-03-27 | 2013-10-07 | Seiko Epson Corp | 頭部装着型表示装置 |
JP2014044476A (ja) * | 2012-08-24 | 2014-03-13 | Fujitsu Ltd | 画像処理装置、画像処理方法 |
WO2014045683A1 (ja) * | 2012-09-21 | 2014-03-27 | ソニー株式会社 | 制御装置および記憶媒体 |
WO2014054211A1 (en) | 2012-10-01 | 2014-04-10 | Sony Corporation | Information processing device, display control method, and program for modifying scrolling of automatically scrolled content |
CN103891305A (zh) * | 2012-03-12 | 2014-06-25 | 株式会社Ntt都科摩 | 远程控制系统、远程控制方法、通信装置和程序 |
JP2014131094A (ja) * | 2012-12-28 | 2014-07-10 | Seiko Epson Corp | 表示装置、および、表示装置の制御方法 |
WO2014136373A1 (en) | 2013-03-08 | 2014-09-12 | Sony Corporation | Information processing apparatus, information processing method, and program |
JP2015213212A (ja) * | 2014-05-01 | 2015-11-26 | セイコーエプソン株式会社 | 頭部装着型表示装置、制御システム、および、頭部装着型表示装置の制御方法 |
JP2016015024A (ja) * | 2014-07-02 | 2016-01-28 | 株式会社東芝 | 操作支援装置及び操作支援システム |
KR20160023889A (ko) * | 2013-06-25 | 2016-03-03 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 위치 신호를 통한 사용자 인터페이스 요소들의 선택 |
JP2016519377A (ja) * | 2013-05-09 | 2016-06-30 | アマゾン・テクノロジーズ、インコーポレイテッド | コンピューティングデバイスのための認識インターフェース |
JP2016148968A (ja) * | 2015-02-12 | 2016-08-18 | セイコーエプソン株式会社 | 頭部装着型表示装置、制御システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム |
JP2016206617A (ja) * | 2015-04-28 | 2016-12-08 | 京セラドキュメントソリューションズ株式会社 | 表示システム |
JP2016207115A (ja) * | 2015-04-28 | 2016-12-08 | 京セラドキュメントソリューションズ株式会社 | 情報処理装置、画像処理装置へのジョブ指示方法 |
JP2017507430A (ja) * | 2014-03-03 | 2017-03-16 | ノキア テクノロジーズ オーユー | 装置と別装置との間の入力軸 |
JP2017063444A (ja) * | 2016-10-28 | 2017-03-30 | セイコーエプソン株式会社 | 表示装置、頭部装着型表示装置および表示装置の制御方法 |
JP2017117159A (ja) * | 2015-12-24 | 2017-06-29 | シャープ株式会社 | 端末装置及び双方向通信システム |
JP2017139000A (ja) * | 2017-03-16 | 2017-08-10 | セイコーエプソン株式会社 | 表示装置、および、表示装置の制御方法 |
JP6244069B1 (ja) * | 2017-04-17 | 2017-12-06 | 株式会社オプティム | 遠隔作業支援システム、遠隔作業支援方法、及びプログラム |
JP6257826B1 (ja) * | 2017-05-31 | 2018-01-10 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 |
US9965048B2 (en) | 2014-05-01 | 2018-05-08 | Seiko Epson Corporation | Head-mount type display device, control system, method of controlling head-mount type display device, and computer program |
WO2019181143A1 (ja) * | 2018-03-22 | 2019-09-26 | 三菱自動車工業株式会社 | 車両制御システム |
JP2020513618A (ja) * | 2016-12-05 | 2020-05-14 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 複合現実環境における仮想ユーザ入力制御 |
JP2020095579A (ja) * | 2018-12-14 | 2020-06-18 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム、記録媒体、および、情報処理システム |
WO2021246795A1 (ko) * | 2020-06-04 | 2021-12-09 | 주식회사 브이터치 | 제스처를 인식하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 |
US11334765B2 (en) | 2017-07-26 | 2022-05-17 | Magic Leap, Inc. | Training a neural network with representations of user interface devices |
WO2023228337A1 (ja) * | 2022-05-25 | 2023-11-30 | 日本電信電話株式会社 | 提示システム、提示方法及び提示プログラム |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5731272B2 (ja) * | 2011-05-09 | 2015-06-10 | 双葉電子工業株式会社 | 被操縦体の無線操縦装置 |
US8941560B2 (en) * | 2011-09-21 | 2015-01-27 | Google Inc. | Wearable computer with superimposed controls and instructions for external device |
US9606992B2 (en) * | 2011-09-30 | 2017-03-28 | Microsoft Technology Licensing, Llc | Personal audio/visual apparatus providing resource management |
JP6008086B2 (ja) * | 2012-03-26 | 2016-10-19 | セイコーエプソン株式会社 | 頭部装着型表示装置 |
US9170674B2 (en) * | 2012-04-09 | 2015-10-27 | Qualcomm Incorporated | Gesture-based device control using pressure-sensitive sensors |
CN103425380A (zh) * | 2012-05-14 | 2013-12-04 | 联想(北京)有限公司 | 一种信息处理的方法和设备 |
US9317113B1 (en) * | 2012-05-31 | 2016-04-19 | Amazon Technologies, Inc. | Gaze assisted object recognition |
JP5787099B2 (ja) | 2012-11-06 | 2015-09-30 | コニカミノルタ株式会社 | 案内情報表示装置 |
JP6102213B2 (ja) * | 2012-11-22 | 2017-03-29 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
US20140152558A1 (en) * | 2012-11-30 | 2014-06-05 | Tom Salter | Direct hologram manipulation using imu |
CN103873959B (zh) * | 2012-12-13 | 2019-02-05 | 联想(北京)有限公司 | 一种控制方法和电子设备 |
US9791921B2 (en) | 2013-02-19 | 2017-10-17 | Microsoft Technology Licensing, Llc | Context-aware augmented reality object commands |
US9766709B2 (en) * | 2013-03-15 | 2017-09-19 | Leap Motion, Inc. | Dynamic user interactions for display control |
US20140285520A1 (en) * | 2013-03-22 | 2014-09-25 | Industry-University Cooperation Foundation Hanyang University | Wearable display device using augmented reality |
CN105493173A (zh) * | 2013-06-28 | 2016-04-13 | 诺基亚技术有限公司 | 支持设备的功能的激活 |
JP6206099B2 (ja) * | 2013-11-05 | 2017-10-04 | セイコーエプソン株式会社 | 画像表示システム、画像表示システムを制御する方法、および、頭部装着型表示装置 |
DE202014103729U1 (de) | 2014-08-08 | 2014-09-09 | Leap Motion, Inc. | Augmented-Reality mit Bewegungserfassung |
US20170231064A1 (en) * | 2014-09-25 | 2017-08-10 | Philips Lighting Holding B.V. | Control of lighting |
EP3007146A1 (en) | 2014-10-07 | 2016-04-13 | Thomson Licensing | System for controlling an electronic device and head mounted unit for such a system |
CN105635776B (zh) * | 2014-11-06 | 2019-03-01 | 深圳Tcl新技术有限公司 | 虚拟操作界面遥控控制方法及系统 |
CN105653248A (zh) * | 2014-11-14 | 2016-06-08 | 索尼公司 | 控制装置、方法以及电子设备 |
CN105141913A (zh) * | 2015-08-18 | 2015-12-09 | 华为技术有限公司 | 可视化远程控制可触控设备的方法、系统和相关设备 |
CN105138123B (zh) * | 2015-08-24 | 2018-10-26 | 小米科技有限责任公司 | 设备控制方法及装置 |
CN105528081B (zh) * | 2015-12-31 | 2019-02-19 | 广州创幻数码科技有限公司 | 一种混合现实显示方法、装置及系统 |
CN105528083B (zh) * | 2016-01-12 | 2018-10-23 | 广州创幻数码科技有限公司 | 一种混合现实识别关联方法及装置 |
US20180164895A1 (en) * | 2016-02-23 | 2018-06-14 | Sony Corporation | Remote control apparatus, remote control method, remote control system, and program |
EP3440897B1 (en) * | 2016-04-06 | 2020-02-05 | Signify Holding B.V. | Controlling a lighting system |
US11044405B1 (en) * | 2016-09-16 | 2021-06-22 | Apple Inc. | Location systems for electronic device interactions with environment |
CN106980374A (zh) * | 2017-03-28 | 2017-07-25 | 联想(北京)有限公司 | 显示控制方法、显示控制装置及电子设备 |
US10068403B1 (en) * | 2017-09-21 | 2018-09-04 | Universal City Studios Llc | Locker management techniques |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004246578A (ja) * | 2003-02-13 | 2004-09-02 | Nippon Telegr & Teleph Corp <Ntt> | 自己画像表示を用いたインタフェース方法、装置、およびプログラム |
JP2006146803A (ja) * | 2004-11-24 | 2006-06-08 | Olympus Corp | 操作装置及び遠隔操作システム |
JP2007259329A (ja) * | 2006-03-24 | 2007-10-04 | Fujifilm Corp | 遠隔制御装置、システムおよび方法 |
JP2010015360A (ja) * | 2008-07-03 | 2010-01-21 | Japan Health Science Foundation | 制御システム及び制御方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3259366B2 (ja) | 1992-10-30 | 2002-02-25 | ソニー株式会社 | 遠隔操作装置 |
US6937742B2 (en) * | 2001-09-28 | 2005-08-30 | Bellsouth Intellectual Property Corporation | Gesture activated home appliance |
JP2005031045A (ja) * | 2003-07-11 | 2005-02-03 | Olympus Corp | 情報呈示装置及び情報呈示システム |
JP2005149409A (ja) * | 2003-11-19 | 2005-06-09 | Canon Inc | 画像再生方法及び装置 |
US7903838B2 (en) * | 2004-01-30 | 2011-03-08 | Evolution Robotics, Inc. | Vision-enabled household appliances |
JP2005339266A (ja) * | 2004-05-27 | 2005-12-08 | Canon Inc | 情報処理方法、情報処理装置、撮像装置 |
US7567241B2 (en) * | 2004-08-03 | 2009-07-28 | Silverbrook Research Pty Ltd | Stylus with customizable appearance |
JP4676303B2 (ja) * | 2005-10-18 | 2011-04-27 | 株式会社日立製作所 | 端末装置 |
US7620316B2 (en) * | 2005-11-28 | 2009-11-17 | Navisense | Method and device for touchless control of a camera |
JP2009146333A (ja) * | 2007-12-18 | 2009-07-02 | Panasonic Corp | 空間入力動作表示装置 |
JP4720874B2 (ja) * | 2008-08-14 | 2011-07-13 | ソニー株式会社 | 情報処理装置、情報処理方法および情報処理プログラム |
JP4720890B2 (ja) | 2008-09-26 | 2011-07-13 | ブラザー工業株式会社 | 液体吐出装置 |
-
2010
- 2010-03-29 JP JP2010076301A patent/JP5743416B2/ja not_active Expired - Fee Related
-
2011
- 2011-02-08 EP EP11153634.8A patent/EP2372495B1/en active Active
- 2011-03-16 US US13/049,445 patent/US9058057B2/en active Active
- 2011-03-22 KR KR1020110025181A patent/KR20110109883A/ko not_active Application Discontinuation
- 2011-03-22 CN CN201110074093.9A patent/CN102207819B/zh active Active
-
2015
- 2015-05-11 US US14/708,680 patent/US9891715B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004246578A (ja) * | 2003-02-13 | 2004-09-02 | Nippon Telegr & Teleph Corp <Ntt> | 自己画像表示を用いたインタフェース方法、装置、およびプログラム |
JP2006146803A (ja) * | 2004-11-24 | 2006-06-08 | Olympus Corp | 操作装置及び遠隔操作システム |
JP2007259329A (ja) * | 2006-03-24 | 2007-10-04 | Fujifilm Corp | 遠隔制御装置、システムおよび方法 |
JP2010015360A (ja) * | 2008-07-03 | 2010-01-21 | Japan Health Science Foundation | 制御システム及び制御方法 |
Cited By (48)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9213897B2 (en) | 2011-12-07 | 2015-12-15 | Fujitsu Limited | Image processing device and method |
JP2013120502A (ja) * | 2011-12-07 | 2013-06-17 | Fujitsu Ltd | 画像処理装置、画像処理方法 |
JP2013161267A (ja) * | 2012-02-06 | 2013-08-19 | Sony Corp | 情報処理装置、情報処理方法及びプログラム |
US9674264B2 (en) | 2012-03-12 | 2017-06-06 | Ntt Docomo, Inc. | Remote control system, remote control method, communication device, and program |
CN103891305A (zh) * | 2012-03-12 | 2014-06-25 | 株式会社Ntt都科摩 | 远程控制系统、远程控制方法、通信装置和程序 |
JP2013205920A (ja) * | 2012-03-27 | 2013-10-07 | Seiko Epson Corp | 頭部装着型表示装置 |
JP2014044476A (ja) * | 2012-08-24 | 2014-03-13 | Fujitsu Ltd | 画像処理装置、画像処理方法 |
WO2014045683A1 (ja) * | 2012-09-21 | 2014-03-27 | ソニー株式会社 | 制御装置および記憶媒体 |
US10318028B2 (en) | 2012-09-21 | 2019-06-11 | Sony Corporation | Control device and storage medium |
US9791948B2 (en) | 2012-09-21 | 2017-10-17 | Sony Corporation | Control device and storage medium |
JPWO2014045683A1 (ja) * | 2012-09-21 | 2016-08-18 | ソニー株式会社 | 制御装置および記憶媒体 |
WO2014054211A1 (en) | 2012-10-01 | 2014-04-10 | Sony Corporation | Information processing device, display control method, and program for modifying scrolling of automatically scrolled content |
JP2014131094A (ja) * | 2012-12-28 | 2014-07-10 | Seiko Epson Corp | 表示装置、および、表示装置の制御方法 |
WO2014136373A1 (en) | 2013-03-08 | 2014-09-12 | Sony Corporation | Information processing apparatus, information processing method, and program |
US9927949B2 (en) | 2013-05-09 | 2018-03-27 | Amazon Technologies, Inc. | Recognition interfaces for computing devices |
JP2016519377A (ja) * | 2013-05-09 | 2016-06-30 | アマゾン・テクノロジーズ、インコーポレイテッド | コンピューティングデバイスのための認識インターフェース |
KR20160023889A (ko) * | 2013-06-25 | 2016-03-03 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 위치 신호를 통한 사용자 인터페이스 요소들의 선택 |
KR102223696B1 (ko) | 2013-06-25 | 2021-03-04 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 위치 신호를 통한 사용자 인터페이스 요소들의 선택 |
JP2016526721A (ja) * | 2013-06-25 | 2016-09-05 | マイクロソフト テクノロジー ライセンシング,エルエルシー | 位置信号を介したユーザインターフェイスエレメントの選択 |
US10025378B2 (en) | 2013-06-25 | 2018-07-17 | Microsoft Technology Licensing, Llc | Selecting user interface elements via position signal |
JP2017507430A (ja) * | 2014-03-03 | 2017-03-16 | ノキア テクノロジーズ オーユー | 装置と別装置との間の入力軸 |
JP2019169181A (ja) * | 2014-03-03 | 2019-10-03 | ノキア テクノロジーズ オーユー | 装置と別装置との間の入力軸 |
JP2015213212A (ja) * | 2014-05-01 | 2015-11-26 | セイコーエプソン株式会社 | 頭部装着型表示装置、制御システム、および、頭部装着型表示装置の制御方法 |
US9965048B2 (en) | 2014-05-01 | 2018-05-08 | Seiko Epson Corporation | Head-mount type display device, control system, method of controlling head-mount type display device, and computer program |
JP2016015024A (ja) * | 2014-07-02 | 2016-01-28 | 株式会社東芝 | 操作支援装置及び操作支援システム |
JP2016148968A (ja) * | 2015-02-12 | 2016-08-18 | セイコーエプソン株式会社 | 頭部装着型表示装置、制御システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム |
JP2016207115A (ja) * | 2015-04-28 | 2016-12-08 | 京セラドキュメントソリューションズ株式会社 | 情報処理装置、画像処理装置へのジョブ指示方法 |
JP2016206617A (ja) * | 2015-04-28 | 2016-12-08 | 京セラドキュメントソリューションズ株式会社 | 表示システム |
JP2017117159A (ja) * | 2015-12-24 | 2017-06-29 | シャープ株式会社 | 端末装置及び双方向通信システム |
JP2017063444A (ja) * | 2016-10-28 | 2017-03-30 | セイコーエプソン株式会社 | 表示装置、頭部装着型表示装置および表示装置の制御方法 |
JP2022097726A (ja) * | 2016-12-05 | 2022-06-30 | マジック リープ, インコーポレイテッド | 複合現実環境における仮想ユーザ入力制御 |
JP2020513618A (ja) * | 2016-12-05 | 2020-05-14 | マジック リープ, インコーポレイテッドMagic Leap,Inc. | 複合現実環境における仮想ユーザ入力制御 |
JP7112399B2 (ja) | 2016-12-05 | 2022-08-03 | マジック リープ, インコーポレイテッド | 複合現実環境における仮想ユーザ入力制御 |
US11720223B2 (en) | 2016-12-05 | 2023-08-08 | Magic Leap, Inc. | Virtual user input controls in a mixed reality environment |
JP7339392B2 (ja) | 2016-12-05 | 2023-09-05 | マジック リープ, インコーポレイテッド | 複合現実環境における仮想ユーザ入力制御 |
JP2017139000A (ja) * | 2017-03-16 | 2017-08-10 | セイコーエプソン株式会社 | 表示装置、および、表示装置の制御方法 |
US10591986B2 (en) | 2017-04-17 | 2020-03-17 | Optim Corporation | Remote work supporting system, remote work supporting method, and program |
JP6244069B1 (ja) * | 2017-04-17 | 2017-12-06 | 株式会社オプティム | 遠隔作業支援システム、遠隔作業支援方法、及びプログラム |
WO2018193509A1 (ja) * | 2017-04-17 | 2018-10-25 | 株式会社オプティム | 遠隔作業支援システム、遠隔作業支援方法、及びプログラム |
JP6257826B1 (ja) * | 2017-05-31 | 2018-01-10 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 |
JP2018205913A (ja) * | 2017-05-31 | 2018-12-27 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 |
US11630314B2 (en) | 2017-07-26 | 2023-04-18 | Magic Leap, Inc. | Training a neural network with representations of user interface devices |
US11334765B2 (en) | 2017-07-26 | 2022-05-17 | Magic Leap, Inc. | Training a neural network with representations of user interface devices |
WO2019181143A1 (ja) * | 2018-03-22 | 2019-09-26 | 三菱自動車工業株式会社 | 車両制御システム |
JP7229749B2 (ja) | 2018-12-14 | 2023-02-28 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム、記録媒体、および、情報処理システム |
JP2020095579A (ja) * | 2018-12-14 | 2020-06-18 | キヤノン株式会社 | 情報処理装置、情報処理方法、プログラム、記録媒体、および、情報処理システム |
WO2021246795A1 (ko) * | 2020-06-04 | 2021-12-09 | 주식회사 브이터치 | 제스처를 인식하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 |
WO2023228337A1 (ja) * | 2022-05-25 | 2023-11-30 | 日本電信電話株式会社 | 提示システム、提示方法及び提示プログラム |
Also Published As
Publication number | Publication date |
---|---|
US9891715B2 (en) | 2018-02-13 |
JP5743416B2 (ja) | 2015-07-01 |
US20110234386A1 (en) | 2011-09-29 |
EP2372495A2 (en) | 2011-10-05 |
EP2372495A3 (en) | 2015-11-25 |
EP2372495B1 (en) | 2019-04-03 |
KR20110109883A (ko) | 2011-10-06 |
CN102207819A (zh) | 2011-10-05 |
CN102207819B (zh) | 2016-01-20 |
US9058057B2 (en) | 2015-06-16 |
US20150241986A1 (en) | 2015-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5743416B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US7940986B2 (en) | User interface system based on pointing device | |
US9218781B2 (en) | Information processing apparatus, display control method, and program | |
US11170580B2 (en) | Information processing device, information processing method, and recording medium | |
JP3926837B2 (ja) | 表示制御方法および装置、プログラム、並びに携帯機器 | |
CN110456782B (zh) | 控制装置和控制方法 | |
KR102560689B1 (ko) | Ar 객체를 표시하기 위한 장치 및 방법 | |
JP2013172432A (ja) | 機器制御装置、機器制御方法、機器制御プログラム、及び集積回路 | |
TW202304212A (zh) | 直播方法、系統、電腦設備及電腦可讀儲存媒體 | |
US9268408B2 (en) | Operating area determination method and system | |
CN111199583B (zh) | 一种虚拟内容显示方法、装置、终端设备及存储介质 | |
JP2014064115A (ja) | 端末装置、遠隔操作システム及び遠隔操作方法 | |
JP6714632B2 (ja) | 情報表示端末及び情報表示方法 | |
KR20170016744A (ko) | 메타 데이터를 이용한 디바이스 원격 제어 장치 및 방법 | |
JP6404526B2 (ja) | 撮像画像共有システム、撮像画像共有方法及びプログラム | |
KR100743239B1 (ko) | 촬상 소자를 이용한 디지털 영상 처리 장치 | |
JP6500954B2 (ja) | 電子制御装置、電子制御方法及び制御プログラム | |
KR20210121784A (ko) | 디스플레이 장치 | |
JP6201408B2 (ja) | 電子制御装置、制御方法及び制御プログラム | |
CN110945567A (zh) | 信息处理装置、信息处理方法和程序 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130204 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130204 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130726 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130813 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131007 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140401 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140618 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20140626 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20140905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150428 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5743416 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |