JP5892236B2 - 情報処理装置、情報処理方法およびプログラム - Google Patents
情報処理装置、情報処理方法およびプログラム Download PDFInfo
- Publication number
- JP5892236B2 JP5892236B2 JP2014507493A JP2014507493A JP5892236B2 JP 5892236 B2 JP5892236 B2 JP 5892236B2 JP 2014507493 A JP2014507493 A JP 2014507493A JP 2014507493 A JP2014507493 A JP 2014507493A JP 5892236 B2 JP5892236 B2 JP 5892236B2
- Authority
- JP
- Japan
- Prior art keywords
- image information
- image
- display
- captured image
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 59
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000003384 imaging method Methods 0.000 claims description 23
- 238000001514 detection method Methods 0.000 claims description 5
- 238000000034 method Methods 0.000 description 31
- 238000004891 communication Methods 0.000 description 28
- 230000008569 process Effects 0.000 description 27
- 230000006870 function Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 17
- 230000008859 change Effects 0.000 description 5
- 238000005401 electroluminescence Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000036544 posture Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/96—Management of image or video recognition tasks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
- H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
- A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/40—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of platform network
- A63F2300/403—Connection between platform and handheld device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00347—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with another still picture apparatus, e.g. hybrid still picture apparatus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- User Interface Of Digital Computer (AREA)
- Digital Computer Display Output (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Telephone Function (AREA)
- Information Transfer Between Computers (AREA)
Description
1.第1の実施形態
1−1.概要
1−2.装置構成
1−3.処理フロー
1−4.画像情報取得のタイミング
2.第2の実施形態
2−1.装置構成
2−2.処理フロー
3.第3の実施形態
3−1.装置構成
3−2.処理フロー
4.補足
(1−1.概要)
まず、図1を参照して、本開示の第1の実施形態の概要について説明する。なお、この概要は、本開示の他の実施形態についても同様である。
次に、図2および図3を参照して、本開示の第1の実施形態の装置構成について説明する。図2は、本実施形態の装置構成について説明するための図である。図3は、本実施形態に係るシステムの機能構成を示す概略的なブロック図である。なお、図3では、簡単のため、図2に示される複数の表示装置200a〜200cが、単一の表示装置200によって代表されている。
図3を参照して、端末装置100の構成について、さらに説明する。端末装置100は、撮像部110と、表示制御部120と、表示部150とを含む。
引き続き図3を参照して、表示装置200の構成について、さらに説明する。表示装置200は、表示制御部210と、表示画面250とを含む。
引き続き図3を参照して、サーバ装置300の構成について、さらに説明する。サーバ装置300は、撮像画像情報取得部310と、表示画像情報取得部320と、オブジェクト認識部330とを含む。これらはいずれも、例えばサーバ装置300のCPU、RAM、およびROMがプログラムに従って動作することによって実現される。
ここで、本実施形態におけるオブジェクト認識の処理について、さらに説明する。オブジェクト認識部330で実行されるオブジェクト認識の処理には、例えば以下の2つの処理が含まれる。第1には、撮像画像にどのオブジェクトが映っているか(含まれるか)を判定する処理である。第2には、撮像画像に含まれるオブジェクトが、撮像画像の中のどの位置に、どのような姿勢(傾き、回転など)で映っているかを検出する処理である。
次に、図4を参照して、本開示の第1の実施形態の処理フローについて説明する。図4は、本実施形態における処理を示すデータフロー図である。なお、図4では、簡単のため、図2に示される複数の表示装置200a〜200cのうちの2つが表示装置200a,200bとして示されている。
次に、図5を参照して、本実施形態における画像情報取得のタイミングについて説明する。図5は、本実施形態における画像情報取得のタイミングについて説明するための図である。
以上で説明した本開示の第1の実施形態では、端末装置の撮像画像に含まれる可能性がある画像の情報が、当該画像を表示する表示装置自身から提供される。また、撮像画像に含まれる表示画像の認識の処理が、サーバ装置によって実行され、その結果が端末装置に送信される。これによって、例えば、端末装置における処理負荷を最小限に抑えつつ、撮像画像に含まれる他の装置の表示画像を認識した結果を活用することができる。
(2−1.装置構成)
次に、図6A、図6B、および図7を参照して、本開示の第2の実施形態の装置構成について説明する。図6Aおよび図6Bは、本実施形態の装置構成について説明するための図である。図7は、本実施形態に係るシステムの機能構成を示す概略的なブロック図である。なお、図7では、簡単のため、図6Aおよび図6Bに示される複数の表示装置400a〜400cが、単一の表示装置400によって代表されている。
図7を参照すると、端末装置100は、撮像部110と、表示制御部120と、表示部150とを含む。また、表示装置400は、表示制御部210と、表示画面250と、撮像画像情報取得部310と、表示画像情報取得部320と、オブジェクト認識部430とを含む。
次に、図8を参照して、本開示の第2の実施形態の処理フローについて説明する。図8は、本実施形態における処理を示すデータフロー図である。
以上で説明した本開示の第2の実施形態では、撮像画像に含まれる画像の探索およびトラッキングの処理が、当該画像を表示する表示装置自身によって実行され、その結果が端末装置に送信される。これによって、例えば、表示装置が有する計算リソースを有効に活用して、端末装置における処理負荷を抑制することができる。また、例えば、表示画像情報を装置間で伝送しなくて済むことによって、通信リソースを節約することができる。
(3−1.装置構成)
次に、図9A〜図9C、および図10を参照して、本開示の第3の実施形態の装置構成について説明する。図9A〜図9Cは、本実施形態の装置構成について説明するための図である。図10は、本実施形態に係るシステムの機能構成を示す概略的なブロック図である。なお、図10では、簡単のため、図9A〜図9Cに示される複数の表示装置600a〜600cが、単一の表示装置600によって代表されている。
図10を参照すると、端末装置500は、撮像部110と、表示制御部120と、表示部150と、オブジェクト認識部530とを含む。また、表示装置600は、表示制御部210と、表示画面250と、撮像画像情報取得部310と、表示画像情報取得部320と、オブジェクト認識部430とを含む。
次に、図11を参照して、本開示の第3の実施形態の処理フローについて説明する。図11は、本実施形態における処理を示すデータフロー図である。
以上で説明した本開示の第3の実施形態では、撮像画像に含まれる画像の探索が当該画像を表示する表示装置自身によって実行される一方で、探索によって表示画像が発見された後のトラッキングは、撮像画像を取得している端末装置で実行される。つまり、最も処理負荷の高い探索の処理負荷を端末装置から分散させつつ、処理負荷が比較的低いトラッキングの処理は端末装置で実行される。これによって、例えば、表示装置の計算リソースを不必要に消費することが防止される。また、例えば、撮像画像情報をすべての表示装置に送信することを不要として、通信リソースを節約することができる。
上記の説明では、主に情報処理装置に係る本開示の実施形態を紹介したが、例えばこれらの情報処理装置において実行される方法、情報処理装置に機能を実現されるためのプログラム、およびかかるプログラムを記録した記録媒体も、本開示の実施形態として実現されうる。
最後に、図12を参照して、本開示の実施形態に係る端末装置100,500、表示装置200,400,600、およびサーバ装置300を実現しうる情報処理装置900のハードウェア構成について説明する。図12は、情報処理装置のハードウェア構成を説明するためのブロック図である。
(1)撮像画像に対応する撮像画像情報を取得する撮像画像情報取得部と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する表示画像情報取得部と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出するオブジェクト認識部と
を備える情報処理装置。
(2)前記表示画像情報取得部は、前記撮像画像情報とは異なるタイミングで前記表示画像情報を取得する、前記(1)に記載の情報処理装置。
(3)前記表示画像情報取得部は、前記第1の画像が変化した場合に前記表示画像情報を取得する、前記(2)に記載の情報処理装置。
(4)前記表示画像情報取得部は、前記撮像画像情報よりも長い間隔で前記表示画像情報を取得する、前記(2)または(3)に記載の情報処理装置。
(5)前記オブジェクト認識部は、前記撮像画像情報が取得されて前記表示画像情報が取得されない場合に、以前に取得された前記表示画像情報を用いて前記第1の画像の位置および姿勢を検出する、前記(4)に記載の情報処理装置。
(6)前記表示画像情報取得部は、前記第1の画像の位置および姿勢が検出されない場合に前記表示画像情報を取得する、前記(2)〜(5)のいずれか1項に記載の情報処理装置。
(7)前記撮像画像情報取得部および前記表示画像情報取得部は、それぞれ時系列で前記撮像画像情報および前記表示画像情報を取得し、
前記撮像画像情報および前記表示画像情報取得部のうちの少なくとも一方には、互いの情報を同期させるための同期情報が含まれる、前記(1)〜(6)のいずれか1項に記載の情報処理装置。
(8)前記撮像画像情報取得部および前記表示画像情報取得部は、それぞれ時系列で前記撮像画像情報および前記表示画像情報を取得し、
前記オブジェクト認識部は、前記撮像画像情報と前記表示画像情報との間の遅延に応じて、前記撮像画像情報とともに用いる前記表示画像情報を選択する、前記(1)〜(7)のいずれか1項に記載の情報処理装置。
(9)前記オブジェクト認識部は、前記第1の画像の位置および姿勢を示す情報を、前記撮像画像を撮像した撮像装置に送信する、前記(1)〜(8)のいずれか1項に記載の情報処理装置。
(10)前記オブジェクト認識部は、前記第1の画像の位置および姿勢が検出された場合に、以後の前記第1の画像の位置および姿勢の検出を前記撮像装置に委任する、前記(9)に記載の情報処理装置。
(11)前記オブジェクト認識部は、前記撮像装置で前記第1の画像の位置および姿勢が検出されなかった場合に、再び前記第1の画像の位置および姿勢を検出する、前記(10)に記載の情報処理装置。
(12)前記オブジェクト認識部は、前記第1の画像が変化した場合に、再び前記第1の画像の位置および姿勢を検出する、前記(10)または(11)に記載の情報処理装置。
(13)前記表示画面をさらに備える表示装置である、前記(1)〜(12)のいずれか1項に記載の情報処理装置。
(14)撮像画像に対応する撮像画像情報を取得することと、
表示画面に表示される第1の画像に対応する表示画像情報を取得することと、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出することと
を含む情報処理方法。
(15)撮像画像に対応する撮像画像情報を取得する機能と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する機能と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出する機能と
をコンピュータに実現させるためのプログラム。
110 撮像部
120 表示制御部
150 表示部
155 撮像画像情報
157 認識結果情報
200,400,600 表示装置
210 表示制御部
250 表示画面
251 画像(第1の画像)
253 表示画像情報
300 サーバ装置
310 撮像画像情報取得部
320 表示画像情報取得部
330,430,530 オブジェクト認識部
653 トラッキング用情報
Claims (15)
- 撮像画像に対応する撮像画像情報を取得する撮像画像情報取得部と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する表示画像情報取得部と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出するオブジェクト認識部と
を備え、
前記表示画像情報取得部は、前記第1の画像が変化した場合に、前記表示画像情報を取得し、または、前記第1の画像の位置および姿勢が検出されない場合に、前記表示画像情報を取得する、
情報処理装置。 - 撮像画像に対応する撮像画像情報を取得する撮像画像情報取得部と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する表示画像情報取得部と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出するオブジェクト認識部と
を備え、
前記表示画像情報取得部は、前記撮像画像情報とは異なるタイミングで前記表示画像情報を取得し、
前記オブジェクト認識部は、前記撮像画像情報が取得されて前記表示画像情報が取得されない場合に、以前に取得された前記表示画像情報を用いて前記第1の画像の位置および姿勢を検出する、
情報処理装置。 - 撮像画像に対応する撮像画像情報を取得する撮像画像情報取得部と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する表示画像情報取得部と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出するオブジェクト認識部と
を備え、
前記撮像画像情報取得部および前記表示画像情報取得部は、それぞれ時系列で前記撮像画像情報および前記表示画像情報を取得し、
前記撮像画像情報および前記表示画像情報のうちの少なくとも一方には、互いの情報を同期させるための同期情報が含まれ、または、前記撮像画像情報と前記表示画像情報との間の遅延に応じて、前記撮像画像情報とともに用いられる前記表示画像情報が選択される、
情報処理装置。 - 撮像画像に対応する撮像画像情報を取得する撮像画像情報取得部と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する表示画像情報取得部と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出するオブジェクト認識部と
を備え、
前記オブジェクト認識部は、前記第1の画像の位置および姿勢が検出された場合に、前記第1の画像の位置および姿勢を示す情報を前記撮像画像を撮像した撮像装置に送信し、以後の前記第1の画像の位置および姿勢の検出を前記撮像装置に委任する、
情報処理装置。 - 前記オブジェクト認識部は、前記撮像装置で前記第1の画像の位置および姿勢が検出されなかった場合に、再び前記第1の画像の位置および姿勢を検出する、請求項4に記載の情報処理装置。
- 前記オブジェクト認識部は、前記第1の画像が変化した場合に、再び前記第1の画像の位置および姿勢を検出する、請求項4に記載の情報処理装置。
- 前記表示画面をさらに備える表示装置である、請求項1〜6のいずれか1項に記載の情報処理装置。
- 撮像画像に対応する撮像画像情報を取得することと、
表示画面に表示される第1の画像に対応する表示画像情報を取得することと、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出することと
を含み、
前記第1の画像が変化した場合に、前記表示画像情報が取得され、または、前記第1の画像の位置および姿勢が検出されない場合に、前記表示画像情報が取得される、
情報処理方法。 - 撮像画像に対応する撮像画像情報を取得することと、
表示画面に表示される第1の画像に対応する表示画像情報を取得することと、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出することと
を含み、
前記撮像画像情報とは異なるタイミングで前記表示画像情報が取得され、
前記撮像画像情報が取得されて前記表示画像情報が取得されない場合に、以前に取得された前記表示画像情報を用いて前記第1の画像の位置および姿勢が検出される、
情報処理方法。 - 撮像画像に対応する撮像画像情報を取得することと、
表示画面に表示される第1の画像に対応する表示画像情報を取得することと、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出することと
を含み、
それぞれ時系列で前記撮像画像情報および前記表示画像情報が取得され、
前記撮像画像情報および前記表示画像情報のうちの少なくとも一方には、互いの情報を同期させるための同期情報が含まれ、または、前記撮像画像情報と前記表示画像情報との間の遅延に応じて、前記撮像画像情報とともに用いられる前記表示画像情報が選択される、
情報処理方法。 - 撮像画像に対応する撮像画像情報を取得することと、
表示画面に表示される第1の画像に対応する表示画像情報を取得することと、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出することと、
前記第1の画像の位置および姿勢が検出された場合に、前記第1の画像の位置および姿勢を示す情報を前記撮像画像を撮像した撮像装置に送信し、以後の前記第1の画像の位置および姿勢の検出を前記撮像装置に委任することと
を含む情報処理方法。 - 撮像画像に対応する撮像画像情報を取得する機能と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する機能と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出する機能と
をコンピュータに実現させるためのプログラムであって、
前記第1の画像が変化した場合に、前記表示画像情報が取得され、または、前記第1の画像の位置および姿勢が検出されない場合に、前記表示画像情報が取得される、
プログラム。 - 撮像画像に対応する撮像画像情報を取得する機能と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する機能と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出する機能と
をコンピュータに実現させるためのプログラムであって、
前記表示画像情報を取得する機能は、前記撮像画像情報とは異なるタイミングで前記表示画像情報を取得し、
前記撮像画像情報が取得されて前記表示画像情報が取得されない場合に、以前に取得された前記表示画像情報を用いて前記第1の画像の位置および姿勢が検出される、
プログラム。 - 撮像画像に対応する撮像画像情報を取得する機能と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する機能と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出する機能と
をコンピュータに実現させるためのプログラムであって、
それぞれ時系列で前記撮像画像情報および前記表示画像情報が取得され、
前記撮像画像情報および前記表示画像情報のうちの少なくとも一方には、互いの情報を同期させるための同期情報が含まれ、または、前記撮像画像情報と前記表示画像情報との間の遅延に応じて、前記撮像画像情報とともに用いられる前記表示画像情報が選択される、
プログラム。 - 撮像画像に対応する撮像画像情報を取得する機能と、
表示画面に表示される第1の画像に対応する表示画像情報を取得する機能と、
前記表示画像情報および前記撮像画像情報を用いて、前記撮像画像の中での前記第1の画像の位置および姿勢を検出する機能と
をコンピュータに実現させるためのプログラムであって、
前記第1の画像の位置および姿勢が検出された場合に、前記第1の画像の位置および姿勢を示す情報が前記撮像画像を撮像した撮像装置に送信され、以後の前記第1の画像の位置および姿勢の検出が前記撮像装置に委任される、
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014507493A JP5892236B2 (ja) | 2012-03-26 | 2013-02-08 | 情報処理装置、情報処理方法およびプログラム |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012069713 | 2012-03-26 | ||
JP2012069713 | 2012-03-26 | ||
PCT/JP2013/053009 WO2013145883A1 (ja) | 2012-03-26 | 2013-02-08 | 情報処理装置、情報処理方法およびプログラム |
JP2014507493A JP5892236B2 (ja) | 2012-03-26 | 2013-02-08 | 情報処理装置、情報処理方法およびプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016033974A Division JP6135783B2 (ja) | 2012-03-26 | 2016-02-25 | 情報処理装置、情報処理方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2013145883A1 JPWO2013145883A1 (ja) | 2015-12-10 |
JP5892236B2 true JP5892236B2 (ja) | 2016-03-23 |
Family
ID=49259168
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014507493A Active JP5892236B2 (ja) | 2012-03-26 | 2013-02-08 | 情報処理装置、情報処理方法およびプログラム |
JP2016033974A Active JP6135783B2 (ja) | 2012-03-26 | 2016-02-25 | 情報処理装置、情報処理方法およびプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016033974A Active JP6135783B2 (ja) | 2012-03-26 | 2016-02-25 | 情報処理装置、情報処理方法およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US9984468B2 (ja) |
EP (1) | EP2833249B1 (ja) |
JP (2) | JP5892236B2 (ja) |
CN (1) | CN104205012A (ja) |
WO (1) | WO2013145883A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102001218B1 (ko) * | 2012-11-02 | 2019-07-17 | 삼성전자주식회사 | 객체와 관련된 정보 제공 방법 및 이를 위한 디바이스 |
US9716842B1 (en) * | 2013-06-19 | 2017-07-25 | Amazon Technologies, Inc. | Augmented reality presentation |
US10152495B2 (en) | 2013-08-19 | 2018-12-11 | Qualcomm Incorporated | Visual search in real world using optical see-through head mounted display with augmented reality and user interaction tracking |
CN104898835B (zh) * | 2015-05-19 | 2019-09-24 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
GB2555841A (en) * | 2016-11-11 | 2018-05-16 | Sony Corp | An apparatus, computer program and method |
CN109582122B (zh) * | 2017-09-29 | 2022-05-03 | 阿里巴巴集团控股有限公司 | 增强现实信息提供方法、装置及电子设备 |
CN107592520B (zh) * | 2017-09-29 | 2020-07-10 | 京东方科技集团股份有限公司 | Ar设备的成像装置及成像方法 |
US20200042793A1 (en) * | 2018-07-31 | 2020-02-06 | Ario Technologies, Inc. | Creating, managing and accessing spatially located information utilizing augmented reality and web technologies |
CN111679731A (zh) * | 2019-03-11 | 2020-09-18 | 三星电子株式会社 | 显示装置及其控制方法 |
US11514594B2 (en) | 2019-10-30 | 2022-11-29 | Vergence Automation, Inc. | Composite imaging systems using a focal plane array with in-pixel analog storage elements |
CN111583329B (zh) * | 2020-04-09 | 2023-08-04 | 深圳奇迹智慧网络有限公司 | 增强现实眼镜显示方法、装置、电子设备和存储介质 |
CN113094016B (zh) * | 2021-06-09 | 2021-09-07 | 上海影创信息科技有限公司 | 用于信息增益与显示的系统、方法及介质 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001136504A (ja) * | 1999-11-08 | 2001-05-18 | Sony Corp | 情報入出力システム及び情報入出力方法 |
JP4032776B2 (ja) | 2002-03-04 | 2008-01-16 | ソニー株式会社 | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム |
JP2005122516A (ja) * | 2003-10-17 | 2005-05-12 | Aruze Corp | 発注システム及び携帯端末 |
KR100708178B1 (ko) * | 2005-09-01 | 2007-04-16 | 삼성전자주식회사 | 영상 처리 방법, 장치 및 영상 정보를 기록한 정보저장매체 |
JP2007193403A (ja) | 2006-01-17 | 2007-08-02 | Hitachi Ltd | ポインティングデバイス、ポインタ指示位置制御方法およびディスプレイシステム |
US8347213B2 (en) * | 2007-03-02 | 2013-01-01 | Animoto, Inc. | Automatically generating audiovisual works |
JP2008310446A (ja) * | 2007-06-12 | 2008-12-25 | Panasonic Corp | 画像検索システム |
CA2721481C (en) * | 2008-04-15 | 2018-10-23 | Pvi Virtual Media Services, Llc | Preprocessing video to insert visual elements and applications thereof |
JP5149744B2 (ja) * | 2008-09-10 | 2013-02-20 | 株式会社デンソーアイティーラボラトリ | 画像検索装置、画像検索システム、画像検索方法およびプログラム |
US8731301B1 (en) * | 2008-09-25 | 2014-05-20 | Sprint Communications Company L.P. | Display adaptation based on captured image feedback |
JP5317798B2 (ja) * | 2009-03-05 | 2013-10-16 | ヤフー株式会社 | 現実世界から目的物を検索する携帯情報検索機器 |
CN101996371A (zh) * | 2009-08-17 | 2011-03-30 | 华为技术有限公司 | 广告投放方法、装置及系统 |
US8339364B2 (en) * | 2010-02-03 | 2012-12-25 | Nintendo Co., Ltd. | Spatially-correlated multi-display human-machine interface |
US8913009B2 (en) * | 2010-02-03 | 2014-12-16 | Nintendo Co., Ltd. | Spatially-correlated multi-display human-machine interface |
JP5464661B2 (ja) * | 2010-03-12 | 2014-04-09 | Kddi株式会社 | 情報端末装置 |
US8787673B2 (en) * | 2010-07-12 | 2014-07-22 | Google Inc. | System and method of determining building numbers |
US8781152B2 (en) * | 2010-08-05 | 2014-07-15 | Brian Momeyer | Identifying visual media content captured by camera-enabled mobile device |
ES2745739T3 (es) * | 2010-09-20 | 2020-03-03 | Qualcomm Inc | Un entorno adaptable para realidad aumentada asistida por la nube |
US8913171B2 (en) * | 2010-11-17 | 2014-12-16 | Verizon Patent And Licensing Inc. | Methods and systems for dynamically presenting enhanced content during a presentation of a media content instance |
US8984562B2 (en) * | 2011-01-13 | 2015-03-17 | Verizon Patent And Licensing Inc. | Method and apparatus for interacting with a set-top box using widgets |
US10204167B2 (en) * | 2012-03-14 | 2019-02-12 | Oath Inc. | Two-dimension indexed carousels for in situ media browsing on mobile devices |
US9438647B2 (en) * | 2013-11-14 | 2016-09-06 | At&T Intellectual Property I, L.P. | Method and apparatus for distributing content |
-
2013
- 2013-02-08 JP JP2014507493A patent/JP5892236B2/ja active Active
- 2013-02-08 CN CN201380015411.1A patent/CN104205012A/zh active Pending
- 2013-02-08 WO PCT/JP2013/053009 patent/WO2013145883A1/ja active Application Filing
- 2013-02-08 EP EP13767258.0A patent/EP2833249B1/en active Active
- 2013-02-08 US US14/386,510 patent/US9984468B2/en active Active
-
2016
- 2016-02-25 JP JP2016033974A patent/JP6135783B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
CN104205012A (zh) | 2014-12-10 |
JP2016129050A (ja) | 2016-07-14 |
WO2013145883A1 (ja) | 2013-10-03 |
US20150070390A1 (en) | 2015-03-12 |
EP2833249B1 (en) | 2019-06-19 |
JP6135783B2 (ja) | 2017-05-31 |
EP2833249A1 (en) | 2015-02-04 |
US9984468B2 (en) | 2018-05-29 |
JPWO2013145883A1 (ja) | 2015-12-10 |
EP2833249A4 (en) | 2016-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6135783B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP6121647B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP6459972B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
EP2832107B1 (en) | Information processing apparatus, information processing method, and program | |
JP6337907B2 (ja) | 表示制御装置、表示制御方法およびプログラム | |
WO2013145566A1 (en) | Information processing apparatus, information processing method, and program | |
US20170068417A1 (en) | Information processing apparatus, program, information processing method, and information processing system | |
US10768881B2 (en) | Multi-screen interaction method and system in augmented reality scene | |
CN105549878A (zh) | 电子书翻页控制方法及设备 | |
JP6149862B2 (ja) | 表示制御装置、表示制御システムおよび表示制御方法 | |
JP6504058B2 (ja) | 情報処理システム、情報処理方法およびプログラム | |
JPWO2014185169A1 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6065084B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
TWI634453B (zh) | 在虛擬實境環境瀏覽時進行畫面切換之系統及方法,及其相關電腦程式產品 | |
WO2021104254A1 (zh) | 信息处理方法及电子设备 | |
US12019941B2 (en) | Information processing apparatus and information processing method | |
US10855639B2 (en) | Information processing apparatus and information processing method for selection of a target user |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160126 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160208 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5892236 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |