JP7288792B2 - 情報処理装置およびデバイス情報導出方法 - Google Patents
情報処理装置およびデバイス情報導出方法 Download PDFInfo
- Publication number
- JP7288792B2 JP7288792B2 JP2019083059A JP2019083059A JP7288792B2 JP 7288792 B2 JP7288792 B2 JP 7288792B2 JP 2019083059 A JP2019083059 A JP 2019083059A JP 2019083059 A JP2019083059 A JP 2019083059A JP 7288792 B2 JP7288792 B2 JP 7288792B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- orientation
- marker image
- image coordinates
- marker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/25—Output arrangements for video game devices
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
- A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
- A63F13/525—Changing parameters of virtual cameras
- A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
Description
Claims (5)
- 複数のマーカを備えた第1デバイスおよび複数のマーカを備えた第2デバイスを撮影した画像を取得する撮影画像取得部と、
撮影画像における複数のマーカ像座標にもとづいて、前記第1デバイスの位置情報および姿勢情報と、前記第2デバイスの位置情報および姿勢情報を推定する推定処理部と、を備え、
前記推定処理部は、
撮像装置から相対的に近い位置にある前記第1デバイスの位置情報および姿勢情報を導出した後、前記第1デバイスの複数のマーカ像座標を除いた残りの複数のマーカ像座標にもとづいて、撮像装置から相対的に遠い位置にある前記第2デバイスの位置情報および姿勢情報を導出する、
ことを特徴とする情報処理装置。 - 前記推定処理部は、前回の撮影画像を用いた推定処理結果により撮像装置に相対的に近い位置にあると判断された前記第1デバイスの位置情報および姿勢情報を、前記第2デバイスの位置情報および姿勢情報よりも先に導出する、
ことを特徴とする請求項1に記載の情報処理装置。 - 前記推定処理部は、
撮影画像におけるN(Nは3以上の整数)個のマーカ像座標を抽出する抽出部と、
抽出されたN個のマーカ像座標を用いて、前記第1デバイスの位置情報および姿勢情報を導出する位置姿勢導出部と、を有し、
前記位置姿勢導出部が前記第1デバイスの位置情報および姿勢情報を導出した後、前記抽出部は、前記第1デバイスの複数のマーカ像座標を除いた残りの複数のマーカ像座標からN個のマーカ像座標を抽出し、
前記位置姿勢導出部は、残りの複数のマーカ像座標から抽出されたN個のマーカ像座標を用いて、前記第2デバイスの位置情報および姿勢情報を導出する、
ことを特徴とする請求項1または2に記載の情報処理装置。 - 複数のマーカを備えた第1デバイスおよび複数のマーカを備えた第2デバイスを撮影した画像を取得するステップと、
撮影画像における複数のマーカ像座標にもとづいて、撮像装置から相対的に近い位置にある前記第1デバイスの位置情報および姿勢情報を導出するステップと、
前記第1デバイスの複数のマーカ像座標を除いた残りの複数のマーカ像座標にもとづいて、撮像装置から相対的に遠い位置にある前記第2デバイスの位置情報および姿勢情報を導出するステップと、
を有するデバイス情報導出方法。 - コンピュータに、
複数のマーカを備えた第1デバイスおよび複数のマーカを備えた第2デバイスを撮影した画像を取得する機能と、
撮影画像における複数のマーカ像座標にもとづいて、撮像装置から相対的に近い位置にある前記第1デバイスの位置情報および姿勢情報を導出する機能と、
前記第1デバイスの複数のマーカ像座標を除いた残りの複数のマーカ像座標にもとづいて、撮像装置から相対的に遠い位置にある前記第2デバイスの位置情報および姿勢情報を導出する機能と、
を実現させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019083059A JP7288792B2 (ja) | 2019-04-24 | 2019-04-24 | 情報処理装置およびデバイス情報導出方法 |
PCT/JP2020/016854 WO2020218182A1 (ja) | 2019-04-24 | 2020-04-17 | 情報処理装置およびデバイス情報導出方法 |
US17/440,869 US11794095B2 (en) | 2019-04-24 | 2020-04-17 | Information processing apparatus and device information derivation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019083059A JP7288792B2 (ja) | 2019-04-24 | 2019-04-24 | 情報処理装置およびデバイス情報導出方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020181321A JP2020181321A (ja) | 2020-11-05 |
JP2020181321A5 JP2020181321A5 (ja) | 2022-04-27 |
JP7288792B2 true JP7288792B2 (ja) | 2023-06-08 |
Family
ID=72942554
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019083059A Active JP7288792B2 (ja) | 2019-04-24 | 2019-04-24 | 情報処理装置およびデバイス情報導出方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11794095B2 (ja) |
JP (1) | JP7288792B2 (ja) |
WO (1) | WO2020218182A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022072083A (ja) | 2020-10-29 | 2022-05-17 | Ntn株式会社 | 転がり軸受 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007296248A (ja) | 2006-05-02 | 2007-11-15 | Sony Computer Entertainment Inc | ゲーム装置 |
WO2011145180A1 (ja) | 2010-05-18 | 2011-11-24 | 富士通株式会社 | ポインタ情報処理装置、ポインタ情報処理プログラムおよび会議システム |
WO2016157807A1 (ja) | 2015-03-27 | 2016-10-06 | セイコーエプソン株式会社 | インタラクティブプロジェクター,インタラクティブプロジェクションシステム,およびインタラクティブプロジェクターの制御方法 |
JP2018032102A (ja) | 2016-08-22 | 2018-03-01 | 株式会社コロプラ | 仮想空間を提供する方法、仮想体験を提供する方法、プログラム、および記録媒体 |
JP2019061528A (ja) | 2017-09-27 | 2019-04-18 | 株式会社Cygames | プログラム、情報処理方法、情報処理システム、頭部装着型表示装置、情報処理装置 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5714108U (ja) | 1980-06-28 | 1982-01-25 | ||
JP2005135425A (ja) | 1998-02-16 | 2005-05-26 | Sony Computer Entertainment Inc | 携帯用電子機器の保護ケース |
JP5089060B2 (ja) | 2006-03-14 | 2012-12-05 | 株式会社ソニー・コンピュータエンタテインメント | エンタテインメントシステムおよびゲームコントローラ |
JP4443531B2 (ja) | 2006-04-11 | 2010-03-31 | 株式会社ソニー・コンピュータエンタテインメント | エンタテインメントシステムおよび処理装置 |
US20110183751A1 (en) | 2008-01-22 | 2011-07-28 | Hiromu Ueshima | Imaging device, online game system, operation object, input method, image analysis device, image analysis method, and recording medium |
US8747224B2 (en) | 2008-11-14 | 2014-06-10 | Sony Corporation | Operating device |
US9517407B2 (en) | 2012-04-20 | 2016-12-13 | Nintendo Co., Ltd. | Game system and game controller |
WO2015079715A1 (ja) | 2013-11-30 | 2015-06-04 | 株式会社五藤光学研究所 | 恒星投映筒 |
US9649558B2 (en) | 2014-03-14 | 2017-05-16 | Sony Interactive Entertainment Inc. | Gaming device with rotatably placed cameras |
JP6355978B2 (ja) | 2014-06-09 | 2018-07-11 | 株式会社バンダイナムコエンターテインメント | プログラムおよび画像生成装置 |
US9746921B2 (en) | 2014-12-31 | 2017-08-29 | Sony Interactive Entertainment Inc. | Signal generation and detector systems and methods for determining positions of fingers of a user |
JP6650739B2 (ja) | 2015-11-30 | 2020-02-19 | 株式会社ソニー・インタラクティブエンタテインメント | 発光デバイス調整装置および駆動電流調整方法 |
JP6917701B2 (ja) * | 2016-11-30 | 2021-08-11 | キヤノン株式会社 | 情報処理装置、情報処理装置の制御方法及びプログラム |
EP3660636A4 (en) | 2017-07-27 | 2020-07-08 | Sony Corporation | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING PROCESS AND PROGRAM |
US10529074B2 (en) | 2017-09-28 | 2020-01-07 | Samsung Electronics Co., Ltd. | Camera pose and plane estimation using active markers and a dynamic vision sensor |
JP6853156B2 (ja) * | 2017-09-29 | 2021-03-31 | 株式会社日立製作所 | 姿勢推定システム、姿勢推定装置、及び距離画像カメラ |
-
2019
- 2019-04-24 JP JP2019083059A patent/JP7288792B2/ja active Active
-
2020
- 2020-04-17 WO PCT/JP2020/016854 patent/WO2020218182A1/ja active Application Filing
- 2020-04-17 US US17/440,869 patent/US11794095B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007296248A (ja) | 2006-05-02 | 2007-11-15 | Sony Computer Entertainment Inc | ゲーム装置 |
WO2011145180A1 (ja) | 2010-05-18 | 2011-11-24 | 富士通株式会社 | ポインタ情報処理装置、ポインタ情報処理プログラムおよび会議システム |
WO2016157807A1 (ja) | 2015-03-27 | 2016-10-06 | セイコーエプソン株式会社 | インタラクティブプロジェクター,インタラクティブプロジェクションシステム,およびインタラクティブプロジェクターの制御方法 |
JP2018032102A (ja) | 2016-08-22 | 2018-03-01 | 株式会社コロプラ | 仮想空間を提供する方法、仮想体験を提供する方法、プログラム、および記録媒体 |
JP2019061528A (ja) | 2017-09-27 | 2019-04-18 | 株式会社Cygames | プログラム、情報処理方法、情報処理システム、頭部装着型表示装置、情報処理装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2020218182A1 (ja) | 2020-10-29 |
US20220161127A1 (en) | 2022-05-26 |
JP2020181321A (ja) | 2020-11-05 |
US11794095B2 (en) | 2023-10-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7248490B2 (ja) | 情報処理装置、デバイスの位置および姿勢の推定方法 | |
KR102448284B1 (ko) | 헤드 마운트 디스플레이 추적 시스템 | |
CN108292489B (zh) | 信息处理装置和图像生成方法 | |
JP4532856B2 (ja) | 位置姿勢計測方法及び装置 | |
WO2020209088A1 (ja) | 複数のマーカを備えたデバイス | |
JP7198149B2 (ja) | 情報処理装置およびデバイス情報導出方法 | |
WO2020189450A1 (ja) | 複数のマーカを備えたデバイス | |
JP7288792B2 (ja) | 情報処理装置およびデバイス情報導出方法 | |
JP6768933B2 (ja) | 情報処理装置、情報処理システム、および画像処理方法 | |
JP6518645B2 (ja) | 情報処理装置および画像生成方法 | |
WO2023157499A1 (ja) | 情報処理装置およびデバイス位置推定方法 | |
WO2023157338A1 (ja) | 情報処理装置およびデバイス位置推定方法 | |
WO2023157498A1 (ja) | 情報処理装置、デバイス速度推定方法およびデバイス位置推定方法 | |
WO2023238678A1 (ja) | 情報処理装置、コントローラ表示方法およびコンピュータプログラム | |
WO2020213363A1 (ja) | 複数のマーカを備えたデバイス | |
JP2000098300A (ja) | 仮想画像立体合成装置、仮想画像立体合成方法、ゲーム装置及び記録媒体 | |
WO2023153093A1 (ja) | 情報処理装置および代表座標導出方法 | |
WO2023153094A1 (ja) | 情報処理装置および代表座標導出方法 | |
WO2022255058A1 (ja) | 情報処理装置および画像生成方法 | |
US20210141450A1 (en) | System and method for producing images based on gaze direction and field of view | |
CN117474989A (zh) | 检查装置以及视角检查方法 | |
JP2024018242A (ja) | 情報処理装置および画像生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220419 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220419 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230529 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7288792 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |