JP2017107349A - 情報処理装置、情報処理システム、その制御方法及びプログラム - Google Patents
情報処理装置、情報処理システム、その制御方法及びプログラム Download PDFInfo
- Publication number
- JP2017107349A JP2017107349A JP2015239856A JP2015239856A JP2017107349A JP 2017107349 A JP2017107349 A JP 2017107349A JP 2015239856 A JP2015239856 A JP 2015239856A JP 2015239856 A JP2015239856 A JP 2015239856A JP 2017107349 A JP2017107349 A JP 2017107349A
- Authority
- JP
- Japan
- Prior art keywords
- model
- real object
- orientation
- contact
- determined
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Studio Circuits (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
即ち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
150 ネットワーク
200 PC
Claims (9)
- 空間上の3次元モデルの位置姿勢に基づいて現実画像と3次元モデルを重畳した複合現実画像を表示する表示装置と通信可能な、当該3次元モデルの位置姿勢を記憶する情報処理装置であって、
前記3次元モデルのうち、作業対象となる第1のモデルと、当該第1のモデルに対する作業を行うための道具を示す第2のモデルを対応付けて記憶する記憶手段と、
現実物体を検出する現実物体検出手段と、
前記現実物体検出手段で検出された現実物体の位置と、前記第1のモデルの位置とが所定距離内にあるか判定する判定手段と、
前記判定手段で、前記現実物体の位置と前記第1のモデルの位置とが所定距離内にあると判定された場合に、前記第1のモデルに対応する前記第2のモデルを特定する特定手段と、
前記特定手段で特定された第2のモデルの空間上の位置姿勢を、前記現実物体の位置姿勢に従って決定する決定手段と、
前記検出手段で検出された現実物体が所定の動きをしたことを検知する動き検知手段と、
前記動き検知手段で当該現実物体が所定の動きをしたと検知した場合に、当該所定の動きをしている現実物体又は当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが、他の3次元モデルに接触したか判定する接触判定手段と、
前記接触判定手段で接触したと判定された場合に、当該接触した旨を示す情報を前記表示装置の表示画面に表示すべく制御する表示制御手段と、
を備えることを特徴とする情報処理装置。 - 前記接触判定手段で、前記現実物体又は当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが他の3次元モデルに接触したと判定された場合に、前記表示装置に表示する複合現実画像をキャプチャする第1のキャプチャ手段と、
を備えることを特徴とする請求項1に記載の情報処理装置。 - 前記動き検知手段で前記現実物体が所定の動きをしたことが検知された場合であって、前記接触判定手段で所定の動きをしている現実物体又は当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが、他の3次元モデルに接触したと判定された場合に、前記特定手段による当該第2のモデルの特定に用いられた前記第1のモデルの位置を記憶する第1の位置記憶手段と、
前記動き検知手段で前記現実物体が所定の動きをしたことが検知された場合であって、前記接触判定手段で所定の動きをしている現実物体及び当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが、他の3次元モデルに接触しなかったと判定された場合に、当該現実物体から所定の距離にある位置を記憶する第2の位置記憶手段と、
前記第1の位置記憶手段で記憶された第1の位置と、前記第2の位置記憶手段で記憶された第2の位置との相対関係を示す前記複合現実画像を生成する相対関係画像生成手段と、
を備え、
前記表示制御手段は、前記相対関係画像生成手段で生成された前記第1の位置と第2の位置の相対関係を示す複合現実画像を、前記表示装置に表示すべく送信することを特徴とする請求項1又は2に記載の情報処理装置。 - 前記接触判定手段で、前記現実物体及び当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが他の3次元モデルに接触しなかったと判定された場合に、前記表示装置に表示する複合現実画像である前記相対関係画像をキャプチャする第2のキャプチャ手段と、
を備えることを特徴とする請求項3に記載の情報処理装置。 - 前記接触判定手段で、前記現実物体又は当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが他の3次元モデルに接触したと判定された後に、前記接触判定手段で、前記現実物体及び当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが他の3次元モデルに接触しなかったと判定された場合に、接触したと判定された他の3次元モデルと、前記第1の位置と、前記第2の位置とを対応付けて記憶する第3の位置記憶手段と、
を備えることを特徴とする請求項3又は4に記載の情報処理装置。 - 前記相対関係画像生成手段は、前記第1の位置と、前記第2の位置との距離を示す情報を含む複合現実画像を、前記相対関係画像として生成することを特徴とする請求項3乃至5のいずれか1項に記載の情報処理装置。
- 空間上の3次元モデルの位置姿勢に基づいて現実画像と3次元モデルを重畳した複合現実画像を表示する表示装置と通信可能な、当該3次元モデルの位置姿勢を記憶する情報処理装置の制御方法であって、
前記3次元モデルのうち、作業対象となる第1のモデルと、当該第1のモデルに対する作業を行うための道具を示す第2のモデルを対応付けて記憶する記憶工程と、
現実物体を検出する現実物体検出工程と、
前記現実物体検出工程で検出された現実物体の位置と、前記第1のモデルの位置とが所定距離内にあるか判定する判定工程と、
前記判定工程で、前記現実物体の位置と前記第1のモデルの位置とが所定距離内にあると判定された場合に、前記第1のモデルに対応する前記第2のモデルを特定する特定工程と、
前記特定工程で特定された第2のモデルの空間上の位置姿勢を、前記現実物体の位置姿勢に従って決定する決定工程と、
前記検出工程で検出された現実物体が所定の動きをしたことを検知する動き検知工程と、
前記動き検知工程で当該現実物体が所定の動きをしたと検知した場合に、当該所定の動きをしている現実物体又は当該現実物体の位置姿勢に応じて前記決定工程で位置姿勢が決定された前記第2のモデルが、他の3次元モデルに接触したか判定する接触判定工程と、
前記接触判定工程で接触したと判定された場合に、当該接触した旨を示す情報を前記表示装置の表示画面に表示すべく制御する表示制御工程と、
を含むことを特徴とする情報処理装置の制御方法。 - 空間上の3次元モデルの位置姿勢に基づいて現実画像と3次元モデルを重畳した複合現実画像を表示する表示装置と通信可能な、当該3次元モデルの位置姿勢を記憶する情報処理装置で実行が可能なプログラムであって、
前記情報処理装置を、
前記3次元モデルのうち、作業対象となる第1のモデルと、当該第1のモデルに対する作業を行うための道具を示す第2のモデルを対応付けて記憶する記憶手段と、
現実物体を検出する現実物体検出手段と、
前記現実物体検出手段で検出された現実物体の位置と、前記第1のモデルの位置とが所定距離内にあるか判定する判定手段と、
前記判定手段で、前記現実物体の位置と前記第1のモデルの位置とが所定距離内にあると判定された場合に、前記第1のモデルに対応する前記第2のモデルを特定する特定手段と、
前記特定手段で特定された第2のモデルの空間上の位置姿勢を、前記現実物体の位置姿勢に従って決定する決定手段と、
前記検出手段で検出された現実物体が所定の動きをしたことを検知する動き検知手段と、
前記動き検知手段で当該現実物体が所定の動きをしたと検知した場合に、当該所定の動きをしている現実物体又は当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが、他の3次元モデルに接触したか判定する接触判定手段と、
前記接触判定手段で接触したと判定された場合に、当該接触した旨を示す情報を前記表示装置の表示画面に表示すべく制御する表示制御手段として機能させることを特徴とする情報処理装置のプログラム。 - 空間上の3次元モデルの位置姿勢に基づいて現実画像と3次元モデルを重畳した複合現実画像を表示する表示装置と、当該3次元モデルの位置姿勢を記憶する情報処理装置とを含む情報処理システムであって、
前記3次元モデルのうち、作業対象となる第1のモデルと、当該第1のモデルに対する作業を行うための道具を示す第2のモデルを対応付けて記憶する記憶手段と、
現実物体を検出する現実物体検出手段と、
前記現実物体検出手段で検出された現実物体の位置と、前記第1のモデルの位置とが所定距離内にあるか判定する判定手段と、
前記判定手段で、前記現実物体の位置と前記第1のモデルの位置とが所定距離内にあると判定された場合に、前記第1のモデルに対応する前記第2のモデルを特定する特定手段と、
前記特定手段で特定された第2のモデルの空間上の位置姿勢を、前記現実物体の位置姿勢に従って決定する決定手段と、
前記検出手段で検出された現実物体が所定の動きをしたことを検知する動き検知手段と、
前記動き検知手段で当該現実物体が所定の動きをしたと検知した場合に、当該所定の動きをしている現実物体又は当該現実物体の位置姿勢に応じて前記決定手段で位置姿勢が決定された前記第2のモデルが、他の3次元モデルに接触したか判定する接触判定手段と、
前記接触判定手段で接触したと判定された場合に、当該接触した旨を示す情報を前記表示装置の表示画面に表示すべく制御する表示制御手段と、
を備えることを特徴とする情報処理システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015239856A JP6738007B2 (ja) | 2015-12-09 | 2015-12-09 | 情報処理装置、情報処理システム、その制御方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015239856A JP6738007B2 (ja) | 2015-12-09 | 2015-12-09 | 情報処理装置、情報処理システム、その制御方法及びプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020121313A Division JP2020187778A (ja) | 2020-07-15 | 2020-07-15 | 情報処理装置、情報処理システム、その制御方法及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017107349A true JP2017107349A (ja) | 2017-06-15 |
JP2017107349A5 JP2017107349A5 (ja) | 2019-01-24 |
JP6738007B2 JP6738007B2 (ja) | 2020-08-12 |
Family
ID=59059662
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015239856A Active JP6738007B2 (ja) | 2015-12-09 | 2015-12-09 | 情報処理装置、情報処理システム、その制御方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6738007B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019040357A (ja) * | 2017-08-24 | 2019-03-14 | キヤノンマーケティングジャパン株式会社 | 画像処理装置、画像処理方法、コンピュータプログラム |
JP2019219492A (ja) * | 2018-06-19 | 2019-12-26 | ニチアス株式会社 | 締付体験システム |
WO2020075232A1 (ja) * | 2018-10-10 | 2020-04-16 | 株式会社日立製作所 | 拡張現実による機械的締結部の管理方法 |
WO2020246425A1 (ja) * | 2019-06-07 | 2020-12-10 | マツダ株式会社 | 映像処理方法、映像処理装置、及び映像処理プログラムを記録した記録媒体 |
JPWO2020250270A1 (ja) * | 2019-06-10 | 2020-12-17 | ||
TWI788796B (zh) * | 2020-03-05 | 2023-01-01 | 日商京都機械工具股份有限公司 | 擴增實境的機械連結作業方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008129656A (ja) * | 2006-11-16 | 2008-06-05 | Sharp Corp | 干渉検証装置、方法、プログラムおよび記録媒体 |
JP2013092887A (ja) * | 2011-10-25 | 2013-05-16 | Canon Inc | 画像処理装置と画像処理装置の制御方法およびプログラムと、情報処理装置と情報処理装置の制御方法およびプログラム |
JP2013101468A (ja) * | 2011-11-08 | 2013-05-23 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
-
2015
- 2015-12-09 JP JP2015239856A patent/JP6738007B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008129656A (ja) * | 2006-11-16 | 2008-06-05 | Sharp Corp | 干渉検証装置、方法、プログラムおよび記録媒体 |
JP2013092887A (ja) * | 2011-10-25 | 2013-05-16 | Canon Inc | 画像処理装置と画像処理装置の制御方法およびプログラムと、情報処理装置と情報処理装置の制御方法およびプログラム |
JP2013101468A (ja) * | 2011-11-08 | 2013-05-23 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019040357A (ja) * | 2017-08-24 | 2019-03-14 | キヤノンマーケティングジャパン株式会社 | 画像処理装置、画像処理方法、コンピュータプログラム |
JP2019219492A (ja) * | 2018-06-19 | 2019-12-26 | ニチアス株式会社 | 締付体験システム |
WO2020075232A1 (ja) * | 2018-10-10 | 2020-04-16 | 株式会社日立製作所 | 拡張現実による機械的締結部の管理方法 |
JPWO2020075232A1 (ja) * | 2018-10-10 | 2021-02-15 | 株式会社日立製作所 | 拡張現実による機械的締結部の管理方法 |
WO2020246425A1 (ja) * | 2019-06-07 | 2020-12-10 | マツダ株式会社 | 映像処理方法、映像処理装置、及び映像処理プログラムを記録した記録媒体 |
JP2020201634A (ja) * | 2019-06-07 | 2020-12-17 | マツダ株式会社 | 映像処理方法、映像処理装置、映像処理プログラム及び映像処理プログラムを記録した記録媒体 |
JP7279530B2 (ja) | 2019-06-07 | 2023-05-23 | マツダ株式会社 | 映像処理方法、映像処理装置、映像処理プログラム及び映像処理プログラムを記録した記録媒体 |
US11790624B2 (en) | 2019-06-07 | 2023-10-17 | Mazda Motor Corporation | Video processing method, video processing apparatus, and recording medium having video processing program recorded therein |
JPWO2020250270A1 (ja) * | 2019-06-10 | 2020-12-17 | ||
WO2020250270A1 (ja) * | 2019-06-10 | 2020-12-17 | マクセル株式会社 | 操作支援システム及び操作支援方法 |
JP7393427B2 (ja) | 2019-06-10 | 2023-12-06 | マクセル株式会社 | 操作支援システム |
TWI788796B (zh) * | 2020-03-05 | 2023-01-01 | 日商京都機械工具股份有限公司 | 擴增實境的機械連結作業方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6738007B2 (ja) | 2020-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6738007B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP6730642B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP6978701B2 (ja) | 情報処理システム、その制御方法、及びプログラム、並びに、情報処理装置、その制御方法、及びプログラム | |
JP2015125641A (ja) | 情報処理装置、その制御方法、及びプログラム | |
JP6434476B2 (ja) | 拡張現実シミュレーション装置及び拡張現実シミュレーションプログラム | |
JP6677890B2 (ja) | 情報処理システム、その制御方法、及びプログラム、並びに情報処理装置、その制御方法、及びプログラム | |
JP6920057B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
JP2021079520A (ja) | 拡張現実を用いたシミュレーション装置及びロボットシステム | |
JP2019008623A (ja) | 情報処理装置、及び、情報処理装置の制御方法、コンピュータプログラム、記憶媒体 | |
JP2016122392A (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP6295296B2 (ja) | 複合システム及びターゲットマーカ | |
JP6364389B2 (ja) | 検査方法及び検査システム | |
JP6730577B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
WO2021176645A1 (ja) | 拡張現実による機械締結作業方法 | |
JP6725827B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP2020187778A (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP6152888B2 (ja) | 情報処理装置、その制御方法、及びプログラム、並びに、情報処理システム、その制御方法、及びプログラム | |
JP6820469B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP6683919B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP7279113B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
JP6357412B2 (ja) | 情報処理装置、情報処理システム、情報処理方法、及びプログラム | |
JP7029087B2 (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP2015121892A (ja) | 画像処理装置、画像処理方法 | |
JP2019012334A (ja) | 情報処理装置、情報処理システム、その制御方法及びプログラム | |
JP6703283B2 (ja) | 情報処理装置、その制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20161101 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20161101 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20180703 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20181031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181205 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181205 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190111 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200107 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200306 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200407 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200522 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200616 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200629 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6738007 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |