JP2016218534A - 画像表示システムおよび画像表示方法 - Google Patents
画像表示システムおよび画像表示方法 Download PDFInfo
- Publication number
- JP2016218534A JP2016218534A JP2015099636A JP2015099636A JP2016218534A JP 2016218534 A JP2016218534 A JP 2016218534A JP 2015099636 A JP2015099636 A JP 2015099636A JP 2015099636 A JP2015099636 A JP 2015099636A JP 2016218534 A JP2016218534 A JP 2016218534A
- Authority
- JP
- Japan
- Prior art keywords
- image
- user
- virtual
- virtual space
- real
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
Description
2 表示装置
3 動作分析装置
4 表示制御装置
6 ユーザ頭部
7 部屋
9 光学的マーカ
10 ロボット(特定実オブジェクト)
10A 仮想ロボット(特定仮想オブジェクト)
11 画像表示部
12 撮像部
13 姿勢検出部
21 位置検出部
31 3次元データ入力部
32 仮想空間画像生成部
33 画像合成部
41 視線推定部
42 モデリング部
43 レンダリング部
44 ディストーション部
47 左仮想空間画像
48 右仮想空間画像
50 合成画像
60 くず入れ(他の実オブジェクト)
65 膝部
70 移動軌跡
Claims (6)
- ユーザに対して現実世界の仮想的状況を示す画像を表示する画像表示システムであって、
前記ユーザの視線を推定する視線推定部と、
少なくとも1つの実オブジェクトを含む現実空間を、前記実オブジェクトに対応する少なくとも1つの仮想オブジェクトを含む仮想空間として再現するための3次元データが入力される3次元データ入力部と、
前記推定された視線に基づく前記現実空間の風景に対応する前記仮想空間の風景を含む仮想空間画像を、前記3次元データから生成する仮想空間画像生成部と、
前記仮想空間画像を、前記現実空間において前記ユーザの視界に入る前記風景または当該風景を撮像した撮像画像と重ね合わせた合成画像を生成する画像合成部と、
前記合成画像を前記ユーザに対して表示する表示部と
を備え、
前記仮想空間画像生成部は、前記仮想オブジェクトに含まれる特定仮想オブジェクトに対して予め定められた動作を設定し、当該動作に基づく前記特定仮想オブジェクトの変化を示す前記仮想空間画像を生成することを特徴とする画像表示システム。 - 前記予め定められた動作は、前記実オブジェクトに含まれる特定の実オブジェクトと前記特定仮想オブジェクトとが同じ状態にある現在から開始され、仮想的に所定時間が経過するまでの動作であることを特徴とする請求項1に記載の画像表示システム。
- 前記撮像画像を撮像する撮像部を更に備え、
前記撮像部は、前記表示部と一体的に前記ユーザの頭部に装着可能な装置からなり、
前記合成画像は、前記撮像部によって撮像された前記撮像画像と前記仮想空間画像とを重ね合わせることにより生成されたことを特徴とする請求項1または請求項2に記載の画像表示システム。 - 前記ユーザの頭部の位置を検出する位置検出部と前記ユーザの頭部の姿勢を検出する姿勢検出部とを更に備え、
前記視線推定部は、前記検出された頭部の位置及び姿勢に基づき、前記ユーザの視線を推定することを特徴とする請求項1から請求項3のいずれかに記載の画像表示システム。 - 前記仮想空間画像には、前記特定仮想オブジェクトの前記動作に基づく移動軌跡が含まれることを特徴とする請求項1から請求項4のいずれかに記載の画像表示システム。
- ユーザに対して現実世界の仮想的状況を示す画像を表示する画像表示方法であって、
前記ユーザの視線を推定する視線推定ステップと、
少なくとも1つの実オブジェクトを含む現実空間を、前記実オブジェクトに対応する少なくとも1つの仮想オブジェクトを含む仮想空間として再現するための3次元データが入力される3次元データ入力ステップと、
前記推定された視線に基づく前記現実空間の風景に対応する前記仮想空間の風景を含む仮想空間画像を、前記3次元データから生成する仮想空間画像生成ステップと、
前記仮想空間画像を、前記現実空間において前記ユーザの視界に入る前記風景または当該風景を撮像した撮像画像と重ね合わせた合成画像を生成する画像合成ステップと、
前記合成画像を前記ユーザに対して表示する表示ステップと
を有し、
前記仮想空間画像生成ステップでは、前記仮想オブジェクトに含まれる特定仮想オブジェクトに対して予め定められた動作を設定し、当該動作に基づく前記特定仮想オブジェクトの変化を示す前記仮想空間画像を生成することを特徴とする画像表示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015099636A JP6598191B2 (ja) | 2015-05-15 | 2015-05-15 | 画像表示システムおよび画像表示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015099636A JP6598191B2 (ja) | 2015-05-15 | 2015-05-15 | 画像表示システムおよび画像表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016218534A true JP2016218534A (ja) | 2016-12-22 |
JP6598191B2 JP6598191B2 (ja) | 2019-10-30 |
Family
ID=57581067
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015099636A Active JP6598191B2 (ja) | 2015-05-15 | 2015-05-15 | 画像表示システムおよび画像表示方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6598191B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6257827B1 (ja) * | 2017-06-01 | 2018-01-10 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 |
JP2019008473A (ja) * | 2017-06-22 | 2019-01-17 | ファナック株式会社 | 複合現実シミュレーション装置及び複合現実シミュレーションプログラム |
WO2019044766A1 (ja) * | 2017-08-31 | 2019-03-07 | 川崎重工業株式会社 | ロボットシステム及びその運転方法 |
CN110060354A (zh) * | 2019-04-19 | 2019-07-26 | 苏州梦想人软件科技有限公司 | 真实图像在虚拟空间中的定位和交互方法 |
CN111316334A (zh) * | 2017-11-03 | 2020-06-19 | 三星电子株式会社 | 用于动态地改变虚拟现实环境的设备和方法 |
JP2021005215A (ja) * | 2019-06-26 | 2021-01-14 | トヨタ紡織株式会社 | 興味推定システム |
WO2023127096A1 (ja) * | 2021-12-28 | 2023-07-06 | 川崎重工業株式会社 | シミュレーションシステム、シミュレーション方法及びシミュレーションプログラム |
WO2024024037A1 (ja) * | 2022-07-28 | 2024-02-01 | 楽天モバイル株式会社 | 拡張現実画像を生成するための画像処理 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014149712A (ja) * | 2013-02-01 | 2014-08-21 | Sony Corp | 情報処理装置、端末装置、情報処理方法及びプログラム |
US20150091780A1 (en) * | 2013-10-02 | 2015-04-02 | Philip Scott Lyren | Wearable Electronic Device |
-
2015
- 2015-05-15 JP JP2015099636A patent/JP6598191B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014149712A (ja) * | 2013-02-01 | 2014-08-21 | Sony Corp | 情報処理装置、端末装置、情報処理方法及びプログラム |
US20150091780A1 (en) * | 2013-10-02 | 2015-04-02 | Philip Scott Lyren | Wearable Electronic Device |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6257827B1 (ja) * | 2017-06-01 | 2018-01-10 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 |
JP2018205951A (ja) * | 2017-06-01 | 2018-12-27 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 |
JP2019008473A (ja) * | 2017-06-22 | 2019-01-17 | ファナック株式会社 | 複合現実シミュレーション装置及び複合現実シミュレーションプログラム |
US11370105B2 (en) | 2017-08-31 | 2022-06-28 | Kawasaki Jukogyo Kabushiki Kaisha | Robot system and method for operating same |
JP2019042843A (ja) * | 2017-08-31 | 2019-03-22 | 川崎重工業株式会社 | ロボットシステム及びその運転方法 |
JP7066357B2 (ja) | 2017-08-31 | 2022-05-13 | 川崎重工業株式会社 | ロボットシステム及びその運転方法 |
WO2019044766A1 (ja) * | 2017-08-31 | 2019-03-07 | 川崎重工業株式会社 | ロボットシステム及びその運転方法 |
CN111316334A (zh) * | 2017-11-03 | 2020-06-19 | 三星电子株式会社 | 用于动态地改变虚拟现实环境的设备和方法 |
CN111316334B (zh) * | 2017-11-03 | 2024-03-08 | 三星电子株式会社 | 用于动态地改变虚拟现实环境的设备和方法 |
CN110060354A (zh) * | 2019-04-19 | 2019-07-26 | 苏州梦想人软件科技有限公司 | 真实图像在虚拟空间中的定位和交互方法 |
CN110060354B (zh) * | 2019-04-19 | 2023-08-04 | 苏州梦想人软件科技有限公司 | 真实图像在虚拟空间中的定位和交互方法 |
JP2021005215A (ja) * | 2019-06-26 | 2021-01-14 | トヨタ紡織株式会社 | 興味推定システム |
JP7247784B2 (ja) | 2019-06-26 | 2023-03-29 | トヨタ紡織株式会社 | 興味推定システム |
WO2023127096A1 (ja) * | 2021-12-28 | 2023-07-06 | 川崎重工業株式会社 | シミュレーションシステム、シミュレーション方法及びシミュレーションプログラム |
WO2024024037A1 (ja) * | 2022-07-28 | 2024-02-01 | 楽天モバイル株式会社 | 拡張現実画像を生成するための画像処理 |
Also Published As
Publication number | Publication date |
---|---|
JP6598191B2 (ja) | 2019-10-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6598191B2 (ja) | 画像表示システムおよび画像表示方法 | |
US11220002B2 (en) | Robot simulation device | |
US10076840B2 (en) | Information processing apparatus, information processing method, and program | |
US10600253B2 (en) | Information processing apparatus, information processing method, and program | |
Eswaran et al. | Augmented reality-based guidance in product assembly and maintenance/repair perspective: A state of the art review on challenges and opportunities | |
JP6723738B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6558839B2 (ja) | 媒介現実 | |
WO2018111658A1 (en) | Interacting with an environment using a parent device and at least one companion device | |
CA2951087C (en) | Collision detection | |
JP2013061937A (ja) | ステレオカメラ及びステレオディスプレイを組み合わせたやり取り | |
JP2017104944A (ja) | 仮想物体の画像をロボットの映像に重畳表示する映像表示装置を備えるロボットシステム | |
JP2004213673A (ja) | 強化現実システム及び方法 | |
JP6863927B2 (ja) | ロボットのシミュレーション装置 | |
JP5857946B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
CN111716365B (zh) | 基于自然行走的沉浸式远程交互系统及方法 | |
JP2015229234A (ja) | 作業ロボットの教示データ生成装置及び教示データ生成方法 | |
JP2023511617A (ja) | 製造又は産業環境における協調ロボットとの相互作用のために仮想/拡張現実を使用するためのシステム及び方法 | |
JPWO2019225548A1 (ja) | 遠隔操作システム、情報処理方法、及びプログラム | |
JP2021065971A (ja) | ロボット教示システム、画像生成方法、及びプログラム | |
JP4689344B2 (ja) | 情報処理方法、情報処理装置 | |
WO2021033400A1 (ja) | 情報処理装置、情報処理方法および記録媒体 | |
JP2019101476A (ja) | 操作案内システム | |
JPWO2022124398A5 (ja) | ||
Pyo et al. | Immersive VR interface for informationally structured environment | |
JP2018077732A (ja) | 画像処理装置、画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150515 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180416 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190423 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190507 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190619 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190924 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190925 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6598191 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |