JP6524124B2 - コンピュータプログラム、端末および方法 - Google Patents
コンピュータプログラム、端末および方法 Download PDFInfo
- Publication number
- JP6524124B2 JP6524124B2 JP2017018885A JP2017018885A JP6524124B2 JP 6524124 B2 JP6524124 B2 JP 6524124B2 JP 2017018885 A JP2017018885 A JP 2017018885A JP 2017018885 A JP2017018885 A JP 2017018885A JP 6524124 B2 JP6524124 B2 JP 6524124B2
- Authority
- JP
- Japan
- Prior art keywords
- terminal
- display
- information
- function
- dimensional model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Description
オブジェクト変更部210は、ユーザに通知される情報に応じてオブジェクトの表示態様または動作を変更する。
図3は、端末装置10における一連の処理の流れを示すフローチャートである。端末装置10は、三次元モデルにおける端末装置10の現在位置を特定する(S301)。端末装置10は、三次元モデルと撮像部103や深さセンサ106などの計測手段によって取得される現実の三次元空間情報との対応関係を取得する(S302)。端末装置10は、三次元モデルにおけるオブジェクトの位置を決定する(S303)。端末装置10は、オブジェクトの像を重畳することで重畳画像を生成する(S305)。端末装置10は、オブジェクトに関連付けて表示されるテキストメッセージやオブジェクトの口の動きに合わせて出力される音声メッセージなどの通知エフェクトを生成する(S306)。端末装置10は重畳画像をディスプレイ105に表示させる(S307)。端末装置10はオブジェクトを介した通知エフェクトを出力する(S308)。
なお、ステップS302について、端末装置10において、三次元モデルを取得した上で、ディスプレイ105に撮影画像を表示させて(例えば、テレビを表示させながら、テレビであることを示すアイコンを選択するによって)、三次元モデルの場所と物品種類を登録してもよい。これにより、アプリケーション次第で、物品の場所を認識した上で、オブジェクトの動作を変えることができる。
(1)三次元モデルにおけるオブジェクト501の移動前座標(xa,ya,za)、移動後座標(xb,yb,zb)を決定する。
(2)移動前座標(xa,ya,za)と移動後座標(xb,yb,zb)とを結ぶ移動経路を決定し、該移動経路をN等分(Nは2以上の自然数)することでN+1個の重畳対象座標(xn、yn、zn)を決定する。n=0、1、…、Nであり、(x0、y0、z0)=(xa,ya,za)、(xN、yN、zN)=(xb,yb,zb)である。
(3)オブジェクト501を移動前座標(xa,ya,za)に配置したときの重畳画像を生成し、ディスプレイ105に表示させる。
(4)オブジェクト501を移動前座標(xa,ya,za)の次の重畳対象座標(x1,y1,z1)に配置したときの重畳画像を生成し、ディスプレイ105に表示させる。
(5)nをインクリメントし、(4)と同じ処理を行う。インクリメントの結果、n=Nとなったら次に進む。
(6)オブジェクト501を移動後座標(xb,yb,zb)に配置したときの重畳画像を生成し、ディスプレイ105に表示させる。
これにより、三次元モデルにおけるオブジェクト501の位置を変化させ、ディスプレイ105に表示される画面においても対応するようにオブジェクト501を連続的に移動させることができる。例えば、オブジェクト501の位置が1m変わった場合、オブジェクト501を移動前の位置から移動後の位置へ瞬間的に移動させるのではなく、オブジェクト501の歩く速度で1m先まで移動させる。
なお、端末装置10の座標が特定の座標となるか、特定の距離に入った場合、更にはディスプレイ105の向き(高さ・方向)が特定の条件に合致した場合に、アニメーションを表示させてもよい。あるいはまた、特定の時間帯、特定の回数(1日単位で1回表示されると2回目は表示されない)に限りアニメーションを表示させてもよい。
なお、テレビ401に、通知する番組に関連する動画をサーバから取得し、オブジェクトとしてテレビ画面に重畳させて表示して通知する番組を案内してもよい。
なお、上記の例において、テキストメッセージの表示に加えてまたは代えて、対応する内容の音声をスピーカ101から出力してもよい。
なお、上記のオブジェクトの表示条件について、表示されたオブジェクトを選択することで、表示条件をユーザが編集可能とすることができる。
Claims (11)
- 撮像手段とディスプレイとを備える端末に、
実空間の三次元モデルにおける前記端末の位置を特定する機能と、
特定された前記端末の位置に基づいて、前記三次元モデルと計測手段によって取得される現実の三次元空間情報との対応関係を取得する機能と、
取得された対応関係と前記三次元モデルにおけるオブジェクトの位置とに基づいて、前記撮像手段により取得された画像における前記オブジェクトの位置を決定する機能と、
決定された位置に前記オブジェクトが重畳された前記画像を前記ディスプレイに表示させる機能と、
前記ディスプレイに表示された前記オブジェクトを介して、前記端末のユーザに情報を通知する機能と、を実現させ、
前記情報は、前記端末にインストールされているアプリケーションプログラムであって本コンピュータプログラムとは異なるアプリケーションプログラムから前記ユーザに通知すべき情報を含むコンピュータプログラム。 - あたかも前記オブジェクトが前記画像内の別のオブジェクトに作用するかのような追加的表示を生成する機能をさらに前記端末に実現させ、
前記別のオブジェクトは現実の物に対応する請求項1に記載のコンピュータプログラム。 - 前記アプリケーションプログラムは実空間に配置されている装置を操作するためのアプリケーションプログラムであり、
前記現実の物は前記装置であり、
前記コンピュータプログラムは、
前記通知の内容に関連した前記装置に対する操作指示を受け付ける機能と、
指示された操作を前記アプリケーションプログラムに行わせる機能と、をさらに前記端末に実現させる請求項2に記載のコンピュータプログラム。 - 前記情報は、前記端末がネットワークを介してサーバから受信した情報を含む請求項1から3のいずれか一項に記載のコンピュータプログラム。
- 前記通知する機能は、前記情報として前記オブジェクトの属性および前記ユーザの属性のうちの少なくともひとつに応じたテキストメッセージを前記オブジェクトに関連付けて前記ディスプレイに表示させる機能または前記情報として前記オブジェクトの属性および前記ユーザの属性のうちの少なくともひとつに応じた音声を出力する機能もしくはその両方を含む請求項1から4のいずれか一項に記載のコンピュータプログラム。
- 前記通知する機能において前記ユーザに通知される前記情報に応じて前記オブジェクトの表示態様または動作を変更する機能をさらに前記端末に実現させる請求項1から5のいずれか一項に記載のコンピュータプログラム。
- 前記三次元モデルにおける前記オブジェクトの前記位置の変化に応じて、前記ディスプレイに表示される前記画像において前記オブジェクトを移動させる機能をさらに前記端末に実現させる請求項1から6のいずれか一項に記載のコンピュータプログラム。
- 前記移動させる機能は、前記オブジェクトを前記ディスプレイの表示範囲の外から内へ移動させる機能を含む請求項7に記載のコンピュータプログラム。
- 前記撮像手段によって取得される画像から前記三次元モデルを生成する機能をさらに前記端末に実現させる請求項1から8のいずれか一項に記載のコンピュータプログラム。
- 撮像手段とディスプレイとを備える端末であって、
実空間の三次元モデルにおける前記端末の位置を特定する手段と、
特定された前記端末の位置に基づいて、前記三次元モデルと計測手段によって取得される現実の三次元空間情報との対応関係を取得する手段と、
取得された対応関係と前記三次元モデルにおけるオブジェクトの位置とに基づいて、前記撮像手段により取得された画像における前記オブジェクトの位置を決定する手段と、
決定された位置に前記オブジェクトが重畳された前記画像を前記ディスプレイに表示させる手段と、
前記ディスプレイに表示された前記オブジェクトを介して、前記端末のユーザに情報を通知する手段と、
前記端末を上記の各手段として機能させるためのコンピュータプログラムと、を備え、
前記情報は、前記端末にインストールされているアプリケーションプログラムであって前記コンピュータプログラムとは異なるアプリケーションプログラムから前記ユーザに通知すべき情報を含む端末。 - 撮像手段とディスプレイとを備える端末がコンピュータプログラムを実行することにより前記端末で実現される方法であって、
実空間の三次元モデルにおける前記端末の位置を特定することと、
特定された前記端末の位置に基づいて、前記三次元モデルと計測手段によって取得される現実の三次元空間情報との対応関係を取得することと、
取得された対応関係と前記三次元モデルにおけるオブジェクトの位置とに基づいて、前記撮像手段により取得された画像における前記オブジェクトの位置を決定することと、
決定された位置に前記オブジェクトが重畳された前記画像を前記ディスプレイに表示させることと、
前記ディスプレイに表示された前記オブジェクトを介して、前記端末のユーザに情報を通知することと、を含み、
前記情報は、前記端末にインストールされているアプリケーションプログラムであって前記コンピュータプログラムとは異なるアプリケーションプログラムから前記ユーザに通知すべき情報を含む方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017018885A JP6524124B2 (ja) | 2017-02-03 | 2017-02-03 | コンピュータプログラム、端末および方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017018885A JP6524124B2 (ja) | 2017-02-03 | 2017-02-03 | コンピュータプログラム、端末および方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019085220A Division JP2019160332A (ja) | 2019-04-26 | 2019-04-26 | コンピュータプログラム、端末および方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018124515A JP2018124515A (ja) | 2018-08-09 |
JP6524124B2 true JP6524124B2 (ja) | 2019-06-05 |
Family
ID=63109089
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017018885A Active JP6524124B2 (ja) | 2017-02-03 | 2017-02-03 | コンピュータプログラム、端末および方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6524124B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7181016B2 (ja) | 2018-06-29 | 2022-11-30 | 株式会社神戸製鋼所 | 接合構造体及びその製造方法 |
JP7260763B2 (ja) | 2019-03-26 | 2023-04-19 | 株式会社Mixi | 情報処理装置及びプログラム |
WO2020218041A1 (ja) * | 2019-04-23 | 2020-10-29 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
CN110335351B (zh) * | 2019-07-02 | 2023-03-24 | 北京百度网讯科技有限公司 | 多模态ar处理方法、装置、系统、设备及可读存储介质 |
WO2021084882A1 (ja) * | 2019-10-28 | 2021-05-06 | ソニー株式会社 | 情報処理装置、および情報処理方法、並びにプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002041276A (ja) * | 2000-07-24 | 2002-02-08 | Sony Corp | 対話型操作支援システム及び対話型操作支援方法、並びに記憶媒体 |
JP5927822B2 (ja) * | 2011-09-21 | 2016-06-01 | カシオ計算機株式会社 | 画像通信システム |
JP5888372B2 (ja) * | 2013-08-29 | 2016-03-22 | キヤノンマーケティングジャパン株式会社 | 情報処理システムとその処理方法及びプログラム |
US9761059B2 (en) * | 2014-01-03 | 2017-09-12 | Intel Corporation | Dynamic augmentation of a physical scene |
JP2015228050A (ja) * | 2014-05-30 | 2015-12-17 | ソニー株式会社 | 情報処理装置および情報処理方法 |
JP6290020B2 (ja) * | 2014-07-11 | 2018-03-07 | Kddi株式会社 | 画像処理装置、画像処理方法、およびプログラム |
-
2017
- 2017-02-03 JP JP2017018885A patent/JP6524124B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018124515A (ja) | 2018-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6524124B2 (ja) | コンピュータプログラム、端末および方法 | |
JP7002684B2 (ja) | 拡張現実および仮想現実のためのシステムおよび方法 | |
JP6657289B2 (ja) | 拡張現実および仮想現実のためのシステムおよび方法 | |
JP2019220205A (ja) | 広範囲同時遠隔ディジタル提示世界 | |
JP6062039B2 (ja) | 画像処理システムおよび画像処理用プログラム | |
JP6541701B2 (ja) | 端末装置およびその制御方法、並びにプログラム | |
CN111373347B (zh) | 用于虚拟现实内容的提供的装置、方法和计算机程序 | |
CN113721804A (zh) | 一种显示方法、装置、电子设备及计算机可读存储介质 | |
US9547412B1 (en) | User interface configuration to avoid undesired movement effects | |
JP2018142090A (ja) | キャラクタ画像生成装置、キャラクタ画像生成方法、プログラム、記録媒体及びキャラクタ画像生成システム | |
CN107437063A (zh) | 用于感测环境的装置和方法、非暂态计算机可读介质 | |
KR20210148074A (ko) | Ar 시나리오 콘텐츠의 생성 방법, 전시 방법, 장치 및 저장 매체 | |
WO2020114214A1 (zh) | 导盲方法和装置,存储介质和电子设备 | |
JP6527182B2 (ja) | 端末装置、端末装置の制御方法、コンピュータプログラム | |
JP2016122277A (ja) | コンテンツ提供サーバ、コンテンツ表示端末、コンテンツ提供システム、コンテンツ提供方法、および、コンテンツ表示プログラム | |
JP2018163461A (ja) | 情報処理装置、および情報処理方法、並びにプログラム | |
JP2019160332A (ja) | コンピュータプログラム、端末および方法 | |
WO2022176450A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JPWO2020044949A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6982203B2 (ja) | キャラクタ画像生成装置、キャラクタ画像生成方法及びプログラム | |
JP6792666B2 (ja) | 端末装置、端末装置の制御方法、コンピュータプログラム | |
CN117010965A (zh) | 基于信息流广告的互动方法、装置、设备及介质 | |
JP6843178B2 (ja) | キャラクタ画像生成装置、キャラクタ画像生成方法、プログラム及び記録媒体 | |
JP7196894B2 (ja) | 情報処理装置、情報処理システム及びプログラム | |
JP2019169154A (ja) | 端末装置およびその制御方法、並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181001 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181102 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190329 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190426 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6524124 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |