JP2016136376A - 情報処理装置、情報処理方法及びプログラム - Google Patents

情報処理装置、情報処理方法及びプログラム Download PDF

Info

Publication number
JP2016136376A
JP2016136376A JP2015199712A JP2015199712A JP2016136376A JP 2016136376 A JP2016136376 A JP 2016136376A JP 2015199712 A JP2015199712 A JP 2015199712A JP 2015199712 A JP2015199712 A JP 2015199712A JP 2016136376 A JP2016136376 A JP 2016136376A
Authority
JP
Japan
Prior art keywords
display
image
virtual object
information
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015199712A
Other languages
English (en)
Other versions
JP6651777B2 (ja
Inventor
山本 大輔
Daisuke Yamamoto
大輔 山本
曜 高山
Akira Takayama
曜 高山
篤史 喜多
Atsushi Kita
篤史 喜多
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to EP15199902.6A priority Critical patent/EP3046080A3/en
Priority to US14/970,093 priority patent/US9741174B2/en
Priority to CN201610045786.8A priority patent/CN105786176B/zh
Publication of JP2016136376A publication Critical patent/JP2016136376A/ja
Application granted granted Critical
Publication of JP6651777B2 publication Critical patent/JP6651777B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Circuits (AREA)

Abstract

【課題】物体の可動部分を操作した場合のイメージをより明瞭にユーザに把握させる。
【解決手段】実施形態の情報処理装置は、不動部分と可動部分とを有する画像で表される仮想物体が表示される位置を識別する位置識別情報を含む撮像画像を取得する撮像部と、位置識別情報により識別される撮像画像上の位置に、仮想物体が合成された合成画像を生成する生成部と、表示部に表示された合成画像に含まれる可動部分の操作を受け付ける操作受付部と、操作受付部により可動部分の操作が受け付けられたときに、仮想物体を表示するための表示設定情報に基づき可動部分の表示を制御する表示制御部と、を備える。
【選択図】図4

Description

本発明は情報処理装置、情報処理方法及びプログラムに関する。
カメラにより撮像された現実の空間を示す撮像画像に、仮想物体を合成して表示する拡張現実(AR:Aurgumented Reality)技術が従来から知られている。例えばユーザが所定の模様を含む紙等(ARマーカー)を撮像すると、当該紙とカメラとの位置関係に応じて、仮想物体を撮像画像上に立体的に表示するAR技術が知られている。撮像画像上に表示された仮想物体をユーザが参照することにより、ユーザが当該仮想物体に対応する物体を実際に配置した場合のイメージを把握することができる。
特許文献1には、現実空間に実物体を配置することなく実物体の大きさや色などといった外観と周囲環境との調和が図られた仮想現実世界をユーザに提示する複合現実感表示装置の発明が開示されている。
しかしながら従来の技術では、物体に対応する仮想物体を撮像画像上に表示しても、物体の可動部分を操作した場合のイメージが把握しにくかった。
本発明は、上記に鑑みてなされたものであって、物体の可動部分を操作した場合のイメージをより明瞭にユーザに把握させることができる情報処理装置、情報処理方法及びプログラムを提供することを目的とする。
上述した課題を解決し、目的を達成するために、本発明は、不動部分と可動部分とを有する画像で表される仮想物体が表示される位置を識別する位置識別情報を含む撮像画像を取得する撮像部と、前記位置識別情報により識別される前記撮像画像上の位置に、前記仮想物体が合成された合成画像を生成する生成部と、表示部に表示された前記合成画像に含まれる前記可動部分の操作を受け付ける操作受付部と、前記操作受付部により前記可動部分の操作が受け付けられたときに、前記仮想物体を表示するための表示設定情報に基づき前記可動部分の表示を制御する表示制御部と、を備える。
本発明によれば、物体の可動部分を操作した場合のイメージをより明瞭にユーザに把握させることができるという効果を奏する。
図1は第1実施形態の情報処理システムの構成の例を示す図である。 図2Aは第1実施形態の仮想物体の表示方法の概略の例1を示す図である。 図2Bは第1実施形態の仮想物体の表示方法の概略の例2を示す図である。 図3Aは第1実施形態の仮想物体の概略を示す図である。 図3Bは第1実施形態の可動部分が操作された仮想物体の概略を示す図である。 図4は第1実施形態の情報処理装置の構成の例を示す図である。 図5は第1実施形態の初期表示画像情報の例(プリンタの場合)を示す図である。 図6は第1実施形態の着脱可能部分画像情報の例(バンクの場合)を示す図である。 図7は第1実施形態の着脱可能部分画像情報の例(フィニッシャーの場合)を示す図である。 図8は第1実施形態の可動部分画像情報の例(ADFの場合)を示す図である。 図9は第1実施形態の可動部分画像情報の例(トナーカバーの場合)を示す図である。 図10は第1実施形態の可動部分画像情報の例(ペーパートレイの場合)を示す図である。 図11は第1実施形態の可動部分画像情報の例(両面ユニットカバーの場合)を示す図である。 図12は第1実施形態の機器動作画像情報の例(プリント動作の場合)を示す図である。 図13は第1実施形態の機種選択画面の例を示す図である。 図14は第1実施形態の地域選択画面の例を示す図である。 図15は第1実施形態の機種選択画面の例(リストが表示された場合)を示す図である。 図16は第1実施形態の機種表示画面の例(プリンタAの場合)を示す図である。 図17Aは第1実施形態のトナーカバーを開く動作を示すアニメーションの例を示す図である。 図17Bは第1実施形態のトナーカバーを開く動作を示すアニメーションの例を示す図である。 図17Cは第1実施形態のトナーカバーを開く動作を示すアニメーションの例を示す図である。 図18Aは第1実施形態のトナーカバーを閉じる動作を示すアニメーションの例を示す図である。 図18Bは第1実施形態のトナーカバーを閉じる動作を示すアニメーションの例を示す図である。 図18Cは第1実施形態のトナーカバーを閉じる動作を示すアニメーションの例を示す図である。 図19はADF操作ボタンが押下された後の第1実施形態の機種表示画面の例を示す図である。 図20Aは第1実施形態のバンク選択画面の例を示す図である。 図20Bはバンクが選択された後の第1実施形態の機種表示画面の例を示す図である。 図21は第1実施形態の設置制限領域指定画面の例を示す図である。 図22は第1実施形態の商品仕様画面の例を示す図である。 図23は第1実施形態の地図表示画面の例を示す図である。 図24は第1実施形態の情報処理方法の例を示すフローチャートである。 図25は第1実施形態の情報処理装置のハードウェア構成の例を示す図である。 図26は第2実施形態の初期表示画像情報の例(冷蔵庫の場合)を示す図である。 図27は第2実施形態の可動部分画像情報の例(扉の場合)を示す図である。 図28は第2実施形態の機種選択画面の例を示す図である。 図29は第2実施形態の機種選択画面の例(リストが表示された場合)を示す図である。 図30は第2実施形態の機種表示画面の例(冷蔵庫Raの場合)を示す図である。 図31は第1の扉操作ボタンが押下された後の第2実施形態の機種表示画面の例を示す図である。 図32は第3実施形態の初期表示画像情報の例(自動車の場合)を示す図である。 図33は第3実施形態の可動部分画像情報の例(自動車の開閉部の場合)を示す図である。 図34は第3実施形態の仮想物体の例(自動車Caの場合)を示す図である。 図35は第3実施形態の仮想物体の例(運転席のドアが開いている場合)を示す図である。
以下に添付図面を参照して、情報処理装置、情報処理方法及びプログラムの実施形態を詳細に説明する。
(第1実施形態)
図1は第1実施形態の情報処理システム1の構成の例を示す図である。実施形態の情報処理システム1は、情報処理装置10及びサーバ装置20を備える。情報処理装置10及びサーバ装置20はネットワーク100を介して接続されている。ネットワーク100の通信方式は、無線方式でも有線方式でもよく、また無線方式と有線方式とが組み合わされていてもよい。ネットワーク100は、例えばインターネットである。
情報処理装置10は、任意の場所を撮像した撮像画像に、仮想物体が合成された合成画像を表示する。仮想物体は任意の物体の3Dモデルである。第1実施形態の説明では、仮想物体に対応する物体がオフィス機器である場合について説明する。なお第1実施形態の説明では、プリンタ(印刷装置)である場合を例にして説明するが、オフィス機器はプリンタに限らず任意のオフィス機器でよい。情報処理装置10は、例えばカメラ付きスマートデバイス等である。
サーバ装置20は、情報処理装置10で仮想物体を含む合成画像を表示するためのアプリケーション(プログラム)、ARマーカーを示す画像情報、及び、仮想物体を表示するための表示設定情報等の情報を記憶する。ARマーカーは撮像画像上に仮想物体を合成する位置を識別する位置識別情報である。表示設定情報の詳細は、図5乃至図12を参照して後述する。サーバ装置20に記憶されている情報は、例えばサーバ装置20上に立ち上げられたウェブサイトを介して情報処理装置10にダウンロードされる。
図2Aは第1実施形態の仮想物体40の表示方法の概略の例1を示す図である。まず情報処理装置10のユーザがサーバ装置20または情報処理装置10内に記憶されているARマーカー30を示す画像情報を印刷し、仮想物体40を表示させる場所にARマーカー30を示す印刷物を配置する。次に情報処理装置10が、仮想物体40として表示させる機種の表示設定情報を、サーバ装置20からダウンロードする。次に情報処理装置10がARマーカー30を示す印刷物を含む撮像画像を撮像すると、当該撮像画像に含まれる印刷物30の位置に、表示設定情報に応じた仮想物体40が表示される。
なお、図1及び図2Aでは、サーバ装置20が1つの構成となっているが、サーバ装置20に記憶されている情報を情報処理装置10が取得するための構成はこれに限られるものではない。
図2Bは第1実施形態の仮想物体40の表示方法の概略の例2を示す図である。図2Bの例は、サーバ装置20をサーバ装置20a及びサーバ装置20bとして、ネットワーク100上に分散させた場合を示す。まずアプリケーションの開発元が、仮想物体40の画像データ(3Dモデルとして表示される画像のモデルデータ等)の情報等を含む表示設定情報を予め有したアプリケーションを、サーバ装置20a(当該開発元会社のサーバ等)に記憶する。次に当該アプリケーションが、サーバ装置20aからネットワーク100上のアプリケーション販売サイト等を運営するサーバ装置20bにリリースされる。次に情報処理装置10が、サーバ装置20bから当該アプリケーションをダウンロードする。これにより、図2Bの構成の例でも、情報処理装置10が当該アプリケーションをインストールできる環境を構成することができる。なおARマーカー30は、情報処理装置10がサーバ装置20aから随時、ダウンロードするようにしてもよい。
次に第1実施形態の情報処理装置10で表示される仮想物体40の概略について説明する。
図3Aは第1実施形態の仮想物体40の概略を示す図である。第1実施形態の仮想物体40は、不動部分を表す第1の領域41と、可動部分を表す第2の領域42と、を有する。簡単のため図3の仮想物体40の例では、可動部分を表す第2の領域42を1つとしているが、可動部分を表す第2の領域42の数は任意でよい。図3Aの仮想物体40は、例えばプリンタであり、第2の領域42は、例えばプリンタのADF(Auto Document Feeder)部分である。
図3Bは第1実施形態の仮想物体40の概略(可動部分が操作された場合)を示す図である。図3Bの例は、仮想物体40の第2の領域42が開閉できる場合を示す。仮想物体40は、はじめに図3Aの初期表示状態で情報処理装置10に表示される。そして情報処理装置10が、第2の領域42を操作する入力を受け付けると、仮想物体40の表示が図3Aの状態から図3Bの状態に変更される。このとき第2の領域42の開閉時の動作は、動画像により表示される。動画像は、例えばアニメーションである。図3A及び図3Bの表示基準点Pは、動画像を表示する位置を特定する基準点を示す。表示基準点Pの座標は、例えば仮想物体40の所定の点Oを原点とした座標系により表される。
次に第1実施形態の情報処理装置10の構成の例について説明する。
図4は第1実施形態の情報処理装置10の構成の例を示す図である。第1実施形態の情報処理装置10は、記憶部11、撮像部12、表示制御部13、表示部14、操作受付部15、生成部16、通信部17及びGPS部18を備える。情報処理装置10は任意の装置でよいが、第1実施形態の説明では、情報処理装置10が、スマートフォン及びタブレット型端末等のスマートデバイスである場合を例にして説明する。すなわち表示部14及び操作受付部15は、液晶タッチパネル等である。
記憶部11は、仮想物体40の種類毎に、仮想物体40を表示するための表示設定情報を記憶する。表示設定情報は、例えば初期表示画像情報、着脱可能部分画像情報、可動部分画像情報及び機器動作画像情報を含む。また記憶部11は、仮想物体40に対応するプリンタの仕様情報、仮想物体40に対応するプリンタを入手(購入)可能なウェブサイトのアドレス、及び、仮想物体40に対応するプリンタを入手(購入)可能な場所(店舗)の住所等の情報も記憶する。なお記憶部11の情報は、通信部17がサーバ装置20と通信することにより更新される。例えば通信部17が、サーバ装置20から仮想物体40の表示設定情報を新たに取得し、当該表示設定情報を記憶部11に記憶することにより、新製品等の新しい仮想物体40を情報処理装置10で表示することが可能になる。
ここで仮想物体40がプリンタである場合を例にして、表示設定情報(初期表示画像情報、着脱可能部分画像情報、可動部分画像情報及び機器動作画像情報)について説明する。
まず第1実施形態の初期表示画像情報の例について説明する。
図5は第1実施形態の初期表示画像情報の例(プリンタの場合)を示す図である。初期表示画像情報は、仮想物体40の表示を開始するときの状態を示す。初期表示画像情報は、機種名、本体、バンク及びフィニッシャーの項目を有する。機種名はプリンタの機種の名称を示す。第1実施形態では、機種名が仮想物体40の種類を識別する識別情報である。本体は、着脱可能部分(オプション部品)が装着されていない状態の本体画像を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。本体画像は、情報処理装置10により撮影された撮影画像に含まれるARマーカー30の位置に表示される。
バンクは印刷に使用される用紙が格納されるオプション部品である。バンクには、「−」、「無」、及び、「1」、「2」、・・・等の数値が設定される。「−」はプリンタ本体にバンクが装着できないことを示す。「無」は、バンクが装着可能な機種にバンクが装着されていないことを示す。「1」はバンクが装着可能な機種にバンクが1段装着されていることを示す。「2」はバンクが装着可能な機種にバンクが2段装着されていることを示す。バンクを示す画像は、後述の着脱可能部分画像情報から特定される。
フィニッシャーは印刷物のパンチ(穴あけ)及びホチキス留等、印刷後の処理を行うオプション部品である。フィニッシャーには、「−」、「無」、及び、「有」が設定される。「−」はプリンタ本体にフィニッシャーが装着できないことを示す。「無」は、フィニッシャーが装着可能な機種にフィニッシャーが装着されていないことを示す。「有」は、フィニッシャーが装着可能な機種にフィニッシャーが装着されていることを示す。フィニッシャーを示す画像は、後述の着脱可能部分画像情報から特定される。
例えば図5の例では、プリンタBに対応する仮想物体40が情報処理装置10で初期表示される場合、本体画像Bにより、バンク及びフィニッシャーが装着されていない仮想物体40が表示される。
次に第1実施形態の着脱可能部分画像情報の例について説明する。
図6は第1実施形態の着脱可能部分画像情報の例(バンクの場合)を示す図である。図6の着脱可能部分画像情報は、機種名、バンク、表示基準点及び最大バンク段数の項目を有する。機種名はプリンタの機種の名称を示す。バンクは、バンクを示す画像を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なおバンクに「−」が設定されている場合は、プリンタ本体にバンクを装着できないことを示す。表示基準点は、バンクを示す画像を表示する位置を示す。例えば情報処理装置10は、表示基準点の座標に、バンクを示す画像の端点を合わせるようにして、仮想着脱可能物体としてバンクを示す画像を表示する。最大バンク段数はプリンタ本体に装着可能なバンクの数を示す。なお同一のプリンタ本体に装着可能なバンクの種類が複数ある場合、記憶部11は、バンクの種類毎に、着脱可能部分画像情報を記憶する。
例えば図6のプリンタBの例では、プリンタBのバンクを示す画像は、Bank画像Bである。またBank画像Bを表示する位置は、表示基準点の座標(x_b6,y_b6,z_b6)により特定される。またプリンタBに装着可能なバンクの段数は3段である。
図7は第1実施形態の着脱可能部分画像情報の例(フィニッシャーの場合)を示す図である。図7の着脱可能部分画像情報は、機種名、フィニッシャー及び表示基準点の項目を有する。機種名はプリンタの機種の名称を示す。フィニッシャーは、フィニッシャーを示す画像を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なおフィニッシャーに「−」が設定されている場合は、プリンタ本体にフィニッシャーを装着できないことを示す。表示基準点は、フィニッシャーを示す画像を表示する位置を示す。例えば情報処理装置10は、表示基準点の座標に、フィニッシャーを示す画像の端点を合わせるようにして、仮想着脱可能物体としてフィニッシャーを示す画像を表示する。なお同一のプリンタ本体に装着可能なフィニッシャーの種類が複数ある場合、記憶部11は、フィニッシャーの種類毎に、着脱可能部分画像情報を記憶する。
例えば図7のプリンタBの例では、プリンタBのフィニッシャーを示す画像は、Finisher画像Bである。またFinisher画像Bを表示する位置は、表示基準点の座標(x_b7,y_b7,z_b7)により特定される。
次に第1実施形態の可動部分画像情報の例について説明する。
図8は第1実施形態の可動部分画像情報の例(ADFの場合)を示す図である。図8の可動部分画像情報は、機種名、ADF(open)、ADF(close)及び表示基準点の項目を有する。機種名はプリンタの機種の名称を示す。ADF(open)は、ADFを開く動作を示す画像(アニメーション)を特定する特定情報を示す。ADF(close)は、ADFを閉じる動作を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なおADF(open)及びADF(close)に「−」が設定されている場合は、プリンタ本体にADFがないことを示す。表示基準点は、ADFを開く動作を示す画像(アニメーション)、及び、ADFを閉じる動作を示す画像(アニメーション)を表示する位置を示す。
例えば図8のプリンタAの例では、プリンタAのADFを開く動作を示す画像(アニメーション)は、ADF_open画像Aである。またプリンタAのADFを閉じる動作を示す画像(アニメーション)は、ADF_close画像Aである。またADF_open画像A及びADF_close画像Aを表示する位置は、表示基準点の座標(x_a1,y_a1,z_a1)により特定される。
図9は第1実施形態の可動部分画像情報の例(トナーカバーの場合)を示す図である。図9の可動部分画像情報は、機種名、トナーカバー(open)、トナーカバー(close)及び表示基準点の項目を有する。機種名はプリンタの機種の名称を示す。トナーカバー(open)は、トナーカバーを開く動作を示す画像(アニメーション)を特定する特定情報を示す。トナーカバー(close)は、トナーカバーを閉じる動作を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なおトナーカバー(open)及びトナーカバー(close)に「−」が設定されている場合は、プリンタ本体にトナーカバーがないことを示す。表示基準点は、トナーカバーを開く動作を示す画像(アニメーション)、及び、トナーカバーを閉じる動作を示す画像(アニメーション)を表示する位置を示す。
例えば図9のプリンタAの例では、プリンタAのトナーカバーを開く動作を示す画像(アニメーション)は、Toner_open画像Aである。またプリンタAのトナーカバーを閉じる動作を示す画像(アニメーション)は、Toner_close画像Aである。またToner_open画像A及びToner_close画像Aを表示する位置は、表示基準点の座標(x_a2,y_a2,z_a2)により特定される。
図10は第1実施形態の可動部分画像情報の例(ペーパートレイの場合)を示す図である。図10の可動部分画像情報は、機種名、ペーパートレイ(open)、ペーパートレイ(close)及び表示基準点の項目を有する。機種名はプリンタの機種の名称を示す。ペーパートレイ(open)は、ペーパートレイを開く動作を示す画像(アニメーション)を特定する特定情報を示す。ペーパートレイ(close)は、ペーパートレイを閉じる動作を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なおペーパートレイ(open)及びペーパートレイ(close)に「−」が設定されている場合は、プリンタ本体にペーパートレイがないことを示す。表示基準点は、ペーパートレイを開く動作を示す画像(アニメーション)、及び、ペーパートレイを閉じる動作を示す画像(アニメーション)を表示する位置を示す。
例えば図10のプリンタAの例では、プリンタAのペーパートレイを開く動作を示す画像(アニメーション)は、Tray_open画像Aである。またプリンタAのペーパートレイを閉じる動作を示す画像(アニメーション)は、Tray_close画像Aである。またTray_open画像A及びTray_close画像Aを表示する位置は、表示基準点の座標(x_a3,y_a3,z_a3)により特定される。
図11は第1実施形態の可動部分画像情報の例(両面ユニットカバーの場合)を示す図である。図11の可動部分画像情報は、機種名、両面ユニットカバー(open)、両面ユニットカバー(close)及び表示基準点の項目を有する。機種名はプリンタの機種の名称を示す。両面ユニットカバー(open)は、両面ユニットカバーを開く動作を示す画像(アニメーション)を特定する特定情報を示す。両面ユニットカバー(close)は、両面ユニットカバーを閉じる動作を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なお両面ユニットカバー(open)及び両面ユニットカバー(close)に「−」が設定されている場合は、プリンタ本体に両面ユニットカバーがないことを示す。表示基準点は、両面ユニットカバーを開く動作を示す画像(アニメーション)、及び、両面ユニットカバーを閉じる動作を示す画像(アニメーション)を表示する位置を示す。
例えば図11のプリンタAの例では、プリンタAの両面ユニットカバーを開く動作を示す画像(アニメーション)は、Cover_open画像Aである。またプリンタAの両面ユニットカバーを閉じる動作を示す画像(アニメーション)は、Cover_close画像Aである。またCover_open画像A及びCover_close画像Aを表示する位置は、表示基準点の座標(x_a4,y_a4,z_a4)により特定される。
図12は第1実施形態の機器動作画像情報の例(プリント動作の場合)を示す図である。図12の機器動作画像情報は、機種名、プリント動作及び表示基準点の項目を有する。機種名はプリンタの機種の名称を示す。プリント動作は、印刷が行われた際にプリンタから印刷物が排紙される様子を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。なおプリント動作に「−」が設定されている場合は、印刷が行われた際にプリンタから印刷物が排紙される様子を示す画像(アニメーション)がないことを示す。表示基準点は、印刷が行われた際にプリンタから印刷物が排紙される様子を示す画像(アニメーション)を表示する位置を示す。
例えば図12のプリンタAの例では、印刷が行われた際にプリンタAから印刷物が排紙される様子を示す画像(アニメーション)は、プリント画像Aである。またプリント画像Aを表示する位置は、表示基準点の座標(x_a5,y_a5,z_a5)により特定される。
図4に戻り、撮像部12は、仮想物体40が表示される位置を示すARマーカー30を含む撮像画像を撮像すると、当該撮像画像を表示制御部13に入力する。なお撮像部12は、撮像画像を継続して撮像する。すなわち撮像画像は、動画として表示制御部13に入力される。
表示制御部13は、撮像部12から撮像画像を受け付けると、当該撮像画像が画面の背景として使用された機種選択画面を表示部14に表示する。
図13は第1実施形態の機種選択画面の例を示す図である。第1実施形態の機種選択画面は、機種選択ボタン101、設定ボタン102、ヘルプボタン103及びカメラボタン104を有する。
機種選択ボタン101は、プリンタの機種を選択するドロップダウンリストである。操作受付部15の機種選択ボタン101が押下されると、表示制御部13が、記憶部11に上述の表示設定情報として記憶されているプリンタの機種名をリストで表示部14に表示する。
設定ボタン102は、表示言語(日本語、英語又は中国語等)、及び、文字サイズ等の表示設定を変更する設定画面を表示するボタンである。なお設定画面は、地域を選択することにより、予め定められた設定を適用する地域選択画面でもよい。
図14は第1実施形態の地域選択画面の例を示す図である。図14の例は、複数の地域(日本、中国、欧州、中近東、アフリカ、アジア、米州及びラテンアメリカ)から地域を選択する場合を示す。表示制御部13は、ユーザにより選択された地域を示す画像領域の輝度を、ユーザにより選択されていない地域を示す画像領域の輝度よりも明るくする。
表示制御部13は、選択された地域に関連付けられた地域設定情報に基づく表示制御を行う。地域設定情報は、地域に応じた表示方法を示す情報である。地域設定情報は、例えば表示言語、文字サイズ、URL情報、機種名及び購入可能機種情報等を含む。URL情報は、例えば後述の商品購入ボタン112が押下されたときに表示されるウェブサイトのURL等を含む。購入可能機種情報は当該地域で購入可能な機種を示す。例えば後述のおすすめ商品表示ボタン111では、購入可能機種情報に基づいて、当該地域で購入可能な機種のうち、後述の機種名表示部105に表示されている機種に商品仕様が類似する機種が表示される。
図13に戻り、ヘルプボタン103は、操作方法を示すヘルプ画面を表示するボタンである。
カメラボタン104は、背景として表示されている撮影画像を撮像するボタンである。仮想物体40が表示されている状態で、操作受付部15のカメラボタン104が押下された場合、仮想物体40を含む合成画像が、記憶部11等に記憶される。
図15は第1実施形態の機種選択画面の例(リストが表示された場合)を示す図である。図15の例は、機種選択ボタン101が押下されることにより、プリンタA、プリンタB及びプリンタCがリストとして表示された場合を示す。操作受付部15が、リストから機種名を選択する操作を受け付けると、生成部16が、当該機種名に関連付けられた仮想物体40を示す画像が、撮像画像上のARマーカー30の位置に合成された合成画像を生成する。そして表示制御部13が、当該合成画像に後述のUI部品(各種ボタン等、図16参照)が付与された画面を表示部14に表示する。例えばプリンタAが選択されると、表示設定情報に含まれる初期表示画像情報(図5参照)の本体画像Aにより示される仮想物体40が、ARマーカー30の位置に表示される。
このとき表示制御部13及び生成部16が、AR技術を利用することにより、情報処理装置10の撮像部12と、ARマーカー30との位置関係に応じて、仮想物体40の見え方を変更する。具体的には、まず表示制御部13が、撮像画像に含まれるARマーカー30を検出し、当該ARマーカー30の見え方(撮像画像上での位置及び形状の少なくとも一方)が変更されたか否かを判定する。当該ARマーカー30の見え方が変更された場合、生成部16が、見え方が変更された度合いに応じて、仮想物体40の表示態様の変更(拡大、縮小、移動及び回転等)を行い、当該仮想物体40が撮像画像に合成された合成画像を生成する。そして表示制御部13が、当該合成画像に後述のUI部品(各種ボタン等、図16参照)が付与された画面を表示部14に表示する。これにより情報処理装置10のユーザが、表示部14に立体表示されている仮想物体40を参照しながら、当該立体表示されている仮想物体40を参照したい方向に撮像部12を向けることにより、様々な方向から仮想物体40を参照することができる。
図16は第1実施形態の機種表示画面の例(プリンタAの場合)を示す図である。第1実施形態の機種表示画面は、機種選択ボタン101、設定ボタン102、ヘルプボタン103、カメラボタン104、機種名表示部105、操作ボタン106、バンク選択ボタン107、フィニッシャー選択ボタン108、設置制限領域指定ボタン109、商品仕様表示ボタン110、おすすめ商品表示ボタン111、商品購入ボタン112、地図表示ボタン113及びシェアボタン114を有する。
機種選択ボタン101、設定ボタン102、ヘルプボタン103及びカメラボタン104の説明は、図13の説明と同様なので省略する。
機種名表示部105は、機種選択ボタン101で選択された機種名を表示する。また当該機種で利用可能な機能が表示される。具体的には、表示制御部13が、機種名表示部105に表示されている機種名から特定される仕様情報を、記憶部11から取得することにより、当該機種で利用可能な機能を表示部14に表示する。図16の例は、プリンタAでコピー、印刷、スキャン及びFAXが使用可能な場合を示す。
操作ボタン106は、ADF操作ボタン106a、トナーカバー操作ボタン106b、ペーパートレイ操作ボタン106c、両面ユニット操作ボタン106d及びプリント動作表示ボタン106eを含む。
ADF操作ボタン106aは、ADFの開閉を操作するボタンである。ADF操作ボタン106aは、表示設定情報に含まれる図8の可動部分画像情報(ADFの場合)により指定された画像ファイルにより示される動作を表示する。なお表示制御部13は、可動部分画像情報(ADFの場合)に画像ファイルが指定されていない場合、ADF操作ボタン106aを表示しないか、又は、半輝度(半透明)等にして表示する。
ADF操作ボタン106aが押下されると、ADFを開く動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図8参照)のADF_open画像Aにより、ADFを開く動作を示す画像(アニメーション)が表示される。
図19はADF操作ボタン106aが押下された後の第1実施形態の機種表示画面の例を示す図である。この状態でADF操作ボタン106aが再度、押下されると、ADFを閉じる動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図8参照)のADF_close画像Aにより、ADFを閉じる動作を示す画像(アニメーション)が表示され、プリンタAの表示が図16に示される状態に戻る。
図16に戻り、トナーカバー操作ボタン106bは、トナーカバーの開閉を操作するボタンである。トナーカバー操作ボタン106bは、表示設定情報に含まれる図9の可動部分画像情報(トナーカバーの場合)により指定された画像ファイルにより示される動作を表示する。なお表示制御部13は、可動部分画像情報(トナーカバーの場合)に画像ファイルが指定されていない場合、トナーカバー操作ボタン106bを表示しないか、又は、半輝度(半透明)等にして表示する。
トナーカバー操作ボタン106bが押下されると、トナーカバーを開く動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図9参照)のToner_open画像Aにより、トナーカバーを開く動作を示す画像(アニメーション)が表示される。
図17A乃至図17Cは第1実施形態のトナーカバーを開く動作を示すアニメーションの例を示す図である。図17Aは、トナーカバー操作ボタン106bが押下される前の状態を示す。図17Bは、トナーカバーを開く動作を示すアニメーションの途中の状態を示す。図17Cは、トナーカバーを開く動作を示すアニメーションの終了時の状態を示す。
トナーカバー操作ボタン106bが押下されると、表示制御部13が、トナーカバーを開く動作を示すアニメーションの表示を開始する。トナーカバーを開く動作を示すアニメーションは、トナーカートリッジを取り出す際の様子を示すアニメーションを含む。ユーザは、トナーカバーを開く動作を示すアニメーションを視聴することにより、トナーカートリッジの取り出し方をより明瞭に把握することができる。
図16に戻り、トナーカバー操作ボタン106bが再度、押下されると、トナーカバーを閉じる動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図9参照)のToner_close画像Aにより、トナーカバーを閉じる動作を示す画像(アニメーション)が表示される。
図18A乃至図18Cは第1実施形態のトナーカバーを閉じる動作を示すアニメーションの例を示す図である。図18Aは、トナーカバーが開いている状態で、トナーカバー操作ボタン106bが再度、押下されたときの状態を示す。図18Bは、トナーカバーを閉じる動作を示すアニメーションの途中の状態を示す。図18Cは、トナーカバーを閉じる動作を示すアニメーションの終了時の状態を示す。
トナーカバーが開いている状態で、トナーカバー操作ボタン106bが再度、押下されると、表示制御部13が、トナーカバーを閉じる動作を示すアニメーションの表示を開始する。トナーカバーを閉じる動作を示すアニメーションは、トナーカートリッジを取り付ける際の様子を示すアニメーションを含む。トナーカートリッジを取り付ける際の様子を示すアニメーションは、例えばトナーカートリッジを取り付ける際に、トナーカートリッジを回転させる方向等を示す。ユーザは、トナーカバーを閉じる動作を示すアニメーションを視聴することにより、トナーカートリッジの取り付け方をより明瞭に把握することができる。
なお表示制御部13は、トナーカバー以外の開閉部についても、開閉部の内部の部品の取り出し方、及び、取り付け方を示すアニメーションを表示してもよい。これによりユーザは、当該アニメーションを視聴することにより、仮想物体40に対応する物体の部品の交換手順をより明瞭に把握することができる。
ペーパートレイ操作ボタン106cは、ペーパートレイの開閉を操作するボタンである。ペーパートレイ操作ボタン106cは、表示設定情報に含まれる図10の可動部分画像情報(ペーパートレイの場合)により指定された画像ファイルにより示される動作を表示する。なお表示制御部13は、可動部分画像情報(ペーパートレイの場合)に画像ファイルが指定されていない場合、ペーパートレイ操作ボタン106cを表示しないか、又は、半輝度(半透明)等にして表示する。
ペーパートレイ操作ボタン106cが押下されると、ペーパートレイを開く動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図10参照)のTray_open画像Aにより、ペーパートレイを開く動作を示す画像(アニメーション)が表示される。ペーパートレイ操作ボタン106cが再度、押下されると、ペーパートレイを閉じる動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図10参照)のTray_close画像Aにより、ペーパートレイを閉じる動作を示す画像(アニメーション)が表示される。
両面ユニット操作ボタン106dは、両面ユニットの開閉を操作するボタンである。両面ユニット操作ボタン106dは、両面ユニットの開閉を操作するボタンである。両面ユニット操作ボタン106dは、表示設定情報に含まれる図11の可動部分画像情報(両面ユニットの場合)により指定された画像ファイルにより示される動作を表示する。なお表示制御部13は、可動部分画像情報(両面ユニットの場合)に画像ファイルが指定されていない場合、両面ユニット操作ボタン106dを表示しないか、又は、半輝度(半透明)等にして表示する。
両面ユニット操作ボタン106dが押下されると、両面ユニットを開く動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図11参照)のCover_open画像Aにより、両面ユニットを開く動作を示す画像(アニメーション)が表示される。両面ユニット操作ボタン106dが再度、押下されると、両面ユニットを閉じる動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40がプリンタAである場合、表示設定情報に含まれる可動部分画像情報(図11参照)のCover_close画像Aにより、両面ユニットを閉じる動作を示す画像(アニメーション)が表示される。
プリント動作表示ボタン106eは、印刷が行われた際にプリンタから印刷物が排紙される様子をアニメーションにより表示するボタンである。プリント動作表示ボタン106eは、表示設定情報に含まれる図12の機器動作画像情報(プリント動作の場合)により指定された画像ファイルにより示される動作を表示する。なお表示制御部13は、機器動作画像情報(プリント動作の場合)に画像ファイルが指定されていない場合、プリント動作表示ボタン106eを表示しないか、又は、半輝度(半透明)等にして表示する。
プリント動作表示ボタン106eが押下されたときに、表示制御部13が、プリンタの印刷速度に応じたアニメーションを表示することにより、プリンタの印刷速度を体感的にユーザに伝えることができる。例えばプリンタの印刷速度が30ppm(page per minute)の場合、表示制御部13は印刷物が2秒に1枚、プリンタから排紙される様子を示すアニメーションを表示する。また例えばプリンタの印刷速度が20ppm(page per minute)の場合、表示制御部13は印刷物が3秒に1枚、プリンタから排紙される様子を示すアニメーションを表示する。
バンク選択ボタン107は、バンク選択画面を表示するボタンである。バンク選択画面は、機種名表示部105に表示されている機種に装着可能なバンクを選択する画面である。
図20Aは第1実施形態のバンク選択画面の例を示す図である。表示制御部13は、機種名表示部105に表示されている機種の表示設定情報に含まれる着脱可能部分画像情報(図6参照)に基づくバンク選択画面を表示部14に表示する。具体的には、機種名表示部105に表示されている機種に、複数の種類のバンクがある場合、バンクを示す画像を複数、表示することにより、バンクの種類を選択する画面を表示する。また機種名表示部105に表示されている機種が、バンクを多段構成することができる場合、図6の着脱可能部分画像情報に示される最大バンク段数まで、バンク数を選択できる画面を表示する。
プリンタAの表示設定情報に含まれる着脱可能部分画像情報(図6参照)の場合、バンクの種類が1種類で、最大バンク段数が1のため、図20Aでは、Bank画像Aの正面が1つ表示されている。
図20Bはバンクが選択された後の第1実施形態の機種表示画面の例を示す図である。操作受付部15が、図20Aのバンク選択画面でバンクの選択を示す操作を受け付けると、図20Bに示されるように、プリンタAの本体を示す仮想物体40に、バンクを示す仮想着脱可能物体43が追加される。具体的には、生成部16が、撮像画像に本体画像Aが合成された合成画像に、Bank画像Aを更に合成し、表示制御部13が、当該合成画像を表示部14に表示する。これにより着脱可能部分(オプション部品)をプリンタAの本体に装着した場合のイメージをより明瞭にユーザに把握させることができる。
図16に戻り、フィニッシャー選択ボタン108は、フィニッシャー選択画面を表示するボタンである。フィニッシャー選択画面の説明は、バンク選択画面の説明と同様なので省略する。
設置制限領域指定ボタン109は、設置制限領域指定画面を表示するボタンである。設置制限領域指定画面は、仮想物体40に対応する物体が設置される領域の制限を示す設置制限領域を指定する画面である。
図21は第1実施形態の設置制限領域指定画面の例を示す図である。第1実施形態の設置制限領域指定画面は、図16の画面の表示に加えて、更にフレーム120、幅指定ボタン121、奥行き指定ボタン122、高さ指定ボタン123及びフレーム移動ボタン124を有する。
フレーム120は設置制限領域の大きさを示す。フレーム120は、幅指定ボタン121、奥行き指定ボタン122、高さ指定ボタン123及びフレーム移動ボタン124の操作に応じて、幅、奥行き、高さ及び表示位置が変更される。
具体的には、幅指定ボタン121の「+」が押下されると、フレーム120の幅が広がり、幅指定ボタン121の「−」が押下されると、フレーム120の幅が狭まる。同様に、奥行き指定ボタン122の「+」が押下されると、フレーム120の奥行きが広がり、奥行き指定ボタン122の「−」が押下されると、フレーム120の奥行きが狭まる。同様に、高さ指定ボタン123の「+」が押下されると、フレーム120の高さが高くなり、高さ指定ボタン123の「−」が押下されると、フレーム120の高さが低くなる。
なおフレーム120の幅、奥行き及び高さを指定するユーザインターフェースは任意でよい。例えば表示制御部13が、テンキー配列の数字入力部を表示部14に表示し、操作受付部15が、幅、奥行き及び高さを示す数字の入力を受け付けてもよい。
またフレーム移動ボタン124が押下されると、押下された方向に応じてフレーム120が、設置制限領域指定画面の背景画像(撮影画像)上を上下左右に移動する。
表示制御部13は、仮想物体40が、フレーム120により示される設置制限領域に収まらない場合、設置制限領域を示すフレーム120の表示態様を変更する。表示態様の変更方法は任意でよい。表示態様の変更方法は、例えばフレーム120を示す線の色の変更、フレーム120を示す線の太さの変更、及び、フレーム120を示す線を点滅させる変更等である。
例えば図21の例の場合、表示制御部13は、ADFが閉じている状態のプリンタAを示す仮想物体40は、フレーム120に収まるため、フレーム120を黄色で表示する。一方、表示制御部13は、ADFが開いている状態のプリンタAを示す仮想物体40は、フレーム120に収まらないため、フレーム120を赤色で表示する。これによりフレーム120により示される任意の設置場所で、プリンタAの可動部分を操作した場合に、設置場所に収まるか否かのイメージをより明瞭にユーザに把握させることができる。
図16に戻り、商品仕様表示ボタン110は、機種名表示部105に表示されている機種名から特定される仕様情報を表示する商品仕様画面を表示するボタンである。
図22は第1実施形態の商品仕様画面の例を示す図である。操作受付部15が、商品仕様表示ボタン110の押下を示す操作を受け付けると、表示制御部13が、機種名表示部105に表示されている機種の仕様情報を記憶部11から取得し、当該仕様情報を含む商品仕様画面を表示部14に表示する。仕様情報は、例えば最大印刷サイズ、プリンタの寸法、対応OS、印刷速度、解像度及び対応インタフェース等を含む。
また表示制御部13は、詳細な仕様を表示するウェブページを表示するための詳細仕様リンクを、商品仕様画面に表示する。操作受付部15が、詳細仕様リンクの押下を示す操作を受け付けると、通信部17が、詳細仕様リンクが示すアドレスにアクセスすることにより取得されたウェブサイトを、表示制御部13が表示部14に表示する。
図16に戻り、おすすめ商品表示ボタン111は、ユーザに推薦する機種の機種表示画面を表示するボタンである。ユーザに推薦する機種は、例えば機種名表示部105に表示されている機種に商品仕様が類似する機種である。操作受付部15が、おすすめ商品表示ボタン111の押下を示す操作を受け付けると、生成部16が、ユーザに推薦する機種の表示設定情報に含まれる初期表示画像情報の本体画像が、撮像画像上のARマーカー30の位置に合成された合成画像を生成する。そして表示制御部13が、当該合成画像に対応する機種表示画面を表示部14に表示する。
商品購入ボタン112は、機種名表示部105に表示されている機種を購入可能なウェブサイトを表示するボタンである。操作受付部15が、商品購入ボタン112の押下を示す操作を受け付けると、通信部17が、機種名表示部105に表示されている機種を購入可能なウェブサイトのアドレスを記憶部11から取得する。そして通信部17が、当該アドレスにアクセスすることにより取得されたウェブサイトを、表示制御部13が表示部14に表示する。
地図表示ボタン113は、機種名表示部105に表示されている機種を購入可能な店舗の位置を示す地図表示画面を表示するボタンである。
図23は第1実施形態の地図表示画面の例を示す図である。操作受付部15が、地図表示ボタン113の押下を示す操作を受け付けると、GPS部18が、情報処理装置10の現在位置200を取得する。そして表示制御部13が、現在位置200の付近の地図を表示部14に表示するとともに、機種名表示部105に表示されている機種を購入可能な店舗が現在位置200の付近に存在する場合、当該店舗の位置を地図表示画面上で明示する。図23の例は、地図表示画面上に店舗201及び店舗202の位置が明示されている場合を示す。
図16に戻り、シェアボタン114は、Facebook(登録商標)及びTwitter(登録商標)等のシェアアプリのリストをポップアップ表示する。操作受付部15が、シェアアプリの選択を示す操作を受け付けると、当該シェアアプリを利用して表示部14に表示させた情報等を、他のユーザと共有することができる。
次に第1実施形態の情報処理方法の例について説明する。
図24は第1実施形態の情報処理方法の例を示すフローチャートである。はじめに、撮像部12が、仮想物体40が表示される位置を示すARマーカー30を含む撮像画像の撮像を開始する(ステップS1)。
次に、表示制御部13が、撮像部12から撮像画像を受け付けると、当該撮像画像が画面の背景として使用された機種選択画面(図13参照)を表示部14に表示する(ステップS2)。次に、操作受付部15が、機種選択ボタン101のドロップダウンリストから機種名を選択する操作を受け付ける(ステップS3)。
次に、表示制御部13が、ステップS3で選択された機種名により識別される機種の機種表示画面(図16参照)を表示部14に表示する(ステップS4)。具体的には、まず生成部16が、ステップS3で選択された機種名に関連付けられた仮想物体40を示す画像が、撮像画像上のARマーカー30の位置に合成された合成画像を生成する。そして表示制御部13が、当該合成画像に各種のボタン等のUI部品が付与された画面を表示部14に表示する。
次に、表示制御部13が、情報処理装置10の撮像部12と、ARマーカー30との位置関係が変更されたか否かを判定する(ステップS5)。具体的には、表示制御部13が、撮像画像に含まれるARマーカー30を検出し、当該ARマーカー30の見え方(撮像画像上での位置及び形状の少なくとも一方)が変更されたか否かにより、情報処理装置10の撮像部12と、ARマーカー30との位置関係が変更されたか否かを判定する。
撮像部12と、ARマーカー30との位置関係が変更された場合(ステップS5、Yes)、表示制御部13が、AR技術を利用することにより、変更された位置関係に応じて、仮想物体40の見え方を変更する(ステップS6)。撮像部12と、ARマーカー30との位置関係が変更されていない場合(ステップS5、No)、処理はステップS7に進む。
次に、操作受付部15が、機種表示画面(図16参照)のボタンが押下されたか否かを判定する(ステップS7)。ボタンが押下された場合(ステップS7、Yes)、情報処理装置10は、上述の各種ボタンに応じた処理を行う(ステップS8)。ボタンが押下されていない場合(ステップS7、No)、処理はステップS9に進む。
次に、操作受付部15が、仮想物体40の表示に係る処理を終了する操作を受け付けたか否かを判定する(ステップS9)。終了する操作を受け付けていない場合(ステップS9、No)、処理はステップS5に戻る。終了する操作を受け付けた場合(ステップS9、Yes)、処理を終了する。
次に第1実施形態の情報処理装置10のハードウェア構成の例について説明する。
図25は第1実施形態の情報処理装置10のハードウェア構成の例を示す図である。第1実施形態の情報処理装置10は、制御装置301、主記憶装置302、補助記憶装置303、表示装置304、入力装置305、通信装置306、撮像装置307及びGPS装置308を備える。制御装置301、主記憶装置302、補助記憶装置303、表示装置304、入力装置305、通信装置306、撮像装置307及びGPS装置308は、バス310を介して互いに接続されている。
制御装置301は補助記憶装置303から主記憶装置302に読み出されたプログラムを実行する。主記憶装置302はROM及びRAM等のメモリである。補助記憶装置303はメモリカード等である。図4の記憶部11は、主記憶装置302及び補助記憶装置303に対応する。
表示装置304及び入力装置305は、表示機能と入力機能とを有する液晶タッチパネルである。通信装置306は他の装置と通信する。撮像装置307は情報処理装置10の周囲の状態を示す撮像画像を撮像する。GPS装置308は、複数のGPS衛星から信号を受信することにより、情報処理装置10の位置を示すGPS情報を取得する。
情報処理装置10で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、メモリカード、CD−R、DVD(Digital Versatile Disk)等のコンピュータで読み取り可能な記憶媒体に記憶されてコンピュータ・プログラム・プロダクトとして提供される。
また情報処理装置10で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また情報処理装置10が実行するプログラムを、ダウンロードさせずにインターネット等のネットワーク経由で提供するように構成してもよい。
また情報処理装置10のプログラムを、ROM等に予め組み込んで提供するように構成してもよい。
情報処理装置10で実行されるプログラムは、上述した各機能ブロックのうち、プログラムにより実現可能な機能ブロックを含むモジュール構成となっている。プログラムにより実現可能な機能ブロックは、例えば表示制御部13、操作受付部15、生成部16及び通信部17である。プログラムにより実現される機能ブロックは、実際のハードウェアとしては、制御装置301が補助記憶装置303等の記憶媒体からプログラムを読み出して実行することにより、主記憶装置302にロードされる。すなわちプログラムにより実現される機能ブロックは、主記憶装置302上に生成される。
なおプログラムにより実現可能な機能ブロックの一部又は全部を、プログラムにより実現せずに、IC(Integrated Circuit)等のハードウェアにより実現してもよい。
以上説明したように、第1実施形態の情報処理装置10では、撮像部12が、仮想物体40が表示される位置を識別するARマーカー30(位置識別情報)を含む撮像画像を取得する。また生成部16が、撮像画像に含まれるARマーカー30により識別される位置に、仮想物体40が合成された合成画像を生成する。そして操作受付部15により仮想物体40の可動部分の操作が受け付けられたときに、仮想物体40を表示するための表示設定情報に応じて、可動部分の表示を変更する。これにより物体の可動部分を操作した場合のイメージをより明瞭にユーザに把握させることができる。
(第2実施形態)
次に第2実施形態について説明する。第2実施形態の説明では、仮想物体40に対応する物体が家電製品である場合について説明する。なお第2実施形態の説明では、冷蔵庫の場合を例にして説明するが、家電製品は冷蔵庫に限らず任意の家電製品でよい。第2実施形態の説明では、第1実施形態と同様の説明については省略し、第1実施形態と異なる箇所について説明する。
第2実施形態の情報処理システム1の構成は、第1実施形態の情報処理システム1の構成(図1参照)と同じである。また第2実施形態の情報処理装置10の構成は、第1実施形態の情報処理装置10の構成(図4参照)と同じである。
まず第2実施形態の表示設定情報(初期表示画像情報、及び、可動部分画像情報)について説明する。
図26は第2実施形態の初期表示画像情報の例(冷蔵庫の場合)を示す図である。初期表示画像情報は、冷蔵庫を示す仮想物体40の表示を開始するときの状態を示す。初期表示画像情報は、機種名及び本体画像の項目を有する。機種名は冷蔵庫の機種の名称を示す。第2実施形態では、機種名が仮想物体40の種類を識別する識別情報である。本体は、冷蔵庫を示す画像を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。本体画像は、情報処理装置10により撮影された撮影画像に含まれるARマーカー30の位置に表示される。
例えば図26の例では、冷蔵庫Raに対応する仮想物体40が情報処理装置10で初期表示される場合、本体画像Raにより仮想物体40が表示される。
次に第2実施形態の可動部分画像情報の例について説明する。
図27は第2実施形態の可動部分画像情報の例(扉の場合)を示す図である。図27の可動部分画像情報は、機種名、扉番号、扉(open)、扉(close)及び表示基準点の項目を有する。機種名は冷蔵庫の機種の名称を示す。扉番号は冷蔵庫の扉を識別する番号である。扉(open)は、扉を開く動作を示す画像(アニメーション)を特定する特定情報を示す。扉(close)は、扉を閉じる動作を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。表示基準点は、扉を開く動作を示す画像(アニメーション)、及び、扉を閉じる動作を示す画像(アニメーション)を表示する位置を示す。
例えば図27の冷蔵庫Raの例では、扉番号が1の冷蔵庫Raの扉を開く動作を示す画像(アニメーション)は、Door_open画像Ra1である。また扉番号が1の冷蔵庫Raの扉を閉じる動作を示す画像(アニメーション)は、Door_close画像Ra1である。またDoor_open画像Ra1及びDoor_close画像Ra1を表示する位置は、表示基準点の座標(x_ra1,y_ra1,z_ra1)により特定される。
次に第2実施形態の機種選択画面の例について説明する。
図28は第2施形態の機種選択画面の例を示す図である。第2実施形態の機種選択画面は、機種選択ボタン101、設定ボタン102、ヘルプボタン103及びカメラボタン104を有する。
機種選択ボタン101は、冷蔵庫の機種を選択するドロップダウンリストである。操作受付部15の機種選択ボタン101が押下されると、表示制御部13が、記憶部11に上述の表示設定情報として記憶されている冷蔵庫の機種名をリストで表示部14に表示する。
設定ボタン102は、表示言語(日本語、英語又は中国語等)、及び、文字サイズ等の表示設定を変更する設定画面を表示するボタンである。
ヘルプボタン103は、操作方法を示すヘルプ画面を表示するボタンである。
カメラボタン104は、背景として表示されている撮影画像を撮像するボタンである。ARマーカー30の位置に冷蔵庫を示す仮想物体40が表示されている状態で、操作受付部15のカメラボタン104が押下された場合、冷蔵庫を示す仮想物体40を含む合成画像が、記憶部11等に記憶される。
図29は第2実施形態の機種選択画面の例(リストが表示された場合)を示す図である。図29の例は、機種選択ボタン101が押下されることにより、冷蔵庫Ra、冷蔵庫Rb及び冷蔵庫Rcがリストとして表示された場合を示す。操作受付部15が、リストから機種名を選択する操作を受け付けると、生成部16が、当該機種名に関連付けられた仮想物体40を示す画像が、撮像画像上のARマーカー30の位置に合成された合成画像を生成する。そして表示制御部13が、当該合成画像に後述のUI部品(各種ボタン等、図30参照)が付与された画面を表示部14に表示する。例えば冷蔵庫Raが選択されると、表示設定情報に含まれる初期表示画像情報(図26参照)の本体画像Raにより示される仮想物体40が、ARマーカー30の位置に表示される。
図30は第2実施形態の機種表示画面の例(冷蔵庫Raの場合)を示す図である。第2実施形態の機種表示画面は、機種選択ボタン101、設定ボタン102、ヘルプボタン103、カメラボタン104、機種名表示部105、操作ボタン106、設置制限領域指定ボタン109、商品仕様表示ボタン110、おすすめ商品表示ボタン111、商品購入ボタン112、地図表示ボタン113及びシェアボタン114を有する。
機種選択ボタン101、設定ボタン102、ヘルプボタン103及びカメラボタン104の説明は、図13の説明と同様なので省略する。
機種名表示部105は、機種選択ボタン101で選択された機種名を表示する。図30の例は、冷蔵庫Raが表示されている。
操作ボタン106は、第1の扉操作ボタン106f、第2の扉操作ボタン106g及び第3の扉操作ボタン106hを含む。
第1の扉操作ボタン106fは、扉51の開閉を操作するボタンである。第1の扉操作ボタン106fは、表示設定情報に含まれる図27の可動部分画像情報(扉の場合)の扉番号が1の情報で指定された画像ファイルにより示される動作を表示する。
第1の扉操作ボタン106fが押下されると、扉51を開く動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40が冷蔵庫Raである場合、表示設定情報に含まれる可動部分画像情報(図27参照)のDoor_open画像Ra1により、扉51を開く動作を示す画像(アニメーション)が表示される。
図31は第1の扉操作ボタン106fが押下された後の第2実施形態の機種表示画面の例を示す図である。この状態で第1の扉操作ボタン106fが再度、押下されると、扉51を閉じる動作を示す画像(アニメーション)が表示される。具体的には、仮想物体40が冷蔵庫Raである場合、表示設定情報に含まれる可動部分画像情報(図27参照)のDoor_close画像Ra1により、扉51を閉じる動作を示す画像(アニメーション)が表示され、冷蔵庫Raの表示が図30に示される状態に戻る。
図30に戻り、第2の扉操作ボタン106gは、扉52の開閉を操作するボタンである。第2の扉操作ボタン106gは、表示設定情報に含まれる図27の可動部分画像情報(扉の場合)の扉番号が2の情報で指定された画像ファイルにより示される動作を表示する。
第3の扉操作ボタン106hは、扉53の開閉を操作するボタンである。第3の扉操作ボタン106gは、表示設定情報に含まれる図27の可動部分画像情報(扉の場合)の扉番号が3の情報で指定された画像ファイルにより示される動作を表示する。
設置制限領域指定ボタン109は、設置制限領域指定画面を表示するボタンである。設置制限領域指定画面は、仮想物体40に対応する物体が設置される領域の制限を示す設置制限領域を指定する画面である。第2実施形態の設置制限領域指定画面は、第1実施形態の設置制限領域指定画面(図21参照)と同様なので、説明を省略する。
商品仕様表示ボタン110は、機種名表示部105に表示されている機種名から特定される仕様情報を表示する商品仕様画面を表示するボタンである。第2実施形態の商品仕様画面は、第1実施形態の商品仕様画面(図22参照)と同様なので、説明を省略する。
おすすめ商品表示ボタン111は、ユーザに推薦する機種の機種表示画面を表示するボタンである。ユーザに推薦する機種は、例えば機種名表示部105に表示されている機種に商品仕様が類似する機種である。操作受付部15が、おすすめ商品表示ボタン111の押下を示す操作を受け付けると、生成部16が、ユーザに推薦する機種の表示設定情報に含まれる初期表示画像情報の本体画像が、撮像画像上のARマーカー30の位置に合成された合成画像を生成する。そして表示制御部13が、当該合成画像に対応する機種表示画面を表示部14に表示する。
商品購入ボタン112は、機種名表示部105に表示されている機種を購入可能なウェブサイトを表示するボタンである。操作受付部15が、商品購入ボタン112の押下を示す操作を受け付けると、通信部17が、機種名表示部105に表示されている機種を購入可能なウェブサイトのアドレスを記憶部11から取得する。そして通信部17が、当該アドレスにアクセスすることにより取得されたウェブサイトを、表示制御部13が表示部14に表示する。
地図表示ボタン113は、機種名表示部105に表示されている機種を購入可能な店舗の位置を示す地図表示画面を表示する。第2実施形態の地図表示画面は、第1実施形態の地図表示画面(図23参照)と同様なので、説明を省略する。
シェアボタン114は、Facebook(登録商標)及びTwitter(登録商標)等のシェアアプリのリストをポップアップ表示する。操作受付部15が、シェアアプリの選択を示す操作を受け付けると、当該シェアアプリを利用して表示部14に表示させた情報等を、他のユーザと共有することができる。
第2実施形態の情報処理方法は、第1実施形態の情報処理方法(図24参照)と同様なので、説明を省略する。また第2実施形態の情報処理装置10のハードウェア構成は、第1実施形態の情報処理装置10のハードウェア構成(図25参照)と同様なので、説明を省略する。
以上説明したように、第2実施形態の情報処理装置10では、操作受付部15により、冷蔵庫を示す仮想物体40の可動部分の操作が受け付けられたときに、冷蔵庫を示す仮想物体40を表示するための表示設定情報に応じて、可動部分の表示を変更する。これにより物体が冷蔵庫(家電製品)である場合でも、第1実施形態の場合と同様に、冷蔵庫(家電背品)の可動部分を操作した場合のイメージをより明瞭にユーザに把握させることができる。
(第3実施形態)
次に第3実施形態について説明する。第3実施形態の説明では、仮想物体40に対応する物体が車両である場合について説明する。なお第3実施形態の説明では、自動車の場合を例にして説明するが、車両は自動車に限らず任意の自動車でよい。第3実施形態の説明では、第1実施形態と同様の説明については省略し、第1実施形態と異なる箇所について説明する。
第3実施形態の情報処理システム1の構成は、第1実施形態の情報処理システム1の構成(図1参照)と同じである。また第3実施形態の情報処理装置10の構成は、第1実施形態の情報処理装置10の構成(図4参照)と同じである。
まず第3実施形態の表示設定情報(初期表示画像情報、及び、可動部分画像情報)について説明する。
図32は第3実施形態の初期表示画像情報の例(自動車の場合)を示す図である。初期表示画像情報は、自動車を示す仮想物体40の表示を開始するときの状態を示す。初期表示画像情報は、車種名及び車体画像の項目を有する。車種名は自動車の車種の名称を示す。第3実施形態では、車種名が仮想物体40の種類を識別する識別情報である。車体は、自動車を示す画像を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。車体画像は、情報処理装置10により撮影された撮影画像に含まれるARマーカー30の位置に表示される。
例えば図32の例では、自動車Caに対応する仮想物体40が情報処理装置10で初期表示される場合、車体画像Caにより仮想物体40が表示される。
次に第3実施形態の可動部分画像情報の例について説明する。
図33は第3実施形態の可動部分画像情報の例(自動車の開閉部の場合)を示す図である。図33の可動部分画像情報は、車種名、開閉部名、開閉部(open)、開閉部(close)及び表示基準点の項目を有する。車種名は自動車の車種の名称を示す。開閉部名は自動車の開閉部の名称を示す。開閉部(open)は、開閉部を開く動作を示す画像(アニメーション)を特定する特定情報を示す。開閉部(close)は、開閉部を閉じる動作を示す画像(アニメーション)を特定する特定情報を示す。特定情報は、例えば画像ファイル名である。表示基準点は、開閉部を開く動作を示す画像(アニメーション)、及び、開閉部を閉じる動作を示す画像(アニメーション)を表示する位置を示す。
例えば図33の自動車Caの例では、自動車Caの運転席のドアを開く動作を示す画像(アニメーション)は、open画像Ca2である。また自動車Caの運転席のドアを閉じる動作を示す画像(アニメーション)は、close画像Ca2である。またopen画像Ca2及びclose画像Ca2を表示する位置は、表示基準点の座標(x_ca2,y_ca2,z_ca2)により特定される。
図34は第3実施形態の仮想物体40の例(自動車Caの場合)を示す図である。自動車Caを示す仮想物体40は、ボンネット61、運転席のドア62、助手席のドア63、右後部座席のドア64、左後部座席のドア65及びリアトランク66を有する。例えば自動車Caの車種表示画面で、運転席のドア62の操作ボタンが押下されると、表示設定情報に含まれる可動部分画像情報(図33参照)のopen画像Ca2により、運転席のドア62を開く動作を示す画像(アニメーション)が表示される。なお第3実施形態の自動車Caの車種表示画面は、第1実施形態の機種表示画面(図16)、及び、第2実施形態の機種表示画面(図30)と同様のため、説明を省略する。
図35は第3実施形態の仮想物体40の例(運転席のドア62が開いている場合)を示す図である。自動車Caの車種表示画面で、運転席のドア62の操作ボタンが再度、押下されると、表示設定情報に含まれる可動部分画像情報(図33参照)のclose画像Ca2により、運転席のドア62を閉じる動作を示す画像(アニメーション)が表示され、仮想物体40が図34の状態に戻る。
第3実施形態の情報処理方法は、第1実施形態の情報処理方法(図24参照)と同様なので、説明を省略する。また第3実施形態の情報処理装置10のハードウェア構成は、第1実施形態の情報処理装置10のハードウェア構成(図25参照)と同様なので、説明を省略する。
以上説明したように、第3実施形態の情報処理装置10では、操作受付部15により、自動車を示す仮想物体40の可動部分の操作が受け付けられたときに、自動車を示す仮想物体40を表示するための表示設定情報に応じて、可動部分の表示を変更する。これにより物体が自動車(車両)である場合でも、第1実施形態及び第2実施形態の場合と同様に、自動車(車両)の可動部分を操作した場合のイメージをより明瞭にユーザに把握させることができる。
なお上述の第1乃至第3実施形態の説明では、仮想物体40に対応する物体が、プリンタ(オフィス機器)、冷蔵庫(家電製品)及び自動車(車両)の場合を例にして説明したが、当該物体は任意でよい。例えば仮想物体40に対応する物体は、タンス等の家具でもよい。
1 情報処理システム
10 情報処理装置
11 記憶部
12 撮像部
13 表示制御部
14 表示部
15 操作受付部
16 生成部
17 通信部
18 GPS部
20 サーバ装置
30 ARマーカー
40 仮想物体
100 ネットワーク
301 制御装置
302 主記憶装置
303 補助記憶装置
304 表示装置
305 入力装置
306 通信装置
307 撮像装置
308 GPS装置
特許第4032776号公報

Claims (16)

  1. 不動部分と可動部分とを有する画像で表される仮想物体が表示される位置を識別する位置識別情報を含む撮像画像を取得する撮像部と、
    前記位置識別情報により識別される前記撮像画像上の位置に、前記仮想物体が合成された合成画像を生成する生成部と、
    表示部に表示された前記合成画像に含まれる前記可動部分の操作を受け付ける操作受付部と、
    前記操作受付部により前記可動部分の操作が受け付けられたときに、前記仮想物体を表示するための表示設定情報に基づき前記可動部分の表示を制御する表示制御部と、
    を備える情報処理装置。
  2. 前記表示設定情報を受信する通信部と、
    前記表示設定情報を記憶する記憶部と、
    を更に備える請求項1に記載の情報処理装置。
  3. 前記操作受付部は、前記仮想物体に対応する物体が設置される領域の制限を示す設置制限領域を指定する操作を更に受け付け、
    前記生成部は、前記設置制限領域を示す情報が、前記撮像画像に更に合成された前記合成画像を生成する、
    請求項1又は2に記載の情報処理装置。
  4. 前記表示制御部は、前記仮想物体が前記設置制限領域に収まらない場合、前記設置制限領域を示す情報の表示態様を変更する、
    請求項3に記載の情報処理装置。
  5. 前記操作受付部は、前記仮想物体に着脱可能な仮想着脱可能物体の選択を示す操作を更に受け付け、
    前記生成部は、前記仮想着脱可能物体を含む前記仮想物体が、前記撮像画像に合成された前記合成画像を生成する、
    請求項1乃至4のいずれか1項に記載の情報処理装置。
  6. 前記操作受付部は、複数の前記仮想物体の識別情報から、前記仮想物体の識別情報を選択する操作を受け付け、
    前記生成部は、前記撮像画像に含まれる前記位置識別情報により識別される位置に、選択された前記識別情報により識別される前記仮想物体が合成された合成画像を生成する、
    請求項1乃至5のいずれか1項に記載の情報処理装置。
  7. 前記生成部は、前記位置識別情報の前記撮像画像上の位置及び形状の少なくとも一方の変更に応じて、前記仮想物体に、拡大、縮小、移動及び回転のうち少なくとも1つを行うことにより、前記仮想物体の表示態様が変更された前記仮想物体が合成された合成画像を合成し、
    前記表示制御部は、前記表示態様が変更された前記仮想物体が合成された合成画像を表示部に表示する、
    請求項1乃至6のいずれか1項に記載の情報処理装置。
  8. 前記表示制御部は、前記仮想物体に対応する物体を入手可能なネットワーク上のサイトを前記表示部に表示する、
    請求項1乃至7のいずれか1項に記載の情報処理装置。
  9. 前記表示制御部は、前記仮想物体に対応する物体を入手可能な場所を示す地図を前記表示部に表示する、
    請求項1乃至8のいずれか1項に記載の情報処理装置。
  10. 前記表示制御部は、前記仮想物体に対応する物体の情報を前記表示部に表示する、
    請求項1乃至9のいずれか1項に記載の情報処理装置。
  11. 前記表示制御部は、前記仮想物体に対応する物体の情報に類似する情報を有する類似物体の情報を前記表示部に表示する、
    請求項1乃至10のいずれか1項に記載の情報処理装置。
  12. 前記表示制御部は、前記仮想物体に対応する物体の部品の交換手順を示す前記仮想物体の動画像を表示する、
    請求項1乃至11のいずれか1項に記載の情報処理装置。
  13. 前記仮想物体に対応する物体は印刷装置を含み、
    前記表示制御部は、印刷が行われた際に前記印刷装置から印刷物が排紙される様子を示す前記仮想物体の動画像を、前記仮想物体に対応する印刷装置の印刷速度に応じて表示する、
    請求項1乃至12のいずれか1項に記載の情報処理装置。
  14. 前記表示制御部は、複数の地域から地域を選択する地域選択画面を前記表示部に表示し、選択された地域に関連付けられた地域設定情報に基づく表示制御を行う、
    請求項1乃至13のいずれか1項に記載の情報処理装置。
  15. 撮像部が、不動部分と可動部分とを有する画像で表される仮想物体が表示される位置を識別する位置識別情報を含む撮像画像を取得するステップと、
    生成部が、前記位置識別情報により識別される前記撮像画像上の位置に、前記仮想物体が合成された合成画像を生成するステップと、
    操作受付部が、表示部に表示された前記合成画像に含まれる前記可動部分の操作を受け付けるステップと、
    前記操作を受け付けるステップにより前記可動部分の操作が受け付けられたときに、表示制御部が、前記仮想物体を表示するための表示設定情報に基づき前記可動部分の表示を制御するステップと、
    を含む情報処理方法。
  16. 不動部分と可動部分とを有する画像で表される仮想物体が表示される位置を識別する位置識別情報を含む撮像画像を取得する撮像部を備える情報処理装置を、
    前記位置識別情報により識別される前記撮像画像上の位置に、前記仮想物体が合成された合成画像を生成する生成部と、
    表示部に表示された前記合成画像に含まれる前記可動部分の操作を受け付ける操作受付部と、
    前記操作受付部により前記可動部分の操作が受け付けられたときに、前記仮想物体を表示するための表示設定情報に基づき前記可動部分の表示を制御する表示制御部、
    として機能させるためのプログラム。
JP2015199712A 2015-01-14 2015-10-07 情報処理装置、情報処理方法及びプログラム Active JP6651777B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP15199902.6A EP3046080A3 (en) 2015-01-14 2015-12-14 Information processing apparatus, information processing method, and computer-readable recording medium
US14/970,093 US9741174B2 (en) 2015-01-14 2015-12-15 Information processing apparatus, information processing method, and computer-readable recording medium
CN201610045786.8A CN105786176B (zh) 2015-01-14 2016-01-13 信息处理设备、信息处理方法和计算机可读的记录介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015005364 2015-01-14
JP2015005364 2015-01-14

Publications (2)

Publication Number Publication Date
JP2016136376A true JP2016136376A (ja) 2016-07-28
JP6651777B2 JP6651777B2 (ja) 2020-02-19

Family

ID=56512658

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015199712A Active JP6651777B2 (ja) 2015-01-14 2015-10-07 情報処理装置、情報処理方法及びプログラム

Country Status (1)

Country Link
JP (1) JP6651777B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019012940A1 (ja) * 2017-07-14 2019-01-17 京セラドキュメントソリューションズ株式会社 表示装置および表示システム
JP2019207498A (ja) * 2018-05-28 2019-12-05 原 周平 収納装置発注システム及び発注方法
JP2020102200A (ja) * 2018-12-20 2020-07-02 京セラドキュメントソリューションズ株式会社 情報処理装置
JPWO2020032097A1 (ja) * 2018-08-10 2021-10-28 有限会社藤川樹脂 携帯型端末および管理サーバ

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011227875A (ja) * 2010-03-31 2011-11-10 Ns Solutions Corp 情報処理装置、情報処理方法及びプログラム
WO2012127605A1 (ja) * 2011-03-22 2012-09-27 株式会社うぶすな 情報処理装置、及び情報処理方法
JP2013092887A (ja) * 2011-10-25 2013-05-16 Canon Inc 画像処理装置と画像処理装置の制御方法およびプログラムと、情報処理装置と情報処理装置の制御方法およびプログラム
JP2013105330A (ja) * 2011-11-14 2013-05-30 Konica Minolta Business Technologies Inc 制御処理プログラム、画像表示装置、および画像表示方法
JP2013206322A (ja) * 2012-03-29 2013-10-07 Sony Corp 情報処理装置、情報処理システム及び情報処理方法
WO2014150980A1 (en) * 2013-03-15 2014-09-25 daqri, inc. Content creation tool
US20140285522A1 (en) * 2013-03-25 2014-09-25 Qualcomm Incorporated System and method for presenting true product dimensions within an augmented real-world setting
JP2014222410A (ja) * 2013-05-13 2014-11-27 京セラドキュメントソリューションズ株式会社 携帯表示装置及び表示プログラム並びに操作案内システム
JP2014535112A (ja) * 2011-10-27 2014-12-25 イーベイ インク.Ebay Inc. 拡張現実を使用した物品の視覚化

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011227875A (ja) * 2010-03-31 2011-11-10 Ns Solutions Corp 情報処理装置、情報処理方法及びプログラム
WO2012127605A1 (ja) * 2011-03-22 2012-09-27 株式会社うぶすな 情報処理装置、及び情報処理方法
JP2013092887A (ja) * 2011-10-25 2013-05-16 Canon Inc 画像処理装置と画像処理装置の制御方法およびプログラムと、情報処理装置と情報処理装置の制御方法およびプログラム
JP2014535112A (ja) * 2011-10-27 2014-12-25 イーベイ インク.Ebay Inc. 拡張現実を使用した物品の視覚化
JP2013105330A (ja) * 2011-11-14 2013-05-30 Konica Minolta Business Technologies Inc 制御処理プログラム、画像表示装置、および画像表示方法
JP2013206322A (ja) * 2012-03-29 2013-10-07 Sony Corp 情報処理装置、情報処理システム及び情報処理方法
WO2014150980A1 (en) * 2013-03-15 2014-09-25 daqri, inc. Content creation tool
US20140285522A1 (en) * 2013-03-25 2014-09-25 Qualcomm Incorporated System and method for presenting true product dimensions within an augmented real-world setting
JP2014222410A (ja) * 2013-05-13 2014-11-27 京セラドキュメントソリューションズ株式会社 携帯表示装置及び表示プログラム並びに操作案内システム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019012940A1 (ja) * 2017-07-14 2019-01-17 京セラドキュメントソリューションズ株式会社 表示装置および表示システム
JPWO2019012940A1 (ja) * 2017-07-14 2019-11-07 京セラドキュメントソリューションズ株式会社 表示装置および表示システム
JP2019207498A (ja) * 2018-05-28 2019-12-05 原 周平 収納装置発注システム及び発注方法
JP7089406B2 (ja) 2018-05-28 2022-06-22 周平 原 収納装置発注システム及び発注方法
JPWO2020032097A1 (ja) * 2018-08-10 2021-10-28 有限会社藤川樹脂 携帯型端末および管理サーバ
JP2020102200A (ja) * 2018-12-20 2020-07-02 京セラドキュメントソリューションズ株式会社 情報処理装置
JP7318491B2 (ja) 2018-12-20 2023-08-01 京セラドキュメントソリューションズ株式会社 情報処理装置

Also Published As

Publication number Publication date
JP6651777B2 (ja) 2020-02-19

Similar Documents

Publication Publication Date Title
JP6582847B2 (ja) 情報処理装置、情報処理方法及びプログラム
US9741174B2 (en) Information processing apparatus, information processing method, and computer-readable recording medium
JP6651777B2 (ja) 情報処理装置、情報処理方法及びプログラム
CN103516931B (zh) 图像处理装置、显示装置以及显示方法
JP6354653B2 (ja) 拡張現実操作システムおよび拡張現実操作プログラム
JP2012254618A5 (ja) 画像形成装置、画像形成システム、制御方法、およびプログラム。
US11154779B2 (en) Processing device, program, and method
JP2018067139A (ja) 情報処理装置及びプログラム
US9232103B2 (en) Terminal apparatus and computer readable medium
US20190364145A1 (en) Non-transitory computer-readable medium and portable device
US8539356B2 (en) Image forming apparatus, authority management method of image forming apparatus, and authority management system of image forming apparatus
JP5639384B2 (ja) 表示装置及びプログラム
JP7056284B2 (ja) 車両用表示装置、画面制御方法及びプログラム
JP6758603B2 (ja) 情報処理装置、画像形成装置及びプログラム
JP5981617B1 (ja) ユーザ・インタフェース画像表示のためのコンピュータ・プログラムおよびコンピュータ実装方法
JP2018160120A (ja) 表示装置および表示システム
JP6803647B2 (ja) 端末装置、プリンタ制御方法、およびコンピュータプログラム
JP2017213827A (ja) 情報処理装置、情報処理システム、情報処理方法、及びプログラム
JP5655550B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP6409285B2 (ja) 表示制御装置、画像形成装置、表示方法、および表示プログラム
CN110431598B (zh) 合成图像生成装置、合成图像生成方法及记录介质
JP5073608B2 (ja) 画像出力装置、画像出力方法、及びプログラム
JP2020047185A (ja) 情報処理装置およびプログラム
JP6337736B2 (ja) 情報処理装置、記録システム、及びプログラム
JP7396326B2 (ja) 情報処理システム、情報処理装置、情報処理方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180910

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190521

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190719

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191224

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200106

R151 Written notification of patent or utility model registration

Ref document number: 6651777

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151