JP2004046326A - Device and method for displaying picture and program - Google Patents

Device and method for displaying picture and program Download PDF

Info

Publication number
JP2004046326A
JP2004046326A JP2002199788A JP2002199788A JP2004046326A JP 2004046326 A JP2004046326 A JP 2004046326A JP 2002199788 A JP2002199788 A JP 2002199788A JP 2002199788 A JP2002199788 A JP 2002199788A JP 2004046326 A JP2004046326 A JP 2004046326A
Authority
JP
Japan
Prior art keywords
dimensional
background image
dimensional object
program
dimensional coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002199788A
Other languages
Japanese (ja)
Inventor
Akira Yamada
山田 亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dainippon Screen Manufacturing Co Ltd
Original Assignee
Dainippon Screen Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dainippon Screen Manufacturing Co Ltd filed Critical Dainippon Screen Manufacturing Co Ltd
Priority to JP2002199788A priority Critical patent/JP2004046326A/en
Publication of JP2004046326A publication Critical patent/JP2004046326A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a picture display device which appropriately overlaps a three-dimensional object on a background picture and displays it. <P>SOLUTION: A program distributed from a server, a three-dimensional object database 81 and a background picture database 82 are stored in a fixed disk 24 of a client. A three-dimensional coordinate axis is set for the background picture with a processing by a three-dimensional coordinate axis operation part 312 by an operation of an operator. A processing for overlapping three-dimensional space specified in the three-dimensional coordinate axis with the background picture is performed in a merging part 31. The three-dimensional object selected by the operator is arranged while a contact face of the three-dimensional object is brought into contact with an arranging face in three-dimensional space. The picture where the three-dimensional object is appropriately overlapped with the background picture is displayed on a display 25. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
本発明は、2次元の背景画像上に3次元オブジェクトを重ねて表示する技術に関する。
【0002】
【従来の技術】
従来より、インターネット等の通信網あるいはCD−ROMやDVD等の記憶媒体を介して、様々な商品の画像を閲覧することができる電子カタログや電子チラシが利用されている。このような電子カタログ等において、近年、商品の画像を立体的に表示する技術を応用した広告媒体(いわゆる、3次元カタログ)の利用が増加している。3次元カタログにより、商品の画像を3次元的に回転したり拡大して所望の視点からの画像を表示することが可能となる。その結果、閲覧者は、従来の2次元的な画像と比較して、商品の形状に関するより詳細な情報を取得することができる。
【0003】
【発明が解決しようとする課題】
ところで、家具や電化製品等の屋内に配置されるインテリア商品では、商品が配置される背景と商品との調和が商品選択時の重要な要因となるが、従来の3次元カタログのように商品の立体的な画像のみでは、商品が配置された状態を想像することは容易ではなかった。また、商品の幅、奥行き、高さ等の情報はカタログに付加された注釈等から取得することができるが、配置される空間に対して商品の大きさが適しているか否かを視覚的に捉えることも困難であった。
【0004】
本発明は上記課題に鑑みなされたものであり、奥行きのある空間を表す2次元の背景画像に合わせて3次元オブジェクトを適切に重ねて表示することを目的としている。
【0005】
【課題を解決するための手段】
請求項1に記載の発明は、2次元の背景画像上に3次元オブジェクトを重ねて表示する画像表示装置であって、背景画像のデータおよび複数の3次元オブジェクトのデータを記憶する記憶部と、操作者による操作入力に基づいて背景画像に対して3次元座標軸を設定する手段と、3次元オブジェクトの選択を受け付ける手段と、設定された3次元座標軸にて規定される3次元空間の配置面と選択された3次元オブジェクトに定められている接触面とが接触する状態で前記選択された3次元オブジェクトを前記3次元空間内に配置する手段と、背景画像に配置後の3次元オブジェクトを重ねて表示する表示部とを備える。
【0006】
請求項2に記載の発明は、2次元の背景画像上に3次元オブジェクトを重ねて表示する画像表示方法であって、背景画像に対して3次元座標軸を設定する工程と、予め準備された複数の3次元オブジェクトに対する選択を行う工程と、設定された3次元座標軸にて規定される3次元空間内の配置面と選択された3次元オブジェクトに定められている接触面とが接触する状態で前記選択された3次元オブジェクトを前記3次元空間内に配置する工程と、前記背景画像に前記選択された3次元オブジェクトを重ねて表示する工程とを有する。
【0007】
請求項3に記載の発明は、コンピュータに2次元の背景画像上に3次元オブジェクトを重ねて表示させるプログラムであって、前記プログラムのコンピュータによる実行は、前記コンピュータに、操作者による操作入力に基づいて背景画像に対して3次元座標軸を設定する工程と、予め準備された複数の3次元オブジェクトに対する選択を受け付ける工程と、設定された3次元座標軸にて規定される3次元空間内の配置面と選択された3次元オブジェクトに定められている接触面とが接触する状態で前記選択された3次元オブジェクトを前記3次元空間内に配置する工程と、前記背景画像に前記選択された3次元オブジェクトを重ねて表示する工程とを実行させる。
【0008】
請求項4に記載の発明は、請求項3に記載のプログラムであって、前記配置する工程が、前記選択された3次元オブジェクトに応じて、前記3次元座標軸を基準として予め定められている複数の面から前記配置面を選択する工程を有する。
【0009】
請求項5に記載の発明は、請求項3に記載のプログラムであって、前記配置する工程が、前記3次元座標軸を基準として予め定められた面と、既に配置されている3次元オブジェクト上の面とから前記配置面を選択する工程を有する。
【0010】
請求項6に記載の発明は、請求項4または5に記載のプログラムであって、前記配置面を選択する工程において、前記選択された3次元オブジェクトの前記背景画像上の配置指定位置の入力が受け付けられ、前記配置指定位置に基づいて前記配置面の選択が行われる。
【0011】
請求項7に記載の発明は、請求項3ないし6のいずれかに記載のプログラムであって、前記3次元座標軸を設定する工程において、前記背景画像上に前記3次元座標軸が表示され、操作者による前記3次元座標軸の操作により前記3次元座標軸の設定が行われる。
【0012】
請求項8に記載の発明は、請求項3ないし7のいずれかに記載のプログラムであって、前記複数の3次元オブジェクトが、大きさが既知の比較用オブジェクトを含む。
【0013】
請求項9に記載の発明は、請求項8に記載のプログラムであって、前記比較用オブジェクトが、身長が既知の人間を示すオブジェクトである。
【0014】
請求項10に記載の発明は、請求項3ないし9のいずれかに記載のプログラムであって、前記プログラムのコンピュータによる実行は、前記コンピュータに、操作者からの前記背景画像上の2点の入力を受け付け、前記3次元座標軸のうち2つの座標軸により規定される基準面上の前記2点間の距離を測定する工程をさらに実行させる。
【0015】
請求項11に記載の発明は、請求項3ないし10のいずれかに記載のプログラムであって、前記複数の3次元オブジェクトが商品であり、前記表示する工程において、前記背景画像に商品が配置された商品カタログ用の画像が表示される。
【0016】
請求項12に記載の発明は、請求項3ないし11のいずれかに記載のプログラムであって、前記プログラムのコンピュータによる実行は、前記コンピュータに、前記選択された3次元オブジェクトの移動、回転または大きさの変更に関する入力を受け付ける工程と、前記配置面上において前記選択された3次元オブジェクトの移動もしくは回転、または、前記3次元座標軸の尺度の変更を行う工程と、前記背景画像に変更後の3次元オブジェクトを重ねて表示する工程とをさらに実行させる。
【0017】
【発明の実施の形態】
図1はインターネット、WAN等の通信網8を利用した3次元カタログ配信システム1を示す図であり、3次元カタログ配信システム1は、カタログの配信側のコンピュータ(以下、「サーバ」という。)11および受信側のコンピュータ(以下、「クライアント」という。)12が通信網8に接続されることにより構築される。サーバ11は家具等のインテリア商品販売会社等に設置され、クライアント12は商品販売会社の販売所や催事場等に設置されたり、各家庭のコンピュータがクライアントとして利用される。3次元カタログ配信システム1では、クライアント12のブラウザ等からの配信要求に基づいて3次元カタログがサーバ11からクライアント12へと配信され、クライアント12において商品カタログ用の画像が表示される。
【0018】
3次元カタログにおける各種商品は、CPUやメモリ等を有するサーバ11およびクライアント12において仮想的な有体物(例えば、微小要素の3次元的な集合により表現される3次元画像、彩色を施した3次元サーフェスモデル等)である3次元オブジェクトとして取り扱われ、3次元オブジェクトのデータの集合(データベース)がサーバ11の固定ディスクに格納される。サーバ11の固定ディスクには、さらに、室内を撮影した2次元の背景画像のデータベース、および、背景画像上に3次元オブジェクトを重ねて表示する際に利用されるプログラムが格納される。
【0019】
図2はクライアント12の構造を示す図である。クライアント12は、各種演算処理を行うCPU21、基本プログラムを記憶するROM22および各種情報を記憶するRAM23をバスラインに接続した一般的なコンピュータシステムの構成となっている。バスラインにはさらに、情報記憶を行う固定ディスク24、画像等の各種情報の表示を行うディスプレイ25、操作者からの入力を受け付けるキーボード26aおよびマウス26b(以下、「入力部26」と総称する。)、光ディスク、磁気ディスク、光磁気ディスク等のコンピュータ読み取り可能な記録媒体9から情報の読み取りを行う読取装置27、並びに、通信網8に接続された通信部28が、適宜、インターフェイス(I/F)を介する等して接続される。
【0020】
クライアント12が通信部28から通信網8を介してサーバ11へと3次元カタログの配信を要求する信号を送信すると、サーバ11からプログラム80、3次元オブジェクトデータベース81および背景画像データベース82が受信され(すなわち、ダウンロードされ)、クライアント12の固定ディスク24に記憶される。そして、プログラム80がRAM23にコピーされるとともに必要に応じてコンパイルされ、CPU21がRAM23内の実行形式のプログラムに従って演算処理を実行することにより(すなわち、コンピュータがプログラムを実行することにより)、クライアント12が2次元の背景画像上に3次元オブジェクトを重ねて表示する画像表示装置としての動作を行う。以上のように、クライアント12にて実行されるプログラムはサーバ11から配信されて実行されるアプレット(例えば、Java(登録商標)言語によるアプレット)となっている。
【0021】
図3は、CPU21がプログラム80に従って動作することにより、CPU21、ROM22、RAM23、固定ディスク24等が実現する画像表示装置としての機能構成を示すブロック図であり、処理部3内に示すブロックがCPU21等により実現される機能を示す。なお、クライアント12が店舗等に設置される専用コンピュータである場合、処理部3の機能は専用の電気的回路により実現されてもよく、部分的に電気的回路が用いられてもよい。
【0022】
図4は、クライアント12が背景画像上に3次元オブジェクトを重ねて表示する処理の流れを示す図である。クライアント12の実際の動作は操作者による入力イベントを処理することにより行われるが、図4では簡略化して示している。以下、クライアント12の機能および動作について図3を参照しながら図4に沿って説明を行う。
【0023】
まず、操作者が入力部26を介して入力を行うことにより、背景画像の選択が行われる(ステップS11)。例えば、図5に例示するディスプレイ25上のウィンドウ(画面全体が1つのウィンドウとなっていてもよい。)において、操作者が背景画像選択部41から所望の背景画像を選択することにより、選択された背景画像のデータが固定ディスク24の背景画像データベース82から処理部3へと出力され、ウィンドウ上のメイン表示部42に背景画像52が表示される。
このとき、背景画像52の表示倍率(表示されない部分を含む画像の大きさに相当)が操作者の入力により調整可能とされてもよい。続いて、操作者が操作モード選択部43から視点変更モードを選択することにより、図6に示すように、背景画像52上に3次元座標軸51が表示される。
【0024】
ここで、背景画像52と3次元座標軸51との幾何学的位置関係のモデル(以下、「ビューモデル」という。)について説明を行う。図7は、ビューモデルを説明するための図である。クライアント12におけるビューモデルでは、背景画像52に正対する仮想カメラ53が想定され、仮想カメラ53の背景画像52側に3次元座標軸51が設けられる。そして、背景画像52上に3次元座標軸51にて規定される3次元空間を重ねて仮想カメラ53にて撮像を行った際に取得される画像がメイン表示部42に表示される。
【0025】
クライアント12では、さらに、操作者からの入力に基づいてカメラ操作部311により仮想カメラ53と3次元座標軸51との間の距離を変更する操作に相当する処理が行われる。なお、このとき背景画像52のサイズ変更を連動して行う(すなわち、背景画像52と仮想カメラ53との間の距離も変更する)ことにより、仮想カメラ53の画角が変更されてもよい。また、3次元座標軸操作部312により操作者の入力に基づく3次元座標軸51の移動または回転の処理が行われる。融合部31では、背景画像52と3次元座標軸51による3次元空間とを重ね合わせる処理が行われ、重ね合わされた画像がディスプレイ25に表示される。
【0026】
操作者は、マウス26b等を操作して背景画像52上に表示された3次元座標軸51の移動および回転を行い、背景画像52の様子と3次元座標軸51とが一致するように3次元座標軸51を設定する(ステップS12)。すなわち、操作者による操作入力に基づいて、背景画像52中の床面を示す領域(以下、「床面領域」という。)521と窓522a側の壁面を示す領域(以下、「窓側領域」という。)522との間の境界線524に3次元座標軸51のY軸を合わせ、窓側領域522と他方の壁面を示す領域(以下、「壁面領域」という。)523との間の境界線525に3次元座標軸51のZ軸を合わせ、壁面領域523と床面領域521との間の境界線526に3次元座標軸51のX軸を合わせる設定が行われる。これにより、背景画像52内の領域521〜523と3次元座標軸51が規定する3次元空間内のXY平面、YZ平面およびZX平面が背景画像52上に投影される領域とがそれぞれ一致する。
【0027】
なお、3次元座標軸51の操作が行われている間も3次元座標軸51の表示がリアルタイムにて行われ、操作者が3次元座標軸51を容易かつ正確に設定することが可能とされている。図8は、背景画像52に対して3次元座標軸51が設定された後の様子を示す図である。
【0028】
以上のようにして、3次元座標軸51が背景画像52に対して設定されると、続いて、3次元座標軸51にて規定される3次元空間内への3次元オブジェクトの配置や3次元オブジェクトのレイアウト変更が操作者の操作に従って行われる。なお、以下の説明では、図8に示す3次元座標軸51により規定されるXY平面、YZ平面およびZX平面をそれぞれ床面、窓側面および壁面と呼ぶ。
【0029】
図8に示すウィンドウにおいて、操作者が操作モード選択部43を物体移動モードに変更すると3次元座標軸51の表示が消え、3次元オブジェクトを取り扱う状態へと移行する。クライアント12が入力部26を介して、ウィンドウ上の右下部分にある3次元オブジェクト選択部44から所望の商品の選択を受け付けると、選択された商品を示す3次元オブジェクトが3次元オブジェクトプレビュー部45に表示される。
【0030】
例えば、3次元オブジェクト選択部44から「椅子A」が選択された場合には、図8に示すように「椅子A」を示す3次元オブジェクト61(以下、「椅子61」という。)が3次元オブジェクトプレビュー部45に表示される。なお、図8では3次元オブジェクト選択部44内の「椅子A」を破線にて囲むことにより、選択された状態であることを示している。また、3次元オブジェクトを的確に把握できるようにプレビュー時に3次元オブジェクトがゆっくりと回転しながら表示されてもよい。
【0031】
続いて、操作者が3次元オブジェクトプレビュー部45に表示された椅子61を3次元オブジェクトプレビュー部45から背景画像52上へと移動する操作(例えば、マウス26bによるドラッグ・アンド・ドロップ操作)を行うことにより、クライアント12が3次元オブジェクトを背景画像52上に追加する操作が行われたと認識し(ステップS13)、固定ディスク24の3次元オブジェクトデータベース81から椅子61のデータが融合部31に出力される。
【0032】
融合部31は、椅子61のデータに基づいて配置面として床面を選択し(ステップS14)、床面との接触面として予め定められている椅子61の底面(すなわち、椅子61の足の端部により形成される面)と床面が接触する状態で椅子61を3次元空間内に配置する(ステップS15)。そして、図9に示すように、椅子61がメイン表示部42の背景画像52上に重ねて表示される(ステップS16)。
【0033】
図9に示す状態おいて、操作者がマウス26bを介して椅子61を移動する操作を行うと(例えば、マウス26bの左ボタンをクリックした状態でドラッグすると)、図3の3次元オブジェクト操作部321からレイアウト部32に椅子61の移動を示す信号が送られ(ステップS18)、レイアウト部32において椅子61が操作に応じた方向および距離だけ3次元空間内の床面上を移動する(ステップS19)。そして、移動後の椅子61が背景画像52に重ね合わされて表示される(ステップS16)。これにより、椅子61があたかも背景画像52中の床面に沿うように移動することとなる。
【0034】
また、操作者により回転を指示する入力(例えば、マウス26bの右ボタンをクリックした状態でドラッグする操作)が行われた場合には(ステップS18)、3次元オブジェクト操作部321により床面に垂直な所定の中心軸を中心として操作に応じた角度だけ椅子61を回転させる処理が行われ(ステップS19)、レイアウト部32を介して、回転後の椅子61が背景画像52上に表示される(ステップS16)。
【0035】
さらに、操作者により大きさを変更する入力(例えば、マウス26bの中ボタンをクリックした状態でドラッグする操作)が行われた場合には(ステップS18)、3次元オブジェクト操作部321は3次元座標軸51の尺度を変更する処理を行い(ステップS19)、その結果、表示される3次元オブジェクトの大きさが相対的に変更される(ステップS16)。図10は、図9の椅子61がステップS19の処理により移動し、かつ、回転した様子を示す図である。なお、3次元オブジェクトの大きさが変更される様子については後述する。
【0036】
3次元オブジェクトのレイアウトを変更する処理は、操作者の操作中に高速に繰り返される(ステップS18,S19,S16,S17)。したがって、実際には、操作者の操作に応じて3次元オブジェクトの移動、回転および大きさの変更がほぼリアルタイムに行われる。これにより、操作者はレイアウト変更の操作をメイン表示部42を見ながら効率よく行うことができる。
【0037】
以上のように、画像表示装置であるクライアント12では、背景画像52に合わせて3次元座標軸51が予め設定され、3次元空間内の配置面と商品を示す3次元オブジェクトの接触面とが接触する状態で3次元オブジェクトを3次元空間内に配置する。これにより、背景画像52と3次元オブジェクトとを自然な状態で重ねて表示することができる。また、配置された3次元オブジェクトを配置面上において移動または回転させることにより、自然なレイアウト変更も容易に実現される。
【0038】
図4に示すように、クライアント12では3次元オブジェクトを背景画像52上に追加する処理も随時繰り返すことが可能とされている。図11は、「椅子B」を示す3次元オブジェクト62および「テーブルA」を示す3次元オブジェクト63(以下、「テーブル63」という。)が追加された様子を示す図である。
クライアント12では、例えば、マウス26bがクリックされる際のカーソルの位置等により操作対象が選択され、操作者は3次元オブジェクト毎に移動または回転を行うことが可能とされている。ここで、3次元オブジェクトは絶対的な大きさを有し、3次元空間内における3次元オブジェクトの大きさは3次元座標軸51の尺度により決定される。その結果、クライアント12では、3次元オブジェクト間の大きさの比較も視覚的に容易に行うことが実現される。
【0039】
次に、クライアント12における3次元オブジェクトの配置処理(図4中のステップS14,S15)の他の例について説明する。
【0040】
図11の状態のウィンドウにおいて、操作者が3次元オブジェクト選択部44から「壁掛けテレビ」を選択すると、「壁掛けテレビ」を示す3次元オブジェクト64(以下、「壁掛けテレビ64」という。)が3次元オブジェクトプレビュー部45に表示される。そして、操作者が壁掛けテレビ64の配置位置に関して、窓側領域522または壁面領域523上の所望の位置を指定する入力(例えば、マウス26bを利用してドラッグ・アンド・ドロップ操作)を行うと(ステップS13)、指定された位置に壁掛けテレビ64が表示される(ステップS14〜S16)。すなわち、操作者による背景画像52上の配置指定位置の入力が受け付けられることにより、3次元空間内における配置面が窓側面または壁面から選択されるとともに、選択された配置面上の位置が特定され、壁掛けテレビ64が背景画像52上の指定位置に表示される。
【0041】
図12は、壁掛けテレビ64の配置面として窓側面(窓側領域522)が指定された場合の画像を示す図であり、図13は壁面(壁面領域523)が指定された場合の画像を示す図である。なお、図12および図13の壁掛けテレビ64は、前述の椅子61と同様に、配置面上においてさらに移動または回転することが可能である。
【0042】
以上のように、商品によっては3次元オブジェクトのデータに関連づけられる配置面が、3次元座標軸51を基準として予め定められている複数の面から選択可能とされ、操作者の操作に基づいて配置面が選択決定される。これにより、より多様な商品配置が実現される。なお、上記の例では、窓側面または壁面が選択可能な商品に関して説明を行ったが、例えば、床置きも壁掛けも可能な商品の場合は、床面、窓側面および壁面が選択可能な配置面とされる。
【0043】
次に、3次元オブジェクトの配置処理のさらに他の例について説明する。操作者が3次元オブジェクト選択部44から「花瓶」を選択すると、図14に示すように「花瓶」を示す3次元オブジェクト(以下、「花瓶」という。)65が3次元オブジェクトプレビュー部45に表示される。そして、操作者がマウス26b等を介して、床面領域521または既に配置された3次元オブジェクト上の面(例えば、テーブル63の上面)に対応する背景画像52上の領域に対して配置位置を指定する入力を行うことにより(ステップS13)、指定された位置に花瓶65が表示される(ステップS14〜S16)。
【0044】
すなわち、花瓶65を示す3次元オブジェクトのデータでは、床面のみならず既に配置されている3次元オブジェクトの上面も配置面として選択可能であると定められており、操作者による背景画像52上の配置指定位置の入力が受け付けられることにより、花瓶65の配置面が3次元空間内のテーブル63の上面と床面とから選択決定されるとともに、選択された配置面と花瓶65の接触面(底面として予め定められている。)とが接触する状態で花瓶65が3次元空間内に配置される。図14では、花瓶65の配置面としてテーブル63の上面が選択された場合の様子を示している。
【0045】
以上のように、クライアント12では、3次元座標軸51を基準として予め定められている面と既に配置されている3次元オブジェクト上の面とに配置することが可能である商品が選択された場合には、操作者によりこれらの面から配置面が選択され、配置面上に配置された商品の3次元オブジェクトと背景画像52とが重ね合わされて表示される。これにより、さらに多様な商品の配置が実現される。なお、既に配置された3次元オブジェクト上の配置面は上面には限定されず、側面や底面(例えば、壁に配置されたオブジェクトの底面)であってもよい。
【0046】
次に、背景画像52に合わせて3次元オブジェクトの大きさが変更される様子の一例について説明する。3次元オブジェクトは既述のように絶対的な大きさが定められており、3次元オブジェクトの3次元空間内の大きさは、3次元座標軸51の尺度に基づいて決定される。したがって、複数の3次元オブジェクトが配置されている状態で操作者が3次元オブジェクトの大きさを変更する操作を行うと、3次元座標軸51の尺度が変更され、複数の3次元オブジェクトの大きさおよび間隔が一律に変更される。ここで、クライアント12では背景画像52に合わせて3次元オブジェクトの大きさを適切なものへと容易に変更するために、比較用の3次元オブジェクトが準備されている。
【0047】
図14に示す状態のウィンドウにおいて、操作者が3次元オブジェクト選択部44から「人(170cm)」を選択して背景画像52へのオブジェクト追加操作を行うと、「人(170cm)」を示す3次元オブジェクト(以下、「人」という。)が比較用オブジェクトとしてメイン表示部42に表示される。図15は、人66が追加された様子を示す図である。人66は3次元座標軸51により規定される3次元空間内で、Z方向に関して170cmの大きさ(すなわち、身長)を持った3次元オブジェクトである。したがって、背景画像52と身長が既知である人66とを重ねて表示することにより、背景画像52に対して人66を適切な大きさに容易に変更することが可能となる。
【0048】
例えば、背景画像52上の窓522aの高さと人66の身長とを比較することにより3次元オブジェクトの大きさが適正であるかどうかを判断することが可能となる。図15の人66が窓の高さに比べて低いと判断した場合には、操作者が3次元オブジェクトを大きくする入力を行うことにより、3次元座標軸51の尺度が変更され、それに応じて背景画像52上の各3次元オブジェクトの大きさが同時に変更される。図16は、図15の各3次元オブジェクトを大きくした場合の画像を例示する図である。
【0049】
以上のように、クライアント12では、大きさが既知の比較用オブジェクトを背景画像52上に表示される複数の3次元オブジェクトに含めることにより、各3次元オブジェクトを背景画像52に応じた適正な大きさに容易に変更することができる。特に、屋内を示す背景画像52の場合には、身長が既知の直立した人を比較用オブジェクトとすることにより、精度よく3次元座標軸51の尺度を調整することができる。
【0050】
ここで、3次元オブジェクトの大きさを背景画像52に合わせるための他の機能として、クライアント12が背景画像52上の所望の2点間距離を測定する処理について説明する。図17は距離測定におけるクライアント12の動作の流れを示す図である。図17に示す動作は図4におけるステップS17により繰り返されるルーチンにおいて操作者の操作に応じて実行される処理として設けられる。
【0051】
例えば、図16において操作者による壁面領域523上の点P1および点P2の指定がクライアント12により受け付けられると(ステップS21)、3次元座標軸51により規定される壁面における点P1,P2間の距離L1が処理部3において算出され(ステップS22)、算出結果がディスプレイ25に(例えば、別ウィンドウにて)表示される(ステップS23)。なお、2点間の距離の測定は、床面領域521、窓側領域522、または、壁面領域523のうちいずれの領域においても行うことができる。このように、3次元座標軸51のうち2つの座標軸により規定される基準面上において入力された2点間の距離を測定することにより、操作者は背景画像52に設定された3次元座標軸51の尺度を把握することができ、3次元オブジェクトの大きさを容易に適切なものへと調整することができる。
【0052】
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
【0053】
プログラム80、3次元オブジェクトデータベース81および背景画像データベース82は必ずしも通信網8を介してダウンロードされる必要はなく、記録媒体9(図2参照)を介して読み出されてもよい。また、プログラム80のみがクライアント12に記憶され、背景画像選択部41または3次元オブジェクト選択部44において選択された背景画像52のデータまたは3次元オブジェクトのデータのみがサーバ11からダウンロードされてもよい。
【0054】
また、クライアント12はコンピュータとしての機能を有するものであればどのようなものであってもよく、例えば、携帯情報端末等であってもよい。
【0055】
3次元オブジェクトに応じた配置面として、3次元座標軸51を基準として予め定められている面は、必ずしも上記説明のように床面や壁面(窓側面)である必要はなく、3次元空間内に固定された他の面(例えば、壁面から所定の距離だけ離された面)であってもよい。
【0056】
また、上記実施の形態では、3次元座標軸51が設定されてから3次元オブジェクトの配置が行われるが、3次元オブジェクトが配置された後に背景画像52に対する3次元座標軸51の設定が行われてもよい。
【0057】
背景画像データは、操作者により予め用意されてもよい。これにより、例えば、操作者の部屋を撮影した画像に3次元オブジェクトを配置することも可能となる。また、背景画像データは必ずしも室内を撮影した画像である必要はなく、エクステリア商品等の3次元カタログでは、建物の外観を撮影した画像であってもよい。
【0058】
クライアント12は、3次元オブジェクトを背景画像52上に効率よく適切に表示するため、3次元カタログを表示する用途に特に適しているが、背景画像52に3次元オブジェクトを重ねて表示するのであれば他の用途に使用されてもよい。
【0059】
【発明の効果】
本発明によれば、背景画像上に3次元オブジェクトを適切に重ね合わせて表示することができる。
【0060】
また、請求項4ないし6の発明では、3次元オブジェクトの多様な配置が実現される。
【0061】
また、請求項8ないし10の発明では、背景画像内の3次元オブジェクトの大きさを容易に把握することができる。
【図面の簡単な説明】
【図1】3次元カタログ配信システムを示す図である。
【図2】クライアントの構成を示す図である。
【図3】クライアントの機能構成を示すブロック図である。
【図4】背景画像上に3次元オブジェクトを重ねて表示する処理の流れを示す図である。
【図5】ウィンドウを例示する図である。
【図6】3次元座標軸設定時のウィンドウを例示する図である。
【図7】ビューモデルを説明するための図である。
【図8】3次元座標軸設定時のウィンドウを例示する図である。
【図9】3次元オブジェクトが配置されたウィンドウを例示する図である。
【図10】3次元オブジェクトが配置されたウィンドウを例示する図である。
【図11】複数の3次元オブジェクトが配置されたウィンドウを例示する図である。
【図12】3次元オブジェクトが配置されたウィンドウを例示する図である。
【図13】3次元オブジェクトが配置されたウィンドウを例示する図である。
【図14】3次元オブジェクトが配置されたウィンドウを例示する図である。
【図15】比較用オブジェクトが配置されたウィンドウを例示する図である。
【図16】比較用オブジェクトが配置されたウィンドウを例示する図である。
【図17】距離を測定する処理の流れを示す図である。
【符号の説明】
12 クライアント
24 固定ディスク
25 ディスプレイ
31 融合部
51 3次元座標軸
52 背景画像
61〜66 3次元オブジェクト
80 プログラム
81 3次元オブジェクトデータベース
82 背景画像データベース
312 3次元座標軸操作部
321 3次元オブジェクト操作部
521〜523 領域
L1 距離
P1,P2 点
S12〜S19,S21〜S23 ステップ
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a technique for displaying a three-dimensional object superimposed on a two-dimensional background image.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, an electronic catalog or an electronic flyer that allows browsing of images of various products via a communication network such as the Internet or a storage medium such as a CD-ROM or a DVD has been used. In such electronic catalogs and the like, in recent years, the use of advertising media (so-called three-dimensional catalogs) to which a technology for displaying a product image three-dimensionally has been increased. The three-dimensional catalog makes it possible to rotate or enlarge a product image three-dimensionally and display an image from a desired viewpoint. As a result, the viewer can obtain more detailed information on the shape of the product as compared with a conventional two-dimensional image.
[0003]
[Problems to be solved by the invention]
By the way, in interior products such as furniture and appliances placed indoors, the harmony between the background where the products are placed and the products is an important factor when selecting a product. It was not easy to imagine a state in which goods were arranged only with three-dimensional images. Information such as the width, depth, and height of the product can be obtained from annotations or the like added to the catalog, but it is visually determined whether or not the size of the product is appropriate for the space where the product is to be placed. It was also difficult to catch.
[0004]
The present invention has been made in view of the above problems, and has as its object to appropriately display a three-dimensional object in accordance with a two-dimensional background image representing a space with depth.
[0005]
[Means for Solving the Problems]
The invention according to claim 1 is an image display device that superimposes and displays a three-dimensional object on a two-dimensional background image, and a storage unit that stores data of the background image and data of a plurality of three-dimensional objects. Means for setting a three-dimensional coordinate axis for a background image based on an operation input by an operator, means for receiving selection of a three-dimensional object, and a layout surface of a three-dimensional space defined by the set three-dimensional coordinate axis Means for arranging the selected three-dimensional object in the three-dimensional space in a state where the selected three-dimensional object is in contact with a contact surface defined by the selected three-dimensional object; A display unit for displaying.
[0006]
According to a second aspect of the present invention, there is provided an image display method for displaying a three-dimensional object superimposed on a two-dimensional background image, comprising: setting a three-dimensional coordinate axis for the background image; Selecting the three-dimensional object, and setting the three-dimensional object in a state where the arrangement surface in the three-dimensional space defined by the set three-dimensional coordinate axes and the contact surface defined by the selected three-dimensional object are in contact with each other. Arranging the selected three-dimensional object in the three-dimensional space; and displaying the selected three-dimensional object over the background image.
[0007]
According to a third aspect of the present invention, there is provided a program for causing a computer to display a three-dimensional object superimposed on a two-dimensional background image, wherein the computer executes the program based on an operation input by an operator. Setting a three-dimensional coordinate axis with respect to the background image, receiving a selection of a plurality of three-dimensional objects prepared in advance, and setting an arrangement surface in a three-dimensional space defined by the set three-dimensional coordinate axis. Arranging the selected three-dimensional object in the three-dimensional space in a state where the selected three-dimensional object is in contact with a contact surface defined by the selected three-dimensional object; And a step of overlapping display.
[0008]
The invention according to a fourth aspect is the program according to the third aspect, wherein the arranging step is performed in advance in accordance with the selected three-dimensional object, based on the three-dimensional coordinate axis. And selecting the arrangement surface from the surfaces.
[0009]
According to a fifth aspect of the present invention, there is provided the program according to the third aspect, wherein the arranging step is performed on a predetermined surface based on the three-dimensional coordinate axis and on a three-dimensional object already arranged. And a step of selecting the arrangement surface from the surfaces.
[0010]
According to a sixth aspect of the present invention, in the program according to the fourth or fifth aspect, in the step of selecting the placement plane, an input of a placement designation position on the background image of the selected three-dimensional object is performed. The arrangement plane is selected based on the arrangement designation position.
[0011]
The invention according to claim 7 is the program according to any one of claims 3 to 6, wherein in the step of setting the three-dimensional coordinate axis, the three-dimensional coordinate axis is displayed on the background image, The setting of the three-dimensional coordinate axis is performed by the operation of the three-dimensional coordinate axis according to.
[0012]
The invention according to claim 8 is the program according to any one of claims 3 to 7, wherein the plurality of three-dimensional objects include comparison objects whose sizes are known.
[0013]
The invention according to claim 9 is the program according to claim 8, wherein the comparison object is an object indicating a human whose height is known.
[0014]
According to a tenth aspect of the present invention, there is provided the program according to any one of the third to ninth aspects, wherein the execution of the program by the computer is performed by inputting two points on the background image from the operator to the computer. And the step of measuring the distance between the two points on the reference plane defined by two of the three-dimensional coordinate axes is further executed.
[0015]
An invention according to an eleventh aspect is the program according to any one of the third to tenth aspects, wherein the plurality of three-dimensional objects are products, and in the displaying, a product is arranged on the background image. The product catalog image is displayed.
[0016]
A twelfth aspect of the present invention is the program according to any one of the third to eleventh aspects, wherein the execution of the program by the computer causes the computer to move, rotate, or move the selected three-dimensional object. Accepting an input relating to the change of the height, moving or rotating the selected three-dimensional object on the placement plane, or changing the scale of the three-dimensional coordinate axis, and changing the background image to the background image. And displaying the dimensional object in a superimposed manner.
[0017]
BEST MODE FOR CARRYING OUT THE INVENTION
FIG. 1 is a diagram showing a three-dimensional catalog distribution system 1 using a communication network 8 such as the Internet or a WAN. The three-dimensional catalog distribution system 1 is a computer (hereinafter, referred to as a “server”) 11 on the catalog distribution side. A computer (hereinafter, referred to as a “client”) 12 on the receiving side is connected to the communication network 8. The server 11 is installed in an interior goods sales company such as furniture, and the client 12 is installed in a sales office or an event hall of the goods sales company, or a computer of each home is used as a client. In the three-dimensional catalog distribution system 1, a three-dimensional catalog is distributed from the server 11 to the client 12 based on a distribution request from a browser or the like of the client 12, and an image for a product catalog is displayed on the client 12.
[0018]
Various commodities in the three-dimensional catalog are virtually tangible entities (for example, a three-dimensional image represented by a three-dimensional set of minute elements, a colored three-dimensional surface) in the server 11 and the client 12 having a CPU, a memory, and the like. The three-dimensional object is handled as a three-dimensional object, and a set (database) of data of the three-dimensional object is stored in the fixed disk of the server 11. The fixed disk of the server 11 further stores a database of a two-dimensional background image obtained by photographing the room and a program used for displaying a three-dimensional object superimposed on the background image.
[0019]
FIG. 2 is a diagram showing the structure of the client 12. The client 12 has a general computer system configuration in which a CPU 21 for performing various arithmetic processes, a ROM 22 for storing basic programs, and a RAM 23 for storing various information are connected to a bus line. The bus line further includes a fixed disk 24 for storing information, a display 25 for displaying various information such as images, a keyboard 26a and a mouse 26b for receiving input from an operator (hereinafter, collectively referred to as an "input unit 26"). ), A reading device 27 that reads information from a computer-readable recording medium 9 such as an optical disk, a magnetic disk, and a magneto-optical disk, and a communication unit 28 connected to a communication network 8 are appropriately provided with an interface (I / F). ).
[0020]
When the client 12 transmits a signal requesting distribution of a three-dimensional catalog from the communication unit 28 to the server 11 via the communication network 8, the program 80, the three-dimensional object database 81, and the background image database 82 are received from the server 11 ( That is, it is downloaded) and stored in the fixed disk 24 of the client 12. Then, the program 80 is copied to the RAM 23 and compiled as needed, and the CPU 21 executes the arithmetic processing according to the executable program in the RAM 23 (that is, by executing the program by the computer), whereby the client 12 Performs an operation as an image display device that displays a three-dimensional object superimposed on a two-dimensional background image. As described above, the program executed by the client 12 is an applet (for example, an applet in the Java (registered trademark) language) distributed from the server 11 and executed.
[0021]
FIG. 3 is a block diagram showing a functional configuration as an image display device realized by the CPU 21, the ROM 22, the RAM 23, the fixed disk 24, and the like when the CPU 21 operates in accordance with the program 80. The functions realized by the above are shown. When the client 12 is a dedicated computer installed in a store or the like, the function of the processing unit 3 may be realized by a dedicated electric circuit, or an electric circuit may be partially used.
[0022]
FIG. 4 is a diagram illustrating a flow of a process in which the client 12 displays a three-dimensional object over a background image. The actual operation of the client 12 is performed by processing an input event by the operator, but is simplified in FIG. Hereinafter, the function and operation of the client 12 will be described with reference to FIG. 3 and along FIG.
[0023]
First, a background image is selected by the operator performing input through the input unit 26 (step S11). For example, in a window on the display 25 illustrated in FIG. 5 (the entire screen may be a single window), the operator selects a desired background image from the background image selection unit 41 and the selected image is selected. The background image data is output from the background image database 82 of the fixed disk 24 to the processing unit 3, and the background image 52 is displayed on the main display unit 42 on the window.
At this time, the display magnification of the background image 52 (corresponding to the size of the image including a part that is not displayed) may be made adjustable by an operator's input. Subsequently, when the operator selects the viewpoint change mode from the operation mode selection unit 43, the three-dimensional coordinate axes 51 are displayed on the background image 52 as shown in FIG.
[0024]
Here, a model of a geometrical positional relationship between the background image 52 and the three-dimensional coordinate axis 51 (hereinafter, referred to as a “view model”) will be described. FIG. 7 is a diagram for explaining a view model. In the view model of the client 12, a virtual camera 53 facing the background image 52 is assumed, and the three-dimensional coordinate axis 51 is provided on the background image 52 side of the virtual camera 53. Then, an image obtained when the virtual camera 53 captures an image with the three-dimensional space defined by the three-dimensional coordinate axes 51 superimposed on the background image 52 is displayed on the main display unit 42.
[0025]
In the client 12, a process corresponding to an operation of changing the distance between the virtual camera 53 and the three-dimensional coordinate axis 51 by the camera operation unit 311 based on the input from the operator is further performed. At this time, the angle of view of the virtual camera 53 may be changed by interlocking the size change of the background image 52 (ie, changing the distance between the background image 52 and the virtual camera 53). In addition, the three-dimensional coordinate axis operation unit 312 performs a process of moving or rotating the three-dimensional coordinate axis 51 based on the input of the operator. In the fusion unit 31, a process of superimposing the background image 52 and the three-dimensional space by the three-dimensional coordinate axes 51 is performed, and the superimposed image is displayed on the display 25.
[0026]
The operator operates the mouse 26b or the like to move and rotate the three-dimensional coordinate axes 51 displayed on the background image 52, and to make the three-dimensional coordinate axes 51 coincide with the state of the background image 52. Is set (step S12). That is, based on an operation input by the operator, a region (hereinafter, referred to as a “floor region”) 521 in the background image 52 and a region (hereinafter, referred to as a “window-side region”) indicating a wall surface on the window 522a side. .) 522 is aligned with the Y-axis of the three-dimensional coordinate axis 51, and the boundary 525 between the window-side region 522 and the region 523 indicating the other wall surface (hereinafter referred to as “wall surface region”) 523. A setting is performed in which the Z-axis of the three-dimensional coordinate axis 51 is aligned, and the X-axis of the three-dimensional coordinate axis 51 is aligned with a boundary 526 between the wall surface area 523 and the floor area 521. Thereby, the regions 521 to 523 in the background image 52 and the regions in which the XY plane, the YZ plane, and the ZX plane in the three-dimensional space defined by the three-dimensional coordinate axis 51 are projected on the background image 52 respectively match.
[0027]
The display of the three-dimensional coordinate axis 51 is performed in real time while the three-dimensional coordinate axis 51 is being operated, so that the operator can easily and accurately set the three-dimensional coordinate axis 51. FIG. 8 is a diagram illustrating a state after the three-dimensional coordinate axis 51 is set for the background image 52.
[0028]
When the three-dimensional coordinate axis 51 is set with respect to the background image 52 as described above, subsequently, the arrangement of the three-dimensional object in the three-dimensional space defined by the three-dimensional coordinate axis 51 and the three-dimensional object The layout change is performed according to the operation of the operator. In the following description, the XY plane, the YZ plane, and the ZX plane defined by the three-dimensional coordinate axes 51 shown in FIG. 8 are referred to as a floor, a window side, and a wall, respectively.
[0029]
In the window shown in FIG. 8, when the operator changes the operation mode selection unit 43 to the object movement mode, the display of the three-dimensional coordinate axis 51 disappears, and the state shifts to a state in which the three-dimensional object is handled. When the client 12 receives a selection of a desired product from the three-dimensional object selection unit 44 in the lower right part of the window via the input unit 26, a three-dimensional object indicating the selected product is displayed in the three-dimensional object preview unit 45. Will be displayed.
[0030]
For example, when “chair A” is selected from the three-dimensional object selection unit 44, a three-dimensional object 61 indicating “chair A” (hereinafter, “chair 61”) is three-dimensional as shown in FIG. It is displayed on the object preview section 45. In FIG. 8, "chair A" in the three-dimensional object selection unit 44 is surrounded by a broken line to indicate that it is in a selected state. Further, the three-dimensional object may be displayed while slowly rotating at the time of preview so that the three-dimensional object can be grasped accurately.
[0031]
Subsequently, the operator performs an operation of moving the chair 61 displayed on the three-dimensional object preview unit 45 from the three-dimensional object preview unit 45 onto the background image 52 (for example, a drag and drop operation using the mouse 26b). As a result, the client 12 recognizes that the operation of adding the three-dimensional object to the background image 52 has been performed (step S13), and the data of the chair 61 is output to the fusion unit 31 from the three-dimensional object database 81 of the fixed disk 24. You.
[0032]
The fusion unit 31 selects the floor surface as the arrangement surface based on the data of the chair 61 (step S14), and the bottom surface of the chair 61 predetermined as the contact surface with the floor surface (that is, the end of the foot of the chair 61). The chair 61 is arranged in the three-dimensional space in a state where the floor (surface formed by the section) and the floor are in contact with each other (step S15). Then, as shown in FIG. 9, the chair 61 is superimposed on the background image 52 of the main display unit 42 and displayed (step S16).
[0033]
In the state shown in FIG. 9, when the operator performs an operation of moving the chair 61 via the mouse 26b (for example, by dragging while clicking the left button of the mouse 26b), the three-dimensional object operation unit in FIG. A signal indicating the movement of the chair 61 is sent from the layout unit 321 to the layout unit 32 (step S18), and the chair 61 moves on the floor in the three-dimensional space in the direction and distance according to the operation in the layout unit 32 (step S19). ). Then, the moved chair 61 is displayed superimposed on the background image 52 (step S16). As a result, the chair 61 moves as if it were along the floor in the background image 52.
[0034]
When the operator performs an input for instructing rotation (for example, an operation of clicking and dragging the right button of the mouse 26b) (step S18), the three-dimensional object operation unit 321 vertically moves the floor. A process of rotating the chair 61 by an angle corresponding to the operation about the predetermined central axis is performed (step S19), and the rotated chair 61 is displayed on the background image 52 via the layout unit 32 (step S19). Step S16).
[0035]
Further, when the operator performs an input for changing the size (for example, an operation of dragging while clicking the middle button of the mouse 26b) (step S18), the three-dimensional object operation unit 321 sets the three-dimensional coordinate axes. A process of changing the scale of 51 is performed (step S19). As a result, the size of the displayed three-dimensional object is relatively changed (step S16). FIG. 10 is a diagram showing a state in which the chair 61 of FIG. 9 has been moved and rotated by the processing in step S19. The manner in which the size of the three-dimensional object is changed will be described later.
[0036]
The process of changing the layout of the three-dimensional object is repeated at high speed during the operation of the operator (steps S18, S19, S16, S17). Therefore, actually, the movement, rotation, and change of the size of the three-dimensional object are performed almost in real time according to the operation of the operator. Thus, the operator can efficiently perform the layout change operation while looking at the main display unit 42.
[0037]
As described above, in the client 12, which is an image display device, the three-dimensional coordinate axes 51 are set in advance in accordance with the background image 52, and the arrangement surface in the three-dimensional space and the contact surface of the three-dimensional object indicating the product come into contact with each other. In this state, the three-dimensional object is arranged in the three-dimensional space. Thereby, the background image 52 and the three-dimensional object can be displayed in a superimposed manner in a natural state. Further, by moving or rotating the placed three-dimensional object on the placement surface, a natural layout change can be easily realized.
[0038]
As shown in FIG. 4, the client 12 can repeat the process of adding a three-dimensional object onto the background image 52 as needed. FIG. 11 is a diagram illustrating a state where a three-dimensional object 62 indicating “chair B” and a three-dimensional object 63 indicating “table A” (hereinafter, referred to as “table 63”) are added.
In the client 12, for example, an operation target is selected based on the position of the cursor when the mouse 26b is clicked, and the operator can move or rotate for each three-dimensional object. Here, the three-dimensional object has an absolute size, and the size of the three-dimensional object in the three-dimensional space is determined by the scale of the three-dimensional coordinate axis 51. As a result, in the client 12, it is realized that the comparison of the size between the three-dimensional objects is easily performed visually.
[0039]
Next, another example of the three-dimensional object arrangement processing (steps S14 and S15 in FIG. 4) in the client 12 will be described.
[0040]
In the window shown in FIG. 11, when the operator selects “wall-mounted television” from the three-dimensional object selection unit 44, a three-dimensional object 64 indicating “wall-mounted television” (hereinafter, “wall-mounted television 64”) is three-dimensional. It is displayed on the object preview section 45. Then, when the operator performs an input (for example, a drag-and-drop operation using the mouse 26b) to specify a desired position on the window side area 522 or the wall area 523 with respect to the arrangement position of the wall-mounted television 64 (step). S13), the wall-mounted television 64 is displayed at the designated position (Steps S14 to S16). That is, by receiving the input of the layout designation position on the background image 52 by the operator, the layout surface in the three-dimensional space is selected from the window side surface or the wall surface, and the position on the selected layout surface is specified. , The wall-mounted television 64 is displayed at the designated position on the background image 52.
[0041]
FIG. 12 is a diagram illustrating an image when a window side surface (window side region 522) is designated as an arrangement surface of the wall-mounted television 64, and FIG. 13 is a diagram illustrating an image when a wall surface (wall surface region 523) is designated. It is. The wall-mounted television 64 in FIGS. 12 and 13 can be further moved or rotated on the arrangement surface, similarly to the chair 61 described above.
[0042]
As described above, depending on the product, the arrangement surface associated with the data of the three-dimensional object can be selected from a plurality of surfaces predetermined based on the three-dimensional coordinate axis 51, and the arrangement surface is determined based on the operation of the operator. Is selected and determined. Thereby, more various product arrangements are realized. In the above example, the description has been made with respect to a product in which the window side surface or the wall surface can be selected. For example, in the case of a product that can be placed on the floor or mounted on the wall, the floor surface, the window side surface and the wall surface can be selected. It is said.
[0043]
Next, still another example of the three-dimensional object arrangement processing will be described. When the operator selects “vase” from the three-dimensional object selection unit 44, a three-dimensional object (hereinafter, referred to as “vase”) 65 indicating “vase” is displayed on the three-dimensional object preview unit 45 as shown in FIG. Is done. Then, the operator uses the mouse 26b or the like to change the arrangement position with respect to the floor area 521 or the area on the background image 52 corresponding to the plane on the already arranged three-dimensional object (for example, the upper surface of the table 63). By performing an input for designating (step S13), the vase 65 is displayed at the designated position (steps S14 to S16).
[0044]
That is, the data of the three-dimensional object indicating the vase 65 specifies that not only the floor surface but also the top surface of the already arranged three-dimensional object can be selected as the arrangement surface. By receiving the input of the arrangement designation position, the arrangement surface of the vase 65 is selected and determined from the top surface and the floor surface of the table 63 in the three-dimensional space, and the contact surface (bottom surface) of the selected arrangement surface and the vase 65 The vase 65 is arranged in a three-dimensional space in a state where the vase 65 is in contact with the vase 65. FIG. 14 shows a case where the upper surface of the table 63 is selected as the arrangement surface of the vase 65.
[0045]
As described above, in the client 12, when a product that can be arranged on the surface that is predetermined with the three-dimensional coordinate axis 51 as a reference and the surface on the already arranged three-dimensional object is selected. The operator selects an arrangement surface from these surfaces, and the three-dimensional object of the product arranged on the arrangement surface and the background image 52 are displayed in a superimposed manner. As a result, a more diverse arrangement of commodities is realized. The arrangement surface on the already arranged three-dimensional object is not limited to the top surface, and may be a side surface or a bottom surface (for example, the bottom surface of an object arranged on a wall).
[0046]
Next, an example in which the size of the three-dimensional object is changed in accordance with the background image 52 will be described. The absolute size of the three-dimensional object is determined as described above, and the size of the three-dimensional object in the three-dimensional space is determined based on the scale of the three-dimensional coordinate axis 51. Therefore, when the operator performs an operation to change the size of the three-dimensional object in a state where the plurality of three-dimensional objects are arranged, the scale of the three-dimensional coordinate axis 51 is changed, and the size and the size of the three-dimensional object are changed. The interval is changed uniformly. Here, in the client 12, a three-dimensional object for comparison is prepared in order to easily change the size of the three-dimensional object to an appropriate size according to the background image 52.
[0047]
In the window shown in FIG. 14, when the operator selects “person (170 cm)” from the three-dimensional object selection unit 44 and performs an object adding operation on the background image 52, the “person (170 cm)” is displayed. A dimensional object (hereinafter, referred to as “person”) is displayed on the main display unit 42 as a comparison object. FIG. 15 is a diagram illustrating a state where a person 66 has been added. The person 66 is a three-dimensional object having a size (that is, height) of 170 cm in the Z direction in a three-dimensional space defined by the three-dimensional coordinate axes 51. Therefore, by superimposing and displaying the background image 52 and the person 66 whose height is known, the person 66 can be easily changed to an appropriate size with respect to the background image 52.
[0048]
For example, by comparing the height of the window 522a on the background image 52 with the height of the person 66, it is possible to determine whether the size of the three-dimensional object is appropriate. If the person 66 in FIG. 15 determines that the height is lower than the height of the window, the operator changes the scale of the three-dimensional coordinate axis 51 by performing an input to increase the size of the three-dimensional object. The size of each three-dimensional object on the image 52 is changed simultaneously. FIG. 16 is a diagram illustrating an image when each three-dimensional object in FIG. 15 is enlarged.
[0049]
As described above, the client 12 includes the comparison object having a known size in the plurality of three-dimensional objects displayed on the background image 52, so that each of the three-dimensional objects has an appropriate size corresponding to the background image 52. It can be easily changed. In particular, in the case of the background image 52 indicating indoors, the scale of the three-dimensional coordinate axis 51 can be accurately adjusted by using an upright person whose height is known as the comparison object.
[0050]
Here, as another function for adjusting the size of the three-dimensional object to the background image 52, a process in which the client 12 measures a desired distance between two points on the background image 52 will be described. FIG. 17 is a diagram showing a flow of the operation of the client 12 in the distance measurement. The operation shown in FIG. 17 is provided as a process executed in response to the operation of the operator in the routine repeated in step S17 in FIG.
[0051]
For example, in FIG. 16, when the specification of the points P1 and P2 on the wall area 523 by the operator is received by the client 12 (step S21), the distance L1 between the points P1 and P2 on the wall defined by the three-dimensional coordinate axis 51 is determined. Is calculated in the processing unit 3 (step S22), and the calculation result is displayed on the display 25 (for example, in another window) (step S23). The measurement of the distance between the two points can be performed in any of the floor area 521, the window area 522, and the wall area 523. As described above, by measuring the distance between the two points input on the reference plane defined by the two coordinate axes of the three-dimensional coordinate axes 51, the operator can determine the position of the three-dimensional coordinate axes 51 set in the background image 52. The scale can be grasped, and the size of the three-dimensional object can be easily adjusted to an appropriate one.
[0052]
Although the embodiments of the present invention have been described above, the present invention is not limited to the above embodiments, and various modifications are possible.
[0053]
The program 80, the three-dimensional object database 81, and the background image database 82 do not necessarily need to be downloaded via the communication network 8, but may be read via the recording medium 9 (see FIG. 2). Alternatively, only the program 80 may be stored in the client 12, and only the data of the background image 52 or the data of the three-dimensional object selected by the background image selection unit 41 or the three-dimensional object selection unit 44 may be downloaded from the server 11.
[0054]
The client 12 may be any device having a function as a computer, for example, a portable information terminal.
[0055]
The plane predetermined based on the three-dimensional coordinate axis 51 as the arrangement plane corresponding to the three-dimensional object does not necessarily need to be the floor surface or the wall surface (side surface of the window) as described above, and may be in the three-dimensional space. It may be another fixed surface (for example, a surface separated by a predetermined distance from a wall surface).
[0056]
In the above embodiment, the three-dimensional object is arranged after the three-dimensional coordinate axis 51 is set. However, even if the three-dimensional coordinate axis 51 is set for the background image 52 after the three-dimensional object is arranged. Good.
[0057]
The background image data may be prepared in advance by the operator. Thereby, for example, it is also possible to arrange a three-dimensional object in an image of the room of the operator. The background image data does not necessarily need to be an image of the interior of a room, but may be an image of the exterior of a building in a three-dimensional catalog of exterior products or the like.
[0058]
The client 12 is particularly suitable for displaying a three-dimensional catalog in order to efficiently and appropriately display the three-dimensional object on the background image 52. However, if the client 12 displays the three-dimensional object on the background image 52, It may be used for other purposes.
[0059]
【The invention's effect】
According to the present invention, a three-dimensional object can be appropriately superimposed and displayed on a background image.
[0060]
Further, in the inventions of claims 4 to 6, various arrangements of the three-dimensional object are realized.
[0061]
Further, according to the eighth to tenth aspects, the size of the three-dimensional object in the background image can be easily grasped.
[Brief description of the drawings]
FIG. 1 is a diagram showing a three-dimensional catalog distribution system.
FIG. 2 is a diagram illustrating a configuration of a client.
FIG. 3 is a block diagram illustrating a functional configuration of a client.
FIG. 4 is a diagram showing a flow of processing for displaying a three-dimensional object superimposed on a background image.
FIG. 5 is a diagram illustrating a window.
FIG. 6 is a diagram exemplifying a window when setting a three-dimensional coordinate axis.
FIG. 7 is a diagram for explaining a view model.
FIG. 8 is a diagram exemplifying a window when setting a three-dimensional coordinate axis.
FIG. 9 is a diagram illustrating a window in which a three-dimensional object is arranged.
FIG. 10 is a diagram illustrating a window in which a three-dimensional object is arranged.
FIG. 11 is a diagram illustrating a window in which a plurality of three-dimensional objects are arranged.
FIG. 12 is a diagram illustrating a window in which a three-dimensional object is arranged.
FIG. 13 is a diagram illustrating a window in which a three-dimensional object is arranged.
FIG. 14 is a diagram illustrating a window in which a three-dimensional object is arranged.
FIG. 15 is a diagram illustrating a window in which a comparison object is arranged.
FIG. 16 is a diagram illustrating a window in which comparison objects are arranged.
FIG. 17 is a diagram showing a flow of processing for measuring a distance.
[Explanation of symbols]
12 clients
24 fixed disk
25 Display
31 fusion part
51 3D coordinate axes
52 Background Image
61-66 3D object
80 programs
81 3D Object Database
82 Background Image Database
312 3D coordinate axis operation unit
321 3D object operation unit
521-523 area
L1 distance
P1, P2 points
S12 to S19, S21 to S23 Step

Claims (12)

2次元の背景画像上に3次元オブジェクトを重ねて表示する画像表示装置であって、
背景画像のデータおよび複数の3次元オブジェクトのデータを記憶する記憶部と、
操作者による操作入力に基づいて背景画像に対して3次元座標軸を設定する手段と、
3次元オブジェクトの選択を受け付ける手段と、
設定された3次元座標軸にて規定される3次元空間の配置面と選択された3次元オブジェクトに定められている接触面とが接触する状態で前記選択された3次元オブジェクトを前記3次元空間内に配置する手段と、
背景画像に配置後の3次元オブジェクトを重ねて表示する表示部と、
を備えることを特徴とする画像表示装置。
An image display device for displaying a three-dimensional object superimposed on a two-dimensional background image,
A storage unit that stores data of the background image and data of the plurality of three-dimensional objects;
Means for setting three-dimensional coordinate axes for the background image based on an operation input by the operator;
Means for receiving a selection of a three-dimensional object;
The selected three-dimensional object is placed in the three-dimensional space in a state where the arrangement surface of the three-dimensional space defined by the set three-dimensional coordinate axes and the contact surface defined by the selected three-dimensional object are in contact with each other. Means for placing the
A display unit for displaying the three-dimensional object after the arrangement on the background image,
An image display device comprising:
2次元の背景画像上に3次元オブジェクトを重ねて表示する画像表示方法であって、
背景画像に対して3次元座標軸を設定する工程と、
予め準備された複数の3次元オブジェクトに対する選択を行う工程と、
設定された3次元座標軸にて規定される3次元空間内の配置面と選択された3次元オブジェクトに定められている接触面とが接触する状態で前記選択された3次元オブジェクトを前記3次元空間内に配置する工程と、
前記背景画像に前記選択された3次元オブジェクトを重ねて表示する工程と、を有することを特徴とする画像表示方法。
An image display method for displaying a three-dimensional object over a two-dimensional background image,
Setting a three-dimensional coordinate axis for the background image;
Selecting a plurality of three-dimensional objects prepared in advance;
The selected three-dimensional object is placed in the three-dimensional space in a state where the arrangement surface in the three-dimensional space defined by the set three-dimensional coordinate axes and the contact surface defined by the selected three-dimensional object are in contact with each other. Placing it in the
Displaying the selected three-dimensional object over the background image.
コンピュータに2次元の背景画像上に3次元オブジェクトを重ねて表示させるプログラムであって、前記プログラムのコンピュータによる実行は、前記コンピュータに、
操作者による操作入力に基づいて背景画像に対して3次元座標軸を設定する工程と、
予め準備された複数の3次元オブジェクトに対する選択を受け付ける工程と、設定された3次元座標軸にて規定される3次元空間内の配置面と選択された3次元オブジェクトに定められている接触面とが接触する状態で前記選択された3次元オブジェクトを前記3次元空間内に配置する工程と、
前記背景画像に前記選択された3次元オブジェクトを重ねて表示する工程と、を実行させることを特徴とするプログラム。
A program for causing a computer to display a three-dimensional object superimposed on a two-dimensional background image, wherein the computer executes the program,
Setting a three-dimensional coordinate axis for the background image based on an operation input by the operator;
A step of receiving a selection for a plurality of three-dimensional objects prepared in advance, and a placement plane in a three-dimensional space defined by the set three-dimensional coordinate axes and a contact plane defined by the selected three-dimensional object Arranging the selected three-dimensional object in the three-dimensional space in a contact state;
Displaying the selected three-dimensional object over the background image.
請求項3に記載のプログラムであって、
前記配置する工程が、前記選択された3次元オブジェクトに応じて、前記3次元座標軸を基準として予め定められている複数の面から前記配置面を選択する工程を有することを特徴とするプログラム。
The program according to claim 3, wherein
The program, wherein the arranging step includes a step of selecting the arranging plane from a plurality of planes determined in advance based on the three-dimensional coordinate axes according to the selected three-dimensional object.
請求項3に記載のプログラムであって、
前記配置する工程が、前記3次元座標軸を基準として予め定められた面と、既に配置されている3次元オブジェクト上の面とから前記配置面を選択する工程を有することを特徴とするプログラム。
The program according to claim 3, wherein
A program, characterized in that the arranging step includes a step of selecting the arranging surface from a surface predetermined on the basis of the three-dimensional coordinate axis and a surface on a three-dimensional object already arranged.
請求項4または5に記載のプログラムであって、
前記配置面を選択する工程において、前記選択された3次元オブジェクトの前記背景画像上の配置指定位置の入力が受け付けられ、前記配置指定位置に基づいて前記配置面の選択が行われることを特徴とするプログラム。
The program according to claim 4 or 5, wherein
In the step of selecting the placement plane, an input of a placement designation position on the background image of the selected three-dimensional object is received, and the placement plane is selected based on the placement designation position. Program to do.
請求項3ないし6のいずれかに記載のプログラムであって、前記3次元座標軸を設定する工程において、前記背景画像上に前記3次元座標軸が表示され、操作者による前記3次元座標軸の操作により前記3次元座標軸の設定が行われることを特徴とするプログラム。The program according to any one of claims 3 to 6, wherein, in the step of setting the three-dimensional coordinate axis, the three-dimensional coordinate axis is displayed on the background image, and an operator operates the three-dimensional coordinate axis. A program for setting three-dimensional coordinate axes. 請求項3ないし7のいずれかに記載のプログラムであって、前記複数の3次元オブジェクトが、大きさが既知の比較用オブジェクトを含むことを特徴とするプログラム。The program according to any one of claims 3 to 7, wherein the plurality of three-dimensional objects include a comparison object having a known size. 請求項8に記載のプログラムであって、
前記比較用オブジェクトが、身長が既知の人間を示すオブジェクトであることを特徴とするプログラム。
The program according to claim 8, wherein
A program according to claim 1, wherein said comparison object is an object representing a human whose height is known.
請求項3ないし9のいずれかに記載のプログラムであって、前記プログラムのコンピュータによる実行は、前記コンピュータに、
操作者からの前記背景画像上の2点の入力を受け付け、前記3次元座標軸のうち2つの座標軸により規定される基準面上の前記2点間の距離を測定する工程をさらに実行させることを特徴とするプログラム。
The program according to any one of claims 3 to 9, wherein execution of the program by a computer causes the computer to execute
Receiving an input of two points on the background image from an operator, and further executing a step of measuring a distance between the two points on a reference plane defined by two coordinate axes of the three-dimensional coordinate axes. And the program.
請求項3ないし10のいずれかに記載のプログラムであって、
前記複数の3次元オブジェクトが商品であり、前記表示する工程において、前記背景画像に商品が配置された商品カタログ用の画像が表示されることを特徴とするプログラム。
The program according to any one of claims 3 to 10,
The program, wherein the plurality of three-dimensional objects are products, and in the displaying, an image for a product catalog in which the products are arranged on the background image is displayed.
請求項3ないし11のいずれかに記載のプログラムであって、前記プログラムのコンピュータによる実行は、前記コンピュータに、
前記選択された3次元オブジェクトの移動、回転または大きさの変更に関する入力を受け付ける工程と、
前記配置面上において前記選択された3次元オブジェクトの移動もしくは回転、または、前記3次元座標軸の尺度の変更を行う工程と、
前記背景画像に変更後の3次元オブジェクトを重ねて表示する工程と、
をさらに実行させることを特徴とするプログラム。
The program according to any one of claims 3 to 11, wherein the computer executes the program,
Accepting an input relating to the movement, rotation or change in size of the selected three-dimensional object;
Moving or rotating the selected three-dimensional object on the placement plane, or changing the scale of the three-dimensional coordinate axis;
Superimposing and displaying the three-dimensional object after the change on the background image;
A program characterized by further executing
JP2002199788A 2002-07-09 2002-07-09 Device and method for displaying picture and program Pending JP2004046326A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002199788A JP2004046326A (en) 2002-07-09 2002-07-09 Device and method for displaying picture and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002199788A JP2004046326A (en) 2002-07-09 2002-07-09 Device and method for displaying picture and program

Publications (1)

Publication Number Publication Date
JP2004046326A true JP2004046326A (en) 2004-02-12

Family

ID=31706835

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002199788A Pending JP2004046326A (en) 2002-07-09 2002-07-09 Device and method for displaying picture and program

Country Status (1)

Country Link
JP (1) JP2004046326A (en)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012168798A (en) * 2011-02-15 2012-09-06 Sony Corp Information processing device, authoring method, and program
JP2014089697A (en) * 2012-10-05 2014-05-15 Fine Co Ltd Architectural image display device, architectural image display method, and computer program
JP2014197317A (en) * 2013-03-29 2014-10-16 ソニー株式会社 Information processing apparatus, information processing method, and recording medium
JP2014238883A (en) * 2007-09-25 2014-12-18 メタイオ ゲゼルシャフト ミット ベシュレンクテル ハフツング Method and device for drawing virtual object in real environment
JP2015501044A (en) * 2011-12-01 2015-01-08 クアルコム,インコーポレイテッド Method and system for capturing and moving 3D models of real world objects and correctly scaled metadata
US9390560B2 (en) 2007-09-25 2016-07-12 Metaio Gmbh Method and device for illustrating a virtual object in a real environment
JP2017151648A (en) * 2016-02-23 2017-08-31 キヤノン株式会社 Information processing apparatus, information processing method, information processing system, and program
JP6196416B1 (en) * 2016-05-27 2017-09-13 楽天株式会社 3D model generation system, 3D model generation method, and program
JP6388744B1 (en) * 2017-09-08 2018-09-12 三菱電機株式会社 Ranging device and ranging method
WO2020045092A1 (en) * 2018-08-28 2020-03-05 ソニー株式会社 Information processing device, information processing method, and program
JP2020510934A (en) * 2017-03-09 2020-04-09 ハウズ インコーポレイテッドHouzz,Inc. Generating enhanced images using additional dimension data
JP2020173510A (en) * 2019-04-08 2020-10-22 長谷川工業株式会社 Display system, sales system, and data generation accept system
JP2021518935A (en) * 2018-01-24 2021-08-05 アップル インコーポレイテッドApple Inc. Devices, methods, and graphical user interfaces for system-wide behavior of 3D models

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10043315B2 (en) 2007-09-25 2018-08-07 Apple Inc. Method and apparatus for representing a virtual object in a real environment
US11080932B2 (en) 2007-09-25 2021-08-03 Apple Inc. Method and apparatus for representing a virtual object in a real environment
US9165405B2 (en) 2007-09-25 2015-10-20 Metaio Gmbh Method and device for illustrating a virtual object in a real environment
US9390560B2 (en) 2007-09-25 2016-07-12 Metaio Gmbh Method and device for illustrating a virtual object in a real environment
US10665025B2 (en) 2007-09-25 2020-05-26 Apple Inc. Method and apparatus for representing a virtual object in a real environment
US10366538B2 (en) 2007-09-25 2019-07-30 Apple Inc. Method and device for illustrating a virtual object in a real environment
JP2014238883A (en) * 2007-09-25 2014-12-18 メタイオ ゲゼルシャフト ミット ベシュレンクテル ハフツング Method and device for drawing virtual object in real environment
JP2012168798A (en) * 2011-02-15 2012-09-06 Sony Corp Information processing device, authoring method, and program
US9996982B2 (en) 2011-02-15 2018-06-12 Sony Corporation Information processing device, authoring method, and program
JP2015501044A (en) * 2011-12-01 2015-01-08 クアルコム,インコーポレイテッド Method and system for capturing and moving 3D models of real world objects and correctly scaled metadata
US9443353B2 (en) 2011-12-01 2016-09-13 Qualcomm Incorporated Methods and systems for capturing and moving 3D models and true-scale metadata of real world objects
JP2014089697A (en) * 2012-10-05 2014-05-15 Fine Co Ltd Architectural image display device, architectural image display method, and computer program
JP2014197317A (en) * 2013-03-29 2014-10-16 ソニー株式会社 Information processing apparatus, information processing method, and recording medium
US11188187B2 (en) 2013-03-29 2021-11-30 Sony Corporation Information processing apparatus, information processing method, and recording medium
US9665982B2 (en) 2013-03-29 2017-05-30 Sony Corporation Information processing apparatus, information processing method, and recording medium
US10198146B2 (en) 2013-03-29 2019-02-05 Sony Corporation Information processing apparatus, information processing method, and recording medium
JP2017151648A (en) * 2016-02-23 2017-08-31 キヤノン株式会社 Information processing apparatus, information processing method, information processing system, and program
JP6196416B1 (en) * 2016-05-27 2017-09-13 楽天株式会社 3D model generation system, 3D model generation method, and program
JP2020510934A (en) * 2017-03-09 2020-04-09 ハウズ インコーポレイテッドHouzz,Inc. Generating enhanced images using additional dimension data
JP6388744B1 (en) * 2017-09-08 2018-09-12 三菱電機株式会社 Ranging device and ranging method
JP7039714B2 (en) 2018-01-24 2022-03-22 アップル インコーポレイテッド Devices, methods, and graphical user interfaces for system-wide behavior of 3D models
JP2021518935A (en) * 2018-01-24 2021-08-05 アップル インコーポレイテッドApple Inc. Devices, methods, and graphical user interfaces for system-wide behavior of 3D models
WO2020045092A1 (en) * 2018-08-28 2020-03-05 ソニー株式会社 Information processing device, information processing method, and program
US11954804B2 (en) 2018-08-28 2024-04-09 Sony Corporation Information processing device and information processing method to display a virtual object
JP2020173510A (en) * 2019-04-08 2020-10-22 長谷川工業株式会社 Display system, sales system, and data generation accept system
JP7385180B2 (en) 2019-04-08 2023-11-22 長谷川工業株式会社 Display system, sales system, and data generation contract system for high-altitude work equipment

Similar Documents

Publication Publication Date Title
US11164381B2 (en) Clothing model generation and display system
US11640672B2 (en) Method and system for wireless ultra-low footprint body scanning
JP6625523B2 (en) HUD object design and display method.
Shin et al. Magic canvas: interactive design of a 3-d scene prototype from freehand sketches
CN108460840A (en) The methods of exhibiting and displaying device of virtual house decoration
Weichel et al. SPATA: Spatio-tangible tools for fabrication-aware design
EP2816519A1 (en) Three-dimensional shopping platform displaying system
KR101106857B1 (en) 3-dimensional virtual-reality museum
JP2004046326A (en) Device and method for displaying picture and program
CN106683177B (en) Based on interaction roaming type house decoration data interactive method and device
TW201714137A (en) Method for browsing house interactively in 3D virtual reality and system for the same
JP2007066291A (en) Method, apparatus and system for image display, server, program, and recording medium
JP2014089697A (en) Architectural image display device, architectural image display method, and computer program
CN111984171A (en) Method and device for generating furniture movement track
JP2023118798A (en) Program, building facility display method, building facility display system and terminal device
JP2013008257A (en) Image composition program
TWM626899U (en) Electronic apparatus for presenting three-dimensional space model
Sun et al. Enabling participatory design of 3D virtual scenes on mobile devices
WO2017061954A1 (en) Method and system for an online space planning tool
JP2012048656A (en) Image processing apparatus, and image processing method
JP2022181153A (en) Information processing system, information processing method and program
TWI799012B (en) Electronic apparatus and method for presenting three-dimensional space model
JP2004252815A (en) Image display device, its method and program
JP2012014391A (en) Comic-picture creation support apparatus, comic-picture creation support method and program
JP4310909B2 (en) Image processing device