JP2021523493A - 三次元空間の眺めを表示させる方法、装置、及び記憶媒体 - Google Patents

三次元空間の眺めを表示させる方法、装置、及び記憶媒体 Download PDF

Info

Publication number
JP2021523493A
JP2021523493A JP2020567129A JP2020567129A JP2021523493A JP 2021523493 A JP2021523493 A JP 2021523493A JP 2020567129 A JP2020567129 A JP 2020567129A JP 2020567129 A JP2020567129 A JP 2020567129A JP 2021523493 A JP2021523493 A JP 2021523493A
Authority
JP
Japan
Prior art keywords
apartment
model
view
furniture
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020567129A
Other languages
English (en)
Other versions
JP7121811B2 (ja
Inventor
ビン ヤン
ビン ヤン
イーラン フ
イーラン フ
ハン ツァオ
ハン ツァオ
ルイナ チャン
ルイナ チャン
モンディ チー
モンディ チー
チアン ビェン
チアン ビェン
ユーカ ヤン
ユーカ ヤン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ke com Beijing Technology Co Ltd
Original Assignee
Ke com Beijing Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from CN201910451604.0A external-priority patent/CN110689621B/zh
Priority claimed from CN201910637657.1A external-priority patent/CN110363853B/zh
Application filed by Ke com Beijing Technology Co Ltd filed Critical Ke com Beijing Technology Co Ltd
Publication of JP2021523493A publication Critical patent/JP2021523493A/ja
Priority to JP2022071869A priority Critical patent/JP7407223B2/ja
Application granted granted Critical
Publication of JP7121811B2 publication Critical patent/JP7121811B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/08Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/04Architectural design, interior design
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/024Multi-user, collaborative environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • Computer Graphics (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Geometry (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本開示は、三次元空間の眺めを表示させる方法を提供する。三次元空間の眺めは、第1の三次元空間の眺めと第2の三次元空間の眺めとを含む。本方法は、第1の三次元空間の眺めを第1ユーザーインターフェース上に提示し、第2の三次元空間の眺めを第2ユーザーインターフェース上に提示し、第1の三次元空間の眺めを利用者の入力に応じて変更し、第2の三次元空間の眺めを第1の三次元空間の眺めの変更に応じて変更する。
【選択図】図3

Description

発明の詳細な説明
[技術分野]
本開示はコンピュータに関し、特に、三次元空間の眺めを表示させる方法、装置、及び記憶媒体に関する。
[背景技術]
不動産産業のさらなる発展により、住居内装産業も著しく発展してきており、住居内装に対する要求も高まっている。従来の内装手法では、経験豊かなプロのデザイナーに改装デザインの提案を要求し、一般の居住者はそのような知識に堪能ではないことが多いので、家具レイアウトの効果はプロのデザイナーに大きく依存することになる。利用者が自分の所有するアパートのレイアウトに基づいたアパートの内装の効果を確認したい場合、プロのデザイナーによるアパート内の計測、利用者とスタイルの好みの打ち合わせ、デザイン設計等の工程を経る必要があるが、これは通常は図面設計に多くの時間を費やし、デザイナーの資源の多数を占める。このようなデザイン手順は長時間かかり、煩雑でコスト高であるために、汎用的に適用できる可能性は低い。
深度情報や実際の感じ方を提供できない、画像や映像を用いて、またはパノラマ方式を用いて行うアパートの内見という現在普及している考え方とは違い、「VRによるアパート内見」は、アパートの三次元的な想定をVR技術を用いて正確に復元することを意味し、これにより利用者に自由な形式での没入型アパート内見の体験を提供するので、利用者は、アパートを離れることなく、現実的なアパートの内見の想定計画を体験できる。例えば、アプリ上のVRアパートを開いてスクリーン上の任意の位置に触れることによって、アパートの実際の空間の寸法、向き、及び距離を含む深度情報が得られる。アパートの三次元的な想定を復元するという観点では、複数の地点と角度でアパートに対するスキャニングとビデオ撮りを最初に行って、それぞれの地点の完全な三次元点群データ、緯度や経度のデータ、及び高解像度の多重露光カラー写真が得られる。その後、全データと画像テクスチャを、自動モデリング、インテリジェント穴埋め、全自動データ抽出、HDR最適化等の三次元再構成技術を用いて三次元モデルにマッピングすることによって、利用者が確認する最終的な実際のアパート空間が得られる。
利用者が確認するVRアパートには新築アパートも中古アパートも含まれている。新築アパートの多くは荒仕上げのアパートであり、中古のアパートの中には長年にわたって内装が変わっておらず設備が時代遅れであるものもある。利用者は通常、アパート購入後、設備を整えるために内装を施す必要がある。利用者は、実際のVRアパートをもとにアパートを単に眺めることでは、内装を施した後のアパートの見た目を知ることはできない。よって、このようにアパートを眺める情報としては不完全であれば、利用者がアパートの購入を決断するための助けにはならない。
[発明の概要]
本開示は、三次元空間の眺め(または三次元モデル)を表示させる方法、装置、及び記憶媒体を提供する。
一態様において、本開示は、三次元空間の眺めを表示させる方法を提供する。三次元空間の眺めは、第1の三次元空間の眺めと第2の三次元空間の眺めとを少なくとも含み、本方法は、第1の三次元空間の眺めを第1ユーザーインターフェース上に提示し、第2の三次元空間の眺めを第2ユーザーインターフェース上に提示し、第1の三次元空間の眺めを利用者の入力に応じて変更し、第2の三次元空間の眺めを第1の三次元空間の眺めの変更に応じて変更することを含む。
本開示のある実施形態において、本方法は、内装変更前後のアパートの三次元モデルを同じスクリーン上で表示するために用いられ、第1の三次元空間の眺めを利用者の入力に応じて変更することは、
利用者の端末によって、第1の三次元空間の眺め内で散策中及び/または一見中の利用者の視野変更情報を取得することを含み、
第1の三次元空間の眺めはアパートの第1三次元モデルに対応し、第2の三次元空間の眺めはアパートの第2三次元モデルに対応し、
第2の三次元空間の眺めを第1の三次元空間の眺めの変更に応じて変更することは、
視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整することを含む。
本開示のある実施形態において、第1ユーザーインターフェースは、第1の三次元空間の眺めに対応するアパートの第1三次元モデルの子ページであり、
第1の三次元空間の眺め内で散策中及び/または一見中の利用者の視野変更情報を取得することは、
第1の三次元空間の眺めに対応するアパートの三次元モデルの子ページを通じて、第1の三次元空間の眺め内で散策中及び/または一見中の利用者の視野変更情報を取得することを含む。
本開示のある実施形態において、第2ユーザーインターフェースは、第2の三次元空間の眺めに対応するアパートの第2三次元モデルの子ページであり、
視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整することは、
アパートの第1三次元モデルの子ページを通じて、視野変更情報をアパートの第2三次元モデルの子ページに送信し、
アパートの第2三次元モデルの子ページによって、視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整する、ことを含む。
本開示のある実施形態において、第1の三次元空間の眺めを第1ユーザーインターフェース上に提示することは、
アパートの第1三次元モデルを表示することを含み、
第2の三次元空間の眺めを第2ユーザーインターフェースに提示することは、
アパートの第1三次元モデルの視野情報を取得し、
アパートの第2三次元モデルを取得し、
アパートの第1三次元モデルの視野情報に応じて、アパートの第2三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように表示する、ことを含む。
本開示のある実施形態において、本方法はさらに、
プリセットされた(予め設定された)起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したという判定を受けて、アパートの第1三次元モデルの視野情報の取得を行うことを含む。
本開示のある実施形態において、本方法はさらに、
アパートの第1三次元モデルに応じて、アパートレイアウト情報、階層の高さ情報、及び地点位置情報を備えるプリセットされたアパート情報を取得し、
プリセットされたアパート情報に応じて、アパートの第1三次元モデルに対応する空のアパートの三次元モデルを作成し、
空のアパートの三次元モデルに家具や機器の三次元モデルを追加してアパートの第2三次元モデルを作成し、
アパートの第1三次元モデルとアパートの第2三次元モデルとを対応させて保存することを含む。
本開示のある実施形態において、アパートの第1三次元モデルとアパートの第2三次元モデルのうちの少なくとも1つは内装変更されたアパートの三次元モデルであり、
本方法はさらに、
複数のサンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データと家具情報とを取得し、
複数のサンプルアパートレイアウト画像、家具情報、及びサンプルアパートレイアウト構造データに応じて、特定されたアパートレイアウト画像を処理して、特定されたアパートレイアウト画像に対する家具配置プランを作成し、
家具配置プランに応じて、特定されたアパートレイアウト画像に対する内装変更されたアパートの三次元モデルを作成することを含む。
本開示のある実施形態において、特定されたアパートレイアウト画像に対する家具配置プランを作成することは、特定されたアパートレイアウト画像に対する第1及び第2家具配置プランを作成することを含み、
家具配置プランに応じて特定されたアパートレイアウト画像に対する内装変更されたアパートの三次元モデルを作成することは、
第1及び第2家具配置プランに応じて、特定されたアパートレイアウト画像に対するアパートの第1三次元モデルとアパートの第2三次元モデルとを作成する、ことを含む。
本開示のある実施形態において、アパートの第2三次元モデルは内装変更されたアパートの三次元モデルであり、
本方法はさらに、
第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得し、
家具が既に配置されていて第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得して、第2サンプルアパートレイアウト画像内に配置されている家具に注釈をつけて、第1家具情報を生成し、
第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得し、
家具配置プランに応じて、内装変更されたアパートの三次元モデルを作成することを含む。
本開示のある実施形態において、内装変更予定のアパートレイアウト画像を処理して内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得することは、
訓練サンプルセットを、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて作成し、
訓練サンプルに従ってニューラルネットワークを訓練して、ニューラルネットワークモデルを得て、
ニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて、内装変更予定のアパートレイアウト画像を処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得することを含む。
本開示のある実施形態において、ニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて、内装変更予定のアパートレイアウト画像を処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得することは、
内装変更予定のアパートレイアウト画像に対応する内装変更されたアパートレイアウト構造データを取得し、
内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データとをニューラルネットワークモデルに入力して、ニューラルネットワークモデルが出力した内装変更予定のアパートレイアウト画像に対応する家具配置情報と、家具配置情報に対応する第2家具情報とを取得し、
家具配置決定ルールを用いて家具配置情報を処理することによって、家具配置画像を取得し、
第2家具情報に基づいて、家具配置画像内に配置されている家具に対応する提示情報を取得することを含む。
本開示のある実施形態において、ニューラルネットワークモデルは、入力レイヤーニューロンモデル、中間レイヤーニューロンモデル、及び出力レイヤーニューロンモデルを備え、各レイヤーでのニューロンモデルの出力は、次のレイヤーでのニューロンモデルの入力として使用され、
ニューラルネットワークモデルは、完全に接続された構造を有する複数のニューラルネットワークレイヤーのサブネットワーク構造であり、中間レイヤーニューロンモデルは完全に接続されたレイヤーである。
本開示のある実施形態において、家具配置情報は家具配置ヒートマップを備えており、
家具配置ヒートマップは、内装変更予定のアパートレイアウト画像内への配置が推奨される家具の位置情報と、配置が推奨される家具に対応する配置確率とを備えている。
本開示のある実施形態において、家具配置決定ルールを用いて家具配置情報を処理することによって家具配置画像を取得することは、
配置が推奨される家具に対応するエネルギー関数を、家具配置位置関係に応じて取得し、
エネルギー関数に基づいて制約条件を規定し、
家具配置ヒートマップをモンテカルロ探索木アルゴリズムを用いて走査して、制約条件に合う家具配置画像を取得することを含み、家具配置画像内に配置される家具の個数はプリセットされた数の範囲内である。
本開示のある実施形態において、本方法はさらに、
プリセットされた家具の組み合わせ方針と提示情報に基づいて、家具配置画像内に配置された家具に対応する補完的な品目を決定し、
プリセットされた家具配置方針と内装変更されたアパートレイアウト構造データに基づき、家具配置画像内の家具と対応する補完的な品目の配置位置を最適化することを含み、
家具配置方針は、壁面設置方針と床面設置方針のうちの1つ以上を備える。
本開示のある実施形態において、第1の三次元空間の眺めを利用者の入力に応じて変更することは、
第1ユーザーインターフェースで利用者の入力を受信して、利用者の入力に応じて第1の三次元空間の眺めの眺め変更命令を生成し、
眺め変更命令に応じて第1ユーザーインターフェースによって、第1の三次元空間の眺めを更新するのに使用するデータをロードし、
第1ユーザーインターフェースによって、眺め変更命令を第2ユーザーインターフェースに送信し、
第1ユーザーインターフェースによって、第2ユーザーインターフェースに、第1ユーザーインターフェースがデータのロードを完了したことを通知する、ことを含み、
第2の三次元空間の眺めを第1の三次元空間の眺めの変更に応じて変更することは、
眺め変更命令に応じて第2ユーザーインターフェースによって、第2の三次元空間の眺めを更新するのに使用するデータをロードし、
第2ユーザーインターフェースによって、第1ユーザーインターフェースに、第2ユーザーインターフェースがデータのロードを完了したことを通知する、ことを含む。
本開示のある実施形態において、利用者の入力は第1の利用者の入力であり、
本方法はさらに、
第2の三次元空間の眺めを第2の利用者の入力に応じて変更し、
第1の三次元空間の眺めを第2の三次元空間の眺めの変更に応じて変更することを含む。
別の態様において、本開示は三次元空間の眺めを表示させる方法を提供する。三次元空間の眺めは、第1の三次元空間の眺めと第2の三次元空間の眺めとを少なくとも備え、本方法は、第1の三次元空間の眺めを第1ユーザーインターフェース上に提示し、第2の三次元空間の眺めを第2ユーザーインターフェース上に提示し、第1ユーザーインターフェースで利用者の入力を受信して、利用者の入力に応じて第1の三次元空間の眺めの眺め変更命令を生成し、眺め変更命令に応じて第1ユーザーインターフェースによって、第1の三次元空間の眺めを更新するのに使用するデータをロードし、眺め変更命令を第1ユーザーインターフェースから第2ユーザーインターフェースに送信し、眺め変更命令に応じて第2ユーザーインターフェースによって、第2の三次元空間の眺めを更新するのに使用するデータをロードし、第1ユーザーインターフェースと第2ユーザーインターフェースによって、第1の三次元空間の眺めと第2の三次元空間の眺めとを、第1の三次元空間の眺めを更新するのに使用するロードされたデータと第2の三次元空間の眺めを更新するのに使用するロードされたデータとに応じて更新することを含む。
本開示のある実施形態において、本方法はさらに、
第1ユーザーインターフェースによって、第2ユーザーインターフェースに、第1ユーザーインターフェースがデータのロードを完了したことを通知し、
第2ユーザーインターフェースによって、第1ユーザーインターフェースに、第2ユーザーインターフェースがデータのロードを完了したことを通知し、
第1ユーザーインターフェースと第2ユーザーインターフェースの両方がデータのロードを完了したとの判定を受けて、第1の三次元空間の眺めと第2の三次元空間の眺めとを同時に更新することを含む。
別の態様において、本開示は、内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法を提供する。本方法は、利用者の端末によって、現在の三次元仮想空間内で散策中及び/または一見中の利用者の、地点位置変更情報及び/または視線方向変更情報を備える視野変更情報を取得し、現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整し、現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整することを含む方法であり、利用者の視野が変わる前に、第1アパートモデルと第2アパートモデルは既に同じスクリーン上に同じ視野で表示されており、アパートの第1三次元モデルは現在のアパートの三次元モデルであって、アパートの第2三次元モデルは推奨内装効果がロードされた後に得られた内装変更されたアパートの三次元モデルである。
別の態様において、本開示は、アパートレイアウトに基づいて家具配置プランを作成する方法を提供する。本方法は、第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得し、家具が既に配置されていて第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得し、第2サンプルアパートレイアウト画像内に配置されている家具に注釈をつけて、第1家具情報を生成し、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理し、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得することを含む。
別の態様において、本開示は、メモリとプロセッサとを備える演算処理装置を提供する。メモリは、プロセッサによって実行されると、本開示の各態様のいずれかに係る方法をプロセッサに実施させるプログラム命令を保存する。
別の態様において、本開示は、プロセッサによって実行されると、本開示の各態様のいずれかに係る方法をプロセッサに実施させるプログラム命令を保存する、非一時的なコンピュータ可読記憶媒体を提供する。
本開示の各実施形態または従来技術における技術的な解決法をより明確に説明するために、各実施形態または従来技術の説明に用いられる添付図面を以下に簡単に紹介する。以下の説明中における添付図面は本開示のいくつかの実施形態を示しているが、当業者であれば、創造的な取り組みをしなくてもこれらの添付図面から他の図を導き出すことができることは明らかである。
図1は、本開示のある実施形態に係る例示的な三次元仮想現実(VR)環境を示している概略図である。 図2は、本開示のある実施形態に係る例示的なコンピュータシステムを示すブロック図である。 図3は、本開示のある実施形態で提供される三次元空間の眺めを表示させる方法のフローチャートである。 図4は、本開示のある実施形態で提供される三次元空間の眺めを表示させる別の方法のフローチャートである。 図5は、本開示のある実施形態で提供される、内装変更前後でのアパートの三次元モデルを、同じスクリーン上で表示させる方法のフローチャートである。 図6は、本開示の別の実施形態で提供される、内装変更前後でのアパートの三次元モデルを同じスクリーン上で表示させる方法のフローチャートである。 図7は、本開示のある実施形態で提供される、内装変更前後でのアパートの三次元モデルを、同じスクリーン上で表示させる装置の構造概略図である。 図8は、本開示のある実施形態で提供される、内装変更前後でのアパートの三次元モデルを、同じスクリーン上で表示させるシステムの構造概略図である。 図9は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態のフローチャートである。 図10は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態で、家具配置プランを作成するフローチャートである。 図11は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態で、家具配置を最適化するフローチャートである。 図12は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態で、三次元レンダリングモデルを作成するフローチャートである。 図13Aは、本開示における、アパートレイアウトに基づいて家具配置プランを作成する装置のある実施形態の構造概略図である。 図13Bは、本開示における、アパートレイアウトに基づいて家具配置プランを作成する装置の別の実施形態の構造概略図である。 図14は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する装置のさらに別の実施形態の構造概略図である。 図15は、本開示のある実施形態で提供される電子デバイスの構造概略図である。
[発明の詳細な説明]
本開示の各実施形態の目的、技術的解決法、及び効果をより明確にするために、本開示の各実施形態での技術的解決法を、本開示の各実施形態における添付図面を参照しながら、以下に明確かつ完全に記載する。記載されている実施形態は本開示の実施形態の一部であって全部ではないことは明らかである。創造的な取り組みをしなくても当業者が本開示の各実施形態に基づいて得られる他のすべての実施形態は、本発明の保護範囲の範疇にある。
当業者であれば、本開示の各実施形態における「第1」及び「第2」の語は、異なるステップ、デバイス、モジュール等を互いに区別するために使用されているだけであり、互いの間にある特別な技術的意味も確たる論理順序も表していないことを理解可能である。
さらに、本開示の各実施形態において、「複数の」は2つまたは3つ以上を意味し、「少なくとも1つの」は1つ、2つ、または3つ以上を意味し得ることは理解すべきである。
さらに、本開示の各実施形態で述べているいずれの構成要素、データ、または構造も、文脈で反対の意味付けを明確に定義または付与していないのであれば、通例は1つ以上であるとして理解し得ることは理解すべきである。
また、本開示における「及び/または」の語は、関連する対象同士を説明する関連性の関係を単に表しており、3つの関係が存在し得ること、例えば、A及び/またはBは、Aのみが存在する、AとBの両方が存在する、Bのみが存在する、という3つの場合を表し得るということを表現しているだけである。また、本開示における符号「/」は、関連する対象の間での「または」の関係を通例は意味する。
さらに、本開示の各実施形態の記載は実施形態間の差異を強調しており、同一または類似の部分に対しては互いに参照可能であることは理解すべきである。簡潔にするために、本明細書では詳細の説明を繰り返すことはしない。
さらに、記載を簡単にするために、添付図面に示されている様々な部分の寸法は実際の比例関係に従って描いてはいないことは理解すべきである。
以下に続く少なくとも1つの例示的実施形態の記載は、実際には単に例示に過ぎず、本開示及びその適用や使用法のいかなる限定としても決して供しない。
関連する技術の当業者にとって既知の技術、方法、及びデバイスは、詳細に説明しない場合もあるが、適切な場合には本明細書の一部とみなすべきである。
以下に示す各図面において、同様の参照記号及び参照文字は同様の項目を指すことに留意すべきである。したがって、図面のうちの1つにおいてある特定の項目を定義したら、以降の図面ではさらに説明する必要はない。
本開示の各実施形態は、他の数々の汎用または専用の計算システム環境または計算システム構成とともに動作可能である電子デバイス、例えば端末装置、コンピュータシステム、サーバー等に適用可能である。端末装置、コンピュータシステム、またはサーバー等の電子デバイスとともに使用するのに適した周知の端末装置、計算システム、環境、及び/または構成の例としては、パーソナルコンピュータシステム、サーバーコンピュータシステム、シン・クライアント、シック・クライアント、ハンドヘルド型またはラップトップ型デバイス、マイクロプロセッサ使用システム、セットトップボックス、プログラム可能家庭用電化製品、ネットワークパーソナルコンピュータ、小型コンピュータシステム、大型コンピュータシステム、及び上述のシステムのいずれかを含む分散型クラウド・コンピューティング技術環境等が挙げられるが、これらに限定されない。
端末装置、コンピュータシステム、及びサーバー等の電子デバイスは、コンピュータシステムによって実行されるコンピュータシステム実行可能命令(例えばプログラムモジュール)の一般的な文脈において記述されてもよい。通例では、プログラムモジュールは、特定のタスクを行ったり特定の抽象データ型を実現したりする、ルーチン、プログラム、目的プログラム、コンポーネント、ロジック、データ構造等を含んでいてもよい。コンピュータシステム/サーバーは分散型クラウド・コンピューティング環境で実現されてもよい。分散型クラウド・コンピューティング環境では、タスクは、通信ネットワークを通じてリンクされているリモート処理デバイスによって実行されてもよい。分散型クラウド・コンピューティング環境では、プログラムモジュールは、ストレージデバイスを含むローカルまたはリモートの計算システム記憶媒体上に置かれていてもよい。
図1は、本開示のある実施形態に係る例示的な三次元仮想現実(VR)環境100を示している。図1に示されているように、3DVR環境100は、アパートや住居階があるビルといった住宅ユニットをシミュレートまたは表していてもよい。3DVR環境100は任意の室内空間または環境をVR描写したものを含んでいてもよいことに留意する。図1を参照すると、3DVR環境100は110,120,130,140,150,160等の1つ以上の機能的空間を含んでいてもよい。本明細書で用いられているように、機能的空間とは、特定の機能に関連している、閉じられた、または部分的に閉じられた空間を指す。いくつかの場合では、機能的空間は部屋に対応していてもよい。例えば、機能的空間110は第1寝室に、機能的空間130は第2寝室に対応していてもよい。いくつかの場合では、機能的空間は、部屋の内部にある、または部屋に隣接する、閉じられた、または部分的に閉じられた空間に対応していてもよい。例えば、機能的空間140はクローゼットに対応していてもよい。いくつかの場合では、機能的空間は、一般に特定の目的に使用される領域に対応していてもよい。例えば、機能的空間120は台所領域に、機能的空間150はダイニング領域に、機能的空間160はリビングルームに対応していてもよい。機能的空間120,150,160は、同じ部屋(例えば閉じた領域)を共有し得るが、それぞれの機能が異なるため異なる機能的空間としてみなし得る。
図2は、本明細書で開示されている様々な機能を実行するように構成されている例示的なコンピュータシステム200のブロック図を示している。例えば、コンピュータシステム200は、VR環境100を作成または再構築するためのサーバーとして構成されていてもよい。別の例では、コンピュータシステム200は、VR環境100を表示または拡充させるための端末装置として構成されていてもよい。図2に示されているように、コンピュータシステム200は、プロセッサ210、通信インターフェース220、メモリ/ストレージデバイス230、及びディスプレイ240を有していてもよい。メモリ/ストレージデバイス230は、プロセッサ210によって実行されると本明細書で開示されている様々な動作をプロセッサ210に行わせることができる、コンピュータ可読形式の命令を記憶するように構成されていてもよい。メモリ230は、例えば揮発性または不揮発性、磁気式、半導体ベース、テープベース、光学式、取り外し可、取り外し不可、または他のタイプのストレージデバイスもしくは有形コンピュータ可読媒体といった、任意の非一時的形式の大容量ストレージデバイスであってもよく、例えばROM、フラッシュメモリ、ダイナミックRAM、スタティックRAMを含むが、これらに限定されない。
プロセッサ210は、メモリ230内に記憶されている命令に応じて動作を行うように構成されていてもよい。プロセッサ210は、任意の適切な種類の汎用または専用のマイクロプロセッサ、デジタルシグナルプロセッサ、マイクロコントローラ等を含んでいてもよい。プロセッサ210は、本明細書に開示されている1つ以上の特定の動作を行うための独立したプロセッサモジュールとして構成されていてもよい。あるいは、プロセッサ210は、本明細書で開示されている1つ以上の特定の動作とは関連のない他の動作を行うことが可能な共用のプロセッサモジュールとして構成されていてもよい。
通信インターフェース220は、コンピュータシステム200と他のデバイスまたはシステムとの間で情報通信を行うように構成されていてもよい。例えば、通信インターフェース220は、サービス総合ディジタル網(integrated services digital network:ISDN)カード、ケーブルモデム、衛星モデム、またはデータ通信接続を行うモデムを含んでいてもよい。別の例として、通信インターフェース220は、互換性のあるLANとのデータ通信接続を行うローカルエリアネットワーク(local area network:LAN)カードを含んでいてもよい。さらに別の例として、通信インターフェース220は、例えば光ファイバー網アダプタ、10Gイーサネットアダプタ等の高速ネットワークアダプタを含んでいてもよい。通信インターフェース220はまた、無線リンクを構築してもよい。このように構築する際には、通信インターフェース220は、ネットワークを介して、様々なタイプの情報を表すデジタルデータストリームを伝達する電気信号、電磁気信号、または光信号を送受信することができる。通例ではネットワークは、セルラー通信ネットワーク、無線LAN(WLAN)、広域ネットワーク(Wide Area Network:WAN)等を含むことが可能である。
通信インターフェース220は、例えばキーボード、マウス、タッチパッド、タッチスクリーン、マイク、カメラ、バイオセンサ等の様々なI/Oデバイスを含んでいてもよい。利用者はデータを、通信インターフェース220を通じて端末装置に入力してもよい。
ディスプレイ240は、コンピュータシステム200の一部として組み込まれていてもよいし、コンピュータシステム200に通信可能に接続されている独立したデバイスとして設けられていてもよい。ディスプレイ240は、例えば液晶ディスプレイ(Liquid Crystal Display:LCD)、発光ダイオード(Light Emitting Diode:LED)ディスプレイ、プラズマディスプレイ、または他の任意の種類のディスプレイ等のディスプレイ装置を含んでいてもよく、また、利用者の入力とデータの描写が提示されるグラフィカルユーザーインターフェース(Graphical User Interface:GUI)をディスプレイ上に提供してもよい。いくつかの実施形態では、ディスプレイ装置240は、VR用ゴーグル、VR用メガネ、または仮想現実型VR体験を与える他の同様のデバイスを含んでいてもよい。例えば、VR環境100はディスプレイ240上に表示されてもよい。いくつかの実施形態では、ディスプレイ240は通信インターフェース220の一部として組み込まれていてもよい。
図3は、本開示に係る三次元空間の眺めを表示させる方法例のフローチャートである。三次元空間の眺めは、少なくとも第1の三次元空間の眺めと第2の三次元空間の眺めとを含んでおり、本方法は、第1の三次元空間の眺めを第1ユーザーインターフェースに提示するステップ301、第2の三次元空間の眺めを第2ユーザーインターフェースに提示するステップ302、利用者の入力に応じて第1の三次元空間の眺めを変更するステップ303、及び、第1の三次元空間の眺めの変更に応じて第2の三次元空間の眺めを変更するステップ304を含んでいる。
図4は、本開示に係る三次元空間の眺めを表示させる他の方法例のフローチャートである。三次元空間の眺めは、少なくとも第1の三次元空間の眺めと第2の三次元空間の眺めとを含んでいる。
図4に示されているように、ステップ401では、第1の三次元空間の眺めを第1ユーザーインターフェースに提示する。
ステップ402では、第2の三次元空間の眺めを第2ユーザーインターフェースに提示する。提示された第2の三次元空間の眺めと第1の三次元空間の眺めは、同じ視野を有していてもよい。
第1ユーザーインターフェース及び第2ユーザーインターフェースは、子ページ、例えばブラウザ(例えばIEブラウザ、Chromeブラウザ等)の第1子ページと第2子ページであってもよい。
三次元空間の眺めはパノラマの眺めと称されてもよい。アパートの三次元空間の眺め(つまりアパートのパノラマ)を作成する方法は、アパート内の複数の位置の周辺環境をカメラで写真撮影して、撮影した写真を合成して、これらの位置のアパートのパノラマを得るようにして行う。例えば、カメラは、アパートのある位置で、垂直軸を中心にして水平方向に回転してもよく、また、水平軸を中心にして垂直方向に回転してもよい。また、そこから撮影された一連の写真を合成して、この位置のアパートのパノラマが得られる。別の方法は、アパートの三次元空間の眺めをコンピュータシミュレーションによって作成する方法である。
視野には通常、視野の方向と角度範囲が含まれていて、視野の方向は視野の視線方向とも称される。よって、視野の1つの特徴はその方向であり、例えば既知の方向(例えば北方向)で測定した方位角と、既知の方向(例えば水平面)で測定した傾斜角とによって規定されてもよい。視野の他の特徴はある所定の想定の角度範囲である。
ステップ403では、第1ユーザーインターフェースで利用者の入力を受信して、利用者の入力に応じて第1の三次元空間の眺めの眺め変更命令を生成する。
利用者は、ディスプレイ領域(つまりユーザーインターフェース)で三次元空間の眺めを操作可能である。利用者は、左右や上下のドラッグ操作によって視野の方向と角度範囲を変更可能である。利用者はまた、拡大縮小操作によって視野の角度範囲を変更することも可能である。いくつかの実施態様では、三次元空間の眺めの上に重ね合わされたナビゲーションコントロールをクリックすることにより、利用者は1つの位置の三次元空間の眺めから別の位置の三次元空間の眺めに誘導され得る。
いくつかの実施態様では、パノラマ画像は第1アパート内のm個の位置(このm個の位置は第1位置セットを構成している)から作成されてもよく、また、パノラマ画像は第2アパート内のn個の位置(このn個の位置は第2位置セットを構成している)から作成されている。ここで、n及びmは整数であり、同じ値であっても違う値であってもよい。m個の位置とn個の位置はそれぞれ番号付けされていてもよく(例えば、1から始まる連続番号付け)、つまり、位置は番号で表されていて、最初の番号(例えば1番)の位置は最初の位置を表す。同じ番号の位置は対応する位置とみなされており、これにより、第1位置セットと第2位置セットとの間の配置関係が確立されている。第1アパートと第2アパートは同じアパートであってもよく、つまり、同じアパートに対して異なるパノラマ画像を作成してもよい。例えば、同じアパートに対して、内装変更前後で異なる三次元空間の眺めを作成可能であり、第1の三次元空間の眺めは内装変更前のアパートに対して作成され、第2の三次元空間の眺めは内装変更後のアパートに対して作成される。
いくつかの実施態様では、眺め変更命令は、第1の三次元空間の眺めの視野変更情報及び/または番号(または位置、これは地点位置とも称される)変更情報を含む。
ステップ404では、第1ユーザーインターフェースは、眺め変更命令に応じて、第1の三次元空間の眺めを更新するのに使用するデータをロードする。
ステップ405では、第1ユーザーインターフェースは、眺め変更命令を第2ユーザーインターフェースに送信する。
ステップ406では、第2ユーザーインターフェースは、眺め変更命令に応じて、第2の三次元空間の眺めを更新するのに使用するデータをロードする。
ステップ407では、第1ユーザーインターフェースと第2ユーザーインターフェースは、第1の三次元空間の眺めの更新に使用するロードしたデータと第2の三次元空間の眺めの更新に使用するロードしたデータとに応じて、第1の三次元空間の眺めと第2の三次元空間の眺めとをそれぞれ更新する。
いくつかの実施態様では、更新後、第1の三次元空間の眺めと第2の三次元空間の眺めは同じ視野を有している。いくつかの実施態様では、更新後、第1の三次元空間の眺めと第2の三次元空間の眺めは同じ位置(または番号)に対応する。
いくつかの実施態様では、第1ユーザーインターフェースと第2ユーザーインターフェースは、第1の三次元空間の眺めに使用するロードしたデータと第2の三次元空間の眺めに使用するロードしたデータとに応じて、第1の三次元空間の眺めと第2の三次元空間の眺めとをそれぞれ同時に更新する。すなわち、第1ユーザーインターフェースは第1の三次元空間の眺めの更新に使用するデータをロードし、第2ユーザーインターフェースは第2の三次元空間の眺めの更新に使用するデータをロードし、次に、この2つのユーザーインターフェースを同期させることによって、第1の三次元空間の眺めと第2の三次元空間の眺めとを同時に更新する。同期は例えば、第1ユーザーインターフェースが第2ユーザーインターフェースに、第1ユーザーインターフェースがデータのロードを完了したことを通知し、第2ユーザーインターフェースが第1ユーザーインターフェースに、第2ユーザーインターフェースがデータのロードを完了したことを通知し、そうして、第1ユーザーインターフェースと第2ユーザーインターフェースが第1の三次元空間の眺めと第2の三次元空間の眺めとを同時に更新することを実行する、ことを含む。
上述の三次元空間の眺めを表示させる方法の用途の想定は、内装変更前後のアパートの三次元モデルを、同じスクリーン上で表示することである。内装変更前後のアパートの三次元モデルを同じスクリーン上で表示するという想定において、利用者の入力に応じて第1の三次元空間の眺めを変更することは、第1の三次元空間の眺め(現在の三次元仮想空間とも称される)内で散策中及び/または一見中に、利用者の端末によって、利用者の視野変更情報を取得することを含む。視野変更情報は例えば、地点位置(または位置)変更情報及び/または視線方向変更情報を含んでいてもよい。第1の三次元空間の眺めの変更に応じて第2の三次元空間の眺めを変更することは、第1の三次元空間の眺めがアパートの第1三次元モデルに対応するとともに第2の三次元空間の眺めがアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整し、第1の三次元空間の眺めがアパートの第2三次元モデルに対応するとともに第2の三次元空間の眺めがアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整する、ことを含む。内装変更前後でのアパートの三次元モデルを同じスクリーン上に表示することは、下記において詳細に説明する。
図5は、本開示のある実施形態で提供された、内装変更前後でのアパートの三次元モデルを同じスクリーン上に表示する方法のフローチャートである。図5に示されているように、本方法は、
利用者の端末によって、現在の三次元仮想空間内で散策中及び/または一見中の利用者の視野変更情報取を取得し、視野変更情報は地点位置変更情報及び/または視線方向変更情報を含んでいる、ステップ501と、
現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整する、ステップ502と、
現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整する、ステップ503と、を含む。
利用者の視野が変わる前に、第1アパートモデルと第2アパートモデルは既に同じスクリーン上に同じ視野で表示されており、アパートの第1三次元モデルは現在のアパートの三次元モデル(つまり、推奨内装効果がロードされていない場合のアパートの三次元モデル)であって、アパートの第2三次元モデルは推奨内装効果がロードされている内装変更されたアパートの三次元モデルである。
現在のアパートの三次元モデルは、実際のアパートの三次元モデル(内装変更前のアパートの三次元モデル)である。内装変更されたアパートの三次元モデルは、対応する実際のアパートに基づいた内装シミュレーション後に得られるアパートの三次元モデル(内装変更後のアパートの三次元モデル)である。
推奨内装効果は、利用者のアパートの属性、例えばアパートのレイアウト、向き、明るさ、階層等に基づいて、利用者のアパートの当初の三次元モデルからすべての内装家具や機器を取り除いた後のアパートの三次元モデル内に様々な家具や機器のモデルを追加することによって得られた内装効果である。
利用者は、アパート内に物理的に存在している効果を実感するために、アパートの三次元モデルの三次元仮想空間(VR空間)内を散策及び/または一見することができる。例えば、散策とはある地点位置から別の地点位置へと移動することを意味し、一方、一見とは部屋内のある領域の方に目を向けることを意味する。散策中及び/または一見中である利用者の視野が変わる前には、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルは、利用者の端末の表示インターフェース(フロントエンド)上で、同じスクリーン上で同じ視野で表示される。利用者は、内装変更前のアパートの三次元モデルの三次元仮想空間内を、または内装変更後のアパートの三次元モデルの三次元仮想空間内を、散策及び/または一見できる。
利用者が1つの地点位置で一見する時には、視線方向を(例えばスクリーン上でスライドさせることによって)変更することが可能であり、それにより部屋内のいろいろな領域を一見することが実現できる。利用者が1つの地点位置また別の地点位置へと移動する時には、視野が変わるのは不可避であり、利用者はさらに、新たな地点位置への移動後に、視野に新たな変更が起きるように視線方向を変えることができる。
したがって、利用者が同じ地点位置で視野を変えることを、視線方向変更情報を取得することによって実行可能である。具体的には、利用者が1つの地点位置から別の地点位置へと移動する時には、地点位置変更情報を取得することによって視野変更情報を取得することができ、また、利用者が1つの地点位置から別の地点位置へと移動してさらに視線方向を変えるときには、地点位置変更情報と視線方向変更情報とから視野変更情報を取得することができる。
利用者がアパートの三次元モデルの三次元仮想空間内を散策及び/または一見する時には、利用者の端末は、利用者が位置している現在の三次元仮想空間の情報を取得し、ここで現在の三次元仮想空間は、内装変更前のアパートの三次元モデル、または内装変更後のアパートの三次元モデルに対応しており、さらに、現在の三次元仮想空間内を散策中及び/または一見中に、利用者の視野変更情報を取得する。
現在の三次元仮想空間が内装変更前のアパートの三次元モデルに対応する場合、利用者の端末は、内装変更前のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて、内装変更後のアパートの三次元モデルの表示視野を、内装変更後のアパートの三次元モデルと内装変更前のアパートの三次元モデルとが視野変更によっても変わらないように調整することによって、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されることを実行する。
現在の三次元仮想空間が内装変更後のアパートの三次元モデルに対応する場合、利用者の端末は、内装変更後のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて、内装変更前のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルとが視野変更によっても変わらないように調整することによって、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されることを実行する。
本開示のある実施形態において、内装変更後のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するか、または、内装変更前のアパートの三次元モデルの表示視野を、内装変更後のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するが、その調整は、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じ視野で同じスクリーンにリンクするように行われ、利用者は、内装変更前後でのアパートの2つの三次元モデル間の違いを視覚的に観察することにより、実際に内装効果が提示されているような感覚が得られる。
さらに、上述の各実施形態に基づいて、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得することは、具体的には、現在の三次元仮想空間に対応するアパートの三次元モデルの子ページを通じて、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得し、現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合、視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整し、具体的には、アパートの第1三次元モデルの子ページを通じて、視野変更情報を親ページに報告し、次に親ページは視野変更情報をアパートの第2三次元モデルの子ページに引き渡し、そこでアパートの第2三次元モデルの子ページは視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整し、現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合、視野変更情報に応じてアパートの第1三次元モデルの表示視野を調整し、具体的には、アパートの第2三次元モデルの子ページを通じて、視野変更情報を親ページに報告し、次に親ページは視野変更情報をアパートの第1三次元モデルの子ページに引き渡し、そこでアパートの第1三次元モデルの子ページは視野変更情報に応じてアパートの第1三次元モデルの表示視野を調整する、ことを含んでいる。当然ながら本開示はこれらに限定さるものではなく、親ページを経由せずに子ページ間で直接通信を行ってもよい。
親ページを経由せずに子ページ間で直接通信を行う場合、現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整することは、具体的には、アパートの第1三次元モデルの子ページを通じて、視野変更情報をアパートの第2三次元モデルの子ページに送信し、そこでアパートの第2三次元モデルの子ページは視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整することを含んでいる。親ページを経由せずに子ページ間で直接通信を行う場合、現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を調整することは、具体的には、アパートの第2三次元モデルの子ページを通じて、視野変更情報をアパートの第1三次元モデルの子ページに送信し、そこでアパートの第1三次元モデルの子ページは視野変更情報に応じてアパートの第1三次元モデルの表示視野を調整することを含んでいる。
子ページとは、利用者の端末においてアパートの各三次元モデルに対応する表示ページを指す。親ページとは、利用者の端末において各子ページを管理および制御するために用いられる管理ページを指す。本開示のある実施形態において、内装変更前後でのアパートの三次元モデルのページ同期は、親ページのリレー制御によって実現可能であり、あるいは、内装変更前後でのアパートの三次元モデルのページ同期は、親ページを経由せずに子ページ間で直接通信を行うことによって実現する。
現在の三次元仮想空間が内装変更前のアパートの三次元モデルに対応する場合、内装変更前のアパートの三次元モデルの子ページは、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得して、視野変更情報を親ページに報告し、次に親ページは、視野変更情報を内装変更後のアパートの三次元モデルの子ページに引き渡し、内装変更後のアパートの三次元モデルの子ページは、視野変更情報に応じて内装変更後のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように調整する。あるいは、内装変更前のアパートの三次元モデルの子ページは、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得して、視野変更情報を内装変更後のアパートの三次元モデルの子ページに直接送信し、内装変更後のアパートの三次元モデルの子ページは、視野変更情報に応じて内装変更後のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように調整する。
現在の三次元仮想空間が内装変更後のアパートの三次元モデルに対応する場合、内装変更後のアパートの三次元モデルの子ページは、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得して、視野変更情報を親ページに報告し、次に親ページは、視野変更情報を内装変更前のアパートの三次元モデルの子ページに引き渡し、内装変更前のアパートの三次元モデルの子ページは、視野変更情報に応じて内装変更前のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように調整する。あるいは、内装変更後のアパートの三次元モデルの子ページは、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得して、視野変更情報を内装変更前のアパートの三次元モデルの子ページに直接送信し、内装変更前のアパートの三次元モデルの子ページは、視野変更情報に応じて内装変更前のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように調整する。
上述の各実施形態に基づいて、本開示のある実施形態において、親ページを用いて、内装変更前のアパートの三次元モデルの子ページと内装変更後のアパートの三次元モデルの子ページとを制御して(または、内装変更前のアパートの三次元モデルの子ページと内装変更後のアパートの三次元モデルの子ページとの間で直接通信を行って)、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるようにすることにより、同じスクリーン上に同じ角度で表示する制御の簡便性と信頼性を向上できる。
さらに、上述の各実施形態に基づいて、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得する前に、本方法はさらに、アパートの第1三次元モデルを表示して、アパートの第1三次元モデルの視野情報を取得して、アパートの第2三次元モデルをバックエンドサーバーから取得して、アパートの第1三次元モデルの視野情報に応じてアパートの第2三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する、あるいは、アパートの第2三次元モデルを表示して、アパートの第2三次元モデルの視野情報を取得して、アパートの第1三次元モデルをバックエンドサーバーから取得して、アパートの第2三次元モデルの視野情報に応じてアパートの第1三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する、ことを含み、視野情報は地点位置情報と視線方向情報とを含んでいる。
上述したように、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じ視野で同じスクリーンにリンクする前に、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルは同じスクリーン上で同じ視野で表示されている。よって、上述の各実施形態に基づいて、本開示のある実施形態は、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが最初に同じスクリーン上で同じ視野で表示されているという実施形態を提供するであろう。
利用者の端末のアプリにおいて、利用者は、対応するアパートの三次元モデルの表示を実現させるために、アパートのある三次元モデルをクリックすることによって、散策あるいは一見を行うためのアパートの三次元モデルの仮想空間に入ることができる。例えば、利用者は、内装変更前のアパートの三次元モデルをクリックすることによって、内装変更前のアパートの三次元モデルの表示を実現可能であり、あるいは、内装変更後のアパートの三次元モデルをクリックすることによって、内装変更後のアパートの三次元モデルの表示を実現可能である。内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルは両方ともバックエンドサーバー内に保存され、利用者の端末は、バックエンドサーバーに、対応する三次元モデルを表示させる要求命令を送信可能である。
利用者の端末が内装変更前のアパートの三次元モデルの表示要求情報を取得した(例えば、内装変更前のアパートの三次元モデル上で利用者がクリックした情報を取得した)場合、内装変更前のアパートの三次元モデルが表示される。内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルとの表示を同じスクリーン上で同じ視野で実現させるためには、内装変更前のアパートの三次元モデルを表示させた後に、利用者の端末は、内装変更前のアパートの三次元モデルの視野情報(表示視野の情報)を取得して、バックエンドサーバーから内装変更後のアパートの三次元モデルを取得して、内装変更前のアパートの三次元モデルの視野情報に応じて、内装変更後のアパートの三次元モデルを、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。
具体的には、内装変更前のアパートの三次元モデルの視野情報を、内装変更前のアパートの三次元モデルの子ページを通じて親ページに送信してもよく、次に親ページは、内装変更前のアパートの三次元モデルの視野情報を内装変更後のアパートの三次元モデルの子ページに引き渡し、内装変更後のアパートの三次元モデルの子ページは、内装変更前のアパートの三次元モデルの視野情報に応じて、内装変更後のアパートの三次元モデルを、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。あるいは、内装変更前のアパートの三次元モデルの視野情報を、内装変更前のアパートの三次元モデルの子ページを通じて、内装変更後のアパートの三次元モデルの子ページに直接送信してもよく、内装変更後のアパートの三次元モデルの子ページは、内装変更前のアパートの三次元モデルの視野情報に応じて、内装変更後のアパートの三次元モデルを、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。
利用者の端末が内装変更後のアパートの三次元モデルの表示要求情報を取得した(例えば、内装変更後のアパートの三次元モデル上で利用者がクリックした情報を取得した)場合、内装変更後のアパートの三次元モデルが表示される。内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルとの表示を同じスクリーン上で同じ視野で実現させるためには、内装変更後のアパートの三次元モデルを表示させた後に、利用者の端末は、内装変更後のアパートの三次元モデルの視野情報(表示視野の情報)を取得して、バックエンドサーバーから内装変更前のアパートの三次元モデルを取得して、内装変更後のアパートの三次元モデルの視野情報に応じて、内装変更前のアパートの三次元モデルを、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。
具体的には、内装変更後のアパートの三次元モデルの視野情報を、内装変更後のアパートの三次元モデルの子ページを通じて親ページに送信してもよく、次に親ページは、内装変更後のアパートの三次元モデルの視野情報を内装変更前のアパートの三次元モデルの子ページに引き渡し、内装変更前のアパートの三次元モデルの子ページは、内装変更後のアパートの三次元モデルの視野情報に応じて、内装変更前のアパートの三次元モデルを、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。あるいは、内装変更後のアパートの三次元モデルの視野情報を、内装変更後のアパートの三次元モデルの子ページを通じて、内装変更前のアパートの三次元モデルの子ページに直接送信してもよく、内装変更前のアパートの三次元モデルの子ページは、内装変更後のアパートの三次元モデルの視野情報に応じて、内装変更前のアパートの三次元モデルを、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。
上述の各実施形態に基づいて、本開示のある実施形態において、内装変更後のアパートの三次元モデルを内装変更前のアパートの三次元モデルの視野情報に応じて表示するか、または、内装変更前のアパートの三次元モデルを内装変更後のアパートの三次元モデルの視野情報に応じて表示して、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが最初に同じスクリーン上で同じ視野で表示されるようにする。
さらに、上述の各実施形態に基づいて、アパートの第1三次元モデルの視野変更情報を取得する前に、本方法はさらに、プリセットされた起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したと判定されれば、アパートの第1三次元モデルの視野情報を取得する動作を行う、ことを含み、また、アパートの第2三次元モデルの視野変更情報を取得する前に、本方法はさらに、プリセットされた起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したと判定されれば、アパートの第2三次元モデルの視野情報を取得する動作を行う、ことを含む。
内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルを最初に同じスクリーン上で同じ視野で表示することは、プリセットされた起動条件によって起動されてもよい。
利用者の端末が内装変更前のアパートの三次元モデルの表示要求情報を取得した場合、内装変更前のアパートの三次元モデルを表示して、プリセットされた起動情報を受信したかどうかを判定するが、ここで、プリセットされた起動情報は、利用者がプリセットボタン(例えば、内装変更前後に同じスクリーン上で表示するためのボタン)をクリックしたという情報であってもよい。プリセットされた起動情報を受信したと判定されれば、内装変更前のアパートの三次元モデルの視野情報を取得して、内装変更後のアパートの三次元モデルをバックエンドサーバーから取得し、内装変更後のアパートの三次元モデルを、内装変更前のアパートの三次元モデルの視野情報に応じて、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。プリセットされた起動情報を受信していないと判定されれば、内装変更前のアパートの三次元モデルのみを表示する。
利用者の端末が内装変更後のアパートの三次元モデルの表示要求情報を取得した場合、内装変更後のアパートの三次元モデルを表示して、プリセットされた起動情報を受信したかどうかを判定するが、ここで、プリセットされた起動情報は、利用者がプリセットボタン(例えば、内装変更前後に同じスクリーン上で表示するためのボタン)をクリックしたという情報であってもよい。プリセットされた起動情報を受信したと判定されれば、内装変更後のアパートの三次元モデルの視野情報を取得して、内装変更前のアパートの三次元モデルをバックエンドサーバーから取得し、内装変更前のアパートの三次元モデルを、内装変更後のアパートの三次元モデルの視野情報に応じて、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する。プリセットされた起動情報を受信していないと判定されれば、内装変更後のアパートの三次元モデルのみを表示する。
上述の各実施形態に基づいて、本開示のある実施形態において、プリセットされた起動情報を受信した後に、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルを同じスクリーン上で同じ視野で表示することにより、表示制御の自由度が向上する。
さらに、上述の各実施形態に基づいて、本方法はさらに、バックエンドサーバーによって、アパートの第1三次元モデルに応じて、プリセットされたアパート情報を取得し、プリセットされたアパート情報は、アパートレイアウト情報、階層の高さ情報、及び地点位置情報を含んでおり、プリセットされたアパート情報に応じて、アパートの第1三次元モデルに対応する空のアパートの三次元モデルを作成し、空のアパートの三次元モデルに家具や機器の三次元モデルを追加してアパートの第2三次元モデルを作成し、アパートの第1三次元モデルとアパートの第2三次元モデルとを対応させて保存する、ことを含む。
上述したように、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルはバックエンドサーバー内に保存されている。内装変更前のアパートの三次元モデルは、例えば、実際のアパートの三次元の点群データを取得して三次元モデル化するというようなステップにより実施されている。上述の各実施形態に基づいて、本開示のある実施形態は、バックエンドサーバーが内装変更後のアパートの三次元モデルを取得することを提供するであろう。
バックエンドサーバーは、内装変更前のアパートの三次元モデルに応じて、プリセットされたアパート情報を取得し、プリセットされたアパート情報は、アパートレイアウト情報、階層の高さ情報、及び地点位置情報含んでいる。アパートレイアウト情報はアパートレイアウト画像に応じて取得することもできることは理解されよう。バックエンドサーバーは、プリセットされたアパート情報に応じて、内装変更前のアパートの三次元モデルに対応する空のアパートの三次元モデルを作成する。空のアパートの三次元モデルは、内装変更前のアパートの三次元モデルに対応する実際のアパートのアパートレイアウトと階層の高さに応じて作成され、内装変更前のアパートの三次元モデルの地点位置情報に応じて、地点位置情報に対して変わらない配置を行う。また、空のアパートの三次元モデルは、フロアの内装情報等の事前の住居内装情報を含んでいてもよい。
家具や機器の三次元モデルは、サードパーティから取得してもよいし、多数の実際のアパートの点群データから抽出してもよい。対応する家具や機器の三次元モデルは、アパートレイアウト等の情報に応じて空のアパートの三次元モデルに追加され、家具や機器の各々の三次元モデルは、対応する位置に配置される。例えば、内装変更後のアパートの三次元モデルを作成するために、ソファの三次元モデルはリビングルームに配置される。バックエンドサーバーは、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルとを対応させて保存し、同じスクリーン上で同じ視野で表示されるようにする。
上述の各実施形態に基づいて、本開示のある実施形態において、空のアパートの三次元モデルを、内装変更前のアパートの三次元モデルのプリセットされたアパート情報に応じて作成し、次に、空のアパートの三次元モデルに家具や機器の三次元モデルを追加して、内装変更後のアパートの三次元モデルを、内装変更後のアパートの三次元モデルを効果的に取得するように作成することによって、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルを同じスクリーン上で同じ視野で表示するための基礎を提供する。
さらに、上述の各実施形態に基づいて、空のアパートの三次元モデルに家具や機器の三次元モデルを追加することは、具体的には、空のアパートの三次元モデルに、対応する家具や機器の三次元モデルを自動的に追加することを含み、ここで家具や機器の三次元モデルはあらかじめ作成されている三次元モデルである。
家具や機器の三次元モデルはあらかじめ作成されている三次元モデルである。内装変更後のアパートの三次元モデルを得るために、家具や機器の三次元モデルを、人工知能を用いた手法で空のアパートの三次元モデルに追加してもよいし、また、家具や機器の三次元モデルを手作業で追加してもよい。
家具や機器の三次元モデルを人工知能を用いた手法で空のアパートの三次元モデルに追加する場合、機械学習や訓練を用いて、家具や機器を追加するモデルを得る必要がある。訓練サンプルには、内装変更後のアパートの三次元モデルを出力として用いて、空のアパートの三次元モデルや、内装変更後のアパートの三次元モデルに対応する、空のアパート内の家具や機器の三次元モデルを入力として用いる。家具や機器を追加するモデルは、多数の訓練サンプルから、機械学習や訓練を用いて得られ、内装変更後のアパートの三次元モデルを生成するためには、家具や機器を追加するモデルを用いて、空のアパートの三次元モデルに対応する家具や機器の三次元モデルを自動的に追加する。
本開示のある実施形態において、内装変更後のアパートの三次元モデルを生成するために、空のアパートの三次元モデルに対応する家具や機器の三次元モデルを自動的に追加することによって、内装変更後のアパートの三次元モデルを作成する効率が向上する。
さらに、上述の各実施形態に基づいて、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルの両方が、VR画像、三次元モデル画像、及びアパートレイアウト画像の表示の切り替えを実現可能である。
図6は、本開示の別の実施形態で提供された、内装変更前後でのアパートの三次元モデルを同じスクリーン上で表示させる方法のフローチャートである。図6に示されているように、本開示のある実施形態で提供された、内装変更前後でのアパートの三次元モデルを同じスクリーン上で表示させる方法は、内装変更前後の比較を簡便に実行可能である。本方法は、アパートのデータを取得するステップ601と、比較モデルを入力するステップ602と、座標と視線とを同期させるステップ603と、即時性と同時性を特徴とする、フロントエンドで同時に提示するステップ604とを含んでいる。
まず、既存のアパートのアパートレイアウト画像等のデータに応じて、空の三次元モデルをバックエンドで作成し、次に、既存の家具モデルを三次元モデル内に配置して、アパートの既存の三次元モデルに応じた内装変更後の三次元モデルを作成して、その後、この2つの既存モデルをバックエンドに入力する。特に、荒仕上げのアパートや簡単に内装変更されたアパートのような、内装変更前後の対比が明確なアパートにとって、対比が明確であるこの2つの三次元空間があることによって、利用者に、より分かりやすく視覚化された情報を提供することができる。
利用者が三次元空間内を散策あるいは一見するときに、フロントエンドは、内装変更前後での2つのモデルを同じスクリーン上で提示しやすくするために、現在の視野画面内部における利用者の座標と視線を分析して、三次元モデルにおける利用者の地点位置を特定し、2つの三次元モデルの同期を起動させる必要がある。例えば、利用者が1つの子ページにおいて視野を回転させると、視野が回転した子ページが視野の変更を親ページに報告し、次に親ページが、全ての子ページと状況の同期を実行するために、視野の変更を全ての子ページに引き渡す、あるいは、視野が回転した子ページが、全ての子ページと状況の同期を実行するために、視野の変更を他の子ページに直接送信する。また、利用者は、同じスクリーン上にある2つのウィンドウの両方において相互連携を行い、利用者が有する要望に応じて対応するモデルをクリックして眺めたり比較したりすることができる。
既存のVRによるアパート内見に基づいて、アパートモデルの内装変更前後での同期比較を実現するために、本開示のある実施形態において、フロントエンドの1つのスクリーン上には2つのウィンドウが存在して異なるコンテンツを提示しており、利用者の座標及び視野は異なる三次元空間内で同期されていることによって、2つの三次元モデルのリンクが実現されている。
本開示のある実施形態において、VRデータ、アパートのデータ、アパートレイアウトデータ、及び内装データを取得することによって、内装変更後の三次元モデルを、既存のアパートのデータに基づいて、インテリジェントな手法であらかじめ作成し、バックエンドへと入力する。フロントエンドでは、利用者が触れた子ページの状況を親ページにアップロードし、次に親ページはその状況を他の子ページに引き渡して(もしくは利用者が触れた子ページの状況を他の子ページに直接送信して)、視野の同期、パノラマ/モデルの切り替え、及び地点位置の切り替えによって、三次元空間での情報提示の同期性を保証する。
図7は、本開示のある実施形態で提供された、内装変更前後でのアパートの三次元モデルを、同じスクリーン上で表示させる装置の構造概略図である。図7に示されているように、内装変更前後でのアパートの三次元モデルを同じスクリーン上で表示させる装置700は、視野変更情報取得モジュール701と、第1表示モジュール702と、第2表示モジュール703とを有している。視野変更情報取得モジュール701は、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得し、視野変更情報は地点位置変更情報及び/または視線方向変更情報を含んでいるように構成されている。第1表示モジュール702は、現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている。第2表示モジュール703は、現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されていて、ここで、利用者の視野が変わる前に、第1アパートモデルと第2アパートモデルは既に同じスクリーン上に同じ視野で表示されており、アパートの第1三次元モデルは現在のアパートの三次元モデルであって、アパートの第2三次元モデルは推奨内装効果がロードされた後に得られる内装変更されたアパートの三次元モデルである。内装変更前後でのアパートの三次元モデルを同じスクリーン上で表示させる装置700は、上記で記載されている利用者の端末のいずれかであってもよい。
本開示のある実施形態において、内装変更後のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するか、または、内装変更前のアパートの三次元モデルの表示視野を、内装変更後のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するが、その調整は、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じ視野で同じスクリーンにリンクするように行われ、利用者は、アパートの内装変更前後での2つ三次元モデルの違いを視覚的に観察することにより、実際に内装効果が提示されているような感覚が得られる。
さらに、上述の各実施形態に基づいて、視野変更情報取得モジュール701は、具体的には、現在の三次元仮想空間に対応するアパートの三次元モデルの子ページを通じて、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得するように構成されている。第1表示モジュール702は、現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、アパートの第1三次元モデルの子ページを通じて、視野変更情報を親ページに報告し、次に親ページは視野変更情報をアパートの第2三次元モデルの子ページに引き渡し、そこでアパートの第2三次元モデルの子ページは視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている。第2表示モジュール703は、現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、アパートの第2三次元モデルの子ページを通じて、視野変更情報を親ページに報告し、次に親ページは視野変更情報をアパートの第1三次元モデルの子ページに引き渡し、そこでアパートの第1三次元モデルの子ページは視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている。
他の実施形態では、第1表示モジュール702は、現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、アパートの第1三次元モデルの子ページを通じて、視野変更情報をアパートの第2三次元モデルの子ページに直接送信し、そこでアパートの第2三次元モデルの子ページは視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている。第2表示モジュール703は、現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、アパートの第2三次元モデルの子ページを通じて、視野変更情報をアパートの第1三次元モデルの子ページに直接送信し、そこでアパートの第1三次元モデルの子ページは視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている。
上述の各実施形態に基づいて、本開示のある実施形態において、親ページを用いて、内装変更前のアパートの三次元モデルの子ページと内装変更後のアパートの三次元モデルの子ページとを制御して(または、内装変更前のアパートの三次元モデルの子ページと内装変更後のアパートの三次元モデルの子ページとの間で直接通信を行って)、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じスクリーン上で同じ視野で表示されるようにすることにより、同じスクリーン上に同じ視野で表示することの制御の簡便性と信頼性を向上できる。
さらに、上述の各実施形態に基づいて、第1表示モジュール702はさらに、アパートの第1三次元モデルを表示して、アパートの第1三次元モデルの視野情報を取得して、アパートの第2三次元モデルをバックエンドサーバーから取得して、アパートの第1三次元モデルの視野情報に応じてアパートの第2三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように表示するように構成されている。第2表示モジュール703はさらに、アパートの第2三次元モデルを表示して、アパートの第2三次元モデルの視野情報を取得して、アパートの第1三次元モデルをバックエンドサーバーから取得して、アパートの第2三次元モデルの視野情報に応じてアパートの第1三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように表示し、視野情報は地点位置情報と視線方向情報とを含んでいるように構成されている。
上述の各実施形態に基づいて、本開示のある実施形態において、内装変更後のアパートの三次元モデルを内装変更前のアパートの三次元モデルの視野情報に応じて表示するか、または、内装変更前のアパートの三次元モデルを内装変更後のアパートの三次元モデルの視野情報に応じて表示して、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが最初に同じスクリーン上で同じ視野で表示されるようにする。
さらに、上述の各実施形態に基づいて、第1表示モジュール702はさらに、プリセットされた起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したと判定されれば、アパートの第1三次元モデルの視野情報を取得する動作を行うように構成されている。第2表示モジュール703はさらに、プリセットされた起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したと判定されれば、アパートの第2三次元モデルの視野情報を取得する動作を行うように構成されている。
上述の各実施形態に基づいて、本開示のある実施形態において、プリセットされた起動情報を受信した後に、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルを同じスクリーン上で同じ視野で表示することにより、表示制御の柔軟性が向上する。
図8は、本開示のある実施形態で提供された、内装変更前後でのアパートの三次元モデルを、同じスクリーン上で表示させるシステムの構造概略図である。図8に示されているように、本システムは、内装変更前後でのアパートの三次元モデルを同じスクリーン上で表示させる装置700と、バックエンドサーバー800とを有している。バックエンドサーバー800は具体的には、アパートの第1三次元モデルに応じてプリセットされたアパート情報を取得し、プリセットされたアパート情報は、アパートレイアウト情報、階層の高さ情報、及び地点位置情報を含んでおり、プリセットされたアパート情報に応じて、アパートの第1三次元モデルに対応する空のアパートの三次元モデルを作成し、空のアパートの三次元モデルに家具や機器の三次元モデルを追加してアパートの第2三次元モデルを作成し、アパートの第1三次元モデルとアパートの第2三次元モデルとを対応させて保存するように構成されている。
本開示のある実施形態において、内装変更後のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するか、または、内装変更前のアパートの三次元モデルの表示視野を、内装変更後のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するが、その調整は、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じ視野で同じスクリーンにリンクするように行われ、利用者は、アパートの内装変更前後での2つ三次元モデルの違いを視覚的に観察することにより、実際に内装効果が提示されているような感覚が得られる。
さらに、上述の各実施形態に基づいて、バックエンドサーバー800はさらに、対応する家具や機器の三次元モデルを空のアパートの三次元モデルに自動的に追加し、家具や機器の三次元モデルはあらかじめ作成されている三次元モデルであるように構成されている。
上述の各実施形態に基づいて、本開示のある実施形態において、空のアパートの三次元モデルを、内装変更前のアパートの三次元モデルのプリセットされたアパート情報に応じて作成し、次に、対応する家具や機器の三次元モデルを空のアパートの三次元モデルに自動的に追加して、内装変更後のアパートの三次元モデルを作成することによって、内装変更後のアパートの三次元モデルを迅速かつ効果的に取得する。
本開示のある実施形態で提供された装置及びシステムは、上述の方法に適用されている。特定の機能の場合、上記に記載されている方法のフローを参照することができる。詳細は本明細書では繰り返し記載しない。
本開示を実施する過程において、発明者はまた、従来の内装手法では、経験豊かなプロのデザイナーに改装デザインの提案を要求し、一般の居住者はそのような知識に堪能ではないことが多いので、家具レイアウトの効果はプロのデザイナーに大きく依存することになるが、これは図面設計に多くの時間を費やし、デザイナーの資源の多数を占めることも分かっている。さらに、デザイン工程は長時間かかり、煩雑でコスト高である。
本開示にて提供されたアパートレイアウトに基づいて家具配置プランを作成する方法では、ニューラルネットワークモデルを得るために、訓練サンプルセットを作成してニューラルネットワークを訓練し、そのニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて、内装変更予定のアパートレイアウト画像を処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得するが、利用者のアパートレイアウトに対応する家具配置プランは、インテリジェントな手法で作成可能である。
図9は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態のフローチャートである。図9に示されている方法はS901からS903までのステップを有している。これらのステップを以下に個別に説明する。
S901は、第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得するステップである。
第1サンプルアパートレイアウト画像は、CADモデル化ツール等を用いて生成したサンプルアパートレイアウト画像であり得る。サンプルアパートレイアウト画像はベクトル図等であってもよい。サンプルアパートレイアウト画像内には複数のアパートレイアウト要素が存在しており、サンプルアパートレイアウト画像にはアパートレイアウト構造データが与えられている。第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得し、このサンプルアパートレイアウト構造データは、アパートレイアウトのための、壁形状データ、耐力壁形状データ、扉と窓の形状データ、エリアデータ、階層の高さデータ、及び位置座標データ等を含んでいる。
S902は、家具が既に配置されていて第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得し、第2サンプルアパートレイアウト画像内に配置されている家具に注釈をつけて、第1家具情報を生成するステップである。
第2サンプルアパートレイアウト画像は、家具が既に配置されていて第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト画像であり、家具はテーブル、ベッド、機器等であってもよい。第2サンプルアパートレイアウト画像には手作業で注釈をつけてもよく、ここで第1家具情報は、家具カテゴリー、配置位置、向き、スタイル、寸法等を含んでおり、または、第2サンプルアパートレイアウト画像はスコアリングされてもよい。
S903は、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する。
内装変更予定のアパートレイアウト画像を処理する方法が複数存在してもよい。例えば、訓練サンプルセットを、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて作成してもよい。ニューラルネットワークを訓練サンプルに応じて訓練することによって、ニューラルネットワークモデルが得られる。複数のタイプのニューラルネットワークモデルが存在してもよい。内装変更予定のアパートレイアウト画像をニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する。
内装変更予定のアパートレイアウト画像は利用者が提供した内装変更予定のアパートレイアウト画像であってもよく、内装変更予定のアパートレイアウト画像を、訓練されたニューラルネットワークモデルとプリセットされた家具配置決定ルールとを用いて処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する。1つ以上の家具配置プランが存在していてもよい。家具配置プランは、内装変更予定のアパートレイアウト画像内でのテーブルやベッドや機器等の家具の配置位置を提示するのに用いられる家具配置画像、家具提示情報等を含んでいる。
上記では説明のために第1サンプルアパートレイアウト画像のサンプルアパートレイアウト構造データを取得して第2サンプルアパートレイアウト画像の第1家具情報を生成する例を用いているが、本開示はこれに限定されない。例えば、第1及び第2サンプルアパートレイアウト画像のサンプルアパートレイアウト構造データが取得可能であり、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて訓練サンプルセットを作成するために、第1及び第2サンプルアパートレイアウト画像の第1家具情報を生成する。
本開示のいくつかの実施態様によれば、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得した後、家具配置プランに応じた内装変更予定のアパートレイアウト画像のために、内装変更されたアパートの対応する三次元モデル(つまり三次元空間パノラマ画像)を作成可能である。
本開示のいくつかの実施態様によれば、家具配置決定ルールは、「各部屋に割り当てられた中核的機能」ルール、例えばダイニングテーブルはリビングルームと台所のどちらに置くべきか、及び、洗濯機は浴室とバルコニーのどちらに置くべきか、といったルールであり得る。
図10は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態のフローチャートである。図10に示されている方法はS1001からS1004までのステップを有している。これらのステップを以下に個別に説明する。
S1001は、内装変更予定のアパートレイアウト画像に対応する内装変更されたアパートレイアウト構造データを取得するステップである。
利用者は、フロントエンドページを通じて、内装変更予定のアパートレイアウト画像を入力または選択できる。利用者が入力した内装変更予定のアパートレイアウト画像は、CADモデル化ツール等を用いて生成したアパートレイアウト画像であってもよい。内装変更予定のアパートレイアウト画像はベクトル図等であってもよく、これにより、内装変更されたアパートレイアウト構造データを内装変更予定のアパートレイアウト画像から取得可能である。
利用者が入力した内装変更予定のアパートレイアウト画像がCADモデル化ツール等を用いて生成したアパートレイアウト画像ではない場合は、利用者が入力した内装変更予定のアパートレイアウト画像に対応するサンプルアパートレイアウト画像を保存されているサンプルアパートレイアウト画像から探し出して、サンプルアパートレイアウト画像から内装変更されたアパートレイアウト構造データを取得する。内装変更されたアパートレイアウト構造データは、アパートレイアウトの壁形状データ、耐力壁形状データ、扉と窓の形状データ、エリアデータ、階層の高さデータ、及び位置座標データ等を含んでいる。
S1002は、内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データとをニューラルネットワークモデルに入力して、ニューラルネットワークモデルが出力した内装変更予定のアパートレイアウト画像に対応する家具配置情報と、家具配置情報に対応する第2家具情報とを取得するステップである。複数のタイプの家具配置情報が存在してもよく、第2家具情報は、家具カテゴリー、配置位置、向き、スタイル、寸法等を含んでいる。
S1003は、家具配置情報を家具配置決定ルールを用いて処理することによって、家具配置画像を取得するステップである。
S1004は、第2家具情報に基づいて家具配置画像内に配置されている家具に対応する提示情報を取得するステップである。提示情報は、家具カテゴリー、配置位置、向き、スタイル、寸法等を含んでいて、家具配置決定ルールを用いて家具配置情報から選択した家具が実際に配置されている提示情報である。
一実施形態において、家具配置情報は、ニューラルネットワークモデルが出力した家具配置ヒートマップ等であってもよく、家具配置ヒートマップは、内装変更予定のアパートレイアウト画像内への配置が推奨される家具の位置情報、配置が推奨される家具に対応する配置確率等を含んでいる。例えば、家具配置ヒートマップは、内装変更予定のアパートレイアウト画像内への配置が推奨されるベッドやテーブルといった家具の位置情報、その位置への配置が推奨されるベッドやテーブルといった家具の配置確率、及び/または、配置が推奨されるベッドやテーブルといった家具の提示情報を含んでいる。
例えば、配置が推奨される家具に対応するエネルギー関数を、家具配置位置関係に応じて取得してもよく、エネルギー関数に基づいて制約条件を規定する。家具配置ヒートマップをモンテカルロ探索木アルゴリズムを用いて走査して、制約条件に合う家具配置画像を取得するが、ここで家具配置画像内に配置される家具の個数はプリセットされた数の範囲内である。
例えば、壁や配置が推奨される他の家具に対する、配置が推奨される家具の配置位置が取得可能であり、配置位置に基づいてエネルギー関数E(x)が規定される。家具配置ヒートマップをモンテカルロ探索木アルゴリズムを用いて走査するが、ここでmin(ΣE(x))は制約条件である。
モンテカルロ木探索は、ランダムサンプリングまたは統計的検定方法とも称される。実際の物理的現象のシミュレーションを正確に行うことができるので、モンテカルロ木探索方法は、確率と統計学の理論方法に基づく算定方法として、乱数に関する多くの計算問題を解決する方法である。解くべき問題をある確率モデルに結び付けることによって、この問題の近似的な解を取得する。モンテカルロ探索アルゴリズムを用いてモンテカルロ探索木を走査して、家具配置ヒートマップ内への配置が推奨される家具を、実際に配置する家具として選択する。つまり、構築されたモンテカルロ探索木から、制約条件に合う実際に配置する家具を選択して、同時に、実際に配置する選択された家具のすべてに対応する全体の配置確率を最大化し、家具配置画像内に配置された家具数はプリセットされた数の範囲内である。例えば、全体の配置確率は、実際に配置する全ての家具の配置確率の和、加重和、等であってもよい。
一実施形態において、ニューラルネットワークモデルを、複数のアルゴリズムモデルを用いて確立してもよく、例えば、残差ネットワークResNet/DenseNetを用いてニューラルネットワークモデルを確立する。残差ニューラルネットワーク(ResNet)の構成は、ニューラルネットワークの訓練を迅速に加速することが可能であり、モデルの精度も大幅に向上する。
例えば、ニューラルネットワークモデルは、入力レイヤーニューロンモデル、中間レイヤーニューロンモデル、及び出力レイヤーニューロンモデルを有している。各レイヤーでのニューロンモデルの出力は、次のレイヤーでのニューロンモデルの入力として使用される。ニューラルネットワークモデルは、完全に接続された構造を有する複数のニューラルネットワークレイヤーのサブネットワーク構造であり得る。中間レイヤーニューロンモデルは完全に接続されたレイヤーである。
訓練サンプルセットを、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて作成して、訓練サンプルに従ってニューラルネットワークを訓練することにより、ニューラルネットワークモデルが得られる。多数の訓練サンプルを用いて深度アルゴリズムモデルを訓練することによって、訓練されたニューラルネットワークモデルを取得する。
内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データとを訓練されたニューラルネットワークモデルに入力して、ニューラルネットワークモデルによって家具配置ヒートマップを出力するが、家具配置ヒートマップは、内装変更予定のアパートレイアウト画像内への配置が推奨されるベッドやテーブルといった家具の位置情報、その位置への配置が推奨されるベッドやテーブルといった家具の配置確率等を含んでいる。
図11は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態で、家具配置を最適化するフローチャートである。図11に示されている方法はS1101からS1102までのステップを有している。これらのステップを以下に個別に説明する。
S1101は、プリセットされた家具の組み合わせ方針と提示情報に基づいて、家具配置画像内に配置された家具に対応する補完的な品目を決定するステップである。
家具組み合わせ方針は家具組み合わせアルゴリズム等を含む。補完的な品目は、家具、寝具類、装飾物品等であってもよい。例えば、家具配置画像内に配置されたベッドの場合、配置されたベッドに対応する補完的な品目は、家具組み合わせアルゴリズムに基づいてベッドサイドキャビネットであると決定され、ベッドサイドキャビネットのスタイル、寸法等はベッドの提示情報に基づいて決定される。
S1102は、プリセットされた家具配置方針と内装変更されたアパートレイアウト構造データに基づいて、家具配置画像内に配置された家具と対応する補完的な品目の配置位置を最適化するステップであり、家具配置方針は壁面設置方針、床面設置方針等を含む。
壁面設置方針は壁面設置アルゴリズムであってもよく、床面設置方針は床面設置アルゴリズムであってもよい。家具配置画像内に配置された家具と対応する補完的な品目の配置位置は、壁面設置方針や床面設置方針に基づいて、内装変更されたアパートレイアウト構造データに応じて最適化される。
図12は、本開示における、アパートレイアウトに基づいて家具配置プランを作成する方法のある実施形態で、三次元レンダリングモデルを作成するフローチャートである。図12に示されている方法はS1201からS1204までのステップを有している。これらのステップを以下に個別に説明する。
S1201は、内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データに応じて、三次元アパートレイアウトモデルを作成するステップである。
三次元アパートレイアウトモデルは、例えばCADモデル化ツールといった複数のモデル化ツールを用いて、内装変更予定のアパートレイアウト画像及び内装変更されたアパートレイアウト構造データに応じて作成してもよい。
S1202は、提示情報に応じて、家具配置画像内に配置された家具と補完的な品目とに対応する三次元家具モデルを作成するステップである。
家具配置画像内に配置された家具と補完的な品目との三次元家具モデルは、CADモデル化ツール等の複数のモデル化ツールを用いて、提示情報に応じて作成可能である。
S1203は、三次元アパートレイアウトモデルと三次元家具モデルとに対して、家具配置画像に応じて組み合わせ処理を行って、三次元アパート内装モデルを作成するステップである。三次元家具モデルは、家具配置画像に応じて、三次元アパートレイアウトモデル内の指定された領域に配置される。
S1204は、提示情報に応じて内装スタイルを決定し、三次元アパート内装モデルに対して、内装スタイルに基づいてレンダリング処理を行うステップである。これにより、内装変更されたアパートの三次元モデルが作成される。
異なる内装スタイルで家具配置、壁や床の舗装、扉と窓で空間を満たしてレンダリングした効果を実現することができ、その効果をフロントエンドページを通じて利用者に表示することができる。内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得して、家具配置プランに対応するレンダリングされた三次元仮想空間のパノラマ画像を生成する。利用者は、フロントエンドに提示されたレンダリングされた三次元仮想空間のパノラマ画像内を散策可能であり、アパート設計プランを全方位で閲覧可能である。最終的に、利用者自身のアパートレイアウトに基づいた内装プランの閲覧が実現される。
一実施形態において、図13Aに示されているように、本開示は、アパートレイアウトに基づいて家具配置プランを作成する装置を提供し、本装置は、アパートレイアウトデータ取得モジュール1301と、家具情報注釈付与モジュール1302と、配置プラン取得モジュール1305とを有している。アパートレイアウトデータ取得モジュール1301は、第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得する。家具情報注釈付与モジュール1302は、家具が既に配置されていて第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得し、第2サンプルアパートレイアウト画像内に配置されている家具に注釈をつけて、第1家具情報を生成する。配置プラン取得モジュール1305は、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する。
一実施形態において、図13Bに示されているように、アパートレイアウトに基づいて家具配置プランを作成する装置はさらに、訓練サンプル作成モジュール1303とモデル訓練モジュール1304とを有している。訓練サンプル作成モジュール1303は、訓練サンプルセットを、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて作成する。モデル訓練モジュール1304は、訓練サンプルに従ってニューラルネットワークを訓練して、ニューラルネットワークモデルを得る。配置プラン取得モジュール1305は、ニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて、内装変更予定のアパートレイアウト画像を処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する。
一実施形態において、アパートレイアウトデータ取得モジュール1301は、内装変更予定のアパートレイアウト画像に対応する内装変更されたアパートレイアウト構造データを取得する。配置プラン取得モジュール1305は、内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データとをニューラルネットワークモデルに入力して、ニューラルネットワークモデルが出力した内装変更予定のアパートレイアウト画像に対応する家具配置情報と、家具配置情報に対応する第2家具情報とを取得する。配置プラン取得モジュール1305は、家具配置決定ルールを用いて家具配置情報を処理することによって、家具配置画像を取得し、第2家具情報に基づいて、家具配置画像内に配置されている家具に対応する提示情報を取得する。
家具配置情報は家具配置ヒートマップを含んでおり、家具配置ヒートマップは、内装変更予定のアパートレイアウト画像内への配置が推奨される家具の位置情報と、配置が推奨される家具に対応する配置確率とを含んでいる。配置プラン取得モジュール1305は、配置が推奨される家具に対応するエネルギー関数を、家具配置位置関係に応じて取得して、エネルギー関数に基づいて制約条件を規定する。配置プラン取得モジュール1305は、家具配置ヒートマップをモンテカルロ探索木アルゴリズムを用いて走査して、制約条件に合う家具配置画像を取得するが、ここで家具配置画像内に配置される家具の個数はプリセットされた数の範囲内である。
一実施形態において、図14に示されているように、配置位置最適化モジュール1306は、プリセットされた家具の組み合わせ方針と提示情報に基づいて、家具配置画像内に配置された家具に対応する補完的な品目を決定する。配置位置最適化モジュール1306は、プリセットされた家具配置方針に基づき、内装変更されたアパートレイアウト構造データに応じて、家具配置画像内に配置された家具と対応する補完的な品目の配置位置を最適化する。家具配置方針は壁面設置方針、床面設置方針等を含む。
提示モデル処理モジュール1307は、内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データに応じて、三次元アパートレイアウトモデルを作成し、提示情報に応じて、家具配置画像内に配置された家具と補完的な品目とに対応する三次元家具モデルを作成する。提示モデル処理モジュール1307は、三次元アパートレイアウトモデルと三次元家具モデルとに対して、家具配置画像に応じて組み合わせ処理を行って、三次元アパート内装モデルを作成し、提示情報に応じて内装スタイルを決定し、三次元アパート内装モデルに対して、内装スタイルに基づいてレンダリング処理を行う。
上述の各実施形態における、アパートレイアウトに基づいて家具配置プランを作成する方法、装置、電子デバイス、および記憶媒体によれば、訓練サンプルセットを、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて作成して、ニューラルネットワークを訓練することにより、ニューラルネットワークモデルを得る。内装変更予定のアパートレイアウト画像をニューラルネットワークモデルとプリセットされた家具配置決定ルールとを用いて処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する。利用者のアパートレイアウトに対応する家具配置プランがインテリジェントな手法で作成可能であり、利用者のアパートレイアウトに対応する三次元内装効果画像を生成可能であるので、利用者はアパートの内装プランを全方位で閲覧可能であり、デザイナーの資源やデザイン工程所要時間を節約することができて、利用者が適切な家具や内装プランを迅速かつ簡便に選択するのに役立ち、内装設計の工程を簡素化し、利用者が内装を決定しやすくなり、内装コストを低減することができる。
図15は、本開示の電子デバイス(つまり演算処理装置)の実施形態の構造概略図である。図15に示されているように、電子デバイス1501は1つ以上のプロセッサ1511とメモリ1512を有している。
プロセッサ1511は、中央演算処理装置(central processing unit:CPU)、またはデータ処理能力及び/または命令実行能力を有する他の形式の処理装置であってもよく、電子デバイス1501内の他の構成要素を制御して所望の機能を行ってもよい。
メモリ1512は1つ以上のコンピュータプログラム製品を有していてもよく、コンピュータプログラム製品は、様々な形式のコンピュータ可読記憶媒体、例えば揮発性メモリ及び/または不揮発性メモリを含んでいてもよい。揮発性メモリは例えば、ランダムアクセスメモリ(random access memory:RAM)及び/またはキャッシュ等を含んでいてもよい。不揮発性メモリは例えば、読み出し専用メモリ(read−only memory:ROM)、ハードディスク、フラッシュメモリ等を含んでいてもよい。コンピュータ可読記憶媒体には、1つ以上のコンピュータプログラム命令を保存してもよく、プロセッサ1511は、プログラム命令を実行して、本開示の上述の種々の実施形態におけるアパートレイアウト及び/または他の所望の機能に基づいて家具配置プランを作成する方法を実行可能である。入力信号、信号成分、及びノイズ成分といった様々なコンテンツもまた、コンピュータ可読記憶媒体に保存することができる。
1つの例において、電子デバイス1501はさらに、入力装置1513、出力装置1514等を有していてもよい。これらの要素は、バスシステム及び/または他の形式の接続機構(図示せず)を用いて相互接続している。また、入力装置1513はさらに、キーボード、マウス等を有していてもよい。出力装置1514は様々なタイプの情報を外部に出力してもよい。出力装置1514は例えば、ディスプレイ、スピーカー、プリンタ、通信ネットワーク、及びこれらに接続するリモート出力デバイス等を含んでいてもよい。
当然のこととして、簡単にするために、電子デバイス1501の構成要素のうち、本開示に関連するいくつかのみを図15に示しており、バスや入力/出力インターフェース等の要素は省略している。また、特定の用途の想定によっては、電子デバイス1501はさらに他の任意の適切な構成要素を有していてもよい。
上述の方法及び装置に加えて、本開示の各実施形態はまた、プロセッサによって実行されると、プロセッサが本明細書の「方法例」に記載されているステップを本開示の様々な実施形態に係るアパートレイアウトに基づいて家具配置プランを作成する方法において行うことを可能にするコンピュータプログラム命令を有しているコンピュータプログラム製品であってもよい。
コンピュータプログラム製品は、本開示の各実施形態の動作を行う1つ以上のプログラミング言語やプログラムコードの任意の組み合わせにおいて、書き込みによって得ることができ、ここでプログラミング言語は、例えばJava、C++といったオブジェクト指向のプログラミング言語を含み、さらには「C」言語や類似のプログラミング言語といった従来の手続き型プログラミング言語を含む。プログラムコードは、完全に利用者の演算デバイス上で実行されても、一部が利用者のデバイス上で実行されても、別個のソフトウェアパッケージとして実行されても、一部が利用者の演算デバイスで実行されて一部はリモート演算デバイスで実行されても、あるいは完全にリモート演算デバイスまたはサーバーで実行されてもよい。
さらに、本開示の各実施形態はまた、プロセッサによって実行されると、プロセッサが本明細書の「方法例」に記載されているステップを本開示の様々な実施形態に係るアパートレイアウトに基づいて家具配置プランを作成する方法において行うことを可能にするコンピュータプログラム命令を保存する、コンピュータ可読記憶媒体であってもよい。
コンピュータ可読記憶媒体は、1つ以上の可読媒体の任意の組み合わせであってもよい。可読媒体は、可読信号媒体または可読記憶媒体であってもよい。可読記憶媒体の例としては、電気式、磁気式、光学式、電磁式、赤外線式、または半導体のシステム、装置、またはデバイス、もしくはこれらの任意の組み合わせを含んでいてもよいが、これらに限定されない。可読記憶媒体のより具体的な例(網羅しているリストではない)としては、1本以上のワイヤによる電気的接続、携帯用ディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、消去可能読み出し専用メモリ(EPROMまたはフラッシュメモリ)、ファイバー、携帯用コンパクトディスク読み出し専用メモリ(CD−ROM)、光学式メモリ、磁気式メモリ、またはこれらの任意の適切な組み合わせを含んでいてもよい。
本開示の各態様は、以下に列挙する例示的実施形態(EEE)から理解し得るであろう。
EEE1.内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、
利用者の端末によって、現在の三次元仮想空間内で散策中及び/または一見中の利用者の視野変更情報を取得して、視野変更情報は地点位置変更情報及び/または視線方向変更情報を含んでおり、
現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整して、
現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルとを同じスクリーン上に同じ視野で表示するように調整する、ことを含む方法であり、
利用者の視野が変わる前に、第1アパートモデルと第2アパートモデルは既に同じスクリーン上に同じ視野で表示されており、アパートの第1三次元モデルは現在のアパートの三次元モデルであって、アパートの第2三次元モデルは推奨内装効果がロードされた後に得られた内装変更されたアパートの三次元モデルである、方法。
EEE2.EEE1に係る内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、
現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得することは、具体的には、現在の三次元仮想空間に対応するアパートの三次元モデルの子ページを通じて、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得し、
現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合、視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整し、具体的には、アパートの第1三次元モデルの子ページを通じて、視野変更情報を親ページに報告し、次に親ページは視野変更情報をアパートの第2三次元モデルの子ページに引き渡し、そこでアパートの第2三次元モデルの子ページは視野変更情報に応じてアパートの第2三次元モデルの表示視野を調整し、
現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合、視野変更情報に応じてアパートの第1三次元モデルの表示視野を調整し、具体的には、アパートの第2三次元モデルの子ページを通じて、視野変更情報を親ページに報告し、次に親ページは視野変更情報をアパートの第1三次元モデルの子ページに引き渡し、そこでアパートの第1三次元モデルの子ページは視野変更情報に応じてアパートの第1三次元モデルの表示視野を調整する、方法。
EEE3.EEE1に係る内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得する前に、本方法はさらに、
アパートの第1三次元モデルを表示して、アパートの第1三次元モデルの視野情報を取得して、アパートの第2三次元モデルをバックエンドサーバーから取得して、アパートの第1三次元モデルの視野情報に応じてアパートの第2三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する、あるいは、
アパートの第2三次元モデルを表示して、アパートの第2三次元モデルの視野情報を取得して、アパートの第1三次元モデルをバックエンドサーバーから取得して、アパートの第2三次元モデルの視野情報に応じてアパートの第1三次元モデルを、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように表示する、ことを含む方法であり、
視野情報は地点位置情報と視線方向情報とを含んでいる、方法。
EEE4.EEE3に係る内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、アパートの第1三次元モデルの視野変更情報を取得する前に、本方法はさらに、プリセットされた起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したと判定されれば、アパートの第1三次元モデルの視野情報を取得する動作を行い、
アパートの第2三次元モデルの視野変更情報を取得する前に、本方法はさらに、プリセットされた起動情報を受信したかどうかを判定し、プリセットされた起動情報を受信したと判定されれば、アパートの第2三次元モデルの視野情報を取得する動作を行う、ことを含む方法。
EEE5.EEE3に係る内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、本方法はさらに、
バックエンドサーバーによって、アパートの第1三次元モデルに応じて、プリセットされたアパート情報を取得し、プリセットされたアパート情報は、アパートレイアウト情報、階層の高さ情報、及び地点位置情報を含んでおり、
プリセットされたアパート情報に応じて、アパートの第1三次元モデルに対応する空のアパートの三次元モデルを作成し、
空のアパートの三次元モデルに家具や機器の三次元モデルを追加してアパートの第2三次元モデルを作成し、
アパートの第1三次元モデルとアパートの第2三次元モデルとを対応させて保存する、ことを含む方法。
EEE6.EEE5に係る内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、空のアパートの三次元モデルに家具や機器の三次元モデルを追加することは、具体的には、
空のアパートの三次元モデルに、対応する家具や機器の三次元モデルを自動的に追加する、ことを含む方法であり、家具や機器の三次元モデルはあらかじめ作成されている三次元モデルである、方法。
EEE7.内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する装置であって、
現在の三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報を取得するように構成されている視野変更情報取得モジュールと、
現在の三次元仮想空間がアパートの第1三次元モデルに対応する場合に、視野変更情報に応じてアパートの第2三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている第1表示モジュールと、
現在の三次元仮想空間がアパートの第2三次元モデルに対応する場合に、視野変更情報に応じてアパートの第1三次元モデルの表示視野を、アパートの第1三次元モデルとアパートの第2三次元モデルが同じスクリーン上で同じ視野で表示されるように調整するように構成されている第2表示モジュールと、を備えており、
利用者の視野が変わる前に、第1アパートモデルと第2アパートモデルは既に同じスクリーン上に同じ視野で表示されており、アパートの第1三次元モデルは現在のアパートの三次元モデルであって、アパートの第2三次元モデルは推奨内装効果がロードされた後に得られる内装変更されたアパートの三次元モデルである、装置。
EEE8.内装変更前後のアパートの三次元モデルを同じスクリーン上で表示するシステムであって、EEE7に係る内装変更前後のアパートの三次元モデルを同じスクリーン上で同じ視野で表示する装置と、EEE5またはEEE6のいずれかに係るバックエンドサーバーとを備えたシステム。
EEE9.電子デバイスであって、メモリと、プロセッサと、メモリに保存されていてプロセッサで実行可能なコンピュータプログラムとを備えており、プロセッサがプログラムを実行するときに、EEE1からEEE4のうちのいずれかに係る内装変更前後のアパートの三次元モデルを同じスクリーン上で同じ視野で表示する方法の各ステップを実行する、電子デバイス。
EEE10.コンピュータプログラムが保存されている、非一時的なコンピュータ可読記憶媒体であって、コンピュータプログラムがプロセッサによって実行されるときに、EEE1からEEE4のうちのいずれかに係る内装変更前後のアパートの三次元モデルを同じスクリーン上で同じ視野で表示する方法の各ステップを実行する、記憶媒体。
本開示の各実施形態で提供された、内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法、装置、及びシステムによれば、内装変更後のアパートの三次元モデルの表示視野を、内装変更前のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整するか、または、内装変更前のアパートの三次元モデルの表示視野を、内装変更後のアパートの三次元モデルの三次元仮想空間内を散策中及び/または一見中の利用者の視野変更情報に応じて調整し、その調整は、内装変更前のアパートの三次元モデルと内装変更後のアパートの三次元モデルが同じ視野で同じスクリーンにリンクするように行われ、利用者は、アパートの内装変更前後での2つ三次元モデル間の違いを視覚的に観察することにより、実際に内装効果が提示されているような感覚が得られる。
EEE11.アパートレイアウトに基づいて家具配置プランを作成する方法であって、
第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得して、
家具が既に配置されていて第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得し、第2サンプルアパートレイアウト画像内に配置されている家具に注釈をつけて、第1家具情報を生成し、
第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する、ことを含む方法。
EEE12.EEE11に係る方法であって、内装変更予定のアパートレイアウト画像を処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得することは、
訓練サンプルセットを、第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて作成して、
訓練サンプルに従ってニューラルネットワークを訓練して、ニューラルネットワークモデルを得て、
ニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて、内装変更予定のアパートレイアウト画像を処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する、ことを含む方法。
EEE13.EEE12に係る方法であって、ニューラルネットワークモデルとプリセットされた家具配置決定ルールを用いて、内装変更予定のアパートレイアウト画像を処理することによって、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得することは、
内装変更予定のアパートレイアウト画像に対応する内装変更されたアパートレイアウト構造データを取得して、
内装変更予定のアパートレイアウト画像と内装変更されたアパートレイアウト構造データとをニューラルネットワークモデルに入力して、ニューラルネットワークモデルが出力した内装変更予定のアパートレイアウト画像に対応する家具配置情報と、家具配置情報に対応する第2家具情報とを取得して、
家具配置決定ルールを用いて家具配置情報を処理することによって、家具配置画像を取得し、
第2家具情報に基づいて、家具配置画像内に配置されている家具に対応する提示情報を取得する、方法。
EEE14.EEE13に係る方法であって、
ニューラルネットワークモデルは、入力レイヤーニューロンモデル、中間レイヤーニューロンモデル、及び出力レイヤーニューロンモデルを備えていて、各レイヤーでのニューロンモデルの出力は、次のレイヤーでのニューロンモデルの入力として使用され、
ニューラルネットワークモデルは、完全に接続された構造を有する複数のニューラルネットワークレイヤーのサブネットワーク構造であり、中間レイヤーニューロンモデルは完全に接続されたレイヤーである、方法。
EEE15.EEE13に係る方法であって、
家具配置情報は家具配置ヒートマップを備えており、
家具配置ヒートマップは、内装変更予定のアパートレイアウト画像内への配置が推奨される家具の位置情報と、配置が推奨される家具に対応する配置確率とを備えている、方法。
EEE16.EEE15に係る方法であって、家具配置決定ルールを用いて家具配置情報を処理することによって家具配置画像を取得することは、
配置が推奨される家具に対応するエネルギー関数を、家具配置位置関係に応じて取得して、
エネルギー関数に基づいて制約条件を規定して、
家具配置ヒートマップをモンテカルロ探索木アルゴリズムを用いて走査して、制約条件に合う家具配置画像を取得する、ことを含み、家具配置画像内に配置される家具の個数はプリセットされた数の範囲内である、方法。
EEE17.EEE16に係る方法であって、さらに、
プリセットされた家具の組み合わせ方針と提示情報に基づいて、家具配置画像内に配置された家具に対応する補完的な品目を決定し、
プリセットされた家具配置方針と内装変更されたアパートレイアウト構造データに基づき、家具配置画像内に配置された家具と対応する補完的な品目の配置位置を最適化する、ことを含み、
家具配置方針は、壁面設置方針と床面設置方針のうちの1つ以上を備えている、方法。
EEE18.アパートレイアウトに基づいて家具配置プランを作成する装置であって、
第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得するように構成されているアパートレイアウトデータ取得モジュールと、
家具が既に配置されていて第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得し、第2サンプルアパートレイアウト画像内に配置されている家具に注釈をつけて、第1家具情報を生成するように構成されている家具情報注釈付与モジュールと、
第1サンプルアパートレイアウト画像、第2サンプルアパートレイアウト画像、第1家具情報、及びサンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得するように構成されている配置プラン取得モジュールと、を備えている装置。
EEE19.EEE11からEEE17のうちのいずれかに係る方法を実行するように構成されている、コンピュータプログラムを保存するコンピュータ可読記憶媒体。
EEE20.電子デバイスであって、
プロセッサと、プロセッサによって実行可能な命令を保存するように構成されているメモリと、を備えており、
プロセッサは、メモリから実行可能な命令を読み出し、命令を実行して、EEE11からEEE17のうちのいずれかに係る方法を実施するように構成されている、電子デバイス。
本開示の各実施形態で提供された、アパートレイアウトに基づいて家具配置プランを作成する方法、装置、電子デバイス、及び記憶媒体によれば、利用者のアパートレイアウトに対応する家具配置プランがインテリジェントな手法で作成可能であるので、利用者が適切な家具や内装のプランを迅速かつ簡便に選択するのに役立ち、内装設計の工程を簡素化することができて、利用者が内装を決定しやすくなる。
本開示の基本原理は、上記で具体的な実施形態とともに記載している。しかし、本開示で説明した利点、優位性、効果等は単に例示であって限定するものではなく、これらの利点、優位性、効果等は、本開示の様々な実施形態に必須のものとしてみなすことはできないということに注目すべきである。また、上記で開示した具体的な詳細は、単に例示であって、限定ではなくむしろ理解しやすくするためのものであり、上記で記載された詳細は、上述の具体的な詳細を用いて実施するために、本開示を限定するものではない。
本明細書内の各実施形態は順送りで記載されている。各実施形態では、他の実施形態との違いに注目しており、様々な実施形態の間で同一または同様の部分に対しては互いに参照可能である。システムの実施形態は基本的に方法の実施形態に対応しており、よって、比較的簡素化されて記載されているので、関連する部分に対しては、方法の実施形態の記載の部分を参照可能である。
本開示にかかわるデバイス、装置、設備、及びシステムのブロック図は、単に説明のための例であり、ブロック図に示されているように接続、配列、及び構成を実施しなければならないことを要求したり暗示したりする意図はない。当業者であれば、これらのデバイス、装置、設備、及びシステムを任意の手法で接続、配列、及び構成してもよいことを認識するであろう。「含む(include)」、「含有する(contain)」、及び「有している(have)」等の語はオープンワードであり、「含んでいるがそれに限定するものではない(including but not limited to)」ことに言及しており、よってそれらの語は互換できる。本明細書で用いられている「または(or)」及び「及び(and)」の語は、「及び/または(and/or)」の語に言及しており、よって、別段の明記がされていない限り、それらの語は互換できる。本明細書で用いられている「等(such as)」の語は、「例えであってそれに限定しない(such as but not limited to)」という句に言及しており、よってそれらの語は互換できる。
本開示の方法及び装置は、数多くの手法で実施してもよい。例えば、本開示の方法及び装置は、ソフトウェア、ハードウェア、ファームウェア、またはソフトウェア、ハードウェア、ファームウェアの任意の組み合わせを用いて実施してもよい。本方法のステップの上述の順序は単に例示のためのものであり、本開示の方法のステップは、特に別段の明記がされていない限り、上記で具体的に記載された順序に限定されない。さらに、いくつかの実施形態では、本開示はまた、記録媒体に記録されているプログラムとして実施されてもよく、プログラムは、本開示に係る方法を実施するための機械可読な命令を備えている。したがって、本開示はまた、本開示に係る方法を実施するためのプログラムを保存する記録媒体も網羅している。
本開示の装置、デバイス、及び方法において、種々の構成要素や種々のステップを分解及び/または再結合可能であることに注目すべきである。これらの分解及び/または再結合は、本開示の等価の解決法としてみなされるべきである。
開示された各態様についての上記の記載は、あらゆる当業者が本開示を作成または使用できるように提供されている。当業者には、これらの態様に対する様々な変更が明らかであり、本明細書で規定されている一般的原理を、本開示の範囲から逸脱することなく他の態様に適用可能である。したがって、本開示は、本明細書で示された各態様に限定されることを意図するものではなく、本明細書で開示されている原理や新規の特徴と一致する最広範な範囲に従っている。
上記の記載は、例示及び説明のために与えられてきた。さらに、本記載は、本開示の各実施形態を、本明細書で開示されている形式に限定することを意図するものではない。上記では様々な例示的態様や実施形態が説明されてきたが、当業者であればこれらについてのバリエーション、修正、変更、追加、及びサブコンビネーションを想定するであろう。

Claims (24)

  1. 三次元空間の眺めを表示させる方法であって、前記三次元空間の眺めは、第1の三次元空間の眺めと第2の三次元空間の眺めとを少なくとも備え、
    前記第1の三次元空間の眺めを第1ユーザーインターフェース上に提示し、
    前記第2の三次元空間の眺めを第2ユーザーインターフェース上に提示し、
    前記第1の三次元空間の眺めを利用者の入力に応じて変更し、
    前記第2の三次元空間の眺めを前記第1の三次元空間の眺めの変更に応じて変更する、ことを含む方法。
  2. 前記方法は、内装変更前後のアパートの三次元モデルを同じスクリーン上で表示するために用いられ、
    前記第1の三次元空間の眺めを利用者の入力に応じて変更することは、
    利用者の端末によって、前記第1の三次元空間の眺め内で散策中及び/または一見中の利用者の視野変更情報を取得することを含み、
    前記第1の三次元空間の眺めは前記アパートの第1三次元モデルに対応し、前記第2の三次元空間の眺めは前記アパートの第2三次元モデルに対応し、
    前記第2の三次元空間の眺めを前記第1の三次元空間の眺めの変更に応じて変更することは、
    前記視野変更情報に応じて前記アパートの前記第2三次元モデルの表示視野を、前記アパートの第1三次元モデルと前記アパートの第2三次元モデルとを前記同じスクリーン上に同じ視野で表示するように調整することを含む、請求項1記載の方法。
  3. 前記第1ユーザーインターフェースは、前記第1の三次元空間の眺めに対応する前記アパートの前記第1三次元モデルの子ページであり、
    前記第1の三次元空間の眺め内で散策中及び/または一見中の利用者の前記視野変更情報を取得することは、
    前記第1の三次元空間の眺めに対応する前記アパートの前記第1三次元モデルの前記子ページを通じて、前記第1の三次元空間の眺め内で散策中及び/または一見中の利用者の前記視野変更情報を取得することを含む、請求項2記載の方法。
  4. 前記第2ユーザーインターフェースは、前記第2の三次元空間の眺めに対応する前記アパートの前記第2三次元モデルの子ページであり、
    前記視野変更情報に応じて前記アパートの前記第2三次元モデルの前記表示視野を調整することは、
    前記アパートの前記第1三次元モデルの前記子ページを通じて、前記視野変更情報を前記アパートの前記第2三次元モデルの前記子ページに送信し、
    前記アパートの前記第2三次元モデルの前記子ページによって、前記視野変更情報に応じて前記アパートの前記第2三次元モデルの前記表示視野を調整する、ことを含む、請求項3記載の方法。
  5. 前記第1の三次元空間の眺めを前記第1ユーザーインターフェース上に提示することは、
    前記アパートの前記第1三次元モデルを表示することを含み、
    前記第2の三次元空間の眺めを前記第2ユーザーインターフェースに提示することは、
    前記アパートの前記第1三次元モデルの視野情報を取得し、
    前記アパートの前記第2三次元モデルを取得し、
    前記アパートの前記第1三次元モデルの前記視野情報に応じて、前記アパートの前記第2三次元モデルを、前記アパートの前記第1三次元モデルと前記アパートの前記第2三次元モデルとを前記同じスクリーン上に前記同じ視野で表示するように表示する、ことを含む、請求項2から4のいずれか一項に記載の方法。
  6. さらに、プリセットされた起動情報を受信したかどうかを判定し、前記プリセットされた起動情報を受信したという判定を受けて、前記アパートの前記第1三次元モデルの前記視野情報の取得を行う、ことを含む、請求項5記載の方法。
  7. さらに、
    前記アパートの前記第1三次元モデルに応じて、パートレイアウト情報、階層の高さ情報、及び地点位置情報を備えるプリセットされたアパート情報を取得し、
    前記プリセットされたアパート情報に応じて、前記アパートの前記第1三次元モデルに対応する空のアパートの三次元モデルを作成し、
    前記空のアパートの前記三次元モデルに家具や機器の三次元モデルを追加して前記アパートの前記第2三次元モデルを作成し、
    前記アパートの前記第1三次元モデルと前記アパートの前記第2三次元モデルとを対応させて保存する、ことを含む、請求項2から6のいずれか一項に記載の方法。
  8. 前記アパートの前記第1三次元モデルと前記アパートの前記第2三次元モデルのうちの少なくとも1つは内装変更されたアパートの三次元モデルであり、
    前記方法はさらに、
    複数のサンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データと家具情報とを取得して、
    前記複数のサンプルアパートレイアウト画像、前記家具情報、及び前記サンプルアパートレイアウト構造データに応じて、特定されたアパートレイアウト画像を処理して、前記特定されたアパートレイアウト画像に対する家具配置プランを作成し、
    前記家具配置プランに応じて、前記特定されたアパートレイアウト画像に対する前記内装変更されたアパートの前記三次元モデルを作成する、ことを含む、請求項2から7のいずれか一項に記載の方法。
  9. 前記特定されたアパートレイアウト画像に対する前記家具配置プランを作成することは、前記特定されたアパートレイアウト画像に対する第1及び第2家具配置プランを作成することを含み、
    前記家具配置プランに応じて前記特定されたアパートレイアウト画像に対する前記内装変更されたアパートの前記三次元モデルを作成することは、
    前記第1及び第2家具配置プランに応じて、前記特定されたアパートレイアウト画像に対する前記アパートの前記第1三次元モデルと前記アパートの前記第2三次元モデルとを作成する、ことを含む、請求項8記載の方法。
  10. 前記アパートの前記第2三次元モデルは内装変更されたアパートの三次元モデルであり、
    前記方法はさらに、
    第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得し、
    家具が既に配置されていて前記第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得して、前記第2サンプルアパートレイアウト画像内に配置されている前記家具に注釈をつけて、第1家具情報を生成し、
    前記第1サンプルアパートレイアウト画像、前記第2サンプルアパートレイアウト画像、前記第1家具情報、及び前記サンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、前記内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得し、
    前記家具配置プランに応じて、前記内装変更されたアパートの前記三次元モデルを作成する、ことを含む、請求項2から7のいずれか一項に記載の方法。
  11. 前記内装変更予定のアパートレイアウト画像を処理して前記内装変更予定のアパートレイアウト画像に対応する前記家具配置プランを取得することは、
    訓練サンプルセットを、前記第1サンプルアパートレイアウト画像、前記第2サンプルアパートレイアウト画像、前記第1家具情報、及び前記サンプルアパートレイアウト構造データに応じて作成し、
    前記訓練サンプルに従ってニューラルネットワークを訓練して、ニューラルネットワークモデルを得て、
    前記ニューラルネットワークモデルと前記プリセットされた家具配置決定ルールを用いて、前記内装変更予定のアパートレイアウト画像を処理することによって、前記内装変更予定のアパートレイアウト画像に対応する前記家具配置プランを取得する、ことを含む、請求項10記載の方法。
  12. 前記ニューラルネットワークモデルと前記プリセットされた家具配置決定ルールを用いて、前記内装変更予定のアパートレイアウト画像を処理することによって、前記内装変更予定のアパートレイアウト画像に対応する前記家具配置プランを取得することは、
    前記内装変更予定のアパートレイアウト画像に対応する内装変更されたアパートレイアウト構造データを取得し、
    前記内装変更予定のアパートレイアウト画像と前記内装変更されたアパートレイアウト構造データとを前記ニューラルネットワークモデルに入力して、前記ニューラルネットワークモデルが出力した前記内装変更予定のアパートレイアウト画像に対応する家具配置情報と、前記家具配置情報に対応する第2家具情報とを取得して、
    前記家具配置決定ルールを用いて前記家具配置情報を処理することによって、家具配置画像を取得し、
    前記第2家具情報に基づいて、前記家具配置画像内に配置されている家具に対応する提示情報を取得する、ことを含む、請求項11記載の方法。
  13. 前記ニューラルネットワークモデルは、入力レイヤーニューロンモデル、中間レイヤーニューロンモデル、及び出力レイヤーニューロンモデルを備え、各レイヤーでのニューロンモデルの出力は、次のレイヤーでのニューロンモデルの入力として使用され、
    前記ニューラルネットワークモデルは、完全に接続された構造を有する複数のニューラルネットワークレイヤーのサブネットワーク構造であり、前記中間レイヤーニューロンモデルは完全に接続されたレイヤーである、請求項11または12に記載の方法。
  14. 前記家具配置情報は家具配置ヒートマップを備え、
    前記家具配置ヒートマップは、前記内装変更予定のアパートレイアウト画像内への配置が推奨される家具の位置情報と、配置が推奨される前記家具に対応する配置確率とを備える、請求項12記載の方法。
  15. 前記家具配置決定ルールを用いて前記家具配置情報を処理することによって前記家具配置画像を取得することは、
    配置が推奨される前記家具に対応するエネルギー関数を、家具配置位置関係に応じて取得して、
    前記エネルギー関数に基づいて制約条件を規定して、
    前記家具配置ヒートマップをモンテカルロ探索木アルゴリズムを用いて走査して、前記制約条件に合う前記家具配置画像を取得することを含み、前記家具配置画像内に配置される家具の個数はプリセットされた数の範囲内である、請求項14記載の方法。
  16. さらに、
    プリセットされた家具の組み合わせ方針と前記提示情報に基づいて、前記家具配置画像内に配置された前記家具に対応する補完的な品目を決定し、
    プリセットされた家具配置方針と前記内装変更されたアパートレイアウト構造データに基づき、前記家具配置画像内の前記家具と前記対応する補完的な品目の配置位置を最適化することを含み、
    前記家具配置方針は、壁面設置方針と床面設置方針のうちの1つ以上を備える、請求項15記載の方法。
  17. 前記第1の三次元空間の眺めを前記利用者の入力に応じて変更することは、
    前記第1ユーザーインターフェースで前記利用者の入力を受信して、前記利用者の入力に応じて前記第1の三次元空間の眺めの眺め変更命令を生成し、
    前記眺め変更命令に応じて前記第1ユーザーインターフェースによって、前記第1の三次元空間の眺めを更新するのに使用するデータをロードし、
    前記第1ユーザーインターフェースによって、前記眺め変更命令を前記第2ユーザーインターフェースに送信し、
    前記第1ユーザーインターフェースによって、前記第2ユーザーインターフェースに、前記第1ユーザーインターフェースがデータのロードを完了したことを通知する、ことを含み、
    前記第2の三次元空間の眺めを前記第1の三次元空間の眺めの変更に応じて変更することは、
    前記眺め変更命令に応じて前記第2ユーザーインターフェースによって、前記第2の三次元空間の眺めを更新するのに使用するデータをロードし、
    前記第2ユーザーインターフェースによって、前記第1ユーザーインターフェースに、前記第2ユーザーインターフェースがデータのロードを完了したことを通知する、ことを含む、請求項1から16のいずれか一項に記載の方法。
  18. 前記利用者の入力は第1の利用者の入力であり、
    前記方法はさらに、
    前記第2の三次元空間の眺めを第2の利用者の入力に応じて変更し、
    前記第1の三次元空間の眺めを前記第2の三次元空間の眺めの変更に応じて変更する、ことを含む、請求項1から17のいずれか一項に記載の方法。
  19. 三次元空間の眺めを表示させる方法であって、前記三次元空間の眺めは、第1の三次元空間の眺めと第2の三次元空間の眺めとを少なくとも備え、
    前記第1の三次元空間の眺めを第1ユーザーインターフェース上に提示し、
    前記第2の三次元空間の眺めを第2ユーザーインターフェース上に提示し、
    前記第1ユーザーインターフェースで利用者の入力を受信して、前記利用者の入力に応じて前記第1の三次元空間の眺めの眺め変更命令を生成し、
    前記眺め変更命令に応じて前記第1ユーザーインターフェースによって、前記第1の三次元空間の眺めを更新するのに使用するデータをロードし、
    前記眺め変更命令を前記第1ユーザーインターフェースから前記第2ユーザーインターフェースに送信し、
    前記眺め変更命令に応じて前記第2ユーザーインターフェースによって、前記第2の三次元空間の眺めを更新するのに使用するデータをロードし、
    前記第1ユーザーインターフェースと前記第2ユーザーインターフェースによって、前記第1の三次元空間の眺めと前記第2の三次元空間の眺めとを、前記第1の三次元空間の眺めを更新するのに使用するデータと前記第2の三次元空間の眺めを更新するのに使用するデータとに応じてそれぞれ更新する、ことを含む、方法。
  20. さらに、
    前記第1ユーザーインターフェースによって、前記第2ユーザーインターフェースに、前記第1ユーザーインターフェースがデータのロードを完了したことを通知し、
    前記第2ユーザーインターフェースによって、前記第1ユーザーインターフェースに、前記第2ユーザーインターフェースがデータのロードを完了したことを通知し、
    前記第1ユーザーインターフェースと前記第2ユーザーインターフェースの両方がデータのロードを完了したという判定を受けて、前記第1の三次元空間の眺めと前記第2の三次元空間の眺めとを同時に更新する、ことを含む、請求項19記載の方法。
  21. 内装変更前後のアパートの三次元モデルを同じスクリーン上で表示する方法であって、
    利用者の端末によって、現在の三次元仮想空間内で散策中及び/または一見中の利用者の、地点位置変更情報及び/または視線方向変更情報を備える視野変更情報を取得し、
    前記現在の三次元仮想空間が前記アパートの第1三次元モデルに対応する場合に、前記視野変更情報に応じて前記アパートの第2三次元モデルの表示視野を、前記アパートの前記第1三次元モデルと前記アパートの前記第2三次元モデルとを前記同じスクリーン上に同じ視野で表示するように調整し、
    前記現在の三次元仮想空間が前記アパートの前記第2三次元モデルに対応する場合に、前記視野変更情報に応じて前記アパートの前記第1三次元モデルの表示視野を、前記アパートの前記第1三次元モデルと前記アパートの前記第2三次元モデルとを前記同じスクリーン上に前記同じ視野で表示するように調整する、ことを含む、方法であり、
    前記利用者の視野が変わる前に、前記第1アパートモデルと前記第2アパートモデルは既に前記同じスクリーン上に前記同じ視野で表示されており、前記アパートの前記第1三次元モデルは現在のアパートの三次元モデルであって、前記アパートの前記第2三次元モデルは推奨内装効果がロードされた後に得られた内装変更されたアパートの三次元モデルである、方法。
  22. アパートレイアウトに基づいて家具配置プランを作成する方法であって、
    第1サンプルアパートレイアウト画像に対応するサンプルアパートレイアウト構造データを取得し、
    家具が既に配置されていて前記第1サンプルアパートレイアウト画像に対応する第2サンプルアパートレイアウト画像を取得して、前記第2サンプルアパートレイアウト画像内に配置されている前記家具に注釈をつけて、第1家具情報を生成し、
    前記第1サンプルアパートレイアウト画像、前記第2サンプルアパートレイアウト画像、前記第1家具情報、及び前記サンプルアパートレイアウト構造データに応じて、内装変更予定のアパートレイアウト画像をプリセットされた家具配置決定ルールを用いて処理して、前記内装変更予定のアパートレイアウト画像に対応する家具配置プランを取得する、ことを含む、方法。
  23. 演算処理装置であって、メモリとプロセッサとを備え、前記メモリは、前記プロセッサによって実行されると、請求項1から22のいずれか一項に記載の方法を前記プロセッサに実施させるプログラム命令を保存する、演算処理装置。
  24. プロセッサによって実行されると、請求項1から22のいずれか一項に記載の方法を前記プロセッサに実施させるプログラム命令を保存する、非一時的なコンピュータ可読記憶媒体。
JP2020567129A 2019-05-28 2019-11-05 三次元空間の眺めを表示させる方法、装置、及び記憶媒体 Active JP7121811B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022071869A JP7407223B2 (ja) 2019-05-28 2022-04-25 三次元空間の眺めを表示させる方法、装置、及び記憶媒体

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
CN201910451604.0A CN110689621B (zh) 2019-05-28 2019-05-28 装修前后房屋三维模型同屏显示的方法、装置及系统
CN201910451604.0 2019-05-28
CN201910637657.1 2019-07-15
CN201910637657.1A CN110363853B (zh) 2019-07-15 2019-07-15 家具摆放方案生成方法、装置以及设备、存储介质
PCT/CN2019/115535 WO2020238022A1 (zh) 2019-05-28 2019-11-05 三维空间视图显示方法、装置及存储介质

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022071869A Division JP7407223B2 (ja) 2019-05-28 2022-04-25 三次元空間の眺めを表示させる方法、装置、及び記憶媒体

Publications (2)

Publication Number Publication Date
JP2021523493A true JP2021523493A (ja) 2021-09-02
JP7121811B2 JP7121811B2 (ja) 2022-08-18

Family

ID=73553422

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020567129A Active JP7121811B2 (ja) 2019-05-28 2019-11-05 三次元空間の眺めを表示させる方法、装置、及び記憶媒体
JP2022071869A Active JP7407223B2 (ja) 2019-05-28 2022-04-25 三次元空間の眺めを表示させる方法、装置、及び記憶媒体

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022071869A Active JP7407223B2 (ja) 2019-05-28 2022-04-25 三次元空間の眺めを表示させる方法、装置、及び記憶媒体

Country Status (4)

Country Link
US (2) US11158134B2 (ja)
JP (2) JP7121811B2 (ja)
AU (1) AU2019447524B2 (ja)
WO (1) WO2020238022A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7440972B2 (ja) 2022-06-23 2024-02-29 nat株式会社 室内レイアウト支援方法、システム及びプログラム

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11049317B2 (en) 2018-04-20 2021-06-29 Marxent Labs, LLC Technologies for 3D placement of virtual objects from a 2D layout
US11473927B2 (en) * 2020-02-05 2022-10-18 Electronic Arts Inc. Generating positions of map items for placement on a virtual map
CN113536680A (zh) * 2021-07-20 2021-10-22 杭州群核信息技术有限公司 家装设计方法、装置、计算机可读存储介质和处理器
CN113806850A (zh) * 2021-09-30 2021-12-17 深圳海智创科技有限公司 地产产品数字化管理方法、装置、计算机设备及存储介质
US11875280B2 (en) * 2021-12-08 2024-01-16 Marxent Labs Llc Rendering 3D model data for prioritized placement of 3D models in a 3D virtual environment
CN114693895B (zh) * 2022-03-24 2023-03-03 北京城市网邻信息技术有限公司 贴图切换方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002042170A (ja) * 2000-07-26 2002-02-08 Matsushita Electric Works Ltd インテリアシミュレーションシステム
JP2014205484A (ja) * 2013-04-10 2014-10-30 ザ・ボーイング・カンパニーTheBoeing Company 航空機比較システム
JP2015003718A (ja) * 2013-06-20 2015-01-08 ザ・ボーイング・カンパニーTheBoeing Company 同期表示を有する航空機の比較システム
JP2016058065A (ja) * 2014-09-05 2016-04-21 北京尓宜居科技有限責任公司 単一なインターフェースに同一な装飾シーンの2d画像と3d画像を同時に表示する方法
JP5999802B1 (ja) * 2014-11-21 2016-09-28 株式会社ネクスト 画像処理装置および方法
JP6116746B1 (ja) * 2016-11-17 2017-04-19 株式会社ネクスト 情報処理装置、情報処理方法、及びプログラム

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6005570A (en) * 1993-03-05 1999-12-21 Inprise Corporation Graphical user interface system and methods for improved user feedback
US20070127791A1 (en) * 2005-11-15 2007-06-07 Sectra Ab Automated synchronization of 3-D medical images, related methods and computer products
US9355470B2 (en) 2011-11-30 2016-05-31 The Board Of Trustees Of The Leland Stanford Junior University Method and system for interactive layout
US8989440B2 (en) 2012-03-27 2015-03-24 Way Out Ip, Llc System and method of room decoration for use with a mobile device
JP6090321B2 (ja) * 2012-07-25 2017-03-08 ソニー株式会社 情報処理装置及びプログラム
KR20140134490A (ko) * 2013-05-14 2014-11-24 한국전자통신연구원 환경 데이터 모델 구조를 이용하여 가상-물리 시스템에서 환경 객체를 표현하기 위한 방법 및 이를 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체
CN103400415B (zh) 2013-08-07 2016-03-02 赞奇科技发展有限公司 平面空间结构三维数字模型自动生成及在线互动的实现方法
CN103700127A (zh) 2013-09-02 2014-04-02 西安工程大学 基于虚拟现实技术的古遗址虚拟场景快速生成方法
CN104461309A (zh) 2014-12-26 2015-03-25 北京奇虎科技有限公司 基于拖拽操作跨页面调整对象位置的方法和装置
US10230326B2 (en) * 2015-03-24 2019-03-12 Carrier Corporation System and method for energy harvesting system planning and performance
CN106157352B (zh) * 2015-04-08 2019-01-01 苏州美房云客软件科技股份有限公司 精装360度图片与毛坯无缝切换的数字展示方法
US9676521B2 (en) 2015-09-21 2017-06-13 Daniel McGee Breathing assist device storage compartment assembly
CN106293972B (zh) 2016-08-12 2019-12-10 金蝶软件(中国)有限公司 单页应用页面通讯方法和装置
CN106569595A (zh) 2016-10-19 2017-04-19 上海市城市建设设计研究总院 基于vr和bim的虚拟工程体验方法及装置
CN106777666A (zh) 2016-12-13 2017-05-31 周振华 装修指导图生成方法及装置
CN106600709A (zh) 2016-12-15 2017-04-26 苏州酷外文化传媒有限公司 基于装修信息模型的vr虚拟装修方法
CN106683177B (zh) 2016-12-30 2019-03-05 四川讯视科技有限公司 基于互动漫游式房屋装修数据交互方法及装置
CN108694266A (zh) * 2017-04-07 2018-10-23 美宅科技(北京)有限公司 基于机器学习的智能装修设计方法与系统
US10572970B2 (en) * 2017-04-28 2020-02-25 Google Llc Extracting 2D floor plan from 3D GRID representation of interior space
CN108961426A (zh) 2017-05-19 2018-12-07 深圳市掌网科技股份有限公司 基于虚拟现实的家居设计方法及系统
CN107526895B (zh) 2017-09-06 2021-02-05 合肥工业大学 一种古民居群快速建模系统
CN107515991A (zh) 2017-09-06 2017-12-26 北京市金龙腾装饰股份有限公司 一种基于bim技术的户型全装修模拟展示方法及展示系统
CN107590337A (zh) * 2017-09-13 2018-01-16 灵图互动(武汉)科技有限公司 一种家装展示互动方法和装置
CN107742319A (zh) 2017-10-27 2018-02-27 北京小米移动软件有限公司 模型数据处理方法及装置
US10580207B2 (en) * 2017-11-24 2020-03-03 Frederic Bavastro Augmented reality method and system for design
CN108062797A (zh) 2017-12-15 2018-05-22 威仔软件科技(苏州)有限公司 一种基于虚拟现实技术的选房装置及选房方法
CN108459715A (zh) 2018-03-13 2018-08-28 重庆卢浮印象数字科技有限公司 建筑设计系统
CN108595773A (zh) 2018-03-28 2018-09-28 超选(北京)科技有限公司 室内装修设计装置及方法
CN108961387A (zh) 2018-05-30 2018-12-07 链家网(北京)科技有限公司 一种房屋虚拟三维模型的显示方法及终端设备
CN109559379B (zh) 2018-09-20 2023-06-06 中建科技有限公司深圳分公司 一种基于装配式建筑平台的全景看房方法及装置
CN109448120B (zh) 2018-10-31 2023-09-08 广州凡拓动漫科技有限公司 三维建筑模型的处理方法、装置和计算机设备
CN109583038A (zh) 2018-11-07 2019-04-05 北京自由灵动科技有限公司 一种室内设计方法及装置
CN109740243B (zh) 2018-12-29 2022-07-08 江苏艾佳家居用品有限公司 一种基于分件强化学习技术的家具布局方法及系统
CN110363853B (zh) * 2019-07-15 2020-09-01 贝壳找房(北京)科技有限公司 家具摆放方案生成方法、装置以及设备、存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002042170A (ja) * 2000-07-26 2002-02-08 Matsushita Electric Works Ltd インテリアシミュレーションシステム
JP2014205484A (ja) * 2013-04-10 2014-10-30 ザ・ボーイング・カンパニーTheBoeing Company 航空機比較システム
JP2015003718A (ja) * 2013-06-20 2015-01-08 ザ・ボーイング・カンパニーTheBoeing Company 同期表示を有する航空機の比較システム
JP2016058065A (ja) * 2014-09-05 2016-04-21 北京尓宜居科技有限責任公司 単一なインターフェースに同一な装飾シーンの2d画像と3d画像を同時に表示する方法
JP5999802B1 (ja) * 2014-11-21 2016-09-28 株式会社ネクスト 画像処理装置および方法
JP6116746B1 (ja) * 2016-11-17 2017-04-19 株式会社ネクスト 情報処理装置、情報処理方法、及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7440972B2 (ja) 2022-06-23 2024-02-29 nat株式会社 室内レイアウト支援方法、システム及びプログラム

Also Published As

Publication number Publication date
US11875460B2 (en) 2024-01-16
US20210327158A1 (en) 2021-10-21
US11158134B2 (en) 2021-10-26
JP7121811B2 (ja) 2022-08-18
AU2019447524A1 (en) 2020-12-17
WO2020238022A1 (zh) 2020-12-03
AU2019447524B2 (en) 2021-12-23
JP2022105083A (ja) 2022-07-12
JP7407223B2 (ja) 2023-12-28
US20210049829A1 (en) 2021-02-18

Similar Documents

Publication Publication Date Title
JP7121811B2 (ja) 三次元空間の眺めを表示させる方法、装置、及び記憶媒体
JP7325602B2 (ja) インテリアデザインのための人工知能システム及び方法
US11144680B2 (en) Methods for determining environmental parameter data of a real object in an image
CN105787230B (zh) 一种家居仿真设计系统及方法
US20210319149A1 (en) Method, device, equipment and storage medium for generating three-dimensional space of target house
US20220269885A1 (en) Automated Direction Of Capturing In-Room Information For Use In Usability Assessment Of Buildings
IL262937A (en) Augmented reality system for creating formal designs of buildings
US20220269888A1 (en) Automated Usability Assessment Of Buildings Using Visual Data Of Captured In-Room Images
WO2019058266A1 (en) SYSTEM AND METHOD FOR CONVERTING A 3D SCALE SOIL PLAN FOR THE CREATION AND RENDERING OF ARCHITECTURAL SCENES OF VIRTUAL REALITY, VIDEOS AND VISUAL IMAGES
CN106055762A (zh) 一种家居装修设计系统及方法
KR20190065933A (ko) 공간 인식에 기반한 인테리어 플랫폼 제공 방법
Kieferle et al. BIM interactive-about combining bim and virtual reality
CN114651221A (zh) 用于家庭自动化系统的基于三维虚拟房间的用户接口
US11816395B2 (en) System for generating visualizations in emergencies
WO2015075705A2 (en) Device, system and method for designing a space
CN111369664A (zh) 显示户型场景的方法、装置、设备、存储介质
KR20140145217A (ko) 공간정보를 이용한 3차원 가상 모델링 시스템 및 그 방법
US20190311538A1 (en) Method and system for mapping of products to architectural design in real time
EP4244820A1 (en) Image processing method, recording medium, and image processing system
JP7287509B2 (ja) 現在空間及び媒体内の品目情報を表示する方法及び装置
EP4010836A1 (en) Augmented reality method and system for design
EP3789967A1 (en) Three-dimensional space view display method, apparatus, and storage medium
US20210225044A1 (en) System and Method for Object Arrangement in a Scene
WO2020174886A1 (ja) 評価システム、空間の設計支援システム、評価方法及びプログラム
JP6629636B2 (ja) 図面作成装置、及び図面作成プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210112

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210112

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210112

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210803

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211102

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220425

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220425

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20220511

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20220517

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220719

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220805

R150 Certificate of patent or registration of utility model

Ref document number: 7121811

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150