JP2020009076A - 物体配置支援システム、物体配置支援方法及びプログラム - Google Patents
物体配置支援システム、物体配置支援方法及びプログラム Download PDFInfo
- Publication number
- JP2020009076A JP2020009076A JP2018128576A JP2018128576A JP2020009076A JP 2020009076 A JP2020009076 A JP 2020009076A JP 2018128576 A JP2018128576 A JP 2018128576A JP 2018128576 A JP2018128576 A JP 2018128576A JP 2020009076 A JP2020009076 A JP 2020009076A
- Authority
- JP
- Japan
- Prior art keywords
- space
- dimensional shape
- arrangement
- dimension
- size
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 18
- 230000001105 regulatory effect Effects 0.000 claims description 3
- 238000003384 imaging method Methods 0.000 description 29
- 238000010586 diagram Methods 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 5
- 238000011960 computer-aided design Methods 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N silicon dioxide Inorganic materials O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
このため、部屋のCAD(Computer Aided Design)データなどから、仮想現実(Virtual Reality)の技術を用いて、家具を置きたい部屋を仮想空間として生成し、そこに家具をオブジェクトとして配置し、部屋の各々の大きさや雰囲気と合うかどうかの確認を行うアプリケーションがある(例えば、特許文献1参照)。
そのため、拡張現実(Augmented Reality)を用いて、家具などを実際に置く部屋に、仮想的なオブジェクトとして配置してみて、部屋の大きさや雰囲気と合うかどうかの確認を行うアプリケーションがある(例えば、非特許文献1参照)。
このため、非特許文献1において、拡張現実として、撮像している部屋の画像に対して家具を配置する際、擬似的に2次元平面の座標に対して家具のオブジェクト画像を貼り付けて表示している。
したがって、部屋において家具を配置する場所は、ユーザが撮像画面を参照しながら、配置する位置にマークを付与するなど、位置の最適化を行って家具のオブジェクトを配置させる必要がある。
しかしながら、空間の寸法を測定するのに手間が掛かり、かつ、寸法に対応して空間に入る物体にどんな物があるかを探すのにも手間が掛かり、結果的に探して配置した物体がその空間に最適であったか否かを、ユーザには明確に認識できない。
物体配置支援システム1は、物体配置支援サーバ11と、ユーザ端末12と、3次元形状計測器13とから構成されている。
物体配置支援サーバ11及びユーザ端末12の各々は、インターネットを含む情報通信網であるネットワーク500を介して接続され、データの送受信を行う。
ユーザ端末12は、ユーザが携帯する携帯端末であり、表示画面及び撮像装置を搭載しており、例えばタブレットコンピュータ、スマートフォンなどである。ここで、ユーザ端末12には、物体配置支援サーバ11との間でデータの送受信を行い、物体配置支援サーバ11からの指示に対応して、表示画面の制御を行うアプリケーションのプログラムをインストールされている。
また、ユーザ端末12は、搭載する撮像装置による撮像画像(例えば、動画像)を、上記3次元形状復元形状と同様である。
データ送受信部111は、ネットワーク500を介して、ユーザ端末12とデータの送受信を行う。
ここで、3次元形状復元部112は、一般的な3次元復元の手法を用いるため、復元に用いる3次元形状復元情報を、以下のいずれを用いる構成としても良い。
また、3次元形状計測器13が配置空間の3次元形状までの距離を赤外線で測定して、深度情報を有するドットパターンを取得する構成の場合、ユーザ端末12が送信する3次元形状復元情報としては、3次元点群が用いられる。
また、特に3次元形状計測器13を設けず、ユーザ端末12に搭載されている撮像装置で、多視点において動画像を撮像することにより、SfM(Structure from Motion)の手法により、3次元形状復元情報として3次元点群を取得しても良い。この場合、ユーザ端末12に搭載された撮像装置の撮像方向と、3次元計測の方向が同一となり、3次元形状計測器13を用いる必要が無いため、ユーザに対して余分な手間をかけることが無くなる。
また、配置空間700は、本実施形態においては、例えば、物体610と物体620とに挟まれた、横幅W、奥行Dの隙間の空間(隙間空間)である。また、配置空間700は、例えば、物体と壁とに挟まれた隙間空間であっても良い。また、配置空間700は、壁に設けられた窪みの空間、あるいは壁から突出した突出部に挟まれた空間でも良い。この配置空間700は、空間の形状が図に示すように直方体でも良いし、他の形状(三角柱、多角形中、円柱などの形状)であっても良い。このように、配置空間700は、他の物体により空間のサイズが規制されており、何らかの物体を配置可能な空間であり、あるいは、他の物体により挟まれた何も配置されていない空いた空間であるデッドスペースとなっている隙間の空間である。
記憶部118は、処理中などにおけるデータを一旦記憶する記憶媒体である。
寸法範囲における配置空間の横幅は、例えば、30cm、50cm、90cm、110cm、…として設定されている。
また、横幅70cmには、50cm以上で70cm未満の配置空間に配置可能な横幅を有する物体が登録されている。例えば、45cm以上で65cm未満の横幅を有する物体が登録されている。
横幅50cm及び横幅70cmにおける余裕間隔についても、横幅30cmの場合の説明と同様である。
種別毎の各レコードには、識別番号、寸法、インデックスの各々のデータ欄が設けられている。
例えば、種別が棚の各レコードにおいて、識別番号は、棚の各々を識別する識別情報である。寸法は、棚の横幅及び奥行の寸法の各々である(場合によっては高さの寸法も含まれる)。インデックスは、識別番号で識別される棚の3次元形状を示す仮想物体オブジェクトのデータが書き込まれているアドレスである。他の種別の物体(椅子、植栽、置物など)も同様である。
ユーザは、ユーザ端末12において、配置空間へ配置する物体の検索を支援するアプリケーションを起動させる。
そして、ユーザは、住宅における部屋において、何かインテリアを配置したいと考えている、図4(a)に示す本棚611と衣装箱621との間の空間である隙間空間(配置空間)701の方向の撮像画像をユーザ端末12に搭載された撮像装置により、ユーザ端末12の表示部により確認しつつ撮像する。
そして、アプリケーションは、物体配置支援サーバ11にアクセスし、撮像画像及び3次元形状復元情報の各々を、ネットワーク500を介して物体配置支援サーバ11に送信する。
データ送受信部111は、ユーザ端末12から供給される撮像画像及び3次元形状復元情報の各々を入力し、一旦、記憶部118に書き込んで記憶させる。
3次元形状復元部112は、記憶部118から3次元形状復元情報を読み出し、この3次元形状復元情報に基づいて、ユーザが物体を配置したい隙間空間701を含む空間の3次元形状を復元する。そして、3次元形状復元部112は、復元した復元3次元形状のデータを、一旦、記憶部118に対して書き込んで記憶させる。
空間寸法算出部113は、記憶部118から復元3次元形状を読み出し、隙間空間701の空間寸法として、隙間空間701の横幅Wの計測を行う。
そして、空間寸法算出部113は、計測した空間寸法である横幅Wの数値を、物体検索部114に対して出力する。
物体検索部114は、隙間空間701の空間寸法に対応した寸法範囲の物体テーブルを、物体データベース117から検索する。
このとき、物体検索部114は、例えば、空間寸法算出部113が求めた、隙間空間701の空間寸法において開口部の横幅Wが45cmである場合、物体データベース117における寸法範囲が50cmの物体テーブルを抽出する。
次に、物体検索部114は、抽出した寸法範囲が50cmの物体テーブルを参照して、隙間空間701の横幅Wの45cmから上述した余裕間隔5cmを減算した40m以下の横幅の物体を、全ての種別から順次抽出する。
そして、物体検索部114は、抽出したインテリアの識別番号を仮想現実生成部115に対して出力する。
仮想現実生成部115は、物体データベース117の物体テーブルを参照して、物体検索部114から供給される識別番号に対応するレコードにおけるインデックスの欄のアドレスを読み出す。
そして、仮想現実生成部115は、読み出したアドレスにより、物体データベース117から仮想物体オブジェクトのデータを読み出す。仮想現実生成部115は、読み出した仮想物体オブジェクトを、復元3次元形状における隙間空間701に配置して仮想現実3次元形状を生成する。
仮想現実生成部115は、生成した仮想現実3次元形状のデータを、一旦、記憶部118に対して書き込んで記憶させる。
表示画像生成部116は、仮想現実生成部115の生成した仮想現実3次元形状のデータを、記憶部118から読み出す。
そして、表示画像生成部116は、読み出した仮想現実3次元形状の空間において、ユーザ端末12に搭載された撮像装置の撮像した画像の撮像方向から、この仮想現実3次元形状を仮想カメラにより撮像する処理を行う。
これにより、表示画像生成部116は、ユーザがユーザ端末12で撮像している隙間空間701に植栽が配置されていることを視認できる仮想現実3次元形状の仮想撮像画像を生成する。
ユーザ端末12は、自身の表示部に対し、物体配置支援サーバ11から送信される仮想撮像画像を、自身が搭載する撮像装置の撮像画像に換えて表示する。
この結果、ユーザは、ユーザ端末12の表示画面において、自身が撮像している方向の隙間空間701に仮想物体オブジェクト800の植栽が配置された仮想現実の画像を鑑賞することができる。
物体検索部114は、物体データベース117の物体テーブルを参照して、隙間空間701の横幅Wに配置可能な物体として、現時点で抽出されていない物体の有無を確認する。このとき、物体検索部114は、物体テーブルにおいて、隙間空間701の横幅Wに配置可能な物体として、現時点で抽出されていない物体が存在する場合、処理をステップS105へ進める。一方、物体検索部114は、物体テーブルにおいて、隙間空間701の横幅Wに配置可能な物体として、現時点で抽出されていない物体が存在しない場合、すなわち隙間空間701の横幅Wに配置可能な物体の抽出が全て終了した場合、処理を終了する。
また、ユーザがユーザ端末12において、アプリケーションを終了する処理を行った場合も、物体配置支援サーバ11は、処理を終了する。
この結果、本実施形態によれば、家具などの販売店の展示スペースで実際に見て買ってきても、展示スペースと配置空間との環境が大きく異なるため、購入したインテリアを実際に配置空間に配置したときに、展示スペースで観察したときの感じと大きく異なり、結局、感性の点からその配置空間に購入したインテリアを配置することができなくなるなどの無駄な買い物をすることを防止できる。
上述した構成の場合、物体検索部114は、図5に示す物体テーブルを用いて、配置空間に配置する物体の検索を行う。
寸法範囲における配置空間の高さHは、例えば、50cm、90cm、110cm、…として設定されている。
また、横幅90cmには、50cm以上で90cm未満の配置空間に配置可能な高さを有する物体が登録されている。例えば、45cm以上で85cm未満の高さを有する物体が登録されている。
また、横幅110cmには、90cm以上で110cm未満の配置空間に配置可能な高さを有する物体が登録されている。例えば、85cm以上で105cm未満の高さを有する物体が登録されている。
そして、物体検索部114は、隙間空間701の空間寸法における横幅W及び高さHに対応した寸法範囲の物体テーブル(図5)を、物体データベース117から検索する。
このとき、物体検索部114は、例えば、空間寸法算出部113が求めた、隙間空間701の空間寸法において開口部の横幅Wが45cmであり、高さHが80cmである場合、物体データベース117における寸法範囲が横幅Wが50cm、高さHが90cmの物体テーブルを抽出する。
この場合、物体検索部114は、配置空間760がコーナー形状であり、かつ奥行Dの寸法とにより、物体データベース117から対応する物体テーブルを検索し、この物体テーブルから順次、物体を抽出する。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
11…物体配置支援サーバ
12…ユーザ端末
13…3次元形状計測器
111…データ送受信部
112…3次元形状復元部
113…空間寸法算出部
114…物体検索部
115…仮想現実生成部
116…表示画像生成部
117…物体データベース
118…記憶部
500…ネットワーク
Claims (8)
- 物体を配置する対象の空間である配置空間の3次元形状を復元3次元形状として復元する3次元形状復元部と、
前記配置空間のサイズを示す空間寸法を、前記復元3次元形状から求める空間寸法算出部と
を備えることを特徴とする物体配置支援システム。 - 前記空間寸法の配置空間に配置が可能なサイズの物体を検索する物体検索部を
さらに有する
ことを特徴とする請求項1に記載の物体配置支援システム。 - 前記空間寸法に対応させた所定の寸法範囲毎のサイズの物体が、グループとして分類されている物体データベースを
さらに有し、
前記物体検索部が、前記空間寸法に対応する前記物体のグループを、前記物体データベースから検索する
ことを特徴とする請求項2に記載の物体配置支援システム。 - 前記空間寸法に対応して検索された前記物体の仮想オブジェクトを、仮想現実技術により前記配置空間の復元3次元形状に配置した画像を提示する仮想現実生成部を
さらに有することを特徴とする請求項1から請求項3のいずれか一項に記載の物体配置支援システム。 - 前記配置空間が、他の物体により空間のサイズが規制された空間である
ことを特徴とする請求項1から請求項4のいずれか一項に記載の物体配置支援システム。 - 前記配置空間が、他の物体により挟まれた空き空間であるデッドスペースとなっている隙間の空間である
ことを特徴とする請求項1から請求項4のいずれか一項に記載の物体配置支援システム。 - 3次元形状復元部が、物体を配置しようとする空間である配置空間の3次元形状を復元3次元形状として復元する3次元形状復元過程と、
空間寸法算出部が、前記配置空間のサイズを示す空間寸法を、前記復元3次元形状から求める空間寸法算出過程と
を含むことを特徴とする物体配置支援方法。 - コンピュータを、
物体を配置しようとする空間である配置空間の3次元形状を復元3次元形状として復元する3次元形状復元手段、
前記配置空間のサイズを示す空間寸法を、前記復元3次元形状から求める空間寸法算出手段
として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018128576A JP7275484B2 (ja) | 2018-07-05 | 2018-07-05 | 物体配置支援システム、物体配置支援方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018128576A JP7275484B2 (ja) | 2018-07-05 | 2018-07-05 | 物体配置支援システム、物体配置支援方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020009076A true JP2020009076A (ja) | 2020-01-16 |
JP7275484B2 JP7275484B2 (ja) | 2023-05-18 |
Family
ID=69151665
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018128576A Active JP7275484B2 (ja) | 2018-07-05 | 2018-07-05 | 物体配置支援システム、物体配置支援方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7275484B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021161719A1 (ja) * | 2020-02-12 | 2021-08-19 | パナソニックIpマネジメント株式会社 | 介護用品提案支援システム、介護用品提案支援方法及びプログラム |
JP2021189618A (ja) * | 2020-05-27 | 2021-12-13 | トヨタホーム株式会社 | インテリア支援システム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003256876A (ja) * | 2002-03-04 | 2003-09-12 | Sony Corp | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム |
JP2004323135A (ja) * | 2003-04-22 | 2004-11-18 | Matsushita Electric Ind Co Ltd | 物品管理システム |
JP2016038867A (ja) * | 2014-08-11 | 2016-03-22 | 株式会社大林組 | 配置計画支援システム、配置計画支援方法及び配置計画支援プログラム |
JP2016133818A (ja) * | 2015-01-15 | 2016-07-25 | 株式会社東芝 | 空間情報可視化装置、プログラムおよび空間情報可視化方法 |
JP2018005499A (ja) * | 2016-06-30 | 2018-01-11 | キヤノンマーケティングジャパン株式会社 | 仮想空間制御装置、その制御方法、及びプログラム |
WO2018030206A1 (ja) * | 2016-08-10 | 2018-02-15 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | カメラワーク生成方法及び映像処理装置 |
-
2018
- 2018-07-05 JP JP2018128576A patent/JP7275484B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003256876A (ja) * | 2002-03-04 | 2003-09-12 | Sony Corp | 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム |
JP2004323135A (ja) * | 2003-04-22 | 2004-11-18 | Matsushita Electric Ind Co Ltd | 物品管理システム |
JP2016038867A (ja) * | 2014-08-11 | 2016-03-22 | 株式会社大林組 | 配置計画支援システム、配置計画支援方法及び配置計画支援プログラム |
JP2016133818A (ja) * | 2015-01-15 | 2016-07-25 | 株式会社東芝 | 空間情報可視化装置、プログラムおよび空間情報可視化方法 |
JP2018005499A (ja) * | 2016-06-30 | 2018-01-11 | キヤノンマーケティングジャパン株式会社 | 仮想空間制御装置、その制御方法、及びプログラム |
WO2018030206A1 (ja) * | 2016-08-10 | 2018-02-15 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | カメラワーク生成方法及び映像処理装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021161719A1 (ja) * | 2020-02-12 | 2021-08-19 | パナソニックIpマネジメント株式会社 | 介護用品提案支援システム、介護用品提案支援方法及びプログラム |
JPWO2021161719A1 (ja) * | 2020-02-12 | 2021-08-19 | ||
JP2021189618A (ja) * | 2020-05-27 | 2021-12-13 | トヨタホーム株式会社 | インテリア支援システム |
JP7507010B2 (ja) | 2020-05-27 | 2024-06-27 | トヨタホーム株式会社 | インテリア支援システム |
Also Published As
Publication number | Publication date |
---|---|
JP7275484B2 (ja) | 2023-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11823256B2 (en) | Virtual reality platform for retail environment simulation | |
KR101636027B1 (ko) | 실세계 객체들의 3d 모델들 및 실제 스케일 메타데이터를 캡처하고 이동시키기 위한 방법들 및 시스템들 | |
CN107430686A (zh) | 用于移动设备定位的区域描述文件的众包创建和更新 | |
JP6618700B2 (ja) | 情報配信方法、情報配信プログラム及び情報配信装置 | |
CN110176197A (zh) | 一种全息化展示方法、系统、存储介质及设备 | |
US20160381348A1 (en) | Image processing device and method | |
Stanco et al. | Virtual anastylosis of Greek sculpture as museum policy for public outreach and cognitive accessibility | |
KR102372283B1 (ko) | 가상 공간 구축 서비스 제공 방법 및 이에 사용되는 서비스 제공 서버 | |
CN102737323A (zh) | 交互式虚拟购物体验 | |
JP2016071900A (ja) | 情報処理システム、その制御方法、及びプログラム | |
JP7275484B2 (ja) | 物体配置支援システム、物体配置支援方法及びプログラム | |
CN114153548A (zh) | 一种展示方法、装置、计算机设备及存储介质 | |
JP5890359B2 (ja) | 端末装置、表示方法、プログラム、および表示システム | |
CN111651049B (zh) | 交互方法、装置、计算机设备及存储介质 | |
JP7015130B2 (ja) | データ処理装置 | |
CN114119843A (zh) | 构建增强现实图像 | |
JPH09138860A (ja) | 仮想画像空間内への実写画像取込システム | |
JP6510116B2 (ja) | 仮想オブジェクトの表示システムを用いた顧客把握システム、顧客把握システムプログラム及び顧客把握方法 | |
KR102500488B1 (ko) | 3d 투어 내에서 실제 거리 측정 방법 및 그를 위한 3d 투어 시스템 | |
CN108920598A (zh) | 全景图浏览方法、装置、终端设备、服务器及存储介质 | |
KR20230077471A (ko) | 서로 다른 위치에서 획득한 복수의 2차원 이미지들을 이용하여 3차원 공간 모델링 데이터를 생성하는 장치 및 방법과 이를 위한 프로그램 | |
CN114003323A (zh) | 信息展示方法、装置、设备及存储介质 | |
KR20110131680A (ko) | 3차원 가상현실 기술을 이용한 가상 인터넷 쇼핑몰 서비스 시스템 | |
KR20210055381A (ko) | 스마트 디스플레이를 통해 증강 현실 컨텐츠를 제공하는 장치, 방법 및 컴퓨터 프로그램 | |
JP6831676B2 (ja) | 価格見積もりシステム、価格見積もり方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210623 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220518 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220705 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230404 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230417 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7275484 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |