JP2022012444A - 画像情報生成装置、方法およびプログラム - Google Patents
画像情報生成装置、方法およびプログラム Download PDFInfo
- Publication number
- JP2022012444A JP2022012444A JP2020114270A JP2020114270A JP2022012444A JP 2022012444 A JP2022012444 A JP 2022012444A JP 2020114270 A JP2020114270 A JP 2020114270A JP 2020114270 A JP2020114270 A JP 2020114270A JP 2022012444 A JP2022012444 A JP 2022012444A
- Authority
- JP
- Japan
- Prior art keywords
- image
- omnidirectional
- shooting
- omnidirectional image
- comparison
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 27
- 230000008569 process Effects 0.000 claims description 16
- 239000002131 composite material Substances 0.000 claims description 6
- 230000000694 effects Effects 0.000 claims description 4
- 230000008859 change Effects 0.000 abstract description 5
- 238000003384 imaging method Methods 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 13
- 230000000052 comparative effect Effects 0.000 description 9
- 238000013500 data storage Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 230000033001 locomotion Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/04—Architectural design, interior design
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2215/00—Indexing scheme for image rendering
- G06T2215/16—Using real world measurements to influence rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/028—Multiple view windows (top-side-front-sagittal-orthogonal)
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Geometry (AREA)
- Processing Or Creating Images (AREA)
- Business, Economics & Management (AREA)
- Studio Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Tourism & Hospitality (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
Abstract
Description
(構成例)
(1)システム
図1は、この発明の一実施形態に係る画像情報生成装置を含むシステムの概略構成図である。
このシステムは、画像情報生成装置として動作するサーバ装置SVを備えている。そして、このサーバ装置SVと、ユーザが使用するユーザ端末MT,UT1~UTnとの間で、ネットワークNWを介してデータ通信が可能に構成されている。
図2および図3は、それぞれサーバ装置SVのハードウェア構成およびソフトウェア構成を示すブロック図である。
サーバ装置SVは、クラウド上またはWeb上に設置されたサーバコンピュータからなり、中央処理ユニット(Central Processing Unit:CPU)等のハードウェアプロセッサを有する制御部1を備える。そして、この制御部1に対しバス4を介して記憶部2および通信インタフェース(通信I/F)3を接続したものとなっている。
次に、以上のように構成されたサーバ装置SVの動作例を説明する。図4はその処理手順と処理内容の一例を示すフローチャートである。
例えば、所望の建物の所望のフロアにおける多地点の全方位画像を撮影し記録しようとする場合、ユーザは先ず登録対象の建物とそのフロアの平面図データを用いて、フロアの撮影を開始しようとする位置を基準点として定め、この基準点の位置座標を上記平面図データの座標系から求めてユーザ端末MTに入力する。この結果ユーザ端末MTには、上記対象フロアの基準点の位置座標が設定される。なお、登録対象の建物とフロアの平面図データは、サーバ装置SVの平面図データ記憶部22に事前に記憶されており、ユーザ端末MTはサーバ装置SVから所望の建物およびフロアの平面図データをダウンロードすることで取得できる。
サーバ装置SVに記憶された全方位画像を閲覧する場合、ユーザは自身のユーザ端末UT1においてブラウザを起動し、サーバ装置SVに対しアクセスする。そうすると、サーバ装置SVは画像閲覧制御部12の制御の下、先ずホーム画面を送信する。この状態で、ユーザが閲覧を希望する施設名とそのフロア番号を指定すると、サーバ装置SVは画像閲覧制御部12により該当するフロアの平面図データを送信し、ユーザ端末UT1に表示させる。
上記三次元閲覧ツアーの最中に、ユーザが例えばいま表示中の任意の部屋の画像(比較基準の画像)と、過去の別の日時に撮影された同じ部屋の画像(比較対象の画像)とを比較するために、ユーザ端末UT1において上記別の撮影日時を入力したとする。そうするとユーザ端末UT1からサーバ装置SVに対し上記別の撮影日時を指定する画像比較要求が送信される。
サーバ装置SVは、次に画像アングル調整部14の制御の下、ステップS16において、選択された上記撮影ポイントP2に対応する全方位画像を全方位画像記憶部21から読み出し、この読み出された比較対象の全方位画像を上記比較基準の表示画像と比較する。そして、比較対象画像のアングルQ2を比較基準画像のアングルQ1に近づけるように、比較対象画像の表示範囲および表示方向を調整する。この調整処理は、例えば、表示されている比較基準画像と比較対象画像との対照位置を画素単位でシフトさせながら、比較基準画像と比較対象画像との間の対応する各画素間の差分値が最小となるシフト位置を探索することにより行われる。
サーバ装置SVは、続いて比較表示画像生成出力部15の制御の下、ステップS17において、上記調整済み画像記憶部23から比較基準画像と比較対象画像を読み出し、これらの画像を横方向に並べた状態で合成し、比較表示画像データを生成する。またそれと共に比較表示画像生成出力部15は、上記比較表示画像データの比較基準画像上に、フロアの平面図データを重ねて合成する。この平面図データには閲覧中の画像の撮影ポイントP1とそのアングルQ1が表示される。
以上述べたように一実施形態では、施設のフロアごとにその三次元空間を複数の位置でそれぞれ撮影された全方位画像を全方位画像記憶部21に記憶しておく。そして、撮影日時の異なる同一フロアの2つの画像を比較表示する際に、比較対象となるすべての全方位画像の中から、その撮影位置座標が比較基準となる画像の撮影位置座標に最も近い全方位画像を選択し、選択された比較対象の全方位画像のアングルを比較基準となる画像のアングルと対応するように調整し、調整後の比較対象の画像と比較基準の画像とを並べて配置した比較表示画像データを生成し、ユーザ端末UT1へ送信するようにしている。
(1)比較対象の全方位画像の中に、比較基準の画像の撮影位置に対応する画像が存在しない場合には、比較基準の画像と比較対象の画像とを比較する画像データを生成することは困難である。
MT,UT1~UTn…ユーザ端末
NW…ネットワーク
CM…カメラ
1…制御部
2…記憶部
3…通信I/F
4…バス
11…全方位画像取得部
12…画像閲覧制御部
13…比較対象画像選択部
14…画像アングル調整部
15…比較表示画像生成出力部
21…全方位画像記憶部
22…平面図データ記憶部
23…調整済み画像記憶部
Claims (7)
- 複数の撮影機会において三次元空間を複数の撮影位置でそれぞれ撮影した全方位画像を、前記撮影位置を示す座標と関連付けて記憶した記憶装置に対し、接続可能な画像情報生成装置であって、
前記複数の撮影機会のうち、第1の撮影機会および第2の撮影機会にそれぞれ撮影された前記三次元空間における第1の全方位画像と第2の全方位画像との比較を要求する情報が入力された場合に、前記記憶装置に記憶された前記全方位画像のうち、前記第2の撮影機会に撮影されたすべての前記第2の全方位画像の中から、その撮影位置座標が前記第1の全方位画像の撮影位置座標に対し最も近い第2の全方位画像を選択する選択部と、
選択された前記第2の全方位画像の表示範囲および表示向きを、前記第1の全方位画像の表示範囲および撮影方向に対応するように調整する調整部と、
前記表示範囲および表示向きが調整された前記第2の全方位画像と前記第1の全方位画像とを比較可能に配置した合成画像を生成し出力する画像生成部と
を具備する画像情報生成装置。 - 前記選択部は、第1の日時および第2の日時にそれぞれ撮影された前記三次元空間における前記第1の全方位画像と前記第2の全方位画像との比較を要求する情報が入力された場合に、前記記憶装置に記憶された前記全方位画像のうち、前記第2の日時に撮影されたすべての前記第2の全方位画像の中から、その撮影位置座標が前記第1の全方位画像の撮影位置座標に対し最も近い第2の全方位画像を選択する、請求項1に記載の画像情報生成装置。
- 前記選択部は、前記第2の撮影機会に撮影されたすべての前記第2の全方位画像の中から選択された前記第2の全方位画像の撮影位置座標が、前記第1の全方位画像の撮影位置座標から予め設定された距離以上離れている場合に、選択された前記第2の全方位画像を前記合成画像の生成対象から除外する、請求項1に記載の画像情報生成装置。
- 前記画像生成部は、前記選択された前記第2の全方位画像が前記合成画像の生成対象から除外された場合に、比較対象の前記第2の全方位画像が存在しない旨のメッセージを生成し出力する、請求項3に記載の画像情報生成装置。
- 前記画像生成部は、前記第1の全方位画像と前記第2の全方位画像とを比較可能に配置した前記合成画像に、前記三次元空間の平面図に前記第1の全方位画像と前記第2の全方位画像のうちの少なくとも一方の撮影位置座標をプロットした画像をさらに重ねた画像を生成する、請求項1に記載の画像情報生成装置。
- 複数の撮影機会において三次元空間を複数の撮影位置でそれぞれ撮影した全方位画像を、前記撮影位置を示す座標と関連付けて記憶した記憶装置に対し、接続可能な装置が実行する画像情報生成方法であって、
前記複数の撮影機会のうち、第1の撮影機会および第2の撮影機会にそれぞれ撮影された前記三次元空間における第1の全方位画像と第2の全方位画像との比較を要求する情報が入力された場合に、前記記憶装置に記憶された前記全方位画像のうち、前記第2の撮影機会に撮影されたすべての前記第2の全方位画像の中から、その撮影位置座標が前記第1の全方位画像の撮影位置座標に対し最も近い第2の全方位画像を選択する過程と、
選択された前記第2の全方位画像の表示範囲および表示向きを、前記第1の全方位画像の表示範囲および撮影方向に対応するように調整する過程と、
前記表示範囲および表示向きが調整された前記第2の全方位画像と前記第1の全方位画像とを比較可能に配置した合成画像を生成し出力する過程と
を具備する画像情報生成方法。 - 請求項1乃至5のいずれかに記載の画像情報生成装置が具備する前記各部の処理を、前記画像情報生成装置が備えるプロセッサに実行させるプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020114270A JP7467262B2 (ja) | 2020-07-01 | 2020-07-01 | 画像情報生成装置、方法およびプログラム |
PCT/JP2021/018534 WO2022004153A1 (ja) | 2020-07-01 | 2021-05-17 | 画像情報生成装置、方法およびプログラム |
KR1020237002290A KR20230033016A (ko) | 2020-07-01 | 2021-05-17 | 화상 정보 생성 장치, 방법 및 프로그램 |
US18/145,888 US20230131239A1 (en) | 2020-07-01 | 2022-12-23 | Image information generating apparatus and method, and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020114270A JP7467262B2 (ja) | 2020-07-01 | 2020-07-01 | 画像情報生成装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022012444A true JP2022012444A (ja) | 2022-01-17 |
JP7467262B2 JP7467262B2 (ja) | 2024-04-15 |
Family
ID=79315870
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020114270A Active JP7467262B2 (ja) | 2020-07-01 | 2020-07-01 | 画像情報生成装置、方法およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230131239A1 (ja) |
JP (1) | JP7467262B2 (ja) |
KR (1) | KR20230033016A (ja) |
WO (1) | WO2022004153A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023162613A1 (ja) * | 2022-02-25 | 2023-08-31 | パナソニックIpマネジメント株式会社 | 画像管理システム、画像管理方法、及びプログラム |
WO2023224033A1 (ja) * | 2022-05-17 | 2023-11-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報処理方法、情報処理装置、及び情報処理プログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017119244A1 (ja) | 2016-01-05 | 2017-07-13 | 富士フイルム株式会社 | 処理液、基板の洗浄方法、および、半導体デバイスの製造方法 |
JP6816465B2 (ja) | 2016-11-16 | 2021-01-20 | 株式会社リコー | 画像表示システム、通信システム、画像表示方法、及びプログラム |
-
2020
- 2020-07-01 JP JP2020114270A patent/JP7467262B2/ja active Active
-
2021
- 2021-05-17 WO PCT/JP2021/018534 patent/WO2022004153A1/ja active Application Filing
- 2021-05-17 KR KR1020237002290A patent/KR20230033016A/ko not_active Application Discontinuation
-
2022
- 2022-12-23 US US18/145,888 patent/US20230131239A1/en active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023162613A1 (ja) * | 2022-02-25 | 2023-08-31 | パナソニックIpマネジメント株式会社 | 画像管理システム、画像管理方法、及びプログラム |
WO2023224033A1 (ja) * | 2022-05-17 | 2023-11-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 情報処理方法、情報処理装置、及び情報処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
KR20230033016A (ko) | 2023-03-07 |
WO2022004153A1 (ja) | 2022-01-06 |
JP7467262B2 (ja) | 2024-04-15 |
US20230131239A1 (en) | 2023-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6075066B2 (ja) | 画像管理システム、画像管理方法、及びプログラム | |
US9338311B2 (en) | Image-related handling support system, information processing apparatus, and image-related handling support method | |
JP6167703B2 (ja) | 表示制御装置、プログラム及び記録媒体 | |
US20230131239A1 (en) | Image information generating apparatus and method, and computer-readable storage medium | |
JP2014112302A (ja) | 所定領域管理システム、通信方法、及びプログラム | |
JP6721004B2 (ja) | 画像管理システム、及び画像管理方法 | |
WO2016143749A1 (ja) | 作業の様子を画像により記録するための端末装置、サーバ装置およびプログラム | |
JP6617547B2 (ja) | 画像管理システム、画像管理方法、プログラム | |
JP2013021399A (ja) | 撮影依頼装置、撮影依頼装置の制御方法、およびプログラム | |
US20230308762A1 (en) | Display terminal, information processing system, communication system, displaying method, information processing method, communication method, and recording medium | |
JP2016194784A (ja) | 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム | |
US20230269482A1 (en) | Information processing system, communication system, and image sharing method | |
KR20190110013A (ko) | 카메라 시스템 | |
JP6302421B2 (ja) | コンテンツ検索装置、コンテンツ検索方法、コンテンツ格納装置およびコンテンツ格納方法 | |
JP6297739B1 (ja) | 物件情報提供サーバ | |
WO2022004154A1 (ja) | 撮影支援装置、方法およびプログラム | |
JP5664285B2 (ja) | 情報処理装置、およびカメラ | |
WO2022004156A1 (ja) | 情報設定制御装置、方法およびプログラム | |
JP5979205B2 (ja) | 情報処理装置、およびカメラ | |
JP2017182843A (ja) | プログラム、表示制御装置及び表示制御方法 | |
US20230308622A1 (en) | Display terminal, displaying method, and recording medium | |
US20230269481A1 (en) | Information processing system, communication system, and image transmission method | |
WO2022004155A1 (ja) | 撮影位置管理装置、方法およびプログラム | |
US20240179267A1 (en) | Display terminal, communication system, and display method | |
JP2017182548A (ja) | 画像管理システム、画像管理方法、画像通信システム及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210422 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20210423 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20220131 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230206 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20230207 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231128 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240403 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7467262 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |