JP7387545B2 - 情報設定制御装置、方法およびプログラム - Google Patents
情報設定制御装置、方法およびプログラム Download PDFInfo
- Publication number
- JP7387545B2 JP7387545B2 JP2020114294A JP2020114294A JP7387545B2 JP 7387545 B2 JP7387545 B2 JP 7387545B2 JP 2020114294 A JP2020114294 A JP 2020114294A JP 2020114294 A JP2020114294 A JP 2020114294A JP 7387545 B2 JP7387545 B2 JP 7387545B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- additional information
- display
- image data
- display position
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 33
- 238000012545 processing Methods 0.000 claims description 19
- 230000008569 process Effects 0.000 claims description 18
- 230000004044 response Effects 0.000 claims description 5
- 230000010365 information processing Effects 0.000 claims 1
- 238000004891 communication Methods 0.000 description 23
- 238000010586 diagram Methods 0.000 description 14
- 238000013500 data storage Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004043 responsiveness Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2356/00—Detection of the display position w.r.t. other display screens
Description
(構成例)
(1)システム
図1は、この発明の一実施形態に係る3D画像管理システムの概略構成図である。
このシステムは、ユーザ端末MT,UT1~UTnとサーバ装置SVとを備えている。これらのサーバ装置SVとユーザ端末MT,UT1~UTnとの間では、ネットワークNWを介してデータ通信が可能になっている。
(2-1)ユーザ端末MT
図2および図3は、それぞれユーザ端末MTのハードウェア構成およびソフトウェア構成を示すブロック図である。
ユーザ端末MTは、中央処理ユニット(Central Processing Unit:CPU)等のハードウェアプロセッサを有する制御部1を備える。そして、この制御部1に対しバス6を介して記憶部2、通信インタフェース(通信I/F)3および入出力インタフェース(入出力I/F)4を接続したものとなっている。
図4および図5は、それぞれサーバ装置SVのハードウェア構成およびソフトウェア構成を示すブロック図である。
サーバ装置SVは、クラウド上またはWeb上に設置されたサーバコンピュータからなり、CPU等のハードウェアプロセッサを有する制御部7を備える。そして、この制御部7に対しバス10を介して記憶部8および通信インタフェース(通信I/F)9を接続したものとなっている。
(1) ユーザ端末MT,UT1~UTnから画像の閲覧要求が送られた場合に、撮影画像記憶部81から上記閲覧要求により指定された施設のフロアに対応する全方位画像データを読み出して3D表示画像データを生成し、生成された3D表示画像データを通信I/F9から要求元のユーザ端末MT,UT1~UTnへ送信する処理。
次に、以上のように構成されたユーザ端末MTおよびサーバ装置SVの動作例を説明する。図6および図7はそれぞれその処理手順と処理内容の一例を示すフローチャートである。
なお、サーバ装置SVの撮影画像記憶部81には、対象フロアの全方位画像データが既に記憶されているものとして説明を行う。
ユーザ端末MTにおいて、ユーザが所望の施設およびフロアの3D画像を閲覧するために、サーバ装置SVに対しアクセスして対象となる上記施設とそのフロアを指定すると、ユーザ端末MTは当該操作をステップS10により検出してサーバ装置SVに対し撮影画像閲覧要求を送信する。
上記3D画像ツアーによりフロアの所望の部屋の画像が表示されている状態で、ユーザが当該表示画像中の所望の部位または設備に対しその属性を表す付加情報を設定するために、例えばマウス操作により上記設定対象となる部位または設備を指定したとする。
ユーザ端末MTは、上記指定操作により付加情報の表示位置が決定され、この決定操作がステップS16で検出されると、続いて付加情報入力受付部14の制御の下、先ずステップS17において入力テンプレート記憶部22から入力テンプレートデータを読み出し、入出力I/F4へ出力して表示部5Bに表示させる。
上記付加情報の入力が終了し、ユーザが入力テンプレートに設けられたアップデートボタンB7をクリック操作したとする。そうすると、ユーザ端末MTは付加情報送信部15の制御の下、上記アップデートボタンB7の操作をステップS19により検出し、続いてステップS20において、上記付加情報記憶部23から付加情報と当該付加情報の設定対象および表示位置を示す座標情報を読み出し、読み出された付加情報および座標情報を付加情報登録要求に含めて通信I/F3からサーバ装置SVに向け送信する。
例えばユーザ端末UT1~UTnから、サーバ装置SVに対し閲覧対象となる施設とそのフロアの3D画像の閲覧要求が送信されたとする。そうするとサーバ装置SVは、上記閲覧要求をステップS30により受信すると、表示画像生成部73の制御の下、先ずステップS31において、上記閲覧要求により要求されたフロアの画像に付加情報が登録済であるか否かを、付加情報記憶部82に記憶された情報をもとに判定する。そして、付加情報が登録済であれば、以下のような閲覧応答処理を実行する。
以上述べたように一実施形態では、ユーザ端末MTにおいて、ユーザが3D表示画像に対し付加情報を設定する際に、先ず付加情報の設定対象を指定する操作の過程で第1のガイドパターンを表示し、次に付加情報の表示位置を指定する操作の過程で第2のガイド情報を表示し、表示位置の決定後にユーザが入力テンプレートに従い入力した付加情報を上記設定対象および表示位置の座標に紐づけてサーバ装置SVに登録するようにしている。そして、上記付加情報が設定された3D画像を表示する際には、上記付加情報の設定対象と表示位置を示す第3のガイド情報を上記3D画像に表示させ、この状態でユーザが上記第3のガイド情報に従い上記表示位置を指定することで、対応する付加情報を上記3D画像中の上記表示位置に表示させるようにしている。
(1)一実施形態では、付加情報の設定対象および表示位置の指定操作に応じた第1および第2のガイド情報の表示制御をユーザ端末MTにおいて実行する場合を例にとって説明した。しかし、それに限らず上記指定操作に応じたガイド情報の表示制御をサーバ装置SVにおいて実行するようにしてもよい。このようにすると、ユーザ端末MTとサーバ装置SVとの間の伝送遅延による応答性の低下が発生する心配はあるが、ユーザ端末MTに新たなアプリケーションをインストールする必要がなく、かつユーザ端末MTの処理負荷を軽減することが可能となる。
以上、本発明の実施形態を詳細に説明してきたが、前述までの説明はあらゆる点において本発明の例示に過ぎない。本発明の範囲を逸脱することなく種々の改良や変形を行うことができることは言うまでもない。つまり、本発明の実施にあたって、実施形態に応じた具体的構成が適宜採用されてもよい。
MT,UT1~UTn…ユーザ端末
NW…ネットワーク
CM…カメラ
1,7…制御部
2,8…記憶部
3,9…通信I/F
6,10…バス
11…表示画像受信部
12…画像表示制御部
13…指定操作受付部
14…付加情報入力受付部
15…付加情報送信部
21…表示画像記憶部
22…入力テンプレート記憶部
23…付加情報記憶部
71…撮影画像取得部
72…付加情報取得部
73…表示画像生成部
81…撮影画像記憶部
82…付加情報記憶部
Claims (7)
- 三次元空間を撮影して得られた画像データが表示されている状態で、前記画像データの中に、付加情報の設定対象を指定するための第1のガイド情報を表示させる第1の表示制御部と、
ユーザの操作に応じて、前記付加情報の表示位置を指定する第2のガイド情報を前記画像データの中に表示させる第2の表示制御部と、
前記第1のガイド情報により指定される前記設定対象と前記第2のガイド情報により指定される前記表示位置とを関連付ける第3のガイド情報を、前記画像データの中に表示させる第3の表示制御部と、
前記ユーザにより入力された前記付加情報を、前記表示位置を表す情報に対応付けて記憶媒体に記憶させる付加情報取得部と
を具備し、
前記第1のガイド情報および前記第2のガイド情報は、それぞれ、前記画像データの中の基準位置に表示される基準パターンと、前記基準パターンから伸縮操作可能に引き出されて前記付加情報の前記設定対象および前記表示位置に至る線状パターンとからなる、
情報設定制御装置。 - 前記第3のガイド情報は、前記付加情報の前記表示位置に表示される目印パターンと、前記付加情報の前記設定対象と前記目印パターンとの間を接続する引出線パターンとからなる、請求項1に記載の情報設定制御装置。
- 前記第1の表示制御部および前記第2の表示制御部は、それぞれ、前記付加情報の記憶処理終了後、前記第1のガイド情報および前記第2のガイド情報の表示を消去する、請求項1に記載の情報設定制御装置。
- 前記付加情報取得部は、前記付加情報を入力するための入力テンプレートを表示させ、前記入力テンプレートに従って入力された前記付加情報を取得する、請求項1に記載の情報設定制御装置。
- 前記第3のガイド情報を含む前記画像データが表示されている状態で、前記目印パターンを指示する操作が行われた場合に、当該目印パターンにより表される前記表示位置に対応付けて記憶されている前記付加情報を前記記憶媒体から読み出し、読み出された前記付加情報を前記画像データの中の前記表示位置に表示させる第4の表示制御部を、さらに具備する請求項2に記載の情報設定制御装置。
- 情報処理装置が実行する情報設定制御方法であって、
撮影対象となる三次元空間を撮影して得られた画像データが表示されている状態で、前記画像データの中に、付加情報の設定対象を指定するための第1のガイド情報を表示させる過程と、
ユーザの操作に応じて、前記付加情報の表示位置を指定する第2のガイド情報を前記画像データの中に表示させる過程と、
前記第1のガイド情報により指定される前記設定対象と前記第2のガイド情報により指定される前記表示位置とを関連付ける第3のガイド情報を、前記画像データの中に表示させる過程と、
前記ユーザにより入力された前記付加情報を取得し、取得された前記付加情報を前記第2のガイド情報により指定される前記表示位置を表す情報に対応付けて記憶媒体に記憶させる過程と
を具備し、
前記第1のガイド情報および前記第2のガイド情報は、それぞれ、前記画像データの中の基準位置に表示される基準パターンと、前記基準パターンから伸縮操作可能に引き出されて前記付加情報の前記設定対象および前記表示位置に至る線状パターンとからなる、
情報設定制御方法。 - 請求項1乃至5のいずれかに記載の情報設定制御装置が具備する前記各部の処理を、前記情報設定制御装置が備えるプロセッサに実行させるプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020114294A JP7387545B2 (ja) | 2020-07-01 | 2020-07-01 | 情報設定制御装置、方法およびプログラム |
PCT/JP2021/018537 WO2022004156A1 (ja) | 2020-07-01 | 2021-05-17 | 情報設定制御装置、方法およびプログラム |
KR1020237002296A KR20230034308A (ko) | 2020-07-01 | 2021-05-17 | 정보 설정 제어 장치, 방법 및 프로그램 |
US18/145,893 US20230136211A1 (en) | 2020-07-01 | 2022-12-23 | Information setting control device and method, and computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020114294A JP7387545B2 (ja) | 2020-07-01 | 2020-07-01 | 情報設定制御装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022012458A JP2022012458A (ja) | 2022-01-17 |
JP7387545B2 true JP7387545B2 (ja) | 2023-11-28 |
Family
ID=79315894
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020114294A Active JP7387545B2 (ja) | 2020-07-01 | 2020-07-01 | 情報設定制御装置、方法およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230136211A1 (ja) |
JP (1) | JP7387545B2 (ja) |
KR (1) | KR20230034308A (ja) |
WO (1) | WO2022004156A1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010118019A (ja) | 2008-11-14 | 2010-05-27 | Sharp Corp | 端末装置、配信装置、端末装置の制御方法、配信装置の制御方法、制御プログラムおよび記録媒体 |
JP2012244509A (ja) | 2011-05-23 | 2012-12-10 | Alpine Electronics Inc | 車載システム |
JP5295416B1 (ja) | 2012-08-01 | 2013-09-18 | ヤフー株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
WO2013171857A1 (ja) | 2012-05-16 | 2013-11-21 | 楽天株式会社 | 画像処理装置、画像処理装置の制御方法、プログラム、及び情報記憶媒体 |
JP2015138428A (ja) | 2014-01-23 | 2015-07-30 | 三菱電機株式会社 | 付加情報表示装置および付加情報表示プログラム |
JP2019175383A (ja) | 2018-03-29 | 2019-10-10 | 株式会社リコー | 入力装置および入力装置の入力方法、ならびに、出力装置および出力装置の出力方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6542392B2 (ja) | 2016-01-05 | 2019-07-10 | 富士フイルム株式会社 | 処理液、基板の洗浄方法、および、半導体デバイスの製造方法 |
-
2020
- 2020-07-01 JP JP2020114294A patent/JP7387545B2/ja active Active
-
2021
- 2021-05-17 KR KR1020237002296A patent/KR20230034308A/ko not_active Application Discontinuation
- 2021-05-17 WO PCT/JP2021/018537 patent/WO2022004156A1/ja active Application Filing
-
2022
- 2022-12-23 US US18/145,893 patent/US20230136211A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010118019A (ja) | 2008-11-14 | 2010-05-27 | Sharp Corp | 端末装置、配信装置、端末装置の制御方法、配信装置の制御方法、制御プログラムおよび記録媒体 |
JP2012244509A (ja) | 2011-05-23 | 2012-12-10 | Alpine Electronics Inc | 車載システム |
WO2013171857A1 (ja) | 2012-05-16 | 2013-11-21 | 楽天株式会社 | 画像処理装置、画像処理装置の制御方法、プログラム、及び情報記憶媒体 |
JP5295416B1 (ja) | 2012-08-01 | 2013-09-18 | ヤフー株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2015138428A (ja) | 2014-01-23 | 2015-07-30 | 三菱電機株式会社 | 付加情報表示装置および付加情報表示プログラム |
JP2019175383A (ja) | 2018-03-29 | 2019-10-10 | 株式会社リコー | 入力装置および入力装置の入力方法、ならびに、出力装置および出力装置の出力方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2022012458A (ja) | 2022-01-17 |
US20230136211A1 (en) | 2023-05-04 |
WO2022004156A1 (ja) | 2022-01-06 |
KR20230034308A (ko) | 2023-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9805515B2 (en) | System and method for augmented reality | |
US20180286098A1 (en) | Annotation Transfer for Panoramic Image | |
JP6421670B2 (ja) | 表示制御方法、表示制御プログラム、及び情報処理装置 | |
KR20120038316A (ko) | Ar 서비스를 제공하기 위한 사용자 단말기 및 그 방법 | |
US20090290014A1 (en) | Object management apparatus, mobile terminal, and object management method | |
JP2017016466A (ja) | 端末制御方法、画像生成方法、端末制御プログラム、及び端末 | |
KR20130050701A (ko) | 원격 스크린내 콘텐츠 원격 제어 방법 및 장치 | |
US20230131239A1 (en) | Image information generating apparatus and method, and computer-readable storage medium | |
US20180300552A1 (en) | Differential Tracking for Panoramic Images | |
JP2017212510A (ja) | 画像管理装置、プログラム、画像管理システム及び情報端末 | |
JP6721004B2 (ja) | 画像管理システム、及び画像管理方法 | |
JP6597259B2 (ja) | プログラム、情報処理装置、画像表示方法、画像処理システム | |
JP7387545B2 (ja) | 情報設定制御装置、方法およびプログラム | |
JP2016194784A (ja) | 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム | |
JP6617547B2 (ja) | 画像管理システム、画像管理方法、プログラム | |
JP2022166158A (ja) | 記録媒体 | |
JP5221580B2 (ja) | 画像表示システム、携帯情報端末及び画像表示プログラム | |
US20230125097A1 (en) | Photography support device and method, and computer-readable storage medium | |
JP7192929B2 (ja) | 情報処理システム、情報処理装置、情報処理方法及びプログラム | |
US11889237B2 (en) | Setting method and a non-transitory computer-readable storage medium storing a program | |
US20230269481A1 (en) | Information processing system, communication system, and image transmission method | |
US20230128950A1 (en) | Photography position management device and method, and computer-readable storage medium | |
US20230269482A1 (en) | Information processing system, communication system, and image sharing method | |
JP2023066265A (ja) | 情報処理システム、情報処理装置、プログラム、利用者端末、及び情報処理方法 | |
JP2022126546A (ja) | 情報処理装置、情報処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20201020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210422 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20210423 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20220131 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20230206 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230711 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231006 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231017 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231115 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7387545 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |