JP2021177351A - 画像表示装置、制御方法、およびプログラム - Google Patents
画像表示装置、制御方法、およびプログラム Download PDFInfo
- Publication number
- JP2021177351A JP2021177351A JP2020082818A JP2020082818A JP2021177351A JP 2021177351 A JP2021177351 A JP 2021177351A JP 2020082818 A JP2020082818 A JP 2020082818A JP 2020082818 A JP2020082818 A JP 2020082818A JP 2021177351 A JP2021177351 A JP 2021177351A
- Authority
- JP
- Japan
- Prior art keywords
- virtual viewpoint
- parameter
- viewpoint image
- image
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 108
- 230000008569 process Effects 0.000 claims description 77
- 238000013519 translation Methods 0.000 claims description 18
- 238000012545 processing Methods 0.000 description 21
- 230000008859 change Effects 0.000 description 13
- 230000006870 function Effects 0.000 description 8
- 230000009467 reduction Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 6
- 240000004050 Pentaglottis sempervirens Species 0.000 description 5
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 3
- 238000009434 installation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002250 progressing effect Effects 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000009192 sprinting Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
- G06F3/04855—Interaction with scrollbars
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/296—Synchronisation thereof; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
- H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
- H04N21/42224—Touch pad or touch panel provided on the remote control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/12—Acquisition of 3D measurements of objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19641—Multiple cameras having overlapping views on a single scene
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/19682—Graphic User Interface [GUI] presenting system data to the user, e.g. information on a screen helping a user interacting with an alarm system
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
ユーザ操作を介して、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する第一パラメータを受け付ける受付手段と、
仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する、あらかじめ設定された第二パラメータを取得する取得手段と、
前記第一パラメータおよび前記第二パラメータの少なくともいずれかに基づいて前記仮想視点画像を生成して表示部に表示する表示手段と、
を有することを特徴とする。
本実施形態では、複数の撮像装置による撮像に基づく複数の画像と、指定された仮想視点とに基づいて、指定された仮想視点からの見えを表す仮想視点画像を生成するシステムに関して説明を行う。本実施形態における仮想視点画像は、ユーザが自由に(任意に)指定した視点に対応する画像に限定されず、例えば複数の候補からユーザが選択した視点に対応する画像なども仮想視点画像に含まれる。また、本実施形態では仮想視点の指定がユーザ操作により行われる場合を中心に説明するが、仮想視点の指定が画像解析の結果等に基づいて自動で行われてもよい。
まず、図1を参照して本実施形態に係る仮想視点画像生成システム100の構成を説明する。
続いて、図2を参照して画像表示装置104の構成を説明する。
次に、図2(B)を参照して画像表示装置104のハードウェア構成について説明する。画像表示装置104は、CPU(Central Processing Unit)211、RAM(Random Access Memory)212、およびROM(Read Only Memory)213を含む。また、画像表示装置104は、操作入力部214、表示部215、および外部インタフェース216を含む。
次に、図3を参照して仮想カメラ110(または仮想視点)の動作を説明する。その動作の説明のため、先に仮想カメラの位置・姿勢・視錐台・注目点等について説明する。
本実施形態では、図3に説明した仮想カメラ動作を、自動操作と手動操作のそれぞれに自由に割り当てることができる。この割り当てを動作設定処理と呼ぶ。
図4(A)および図4(B)を参照して説明した動作設定処理において自動操作に指定された仮想カメラ動作に関して、タイムコード毎に具体的内容を示した情報を自動操作情報と呼ぶ。ここで、図4(C)および図4(D)を参照して、自動操作情報について説明する。自動操作情報で指定される仮想カメラ動作の識別子(種類)は、図4(A)および図4(B)を参照して説明したように動作設定処理により決定される。図4(C)は図4(B)の動作設定例に対する自動操作情報例である。
図5を用いて、本実施形態に係る仮想カメラの手動操作について説明する。手動操作で指定される仮想カメラ動作は、図4(A)および図4(B)に示した動作設定処理によって決定されるものであった。ここでは、動作設定処理で割り当てられた仮想カメラ動作に対する手動操作方法や、タイムコードの手動操作方法について説明する。
次に、図6のフローチャートを用いて、本実施形態に係る自動操作と手動操作を有意に組み合わせる仮想カメラの制御処理について説明する。
図7を用いて、本実施形態に係る自動操作と手動操作とを組み合わせた仮想カメラの制御例、及び、仮想視点画像の表示例について説明する。
本実施形態では、画像表示装置104におけるタグ生成処理、及び、タグ再生処理について説明する。図1の仮想視点画像生成システムと、図2画像表示装置104を含む、第1実施形態と同様の構成、処理、機能は同一の参照符号を使用し、説明を省略する。
次に、図8(A)を参照して画像表示装置104においてタグを生成する方法について説明する。
次に、図9のフローチャートと図8(B)および図8(C)の操作画面を用いて、画像表示装置104におけるタグ再生について説明する。
本実施形態では、画像表示装置104における仮想カメラの手動操作の一例について説明する。指の本数によるタッチ操作の切り替えに応じて仮想カメラ動作を切り替える方法と比較して、1本の指で仮想カメラの動作を切り替えることができるため、ユーザがより簡単に手動操作を行うことができる。
本実施形態では、画像表示装置104における仮想カメラの自動操作の一例について説明する。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (23)
- 多視点画像から生成された仮想視点画像であって、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを設定可能な仮想視点画像を表示する画像表示装置であって、
ユーザ操作を介して、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する第一パラメータを受け付ける受付手段と、
仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する、あらかじめ設定された第二パラメータを取得する取得手段と、
前記第一パラメータおよび前記第二パラメータの少なくともいずれかに基づいて前記仮想視点画像を生成して表示部に表示する表示手段と、
を有することを特徴とする画像表示装置。 - 前記第一パラメータおよび前記第二パラメータは、所定の時間における仮想視点画像における姿勢および注目点の組み合わせに対応することを特徴とする請求項1に記載の画像表示装置。
- 前記第一パラメータおよび前記第二パラメータは、前記仮想視点画像における注目点の平行移動、注目点を中心とした仮想視点の回転、ズームインおよびズームアウトの少なくともいずれかに対応することを特徴とする請求項1または2に記載の画像表示装置。
- 前記受付手段は、前記表示部に表示されたグラフィカルユーザインタフェース(GUI)およびタッチパネルの少なくともいずれかを介してユーザ操作を受け付けることを特徴とする請求項1から3のいずれか1項に記載の画像表示装置。
- 前記受付手段は、前記表示部に表示された仮想視点画像に対するタップ操作またはクリック操作を受け付けた場合に、前記タップ操作または前記クリック操作に対応する位置を移動先とする注目点の平行移動に対応する前記第一パラメータを取得することを特徴とする請求項4に記載の画像表示装置。
- 前記受付手段は、前記仮想視点画像の端部の領域におけるドラッグ操作またはスワイプ操作を受け付けた場合に、前記ドラッグ操作または前記スワイプ操作の方向に対応するズームインまたはズームアウトに対応する前記第一パラメータを取得することを特徴とする請求項4または5に記載の画像表示装置。
- 前記表示手段は、仮想視点の姿勢および注目点の位置の少なくともいずれかの要素が、前記第二パラメータによって変化する場合に、前記要素については前記第一パラメータに基づかずに前記仮想視点画像を生成して表示することを特徴とする請求項1から6のいずれか1項に記載の画像表示装置。
- 前記表示手段は、仮想視点の姿勢および注目点の位置の少なくともいずれかの要素が、前記第二パラメータによって変化せず、前記第一パラメータによって変化する場合に、前記要素については前記第一パラメータに基づいて前記仮想視点画像を生成して表示することを特徴とする請求項7に記載の画像表示装置。
- 仮想視点の姿勢および注目点の位置の少なくともいずれかの要素が、前記第二パラメータおよび前記第一パラメータによって変化する場合に、前記要素については前記第一パラメータに基づかずに前記仮想視点画像を生成するか否かを設定する設定手段をさらに備えることを特徴とする請求項7または8に記載の画像表示装置。
- 前記表示手段は、前記仮想視点画像の表示中であって、一時停止の指示を受け付けた場合に、前記第一パラメータに基づくとともに前記第二パラメータに基づかずに前記仮想視点画像を生成して表示することを特徴とする請求項1から9のいずれか1項に記載の画像表示装置。
- 前記表示手段は、前記仮想視点画像の表示中であって、一時停止の指示を受け付けた後に一時停止の解除の指示を受け付けた場合に、前記第二パラメータに基づいて前記仮想視点画像を生成することを特徴とする請求項10に記載の画像表示装置。
- 前記表示手段は、前記仮想視点画像の表示中であって、一時停止の指示を受け付けた後に一時停止の解除の指示を受け付けた場合に、一時停止の指示を受け付けた時点の仮想視点画像における姿勢および注目点の位置で前記仮想視点画像を表示することを特徴とする請求項10に記載の画像表示装置。
- 前記第一パラメータおよび前記第二パラメータは、前記仮想視点画像の再生速度の指定を含むことを特徴とする請求項1から12のいずれか1項に記載の画像表示装置。
- 仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する第三パラメータを、前記仮想視点画像における時間と対応付けて記録する記録手段をさらに有し、
前記表示手段は、前記第三パラメータに対応する時間において、前記第三パラメータを優先して前記仮想視点画像を生成して表示することを特徴とする請求項1から13のいずれか1項に記載の画像表示装置。 - 前記表示手段は、前記第三パラメータに対応する時間を含む所定の期間における前記仮想視点画像をリピート再生することを特徴とする請求項14に記載の画像表示装置。
- 前記表示手段は、前記リピート再生の間に、ユーザ操作を介して前記第一パラメータを受け付けた場合に、受け付けた前記第一パラメータを前記第三パラメータとして記録することを特徴とする請求項15に記載の画像表示装置。
- 前記表示手段は、前記記録手段が記録した前記第三パラメータに対応する時間を区別可能に表示することを特徴とする請求項14から16のいずれか1項に記載の画像表示装置。
- 前記表示手段は、前記第三パラメータに基づいて前記仮想視点画像を再生するモードと、前記第三パラメータを記録するモードと、前記第三パラメータに基づかない通常再生モードとを切り替えて生成した前記仮想視点画像を表示することを特徴とする請求項14から17のいずれか1項に記載の画像表示装置。
- 前記表示手段は、前記仮想視点画像のタイムコードを指定可能な第1スライダーと、前記タイムコードの一部を拡大することで細かい粒度でタイムコードを指定可能な第2スライダーとを含むグラフィカルユーザインタフェースをさらに表示することを特徴とする請求項1から18のいずれか1項に記載の画像表示装置。
- 前記表示手段は、前記表示部の更新レートに応じて前記仮想視点画像を生成して表示することを特徴する請求項1から19のいずれか1項に記載の画像表示装置。
- 前記多視点画像と前記仮想視点画像を生成するためのデータとの少なくともいずれかを外部装置から受信する受信手段をさらに有することを特徴とする請求項1から20のいずれか1項に記載の画像表示装置。
- 多視点画像から生成された仮想視点画像であって、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを設定可能な仮想視点画像を表示する画像表示装置の制御方法であって、
ユーザ操作を介して、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する第一パラメータを受け付ける受付工程と、
仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する、あらかじめ設定された第二パラメータを取得する取得工程と、
前記第一パラメータおよび前記第二パラメータの少なくともいずれかに基づいて前記仮想視点画像を生成して表示部に表示する表示工程と、
を含むことを特徴とする制御方法。 - 表示部を有するコンピュータに、
多視点画像から生成された仮想視点画像であって、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを設定可能な仮想視点画像を表示する画像表示装置の制御方法であって、
ユーザ操作を介して、仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する第一パラメータを受け付ける受付工程と、
仮想視点画像における姿勢および注目点の位置の少なくともいずれかを指定する、あらかじめ設定された第二パラメータを取得する取得工程と、
前記第一パラメータおよび前記第二パラメータの少なくともいずれかに基づいて前記仮想視点画像を生成して表示部に表示する表示工程と、
を含む制御方法を実行させることを特徴とするプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020082818A JP7458889B2 (ja) | 2020-05-08 | 2020-05-08 | 画像表示装置、制御方法、およびプログラム |
US17/238,513 US20210349620A1 (en) | 2020-05-08 | 2021-04-23 | Image display apparatus, control method and non-transitory computer-readable storage medium |
CN202110472533.XA CN113630547A (zh) | 2020-05-08 | 2021-04-29 | 图像显示装置、控制方法及非暂时性计算机可读存储介质 |
KR1020210056992A KR20210136858A (ko) | 2020-05-08 | 2021-05-03 | 화상표시장치, 제어방법, 및 프로그램 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020082818A JP7458889B2 (ja) | 2020-05-08 | 2020-05-08 | 画像表示装置、制御方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021177351A true JP2021177351A (ja) | 2021-11-11 |
JP7458889B2 JP7458889B2 (ja) | 2024-04-01 |
Family
ID=78377987
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020082818A Active JP7458889B2 (ja) | 2020-05-08 | 2020-05-08 | 画像表示装置、制御方法、およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20210349620A1 (ja) |
JP (1) | JP7458889B2 (ja) |
KR (1) | KR20210136858A (ja) |
CN (1) | CN113630547A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7337428B1 (ja) | 2022-05-24 | 2023-09-04 | 四川中▲縄▼矩▲陣▼技▲術▼▲発▼展有限公司 | 対象物の双方向な三次元表現の制御方法、制御装置及び記録媒体 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022131778A (ja) | 2021-02-26 | 2022-09-07 | キヤノン株式会社 | 情報処理装置、情報処理方法、およびプログラム |
US20230237730A1 (en) * | 2022-01-21 | 2023-07-27 | Meta Platforms Technologies, Llc | Memory structures to support changing view direction |
CN114900679B (zh) * | 2022-05-25 | 2023-11-21 | 安天科技集团股份有限公司 | 一种三维模型展示方法、装置、电子设备及可读存储介质 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7380216B2 (en) * | 2000-11-30 | 2008-05-27 | International Business Machines Corporation | Zoom-capable scrollbar |
US6816174B2 (en) * | 2000-12-18 | 2004-11-09 | International Business Machines Corporation | Method and apparatus for variable density scroll area |
CA2587644C (en) * | 2004-11-12 | 2015-01-13 | Mok3, Inc. | Method for inter-scene transitions |
US7933395B1 (en) * | 2005-06-27 | 2011-04-26 | Google Inc. | Virtual tour of user-defined paths in a geographic information system |
US20070238981A1 (en) * | 2006-03-13 | 2007-10-11 | Bracco Imaging Spa | Methods and apparatuses for recording and reviewing surgical navigation processes |
JP2009295147A (ja) | 2008-05-07 | 2009-12-17 | Hoya Corp | スクロール表示可能な情報処理装置 |
JP2011043991A (ja) | 2009-08-21 | 2011-03-03 | Olympus Imaging Corp | ユーザインターフェース装置、携帯機器、およびプログラム |
JP5675141B2 (ja) | 2010-03-29 | 2015-02-25 | キヤノン株式会社 | 再生装置及び再生方法 |
US9367959B2 (en) * | 2012-06-05 | 2016-06-14 | Apple Inc. | Mapping application with 3D presentation |
JP6104597B2 (ja) | 2012-12-19 | 2017-03-29 | Ntn株式会社 | フォイル軸受 |
US9836204B1 (en) * | 2013-03-14 | 2017-12-05 | Visualon, Inc. | Scrolling control for media players |
US9462301B2 (en) * | 2013-03-15 | 2016-10-04 | Google Inc. | Generating videos with multiple viewpoints |
JP2014215828A (ja) | 2013-04-25 | 2014-11-17 | シャープ株式会社 | 画像データ再生装置、および視点情報生成装置 |
US9329750B2 (en) * | 2013-09-10 | 2016-05-03 | Google Inc. | Three-dimensional tilt and pan navigation using a single gesture |
US10852428B2 (en) * | 2014-02-21 | 2020-12-01 | FLIR Belgium BVBA | 3D scene annotation and enhancement systems and methods |
WO2016097940A1 (en) * | 2014-12-16 | 2016-06-23 | 3Ditize Sl | 3d rotational presentation generated from 2d static images |
JP6727106B2 (ja) | 2016-11-30 | 2020-07-22 | キヤノン株式会社 | 画像音響処理装置および画像音響処理方法、プログラム |
JP6539253B2 (ja) | 2016-12-06 | 2019-07-03 | キヤノン株式会社 | 情報処理装置、その制御方法、およびプログラム |
US10569172B2 (en) * | 2017-09-19 | 2020-02-25 | Canon Kabushiki Kaisha | System and method of configuring a virtual camera |
JP2019114847A (ja) | 2017-12-21 | 2019-07-11 | オリンパス株式会社 | 画像記録制御装置、画像記録方法、画像記録プログラム、撮像装置及び画像記録制御システム |
JP7301507B2 (ja) | 2018-08-08 | 2023-07-03 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP2020067716A (ja) | 2018-10-22 | 2020-04-30 | キヤノン株式会社 | 情報処理装置、制御方法、及びプログラム |
-
2020
- 2020-05-08 JP JP2020082818A patent/JP7458889B2/ja active Active
-
2021
- 2021-04-23 US US17/238,513 patent/US20210349620A1/en active Pending
- 2021-04-29 CN CN202110472533.XA patent/CN113630547A/zh active Pending
- 2021-05-03 KR KR1020210056992A patent/KR20210136858A/ko active Search and Examination
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7337428B1 (ja) | 2022-05-24 | 2023-09-04 | 四川中▲縄▼矩▲陣▼技▲術▼▲発▼展有限公司 | 対象物の双方向な三次元表現の制御方法、制御装置及び記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
US20210349620A1 (en) | 2021-11-11 |
JP7458889B2 (ja) | 2024-04-01 |
CN113630547A (zh) | 2021-11-09 |
KR20210136858A (ko) | 2021-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110944727B (zh) | 控制虚拟照相机的系统和方法 | |
JP7458889B2 (ja) | 画像表示装置、制御方法、およびプログラム | |
US9684435B2 (en) | Camera selection interface for producing a media presentation | |
KR102500615B1 (ko) | 정보 처리장치, 정보 처리방법 및 프로그램 | |
WO2018051688A1 (ja) | 仮想視点画像の生成に関する情報処理装置、方法及びプログラム | |
WO2017119034A1 (ja) | 撮影システム、撮影方法およびプログラム | |
JP2006087139A (ja) | カメラ制御用ユーザインタフェースシステム | |
TW201501510A (zh) | 多視角影像之顯示系統、方法及其非揮發性電腦可讀取紀錄媒體 | |
CN108377361B (zh) | 一种监控视频的显示控制方法及装置 | |
KR102484197B1 (ko) | 정보 처리장치, 정보 처리방법 및 기억매체 | |
JP2021013095A (ja) | 画像処理装置、表示方法、及び、プログラム | |
JP5312505B2 (ja) | ゲーム装置、ゲーム装置の制御方法、及びプログラム | |
US20160344946A1 (en) | Screen System | |
AU2018391746B2 (en) | Display control device and display control method | |
Foote et al. | One-man-band: A touch screen interface for producing live multi-camera sports broadcasts | |
EP4125044A2 (en) | Image processing apparatus, image processing method, and program | |
JP2020102687A (ja) | 情報処理装置、画像処理装置、画像処理方法、及びプログラム | |
KR20180045668A (ko) | 터치 유저 인터페이스를 이용한 카메라의 이동경로와 이동시간의 동기화를 위한 사용자 단말장치 및 컴퓨터 구현 방법 | |
KR101263881B1 (ko) | 무인 방송 제어 시스템 | |
KR101743888B1 (ko) | 터치 유저 인터페이스를 이용한 카메라의 이동경로와 이동시간의 동기화를 위한 사용자 단말장치 및 컴퓨터 구현 방법 | |
JP2020136821A (ja) | 情報処理装置及びその制御方法、プログラム | |
JP5967126B2 (ja) | 端末装置及びプログラム | |
JP2024017779A (ja) | 画像処理装置、画像処理方法及びコンピュータプログラム | |
JP2022182836A (ja) | 映像処理装置及びその制御方法及びプログラム | |
JP2021043922A (ja) | 情報処理装置、システム、生成方法、及び、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230417 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231206 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240205 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7458889 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |