JP7131388B2 - 表示装置およびプログラム - Google Patents
表示装置およびプログラム Download PDFInfo
- Publication number
- JP7131388B2 JP7131388B2 JP2018542967A JP2018542967A JP7131388B2 JP 7131388 B2 JP7131388 B2 JP 7131388B2 JP 2018542967 A JP2018542967 A JP 2018542967A JP 2018542967 A JP2018542967 A JP 2018542967A JP 7131388 B2 JP7131388 B2 JP 7131388B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- moving
- display
- camera
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/815—Camera processing pipelines; Components thereof for controlling the resolution by using a single image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
- H04N23/671—Focus control based on electronic image sensor signals in combination with active ranging signals, e.g. using light or sound signals emitted toward objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/72—Combination of two or more compensation controls
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
- Television Signal Processing For Recording (AREA)
- Closed-Circuit Television Systems (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Processing Or Creating Images (AREA)
- Studio Circuits (AREA)
Description
(2)本発明の第2の態様によるプログラムは、コンピュータに、撮像装置によって生成された動画像データと、前記動画像データを生成している間の前記撮像装置の速度情報を取得させる第1手順と、前記第1手順で取得した速度情報に基づいて、前記動画像データを用いて表示部に表示させる動画像の特定の被写体にブレを付加した画像を表示させる第2手順と、を実行させる。
図1~図5を参照して、画像表示装置の第1の実施の形態を説明する。図1は、第1の実施の形態の画像表示装置の構成示すブロック図である。
本実施の形態の画像表示装置は、画像を表示するためのモニタを有するパーソナルコンピュータ等により構成される。この画像表示装置では、外部の撮像装置で撮像して得られた動画像や静止画像を表示できる。以下、詳細に説明する。
なお、第1の実施の形態では、外部の撮像装置で生成された動画像の画像ファイルには、後述するように動画像の各フレームごとに撮像した時の撮像装置の速度情報が含まれている。以下の第1の実施の形態では速度情報を移動速度の情報として説明する。ここで、速度情報(移動速度の情報)は、フレームごとに有している必要はなく、所定のフレーム間隔(3フレームごと)に有していてもよく、所定の時間間隔(例えば3秒おき)で有していてもよい。また、加速度に所定の変化があった時刻ごと移動速度の情報(あるいは移動速度を算出できる情報)を有していてもよい。以下の説明では、動画像の各フレームを撮像した時の撮像装置の移動速度の情報を移動速度データとも呼ぶ。
画像データ入力部101aは、たとえば記憶装置102に記録されている画像ファイルのデータを読み出す。
表示範囲設定部101bにおける表示範囲の設定、および表示画像生成部101cにおける表示用の画像信号の生成については、後で詳述する。
具体的には、制御回路101は、次のようにしてカメラ1の移動速度に基づいてモニタ104に表示させる画像の範囲を変更し、モニタ104に表示させる。
制御回路101の表示範囲設定部101bは、カメラ1の移動速度Vが第1の所定値V1以上であるフレームについては、そのフレームの画像の一部を切り出すクロップ処理を行う。以下の説明では、クロップ処理によって切り出す領域をクロップ領域と呼ぶ。たとえば、表示範囲設定部101bは、クロップ処理によって、図3の画像50に対して、枠81で囲んだ範囲をクロップ領域に設定する。
また、表示範囲設定部101bは、カメラ1の移動速度Vが第2の所定値V2以上であるフレームについては、そのフレームの画像に対して第1のクロップ領域よりも狭い第2のクロップ領域を設定する。
なお、表示範囲設定部101bは、カメラ1の移動速度Vが第1の所定値V1未満であるフレームや、移動速度データが存在しないフレームについては、クロップ処理を行わない。
なお、カメラ1の移動速度Vに応じてクロップ領域の大きさを上述したように2段階で変更することは、一例であり、1段階であってもよく、3段階以上であってもよい。また、上述したようにクロップ領域の大きさを移動速度Vに応じて段階的に変更するのではなく、カメラ1の移動速度Vに応じて連続的にクロップ領域の大きさを変更するようにしてもよい。具体的には、カメラ1の移動速度が速くなるほど、クロップ領域の大きさを狭くするようにしてもよい。例えば、初期設定で設定されるクロップ領域からカメラ1の移動速度が速くなるほど連続的にクロップ領域の大きさを狭くすることとしてもよい。
なお、後述する拡大処理の便宜上、クロップ領域は、撮像して得られる画像と同じアスペクト比を有する矩形形状であることが望ましい。
なお、表示画像生成部101cは、上述したクロップ処理が行われていなければ上述した拡大処理は行わず、画像データ入力部101aで読み込んだ画像をそのフレームの表示用の画像とする。したがって、そのフレームの再生時には、モニタ104には、記憶装置102に記録されている画像がそのまま表示される。
フレームF1,F2の撮像時のカメラ1の移動速度Vが第1の所定値V1未満であった場合、表示画像生成部101cは、記憶装置102に記録されている各フレームF1,F2の画像501,502に対して上述したクロップ処理および拡大処理を行わない。表示画像生成部101cは、記憶装置102に記録されている各フレームF1,F2の画像501,502の画像を各フレームF1,F2の表示用の画像とする。したがって、モニタ104には画像501,502が表示される。
なお、表示画像生成部101cは、フレームF3の撮像時のカメラ1の移動速度Vが第1の所定値V1以上であり、かつ、第2の所定値V2未満であれば、画像503に対して第1のクロップ領域を設定する。また、表示画像生成部101cは、フレームF3の撮像時のカメラ1の移動速度Vが第2の所定値V2以上であれば、画像503に対して第2のクロップ領域を設定する。
そして、表示画像生成部101cは、クロップ処理によって切り出されたクロップ領域803の画像をクロップ処理前の画像503の大きさに拡大し、拡大後の画像703をフレームF3の表示用の画像とする。したがって、モニタ104には拡大後の画像703が表示される。
ステップS11で読み込んだカメラ1の移動速度Vが第1の所定値V1以上であればステップS15が否定判断されてステップS17へ進み、制御回路101の表示範囲設定部101bは、ステップS11で読み込んだカメラ1の移動速度Vが第2の所定値V2以上であるか否かを判断する。
ステップS11で読み込んだカメラ1の移動速度Vが第2の所定値V2以上であればステップS17が肯定判断されてステップS23へ進み、制御回路101の表示範囲設定部101bは、未表示フレームの画像に対して上述したように第1のクロップ領域よりも小さな第2のクロップ領域を切り出すクロップ処理を行ってステップS25へ進む。
ステップS11で読み込んだカメラ1の移動速度Vが第1の所定値V1未満である場合も同様である。すなわち、ステップS11で読み込んだカメラ1の移動速度Vが第1の所定値V1未満であればステップS15が肯定判断されてステップS27へ進み、制御回路101は、ステップS11で読み込んだ未表示フレームの画像をモニタ104に表示させてステップS31へ進む。
(1)画像表示装置100は、カメラ1によって撮像された動画像と、撮像時のカメラの移動速度Vに関する移動速度データとを取得する画像データ入力部101aと、画像データ入力部101aで取得した移動速度Vに基づいて動画像の表示領域を決定する表示範囲設定部101bと、表示範囲設定部101bで決定された表示領域内の動画像を表示するモニタ104と、を備える。
これにより、カメラ1の移動速度Vが速くなる場面では、モニタ104に表示される画像の一部を拡大して表示することができるので、モニタ104に表示された動画像を閲覧すると、閲覧者は、カメラ1の移動速度Vが速くなると視野が狭まったように感じる。これにより、速度感が薄れてしまうことを抑制でき、動画像の閲覧者に臨場感を与えることができる。
図6~8を参照して、画像表示装置の第2の実施の形態を説明する。以下の説明では、第1の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第1の実施の形態と同じである。本実施の形態では、主に、カメラ1の移動速度Vが速くなる場面では、画像の一部を拡大する代わりに、画像の周辺部分の像の鮮明度を下げる点が、第1の実施の形態と異なる。
(a)像をぼかす。例えば像の輪郭を不鮮明にする。
(b)コントラストを低下させる。
(c)彩度を低下させる。
(d)明度を低下させる。
(e)ブラーを付加する。
露光時間が短い場合、像ブレが必要以上に抑制され、再生時に動画像の滑らかさが感じられ難くなり、速度感が薄れてしまうおそれがある。このような場合にはブラーを付加することで、適度な像ブレによって動画像が滑らかに再生されるので、再生された動画像を閲覧した閲覧者が速度感を感じることができ、臨場感を味わうことができる。
なお、非対象領域84の形状は、図7に示すように楕円形であってもよく、円形であってもよく、矩形であってもよく、直線や曲線で構成される閉じた形状であってもよい。
なお、カメラ1の移動速度Vに応じて処理対象領域の大きさを上述したように2段階で変更することは、一例であり、1段階であってもよく、3段階以上であってもよい。また、上述したように処理対象領域の大きさを移動速度Vに応じて段階的に変更するのではなく、カメラ1の移動速度Vに応じて連続的に処理対象領域の大きさを変更するようにしてもよい。具体的には、カメラ1の移動速度Vが速くなるほど、処理対象領域の大きさを大きくするようにしてもよい。例えば、初期設定で設定される処理対象領域からカメラ1の移動速度Vが速くなるほど連続的に処理対象領域の大きさを大きくすることとしてもよい。
また、表示画像生成部101cは、カメラ1の移動速度Vが速くなるほど処理対象領域が不鮮明となるように鮮明度低下処理を行ってもよい。
表示画像生成部101cは、上述した領域設定処理が行われていなければ上述した鮮明度低下処理は行わず、画像データ入力部101aで読み込んだ画像をそのフレームの表示用の画像とする。したがって、そのフレームの再生時には、モニタ104には、記憶装置102に記録されている画像がそのまま表示される。
ステップS11で読み込んだカメラ1の移動速度Vが第2の所定値V2未満であればステップS17が否定判断されてステップS41へ進み、制御回路101Aの処理対象領域設定部101dは、上述したように第1の処理対象領域を設定してステップS45へ進む。
ステップS11で読み込んだカメラ1の移動速度Vが第2の所定値V2以上であればステップS17が肯定判断されてステップS43へ進み、制御回路101Aの処理対象領域設定部101dは、上述したように第1の処理対象領域よりも広い第2の処理対象領域を設定してステップS45へ進む。
ステップS45において、制御回路101Aの表示画像生成部101cは、設定された処理対象領域に対して、上述した鮮明度低下処理を行ってステップS27へ進む。ステップS27において、制御回路101は、ステップS45で鮮明度低下処理を行った後の画像をモニタ104に表示させてステップS31へ進む。ステップS31以降の処理は、図5に示した第1の実施の形態と同じである。
(1)画像表示装置100は、カメラ1によって撮像された動画像と、撮像時のカメラ1の移動速度Vに関する移動速度データとを取得する画像データ入力部101aと、画像データ入力部101aで取得した移動速度Vに基づいて動画像の周辺領域の像を不鮮明にする処理を行う処理対象領域設定部101dおよび表示画像生成部101cと、処理対象領域設定部101dおよび表示画像生成部101cで処理された動画像を表示するモニタ104と、を備える。
これにより、カメラ1の移動速度Vが速くなる場面では、モニタ104に表示される画像の周辺領域の鮮明度を低下させることができるので、モニタ104に表示された動画像を閲覧すると、閲覧者は、カメラ1の移動速度Vが速くなると視野が狭まったように感じる。これにより、速度感が薄れてしまうことを抑制でき、動画像の閲覧者に臨場感を与えることができる。
図9~図11を参照して、第3の実施の形態を説明する。以下の説明では、第1および第2の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第1および第2の実施の形態と同じである。第3の実施の形態では、主に、動画像の画角をカメラ1の撮像時に変更する点が第1の実施の形態と異なる。
移動速度算出部34bは、カメラ1の加速度の情報に基づいて、カメラ1の移動速度を算出する。
表示部36は、画像処理部34cによって生成された画像や画像処理された画像、記録部38によって読み出された画像などを再生表示する。表示部36は、操作メニュー画面や、撮像条件を設定するための設定画面等の表示も行う。
記録部38は、制御部34からの指示に応じて、不図示のメモリカードなどで構成される記録媒体に画像データなどを記録する。また、記録部38は、制御部34からの指示に応じて記録媒体に記録されている画像データを読み出す。
撮像時クロップ処理は、撮像して得られた画像の一部を切り出す処理である。以下の説明では、撮像時クロップ処理によって切り出す領域を撮像時クロップ領域と呼ぶ。たとえば、図3の画像50を例に挙げて説明すると、画像処理部34cは、画像50に対して、枠81で囲んだ範囲を撮像時クロップ領域に設定する。
なお、撮像時クロップ領域の中心位置は、撮像して得られた画像の中心位置としてもよく、カメラ1の移動方向に基づいて求めた位置としてもよい。なお、後述する撮像時拡大処理の便宜上、撮像時クロップ領域は、撮像して得られる画像と同じアスペクト比を有する矩形形状であることが望ましい。
画像処理部34cは、撮像して得られた画像の画像データに代えて、上述した撮像時クロップ処理および撮像時拡大処理によって得られた画像の画像データを記録用の画像データとして扱う。
なお、画像処理部34cは、移動速度算出部34bで算出されたカメラ1の移動速度Vが第1の所定値V1未満であれば、上述した撮像時クロップ処理と、撮像時拡大処理とを行わず、撮像して得られた画像の画像データを記録用の画像データとして扱う。なお、撮像してクロップ処理をした画像については、記録時にはクロップにより生成した動画像の拡大処理を行わずに記録することとしてもよい。
時刻t31,t32では、カメラ1の移動速度Vが第1の所定値V1未満であるものとする。この場合、画像処理部34cは、時刻t31,t32から露光が開始される各フレームF31,F32において撮像して得られた画像531,532に対して上述した撮像時クロップ処理および撮像時拡大処理を行わない。画像処理部34cは、各フレームF31,F32において撮像して得られた画像531,532の画像データを記録用の画像データとして扱う。
なお、画像処理部34cは、カメラ1の移動速度Vが第1の所定値V1以上であり、かつ、第2の所定値V2未満であれば、画像533に対して第1の撮像時クロップ領域を設定する。また、画像処理部34cは、カメラ1の移動速度Vが第2の所定値V2以上であれば、画像533に対して第2の撮像時クロップ領域を設定する。
ステップS117で算出されたカメラ1の移動速度Vが第2の所定値V2未満であればステップS123が否定判断されてステップS171へ進み、制御部34の画像処理部34cは、上述したように第1の撮像時クロップ領域を切り出す撮像時クロップ処理を行ってステップS175へ進む。
ステップS117で算出されたカメラ1の移動速度Vが第2の所定値V2以上であればステップS123が肯定判断されてステップS173へ進み、制御部34の画像処理部34cは、上述したように第2の撮像時クロップ領域を切り出す撮像時クロップ処理を行ってステップS175へ進む。
ステップS135において、制御部34は、動画像の撮像の終了が指示されたか否かを判断する。ステップS35が否定判断されるとステップS115へ戻り、ステップS135が肯定判断されるとステップS137へ進む。
(1)カメラ1は、撮像素子33aが生成した信号に画像処理を行う画像処理部34cをさらに備える。画像処理部34cは、加速度センサ35および移動速度算出部34bで検出された移動速度Vが速くなった場合に撮像して得られた画像の一部だけを切り出し、切り出した画像を拡大する。記録部38は、画像処理部34cが拡大した画像を記録する。
本実施の形態のカメラ1で撮像された動画像を閲覧すると、閲覧者は、カメラ1の移動速度Vが速くなると視野が狭まったように感じる。これにより、速度感が薄れてしまうことを抑制でき、動画像の閲覧者に臨場感を与えることができる。
図12を参照して、撮像装置の第4の実施の形態を説明する。以下の説明では、第1から第3の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第1から第3の実施の形態と同じである。第4の実施の形態では、主に、カメラ1の移動速度Vが速くなると、動画像の画角を変更する代わりに、画像の周辺部分の像の鮮明度を下げる点が第3の実施の形態と異なる。換言すると、第4の実施の形態では、撮像時に画像の周辺部分の像の鮮明度を低下させて記録する点が、第2の実施の形態と異なる。
(a)像をぼかす。すなわち像の輪郭を不鮮明にする。
(b)コントラストを低下させる。
(c)彩度を低下させる。
(d)明度を低下させる。
なお、第2の実施の形態と同様に、ブラーを付加する処理を行ってもよい。
なお、撮像時非対象領域の中心位置は、撮像して得られた画像の中心位置としてもよく、カメラ1の移動方向に基づいて求めた位置としてもよい。また、撮像時非対象領域の形状は、第2の実施の形態の非対象領域84と同様に楕円形であってもよく、円形であってもよく、矩形であってもよく、直線や曲線で構成される閉じた形状であってもよい。
なお、画像処理部34cは、撮像時処理対象領域の全体が同程度に不鮮明となるように撮像時鮮明度低下処理を行ってもよく、撮像時非対象領域から離れるにつれてより不鮮明となるように撮像時鮮明度低下処理を行ってもよい。具体的には、画像処理部34bは、非対象領域から離れるにつれて像をぼかす程度を大きくする。また、例えば、画像処理部34bは、非対象領域から離れるにつれてコントラスト、彩度あるいは明度の少なくともいずれかを低下させてもよい。これらのぼかし、コントラストの低下、彩度の低下、明度の低下は、いずれか一つのみを行ってもよく、2つ以上の画像処理を合わせて行ってもよい。
なお、画像処理部34cは、移動速度算出部34bで算出されたカメラ1の移動速度Vが第1の所定値V1未満であれば、上述した撮像時鮮明度低下処理を行わず、撮像して得られた画像の画像データを記録用の画像データとして扱う。
ステップS117で算出されたカメラ1の移動速度Vが第2の所定値V2未満であればステップS123が否定判断されてステップS181へ進み、制御部34の画像処理部34cは、上述したように第1の撮像時処理対象領域を設定し、撮像時鮮明度低下処理を行ってステップS135へ進む。
ステップS117で算出されたカメラ1の移動速度Vが第2の所定値V2以上であればステップS123が肯定判断されてステップS183へ進み、制御部34の画像処理部34cは、上述したように第2の撮像時処理対象領域を設定し、撮像時鮮明度低下処理を行ってステップS135へ進む。
(1)カメラ1は、撮像素子33aが生成した信号に画像処理を行う画像処理部34cを備える。画像処理部34cは、加速度センサ35および移動速度算出部34bで検出された移動速度Vが速くなった場合に撮像して得られた画像の周辺部分の鮮明度を低下させる撮像時鮮明度低下処理を行う。記録部38は、撮像時鮮明度低下処理が行われた画像を記録する。
本実施の形態のカメラ1で撮像された動画像を閲覧すると、閲覧者は、カメラ1の移動速度Vが速くなると視野が狭まったように感じる。これにより、速度感が薄れてしまうことを抑制でき、動画像の閲覧者に臨場感を与えることができる。
たとえば、制御部34は、第1領域の露光時間を第2領域の露光時間よりも長く設定し、領域によって露光時間が違っても適正露出となるように第1領域の感度を第2領域の感度よりも低く設定してもよい。これにより、撮像時処理対象領域の画像の像ブレの量が撮像時非対象領域の画像の像ブレの量よりも多くなるので、第2の実施の形態のようにブラーを付加した場合と同様の作用効果が得られる。
たとえば、制御部34は、第1領域のフレームレートを第2領域のフレームレートよりも下げる。これにより、第1領域の露光時間を第2領域の露光時間よりもさらに長く設定できるので、第2の実施の形態のようにブラーを付加した場合の作用効果をより一層高めることができる。
(変形例1)上述した第1および第2の実施の形態では、カメラ1の移動速度が速くなる場面では、自動的にクロップ処理や拡大処理等が行われた。これに対して変形例1では、動画像の再生時にクロップ処理や拡大処理等が行われるか否か等をユーザが再生モードを選択することで設定できる。
上述した高機能携帯電話機250、またはタブレット端末などのモバイル機器への上述した各実施の形態のプログラムの供給は、たとえば図13に例示するように、プログラムを格納した画像表示装置(パーソナルコンピュータ)100から赤外線通信や近距離無線通信によってモバイル機器へ送信することができる。
変形例3の画像表示装置100では、記憶装置102に記録されている動画像の画像ファイルを読み込んで、第1の実施の形態と同様にクロップ処理や拡大処理を行って新たな画像ファイルを生成する。すなわち、たとえば、図4に示したフレームF1やフレームF2の画像501,502は変更されずに新たな画像ファイルに記録されるが、フレームF3やフレームF4では、元の画像503,504に代えて、クロップ処理および拡大処理が行われた後の画像703,704が新たな画像ファイルに記録される。
このようにして、生成された新たな画像ファイルでは、動画像の再生時にクロップ処理や拡大処理等を行わなくても、カメラ1の移動速度Vが速くなる場面では画像の一部が拡大されてモニタ104に表示される。
また、画像ファイルに撮像装置の移動速度の情報が含まれてなくても、動画像の中で被写体が動く速さからカメラの移動速度を推定してもよい。
たとえばユーザによって入力部材106が操作されて選択表示86bの「初級」、「中級」、「プロ級」のいずれかが選択されると、選択内容に応じて上述した各実施の形態における各処理による速度感の向上度合いが変更されるようにしてもよい。
なお、第3および第4の実施の形態においても、上述したように速度感の向上度合いをユーザが設定できるようにしてもよい。
なお、TOFセンサは、公知のTOF(time of flight)法に用いるイメージセンサである。TOF法は、不図示の光源部から被写体に向けて光パルス(照射光)を発し、被写体で反射された光パルスがTOFセンサへ戻ってくるまでの時間に基づいて、被写体までの距離を検出する技術である。制御部34は、検出した被写体までの距離の変化に基づいて被写体とカメラ1との相対速度を算出し、算出した相対速度をカメラ1の移動速度Vとする。なお、撮像素子33aをTOFセンサに利用してもよい。
なお、距離の変化量K(または変化率)に応じて2段階でクロップ領域を変更することは、一例であり、1段階であってもよく、3段階以上であってもよい。また、上述したようにクロップ領域を距離の変化の大きさに応じて段階的に長くするのではなく、距離の変化量K(または変化率)に応じて連続的にクロップ領域を変更するようにしてもよい。具体的には、距離の変化量K(または変化率)が大きくなるほど、クロップ領域を狭くすることとしてもよい。例えば、初期設定では、クロップ領域を設定せず(例えば全画角表示)、距離の変化量K(または変化率)が大きくなるほど、クロップ領域を狭くすることとしてもよい。
なお、距離の変化量K(または変化率)に応じて2段階でクロップ領域を変更することは、一例であり、1段階であってもよく、3段階以上であってもよい。また、上述したように処理対象領域を距離の変化の大きさに応じて段階的に長くするのではなく、距離の変化量K(または変化率)に応じて連続的に処理対象領域を変更するようにしてもよい。具体的には、距離の変化量K(または変化率)が大きくなるほど、処理対象領域を広くすることとしてもよい。例えば、初期設定では、処理対象領域を設定せず(例えば全画角表示)、距離の変化量K(または変化率)が大きくなるほど、処理対象領域を広くすることとしてもよい。
(1)撮像装置によって生成された動画像データと、上記動画像データを生成している間の上記撮像装置の速度情報を取得する取得部と、上記取得部で取得した速度情報に基づいて、上記動画像データを用いて表示部に表示させる動画像に対して処理する領域を制御する表示制御部と、を備える表示装置。
(2)(1)のような表示装置において、上記取得部は上記撮像装置の移動速度の情報を取得し、上記表示制御部は、上記取得部が取得した移動速度の情報に基づいて上記動画像を処理する領域を制御する。
(3)(2)のような表示装置において、上記表示制御部は、上記移動速度が大きくなるにつれて、上記表示部に表示させる上記動画像の領域を狭くする。
(4)(3)のような表示装置において、上記表示制御部は、上記移動速度が第1移動速度よりも速い第2移動速度になると、上記表示部に上記動画像の第1の領域よりも狭い第2の領域を表示させる。
(5)(2)のような表示装置において、上記動画像の一部の領域に画像処理を行う画像処理部を備え、上記画像処理部は、上記移動速度が大きくなるについて、画像処理を行う領域を大きくし、上記表示制御部は、上記画像処理部によって一部の領域に画像処理が行われた動画像を表示させる。
(6)(5)のような表示装置において、上記画像処理部は、上記撮像装置の移動速度が第1移動速度よりも速い第2移動速度になると、上記動画像の領域のうちの第1の領域のよりも広い第2の領域に画像処理に画像処理を行う。
(7)(2)のような表示装置において、上記表示制御部は、上記移動速度の情報に基づいて上記動画像の特定の被写体にブレを付加した画像を表示させる。
(8)(1)のような表示装置において、上記取得部は上記撮像装置と特定の対象物までの距離情報を取得し、上記表示制御部は、上記取得部が取得した距離情報による距離の変化の大きさ基づいて上記動画像を処理する領域を制御する。
(9)(8)のような表示装置において、上記表示制御部は、上記距離の変化が大きくなるにつれて、上記表示部に表示させる上記動画像の領域を狭くする。
(10)(9)のような表示装置において、上記表示制御部は、上記距離の変化の大きさが、第1の大きさよりも第2の大きさになると上記動画像の第1の領域よりも狭い第2の領域を表示させる。
(11)(8)のような表示装置において、上記動画像の一部の領域に画像処理を行う画像処理部を備え、上記画像処理部は、上記距離の変化が大きくなるについて、画像処理を行う領域を大きくし、上記表示制御部は、上記画像処理部によって一部の領域に画像処理が行われた動画像を表示させる。
(12)(11)のような表示装置において、上記画像処理部は、上記距離の変化の大きさが第1の大きさよりも大きい第2の大きさになると、上記動画像の領域のうちの第1の領域のよりも広い第2の領域に画像処理に画像処理を行う。
(13)(8)のような表示装置において、上記表示制御部は、上記距離の変化の大きさに基づいて上記動画像の特定の被写体にブレを付加した画像を表示させる。
(14)(1)のような表示装置において、上記取得部は特定の対象物の大きさの情報を取得し、上記表示制御部は、上記取得部が取得した大きさの変化の大きさ基づいて上記動画像を処理する領域を制御する。
(15)(14)のような表示装置において、上記表示制御部は、上記大きさの変化が大きくなるにつれて、上記表示部に表示させる上記動画像の領域を狭くする。
(16)(15)のような表示装置において、上記表示制御部は、上記大きさの変化の大きさが、第1の大きさよりも第2の大きさになると上記動画像の第1の領域よりも狭い第2の領域を表示させる。
(17)(14)のような表示装置において、上記動画像の一部の領域に画像処理を行う画像処理部を備え、上記画像処理部は、上記大きさの変化が大きくなるについて、画像処理を行う領域を大きくし、上記表示制御部は、上記画像処理部によって一部の領域に画像処理が行われた動画像を表示させる。
(18)(17)のような表示装置において、上記画像処理部は、上記大きさの変化が第1の大きさよりも大きい第2の大きさになると、上記動画像の領域のうちの第1の領域のよりも広い第2の領域に画像処理に画像処理を行う。
(19)(14)のような表示装置において、上記表示制御部は、上記大きさの変化に基づいて上記動画像の特定の被写体にブレを付加した画像を表示させる。
(20)(1)のような表示装置において、上記取得部は音の情報を取得し、上記表示制御部は、上記音の大きさに基づいて上記動画像を処理する領域を制御する。
(21)(20)のような表示装置において、上記表示制御部は、上記音の大きさが大きくなるにつれて、上記表示部に表示させる上記動画像の領域を狭くする。
(22)(21)のような表示装置において、上記表示制御部は、上記音の大きさが、第1の大きさよりも第2の大きさになると上記動画像の第1の領域よりも狭い第2の領域を表示させる。
(23)(20)のような表示装置において、上記動画像の一部の領域に画像処理を行う画像処理部を備え、上記画像処理部は、上記音の大きさが大きくなるについて、画像処理を行う領域を大きくし、上記表示制御部は、上記画像処理部によって一部の領域に画像処理が行われた動画像を表示させる。
(24)(23)のような表示装置において、上記画像処理部は、上記音の大きさが第1の大きさよりも大きい第2の大きさになると、上記動画像の領域のうちの第1の領域のよりも広い第2の領域に画像処理に画像処理を行う。
(25)(20)のような表示装置において、上記表示制御部は、上記音の大きさに基づいて上記動画像の特定の被写体にブレを付加した画像を表示させる。
また、上述した実施の形態および変形例は、以下のようなプログラムも含む。
(26)プログラムは、コンピュータに、撮像装置によって生成された動画像データと、上記動画像データを生成している間の上記撮像装置の速度情報を取得させる第1手順と、上記第1手順で取得した速度情報に基づいて、上記動画像データを用いて表示部に表示させる動画像に対して処理する領域を制御第2手順と、を実行させる。
日本国特許出願2016年第194631号(2016年9月30日出願)
101,101A;制御回路
101a;画像データ入力部
101b;表示範囲設定部
101c;表示画像生成部
101d;処理対象領域設定部
104;モニタ
Claims (7)
- 撮像装置によって生成された動画像データと、前記動画像データを生成している間の前記撮像装置の速度情報を取得する取得部と、
前記取得部で取得した速度情報に基づいて、前記動画像データを用いて表示部に表示させる動画像の特定の被写体にブレを付加した画像を表示させる表示制御部と、を備える表示装置。 - 請求項1に記載の表示装置において、
前記取得部は前記撮像装置の移動速度の情報を取得し、
前記表示制御部は、前記取得部が取得した移動速度の情報に基づいて前記動画像を処理する領域を制御する表示装置。 - 請求項2に記載の表示装置において、
前記表示制御部は、前記移動速度が大きくなるにつれて、前記表示部に表示させる前記動画像の領域を狭くする表示装置。 - 請求項2に記載の表示装置において、
前記表示制御部は、前記移動速度が第1移動速度よりも速い第2移動速度になると、前記表示部に前記動画像の第1の領域よりも狭い第2の領域を表示させる表示装置。 - 請求項2に記載の表示装置において、
前記動画像の一部の領域に画像処理を行う画像処理部を備え、
前記画像処理部は、前記移動速度が大きくなるにつれて、画像処理を行う領域を大きくし、
前記表示制御部は、前記画像処理部によって一部の領域に画像処理が行われた動画像を表示させる表示装置。 - 請求項5に記載の表示装置において、
前記画像処理部は、前記撮像装置の移動速度が第1移動速度よりも速い第2移動速度になると、前記動画像の領域のうちの第1の領域よりも広い第2の領域に画像処理を行う表示装置。 - コンピュータに、
撮像装置によって生成された動画像データと、前記動画像データを生成している間の前記撮像装置の速度情報を取得させる第1手順と、
前記第1手順で取得した速度情報に基づいて、前記動画像データを用いて表示部に表示させる動画像の特定の被写体にブレを付加した画像を表示させる第2手順と、
を実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016194631 | 2016-09-30 | ||
JP2016194631 | 2016-09-30 | ||
PCT/JP2017/035654 WO2018062538A1 (ja) | 2016-09-30 | 2017-09-29 | 表示装置およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2018062538A1 JPWO2018062538A1 (ja) | 2019-08-08 |
JP7131388B2 true JP7131388B2 (ja) | 2022-09-06 |
Family
ID=61760872
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018542967A Active JP7131388B2 (ja) | 2016-09-30 | 2017-09-29 | 表示装置およびプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11470253B2 (ja) |
JP (1) | JP7131388B2 (ja) |
CN (1) | CN109997171B (ja) |
WO (1) | WO2018062538A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7210180B2 (ja) * | 2018-07-25 | 2023-01-23 | キヤノン株式会社 | 画像処理装置、画像表示装置、画像処理方法、及びプログラム |
US11159798B2 (en) * | 2018-08-21 | 2021-10-26 | International Business Machines Corporation | Video compression using cognitive semantics object analysis |
JP2020184146A (ja) * | 2019-05-07 | 2020-11-12 | パイオニア株式会社 | 顕著性推定装置、顕著性推定方法、及びプログラム |
CN113194246A (zh) * | 2021-04-02 | 2021-07-30 | 烟台艾睿光电科技有限公司 | 一种移动设备的图像显示方法及装置 |
CN113276774B (zh) * | 2021-07-21 | 2021-10-26 | 新石器慧通(北京)科技有限公司 | 无人车远程驾驶过程中视频画面的处理方法、装置及设备 |
CN113891018A (zh) * | 2021-11-23 | 2022-01-04 | 维沃移动通信有限公司 | 拍摄方法、装置及电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004172671A (ja) | 2002-11-15 | 2004-06-17 | Toshiba Corp | 動画像加工方法及び装置 |
JP2007116309A (ja) | 2005-10-19 | 2007-05-10 | Seiko Epson Corp | 画像情報再生装置 |
JP2015139100A (ja) | 2014-01-22 | 2015-07-30 | パナソニックIpマネジメント株式会社 | 画像処理装置、撮像装置及び画像処理方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3528548B2 (ja) * | 1997-11-18 | 2004-05-17 | トヨタ自動車株式会社 | 車両用動画像処理方法および車両用動画像処理装置 |
US7365779B2 (en) * | 2000-09-14 | 2008-04-29 | Fujitsu Ten Limited | Image processing apparatus for selectively storing specific regions of an image |
EP1984893B8 (en) * | 2006-02-13 | 2018-05-16 | Snell Advanced Media Limited | Method and apparatus for modifying a moving image sequence |
JP5493789B2 (ja) * | 2009-12-07 | 2014-05-14 | 株式会社リコー | 撮像装置および撮像方法 |
US9661232B2 (en) * | 2010-08-12 | 2017-05-23 | John G. Posa | Apparatus and method providing auto zoom in response to relative movement of target subject matter |
JP2012205163A (ja) | 2011-03-28 | 2012-10-22 | Panasonic Corp | ウェアラブルカメラ |
TWI460668B (zh) * | 2012-07-30 | 2014-11-11 | Faraday Tech Corp | 影像擷取系統與方法 |
CN105379247B (zh) * | 2013-12-10 | 2019-08-20 | 奥林巴斯株式会社 | 图像处理装置、显示装置、摄像装置和图像处理方法 |
JP2015144407A (ja) * | 2013-12-27 | 2015-08-06 | 株式会社Jvcケンウッド | 視界支援装置、視界支援方法、及び視界支援プログラム |
US9959591B2 (en) * | 2014-07-31 | 2018-05-01 | Seiko Epson Corporation | Display apparatus, method for controlling display apparatus, and program |
-
2017
- 2017-09-29 WO PCT/JP2017/035654 patent/WO2018062538A1/ja active Application Filing
- 2017-09-29 JP JP2018542967A patent/JP7131388B2/ja active Active
- 2017-09-29 CN CN201780073393.0A patent/CN109997171B/zh active Active
- 2017-09-29 US US16/335,794 patent/US11470253B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004172671A (ja) | 2002-11-15 | 2004-06-17 | Toshiba Corp | 動画像加工方法及び装置 |
JP2007116309A (ja) | 2005-10-19 | 2007-05-10 | Seiko Epson Corp | 画像情報再生装置 |
JP2015139100A (ja) | 2014-01-22 | 2015-07-30 | パナソニックIpマネジメント株式会社 | 画像処理装置、撮像装置及び画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN109997171A (zh) | 2019-07-09 |
JPWO2018062538A1 (ja) | 2019-08-08 |
CN109997171B (zh) | 2024-03-08 |
US20190335103A1 (en) | 2019-10-31 |
US11470253B2 (en) | 2022-10-11 |
WO2018062538A1 (ja) | 2018-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7131388B2 (ja) | 表示装置およびプログラム | |
JP6230554B2 (ja) | 撮像装置 | |
JP7159866B2 (ja) | 撮像装置およびプログラム | |
JP5246159B2 (ja) | 撮像装置、画像表示装置、プログラム | |
US9210324B2 (en) | Image processing | |
JP5400486B2 (ja) | 撮影装置および撮影方法 | |
US9088722B2 (en) | Image processing method, computer-readable recording medium, and image processing apparatus | |
JP7251472B2 (ja) | 電子機器およびプログラム | |
JP6242428B2 (ja) | 撮影装置および撮影方法 | |
WO2018179522A1 (ja) | 電子機器、プログラムおよび再生装置 | |
JP5948960B2 (ja) | カメラ、画像処理装置及びプログラム | |
JP6213619B2 (ja) | カメラおよびプログラム | |
JP5816733B2 (ja) | 撮影装置および撮影方法 | |
JP5925275B2 (ja) | 撮影装置および撮影方法 | |
JP6013574B2 (ja) | 撮影装置および撮影方法 | |
JP5816732B2 (ja) | 撮影装置および撮影方法 | |
JP5637645B2 (ja) | 撮影装置および撮影方法 | |
JP2024033748A (ja) | 画像処理装置、撮像装置、画像処理方法および撮像装置の制御方法、プログラム | |
JP2018026838A (ja) | カメラ、画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200827 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200902 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20210423 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20210715 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20210817 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210831 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20211029 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220315 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220511 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220726 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220808 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7131388 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |