JP6897728B2 - 画像処理装置、画像処理方法およびプログラム - Google Patents
画像処理装置、画像処理方法およびプログラム Download PDFInfo
- Publication number
- JP6897728B2 JP6897728B2 JP2019150580A JP2019150580A JP6897728B2 JP 6897728 B2 JP6897728 B2 JP 6897728B2 JP 2019150580 A JP2019150580 A JP 2019150580A JP 2019150580 A JP2019150580 A JP 2019150580A JP 6897728 B2 JP6897728 B2 JP 6897728B2
- Authority
- JP
- Japan
- Prior art keywords
- point
- captured image
- image
- captured
- generation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 150
- 238000003672 processing method Methods 0.000 title claims description 11
- 239000013598 vector Substances 0.000 claims description 124
- 238000001514 detection method Methods 0.000 claims description 99
- 238000003384 imaging method Methods 0.000 claims description 47
- 230000002093 peripheral effect Effects 0.000 claims description 29
- 238000004364 calculation method Methods 0.000 description 53
- 238000004891 communication Methods 0.000 description 42
- 230000006870 function Effects 0.000 description 35
- 230000010365 information processing Effects 0.000 description 35
- 238000010586 diagram Methods 0.000 description 27
- 230000003287 optical effect Effects 0.000 description 13
- 238000000034 method Methods 0.000 description 9
- 238000005457 optimization Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 5
- 239000004065 semiconductor Substances 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 239000002245 particle Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
- G06T3/047—Fisheye or wide-angle transformations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
- G06T7/231—Analysis of motion using block-matching using full search
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
- G06T7/238—Analysis of motion using block-matching using non-full search, e.g. three-step search
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
1.第1の実施形態
1−1.機能構成
1−2.発生点および検出点の具体的な例
1−3.移動方向の推定
1−4.撮像画像の回転の例
2.第2の実施形態
3.第3の実施形態
4.第4の実施形態
5.第5の実施形態
5−1.機能構成
5−2.領域最適化の例
6.第6の実施形態
6−1.機能構成
6−2.記録制御の例
7.ハードウェア構成
8.補足
(1−1.機能構成)
図1は、本開示の第1の実施形態に係る画像処理装置の概略的な機能構成を示すブロック図である。図1を参照すると、画像処理装置100は、通信部102と、記憶部104と、画像取得部106と、ベクトル算出部108と、点検出部110と、回転角度算出部112と、画像編集部114とを含む。さらに、画像処理装置100は、表示制御部116と、表示部118とを含んでもよい。
図2〜図4を参照して、上述した画像処理装置100の点検出部110によって検出される動きベクトルの発生点および検出点のより具体的な例について、さらに説明する。
図5は、本開示の第1の実施形態における移動方向の推定を概念的に示すフローチャートである。本実施形態では、画像処理装置100の画像編集部114が、撮像画像の周縁部で動きベクトルの発生点が検出された場合に、発生点が撮像画像の中心に対して所定の向きに位置するように撮像画像を回転させうる。このような処理が、撮像画像が収束点から発生点に向かって移動しながら撮像された画像であるという推定に基づく処理ともいえることは、上述した通りである。このように、本開示のいくつかの実施形態では、撮像画像の移動方向の推定に基づく処理が実行されうる。図5では、そのような推定の一例が概念的に示されている。
図6および図7を参照して、上述した画像処理装置100の画像編集部114における撮像画像の回転のより具体的な例について、さらに説明する。なお、以下で例示する撮像画像は、いずれも、図2に示した例のように、収束点から発生点に向かって移動しながら撮像された画像であるものとする。
次に、図8および図9を参照して、本開示の第2の実施形態について説明する。本実施形態では、上記の第1の実施形態に係る画像処理装置100と同様の機能が、第1および第2の画像処理装置に分散して実現される。
次に、図10を参照して、本開示の第3の実施形態について説明する。本実施形態では、上記の第1の実施形態と同様の機能が、撮像を実行する撮像装置において実現される。つまり、本実施形態では、撮像装置が画像処理装置としても機能する。
次に、図11および図12を参照して、本開示の第4の実施形態について説明する。本実施形態では、上記の第3の実施形態に係る撮像装置300と同様の機能が、撮像装置と画像処理装置とに分散して実現される。
次に、図13〜図15を参照して、本開示の第5の実施形態について説明する。本実施形態では、撮像装置において、撮像画像における動きベクトルの発生点または収束点の検出結果に基づいて撮像部が制御される。発生点または収束点の検出結果に基づく撮像画像の編集やメタ情報の記録は、必ずしも実行されなくてもよい。つまり、本実施形態は、発生点または収束点の検出結果を、撮像画像の編集などに用いる代わりに撮像部の制御に用いる例を含みうる。
図13は、本開示の第5の実施形態に係る撮像装置の概略的な機能構成を示すブロック図である。図13を参照すると、撮像装置500は、撮像部402と、画像取得部304と、記憶部104と、ベクトル算出部108と、点検出部110と、撮像制御部502とを含む。撮像装置500は、さらに、回転角度算出部112と画像編集部114とを含んでもよく、通信部102を含んでもよく、表示制御部116と表示部118とを含んでもよい。また、図示していないが、撮像装置500は、上記の第2の実施形態で説明した記録制御部202を含んでもよい。
図14および図15を参照して、上述した撮像装置500の撮像制御部502による撮像部402の制御のより具体的な例について、さらに説明する。
次に、図16および図17を参照して、本開示の第6の実施形態について説明する。本実施形態では、撮像装置において、撮像画像における動きベクトルの発生点または収束点の検出結果に基づいて撮像画像の記録の実行および停止が制御される。発生点または収束点の検出結果に基づく撮像画像の編集やメタ情報の記録は、必ずしも実行されなくてもよい。つまり、本実施形態は、発生点または収束点の検出結果を、撮像画像の編集などに用いる代わりに撮像画像の記録の制御に用いる例を含みうる。
図16は、本開示の第6の実施形態に係る撮像装置の概略的な機能構成を示すブロック図である。図16を参照すると、撮像装置600は、撮像部402と、画像取得部304と、記憶部104と、ベクトル算出部108と、点検出部110と、記録制御部602とを含む。撮像装置600は、さらに、回転角度算出部112を含んでもよく、通信部102を含んでもよく、表示制御部116と表示部118とを含んでもよく、撮像制御部502を含んでもよい。また、図示していないが、撮像装置600は、上記の第1の実施形態で説明した画像編集部114を含んでもよい。
図17は、本開示の第6の実施形態における記録制御の例を示すフローチャートである。図17を参照すると、まず、撮像装置600の画像取得部304が、撮像部402から撮像画像を取得する(ステップS201)。次に、ベクトル算出部108が撮像画像における動きベクトルを算出する(ステップS203)。なお、図ではベクトル算出部108および点検出部110のシンプルな処理が示されているが、上記の第1の実施形態などで説明されたようなオプションを採用することも可能である。
次に、図18を参照して、本開示の実施形態に係る情報処理装置のハードウェア構成について説明する。図18は、情報処理装置のハードウェア構成を説明するためのブロック図である。図示された情報処理装置900は、例えば、上記の実施形態における画像処理装置(第1の画像処理装置および第2の画像処理装置を含む)および撮像装置を実現しうる。
本開示の実施形態は、例えば、上記で説明したような情報処理装置(画像処理装置(第1の画像処理装置および第2の画像処理装置を含む)または撮像装置)、複数の情報処理装置を含むシステム、情報処理装置またはシステムで実行される情報処理方法、情報処理装置を機能させるためのプログラム、およびプログラムが記録された一時的でない有形の媒体を含みうる。
(1)魚眼レンズを介して時間的に連続して撮像される撮像画像を取得する画像取得部と、
前記撮像画像における動きベクトルを取得するベクトル取得部と、
前記動きベクトルの発生点または収束点を検出する点検出部と
を備える画像処理装置。
(2)前記点検出部は、前記撮像画像の周縁部で前記発生点または前記収束点を検出する、前記(1)に記載の画像処理装置。
(3)前記点検出部は、前記発生点または前記収束点が前記撮像画像の第1の部分で発見された場合に、前記撮像画像の中心に対して前記第1の部分の反対側に位置する第2の部分で未発見の前記収束点または前記発生点を探索する、前記(2)に記載の画像処理装置。
(4)前記撮像画像が前記収束点から前記発生点に向かって移動しながら撮像された画像であるという推定に基づく処理を実行する処理部をさらに備える、前記(2)または(3)に記載の画像処理装置。
(5)前記点検出部は、前記撮像画像の中央部で前記発生点または前記収束点のいずれかを検出する、前記(1)に記載の画像処理装置。
(6)前記撮像画像が、前記発生点に近づくように移動しながら撮像された画像、または前記収束点から遠ざかるように移動しながら撮像された画像であるという推定に基づく処理を実行する処理部をさらに備える、前記(5)に記載の画像処理装置。
(7)前記点検出部は、前記動きベクトルの大きさまたは方向に基づいて設定される探索領域で前記発生点または前記収束点を探索する、前記(1)〜(6)のいずれか1項に記載の画像処理装置。
(8)前記点検出部は、前記動きベクトルの大きさが相対的に小さい領域を前記探索領域に設定する、前記(7)に記載の画像処理装置。
(9)前記点検出部は、相対的に多くの前記動きベクトルの方向が交差する領域を前記探索領域に設定する、前記(7)または(8)に記載の画像処理装置。
(10)前記点検出部は、前記撮像画像の全体について第1のブロックサイズで算出された動きベクトルに基づいて前記探索領域を設定し、
前記ベクトル取得部は、少なくとも前記探索領域について前記第1のブロックサイズよりも小さい第2のブロックサイズで前記動きベクトルを取得し、
前記点検出部は、前記第2のブロックサイズで算出された動きベクトルに基づいて前記探索領域で前記発生点または前記収束点を探索する、前記(7)〜(9)のいずれか1項に記載の画像処理装置。
(11)前記発生点または前記収束点の検出結果に基づいて前記撮像画像を編集する画像編集部をさらに備える、前記(1)〜(10)のいずれか1項に記載の画像処理装置。
(12)前記画像編集部は、前記撮像画像の周縁部で前記発生点が検出された場合に、前記発生点が前記撮像画像の中心に対して所定の向きに位置するように前記撮像画像を回転させる、前記(11)に記載の画像処理装置。
(13)前記画像編集部は、前記発生点が前記撮像画像の中心に対して下に位置するように前記撮像画像を回転させる、前記(12)に記載の画像処理装置。
(14)前記発生点または前記収束点の検出結果に基づく情報を前記撮像画像に関連付けて記録する記録制御部をさらに備える、前記(1)〜(10)のいずれか1項に記載の画像処理装置。
(15)前記発生点または前記収束点の検出結果に基づいて前記撮像画像を撮像する撮像部を制御する撮像制御部をさらに備える、前記(1)〜(14)のいずれか1項に記載の画像処理装置。
(16)前記撮像制御部は、前記発生点または前記収束点を含む領域の画像が最適化されるように前記撮像部を制御する、前記(15)に記載の画像処理装置。
(17)前記撮像制御部は、前記撮像画像で前記発生点および前記収束点の両方が検出された場合に、前記発生点を含む領域の画像がより最適化されるように前記撮像部を制御する、前記(16)に記載の画像処理装置。
(18)前記発生点または前記収束点の検出結果に基づいて前記撮像画像の記録を制御する記録制御部をさらに備える、前記(1)〜(17)のいずれか1項に記載の画像処理装置。
(19)魚眼レンズを介して時間的に連続して撮像される撮像画像を取得することと、
前記撮像画像における動きベクトルを取得することと、
プロセッサが、前記動きベクトルの発生点または収束点を検出することと
を含む画像処理方法。
(20)魚眼レンズを介して時間的に連続して撮像される撮像画像を取得する機能と、
前記撮像画像における動きベクトルを取得する機能と、
前記動きベクトルの発生点または収束点を検出する機能と
をコンピュータに実現させるためのプログラム。
102,252 通信部
104,254 記憶部
106,256,304 画像取得部
108 ベクトル算出部
110 点検出部
112,258 回転角度算出部
114 画像編集部
200 第1の画像処理装置
202,602 記録制御部
250 第2の画像処理装置
300,400,500,600 撮像装置
302,402 撮像部
502 撮像制御部
Claims (22)
- 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する点検出部と、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う記録制御部と、
を備え、
前記記録制御部は、前記検出結果として前記収束点または前記発生点を検出した場合、前記撮像画像を記録する制御を行う、画像処理装置。 - 前記記録制御部は、前記検出結果に基づく情報は、前記撮像画像に関連付けて記録する
請求項1に記載の画像処理装置。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する点検出部と、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う記録制御部と、
を備え、
前記記録制御部は、前記検出結果として前記収束点および前記発生点のいずれも検出しない場合、前記撮像画像の記録を停止する制御を行う、画像処理装置。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する点検出部と、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う記録制御部と、
前記撮像画像の中心に対して所定の方向に回転して編集する画像編集部と、
を備え、
前記点検出部は、前記撮像画像の周縁部で前記発生点または前記収束点を検出し、
前記点検出部は、前記発生点または前記収束点が前記撮像画像の第1の部分で検出された場合に、前記撮像画像の中心に対して前記第1の部分の反対側に位置する第2の部分で未検出の前記収束点または前記発生点を探索し、
前記画像編集部は、前記撮像画像の周縁部で前記発生点が検出された場合に、前記発生点が前記所定の方向上に位置するように前記撮像画像を回転して編集する、画像処理装置。 - 前記撮像画像が前記収束点から前記発生点に向かって移動しながら撮像された画像であるという推定に基づく処理を実行する処理部をさらに備える、請求項1〜4のいずれかに記載の画像処理装置。
- 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する点検出部と、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う記録制御部と、
を備え、
前記点検出部は、前記動きベクトルの大きさまたは方向に基づいて設定される探索領域で前記発生点または前記収束点を探索する、画像処理装置。 - 前記点検出部は、前記動きベクトルの大きさが相対的に小さい領域を前記探索領域に設定する、請求項6に記載の画像処理装置。
- 前記点検出部は、相対的に多くの前記動きベクトルの方向が交差する領域を前記探索領域に設定する、請求項6に記載の画像処理装置。
- 少なくとも前記探索領域について第1のブロックサイズよりも小さい第2のブロックサイズで前記動きベクトルを取得するベクトル取得部、を更に備え、
前記点検出部は、前記撮像画像の全体について前記第1のブロックサイズで算出された動きベクトルに基づいて前記探索領域を設定し、
前記点検出部は、前記第2のブロックサイズで算出された動きベクトルに基づいて前記探索領域で前記発生点または前記収束点を探索する、請求項6に記載の画像処理装置。 - 前記記録制御部は、前記発生点または前記収束点の検出結果に基づく情報を前記撮像画像に関連付けて記録する、請求項1〜9のいずれかに記載の画像処理装置。
- 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する点検出部と、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う記録制御部と、
前記発生点または前記収束点を含む領域の画像が最適化されるように撮像部を制御する撮像制御部と、
を備え、
前記撮像制御部は、前記撮像画像で前記発生点および前記収束点の両方が検出された場合に、前記発生点を含む領域の画像がより最適化されるように前記撮像部を制御する、画像処理装置。 - 前記広角レンズは、魚眼レンズであり、
前記撮像画像は、前記魚眼レンズの全周を含む全周画像である
請求項1〜11のいずれかに記載の画像処理装置。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出することと、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行うことと、
を含み、
前記検出結果として前記収束点または前記発生点を検出した場合、前記撮像画像を記録する制御を行う画像処理方法。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出することと、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行うことと、
を含み、
前記検出結果として前記収束点および前記発生点のいずれも検出しない場合、前記撮像画像の記録を停止する制御を行う画像処理方法。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出することと、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行うことと、
前記撮像画像の中心に対して所定の方向に回転して編集することと、
を含み、
前記撮像画像の周縁部で前記発生点または前記収束点を検出し、前記発生点または前記収束点が前記撮像画像の第1の部分で検出された場合に、前記撮像画像の中心に対して前記第1の部分の反対側に位置する第2の部分で未検出の前記収束点または前記発生点を探索し、前記撮像画像の周縁部で前記発生点が検出された場合に、前記発生点が前記所定の方向上に位置するように前記撮像画像を回転して編集する画像処理方法。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出することと、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行うことと、
を含み、
前記動きベクトルの大きさまたは方向に基づいて設定される探索領域で前記発生点または前記収束点を探索する画像処理方法。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出することと、
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行うことと、
前記発生点または前記収束点を含む領域の画像が最適化されるように撮像部を制御することと、
を含み、
前記撮像画像で前記発生点および前記収束点の両方が検出された場合に、前記発生点を含む領域の画像がより最適化されるように前記撮像部を制御する画像処理方法。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する機能と
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う機能と、
をコンピュータに実現させ、
前記検出結果として前記収束点または前記発生点を検出した場合、前記撮像画像を記録する制御を行うためのプログラム。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する機能と
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う機能と、
をコンピュータに実現させ、
前記検出結果として前記収束点および前記発生点のいずれも検出しない場合、前記撮像画像の記録を停止する制御を行うためのプログラム。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する機能と
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う機能と、
前記撮像画像の中心に対して所定の方向に回転して編集する機能と、
をコンピュータに実現させ、
前記撮像画像の周縁部で前記発生点または前記収束点を検出し、前記発生点または前記収束点が前記撮像画像の第1の部分で検出された場合に、前記撮像画像の中心に対して前記第1の部分の反対側に位置する第2の部分で未検出の前記収束点または前記発生点を探索し、前記撮像画像の周縁部で前記発生点が検出された場合に、前記発生点が前記所定の方向上に位置するように前記撮像画像を回転して編集するためのプログラム。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する機能と
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う機能と、
をコンピュータに実現させ、
前記動きベクトルの大きさまたは方向に基づいて設定される探索領域で前記発生点または前記収束点を探索するためのプログラム。 - 広角レンズを介して時間的に連続して撮像される撮像画像における動きベクトルの発生点または収束点を検出する機能と
前記発生点または前記収束点の検出結果に基づいて、前記撮像画像の記録の制御を行う機能と、
前記発生点または前記収束点を含む領域の画像が最適化されるように撮像部を制御する機能と、
をコンピュータに実現させ、
前記撮像画像で前記発生点および前記収束点の両方が検出された場合に、前記発生点を含む領域の画像がより最適化されるように前記撮像部を制御するためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021094217A JP7115593B2 (ja) | 2013-05-16 | 2021-06-04 | 画像処理装置、画像処理方法およびプログラム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013103670 | 2013-05-16 | ||
JP2013103670 | 2013-05-16 | ||
JP2018164355A JP6575652B2 (ja) | 2013-05-16 | 2018-09-03 | 画像処理装置、画像処理方法およびプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018164355A Division JP6575652B2 (ja) | 2013-05-16 | 2018-09-03 | 画像処理装置、画像処理方法およびプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021094217A Division JP7115593B2 (ja) | 2013-05-16 | 2021-06-04 | 画像処理装置、画像処理方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019200816A JP2019200816A (ja) | 2019-11-21 |
JP6897728B2 true JP6897728B2 (ja) | 2021-07-07 |
Family
ID=51898153
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015516987A Expired - Fee Related JP6398971B2 (ja) | 2013-05-16 | 2014-03-28 | 画像処理装置、画像処理方法およびプログラム |
JP2018164355A Active JP6575652B2 (ja) | 2013-05-16 | 2018-09-03 | 画像処理装置、画像処理方法およびプログラム |
JP2019150580A Active JP6897728B2 (ja) | 2013-05-16 | 2019-08-20 | 画像処理装置、画像処理方法およびプログラム |
JP2021094217A Active JP7115593B2 (ja) | 2013-05-16 | 2021-06-04 | 画像処理装置、画像処理方法およびプログラム |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015516987A Expired - Fee Related JP6398971B2 (ja) | 2013-05-16 | 2014-03-28 | 画像処理装置、画像処理方法およびプログラム |
JP2018164355A Active JP6575652B2 (ja) | 2013-05-16 | 2018-09-03 | 画像処理装置、画像処理方法およびプログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021094217A Active JP7115593B2 (ja) | 2013-05-16 | 2021-06-04 | 画像処理装置、画像処理方法およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US9800780B2 (ja) |
EP (1) | EP2998934B1 (ja) |
JP (4) | JP6398971B2 (ja) |
CN (1) | CN105190694B (ja) |
WO (1) | WO2014185169A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014225108A (ja) * | 2013-05-16 | 2014-12-04 | ソニー株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP6623729B2 (ja) * | 2015-12-04 | 2019-12-25 | 株式会社ソシオネクスト | 測距システム、移動体及び部品 |
JP2017175965A (ja) * | 2016-03-29 | 2017-10-05 | ソニー株式会社 | 画像処理装置、画像処理方法、及び画像処理システム |
JP7001060B2 (ja) * | 2016-11-02 | 2022-01-19 | ソニーグループ株式会社 | 情報処理装置、情報処理方法及び情報処理システム |
JP7192582B2 (ja) * | 2019-03-11 | 2022-12-20 | オムロン株式会社 | 物体追跡装置および物体追跡方法 |
JP7380177B2 (ja) * | 2019-12-19 | 2023-11-15 | 株式会社Jvcケンウッド | バーチャル・リアリティ画像表示システム及びバーチャル・リアリティ画像表示システムの制御方法 |
JP7468086B2 (ja) * | 2020-04-02 | 2024-04-16 | 株式会社Jvcケンウッド | 車両用撮像装置、画像処理方法、及び画像処理プログラム |
JP7476627B2 (ja) | 2020-04-02 | 2024-05-01 | 株式会社Jvcケンウッド | 車両用撮像装置、画像処理方法、及び画像処理プログラム |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5619593A (en) * | 1991-09-12 | 1997-04-08 | Fuji Photo Film Co., Ltd. | Method for extracting object images and method for detecting movements thereof |
JP2863381B2 (ja) * | 1992-09-25 | 1999-03-03 | 矢崎総業株式会社 | 車両用監視方法 |
JP3452268B2 (ja) * | 1993-08-06 | 2003-09-29 | 矢崎総業株式会社 | 車両用後側方監視方法 |
US6438254B1 (en) * | 1999-03-17 | 2002-08-20 | Matsushita Electric Industrial Co., Ltd. | Motion vector detection method, motion vector detection apparatus, and data storage media |
DE60009114T2 (de) | 1999-09-20 | 2004-08-05 | Matsushita Electric Industrial Co. Ltd. | Vorrichtung zur unterstützung von kraftfahrzeugführern |
JP2001251632A (ja) * | 1999-12-27 | 2001-09-14 | Toshiba Corp | 動きベクトル検出方法および装置並びに動きベクトル検出プログラム |
JP2003299040A (ja) * | 2002-04-03 | 2003-10-17 | Sony Corp | 動きベクトル検出装置及び方法 |
JP4355535B2 (ja) * | 2003-08-07 | 2009-11-04 | 株式会社岩根研究所 | 360度画像変換処理装置 |
JP4566591B2 (ja) * | 2004-03-19 | 2010-10-20 | キヤノン株式会社 | 画像変形推定方法および画像変形推定装置 |
JP2006059202A (ja) * | 2004-08-20 | 2006-03-02 | Iwate Univ | 撮像装置及び画像補正方法 |
JP4502385B2 (ja) * | 2004-11-30 | 2010-07-14 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
JP4546291B2 (ja) * | 2005-03-01 | 2010-09-15 | キヤノン株式会社 | 画像処理装置およびその制御方法 |
US8693540B2 (en) * | 2005-03-10 | 2014-04-08 | Qualcomm Incorporated | Method and apparatus of temporal error concealment for P-frame |
JP2006270676A (ja) * | 2005-03-25 | 2006-10-05 | Fujitsu Ltd | パノラマ画像生成プログラム、パノラマ画像生成装置、パノラマ画像生成方法 |
JP2007030815A (ja) * | 2005-07-29 | 2007-02-08 | Yazaki Corp | ドライブレコーダ |
JP4926822B2 (ja) * | 2006-05-24 | 2012-05-09 | 株式会社岩根研究所 | 湧きだし点基準cv領域画像前置装置 |
JP2008068675A (ja) * | 2006-09-12 | 2008-03-27 | Auto Network Gijutsu Kenkyusho:Kk | 車両周辺視認装置 |
JP4433046B2 (ja) * | 2007-12-26 | 2010-03-17 | 株式会社デンソー | 露出制御装置及び露出制御プログラム |
JP5105481B2 (ja) * | 2008-05-27 | 2012-12-26 | 国立大学法人鳥取大学 | 車線検出装置、車線検出方法、及び車線検出プログラム |
JP2010021761A (ja) * | 2008-07-10 | 2010-01-28 | Nippon Hoso Kyokai <Nhk> | 映像自動記録制御装置 |
JP5155110B2 (ja) * | 2008-11-17 | 2013-02-27 | 株式会社日立国際電気 | 監視装置 |
US8248401B2 (en) * | 2009-03-19 | 2012-08-21 | International Business Machines Corporation | Accelerated data structure optimization based upon view orientation |
GB2469679B (en) * | 2009-04-23 | 2012-05-02 | Imagination Tech Ltd | Object tracking using momentum and acceleration vectors in a motion estimation system |
FR2947935B1 (fr) * | 2009-07-08 | 2012-03-02 | Valeo Vision Sas | Procede de definition d'une fenetre de recherche |
CN102395994B (zh) | 2010-03-18 | 2015-06-10 | 松下电器产业株式会社 | 全景图像处理装置及全景图像处理方法 |
CN103004178B (zh) * | 2010-06-30 | 2017-03-22 | 富士胶片株式会社 | 拍摄装置、程序及拍摄方法 |
DE102010042248A1 (de) * | 2010-10-11 | 2012-04-12 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur optischen Darstellung einer Umgebung eines Fahrzeugs |
TW201218761A (en) * | 2010-10-27 | 2012-05-01 | Hon Hai Prec Ind Co Ltd | Image stabilization system and method |
US20120113326A1 (en) * | 2010-11-04 | 2012-05-10 | Stmicroelectronics, Inc. | System and method for detecting motion vectors in a recursive hierarchical motion estimation system using a non-rasterized scan |
JP5754214B2 (ja) * | 2011-03-31 | 2015-07-29 | 富士通株式会社 | 画像処理装置および画像処理プログラム |
JP2012226645A (ja) | 2011-04-21 | 2012-11-15 | Sony Corp | 画像処理装置および方法、記録媒体並びにプログラム |
JP5864984B2 (ja) * | 2011-09-26 | 2016-02-17 | 東芝アルパイン・オートモティブテクノロジー株式会社 | 車載カメラ用画像補正方法および車載カメラ用画像補正プログラム |
JP2015039085A (ja) * | 2011-12-14 | 2015-02-26 | パナソニック株式会社 | 画像処理装置及び画像処理方法 |
JP2013165485A (ja) * | 2012-01-11 | 2013-08-22 | Panasonic Corp | 画像処理装置、撮像装置およびコンピュータブログラム |
JP6141601B2 (ja) * | 2012-05-15 | 2017-06-07 | 東芝アルパイン・オートモティブテクノロジー株式会社 | 車載カメラ自動キャリブレーション装置 |
-
2014
- 2014-03-28 EP EP14797314.3A patent/EP2998934B1/en active Active
- 2014-03-28 US US14/888,191 patent/US9800780B2/en active Active
- 2014-03-28 JP JP2015516987A patent/JP6398971B2/ja not_active Expired - Fee Related
- 2014-03-28 WO PCT/JP2014/059109 patent/WO2014185169A1/ja active Application Filing
- 2014-03-28 CN CN201480026103.3A patent/CN105190694B/zh active Active
-
2018
- 2018-09-03 JP JP2018164355A patent/JP6575652B2/ja active Active
-
2019
- 2019-08-20 JP JP2019150580A patent/JP6897728B2/ja active Active
-
2021
- 2021-06-04 JP JP2021094217A patent/JP7115593B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP6398971B2 (ja) | 2018-10-03 |
CN105190694B (zh) | 2019-01-22 |
CN105190694A (zh) | 2015-12-23 |
EP2998934B1 (en) | 2020-08-05 |
WO2014185169A1 (ja) | 2014-11-20 |
US9800780B2 (en) | 2017-10-24 |
JP7115593B2 (ja) | 2022-08-09 |
JP6575652B2 (ja) | 2019-09-18 |
EP2998934A1 (en) | 2016-03-23 |
JPWO2014185169A1 (ja) | 2017-02-23 |
JP2018195348A (ja) | 2018-12-06 |
US20160073020A1 (en) | 2016-03-10 |
JP2021141608A (ja) | 2021-09-16 |
JP2019200816A (ja) | 2019-11-21 |
EP2998934A4 (en) | 2016-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6897728B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6702196B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2014185170A1 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6459972B2 (ja) | 表示制御装置、表示制御方法、およびプログラム | |
US9742995B2 (en) | Receiver-controlled panoramic view video share | |
US20180103197A1 (en) | Automatic Generation of Video Using Location-Based Metadata Generated from Wireless Beacons | |
JP6149862B2 (ja) | 表示制御装置、表示制御システムおよび表示制御方法 | |
JP6720966B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN111263957B (zh) | 信息处理设备、信息处理方法以及程序 | |
WO2016002322A1 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2017174094A (ja) | 画像処理装置、画像処理方法及びプログラム | |
Matsumoto et al. | Image processing device and method to obtain a 360 image without remapping | |
JP2015111371A (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2015194215A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
WO2015198672A1 (ja) | 情報処理装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190911 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201009 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201224 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210511 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210524 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6897728 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |