JP2017175507A5

JP2017175507A5 -

Info

Publication number: JP2017175507A5
Application number: JP2016061437A
Authority: JP
Filing date: 2016-03-25
Publication date: 2018-02-08
Anticipated expiration: 2036-03-25

Description

上述した課題を解決するために本発明は、
第１の撮像装置と第２の撮像装置の位置関係に関する位置情報を取得する情報取得手段と、
前記情報取得手段によって取得された前記位置情報に基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすかを判別する判別手段と、
前記判別手段によって相対的な位置関係が所定の条件を満たすと判別された場合には、その位置関係で前記第１の撮像装置と第２の撮像装置によって撮像される各画像を合成処理の対象としてその合成形式を設定する制御を行う合成制御手段と、
を備えることを特徴とする画像処理装置である。

Claims

第１の撮像装置と第２の撮像装置の位置関係に関する位置情報を取得する情報取得手段と、
前記情報取得手段によって取得された前記位置情報に基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすかを判別する判別手段と、
前記判別手段によって相対的な位置関係が所定の条件を満たすと判別された場合には、その位置関係で前記第１の撮像装置と第２の撮像装置によって撮像される各画像を合成処理の対象としてその合成形式を設定する制御を行う合成制御手段と、
を備えることを特徴とする画像処理装置。
前記情報取得手段は、第１の撮像装置と第２の撮像装置の光軸方向に関する光軸情報を取得し、
前記判別手段は、前記光軸情報と、前記位置情報とに基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の位置関係であるかを判定する、
ことを特徴とする請求項１に記載の画像処理装置。
前記判別手段は、前記第１の撮像装置と第２の撮像装置の光軸方向が逆方向又はその逆方向に対して許容範囲内の方向となる第１の位置関係、前記第１の撮像装置と第２の撮像装置の光軸方向が同方向又はその同方向に対して許容範囲内の方向となる第２の位置関係であるか否かを判別する、
ことを特徴とする請求項２に記載の画像処理装置。
前記情報取得手段は、前記第１の撮像装置と第２の撮像装置との間の光軸の位置ずれに関する情報を更に取得し、
前記判別手段は、前記第１の撮像装置と第２の撮像装置の光軸方向が逆方向又はその逆方向に対して許容範囲内の方向となる第１の位置関係であると判別された場合には、更に、前記情報取得手段によって取得した光軸の位置ずれに関する情報に基づいて、その位置ずれが許容範囲内である否かを判別し、その許容範囲内であれば、前記所定の条件を満たすと判別する、
ことを特徴とする請求項２又は３に記載の画像処理装置。
前記判別手段は、前記第１の撮像装置と第２の撮像装置の光軸方向が同方向又はその同方向に対して許容範囲内の方向となる第２の位置関係であると判別された場合には、更に、前記第１の撮像装置と第２の撮像装置の間の距離が許容範囲内であるか否かを判別し、許容範囲内であれば、前記所定の条件を満たすと判別する、
ことを特徴とする請求項２乃至４の何れか１項に記載の画像処理装置。
前記第１の撮像装置及び前記第２の撮像装置により撮像された各画像の類似度を求める解析手段を更に備え、
前記判別手段は、前記第１の撮像装置と第２の撮像装置の光軸方向が同方向又はその同方向に対して許容範囲内の方向となる第２の位置関係であると判別された場合、更に、前記解析手段によって解析された類似度に基づいて前記第１の撮像装置と第２の撮像装置の間の距離が許容範囲内であるか否かを判別し、許容範囲内であれば、前記所定の条件を満たすと判別する、
ことを特徴とする請求項５に記載の画像処理装置。
前記判別手段は、前記解析手段による解析の結果、前記第１の撮像装置及び前記第２の撮像装置により撮像された画像の中央部分の類似度が高い場合には、前記第１の撮像装置と第２の撮像装置の間の距離が許容範囲内にあると判別する、
ことを特徴とする請求項６に記載の画像処理装置。
前記判別手段は、前記解析手段による解析の結果、前記第１の撮像装置及び前記第２の撮像装置により撮像された画像の周辺部分の類似度が高い場合、前記第１の撮像装置と第２の撮像装置の間の距離が許容範囲内にあると判別する、
ことを特徴とする請求項６又は７に記載の画像処理装置。
前記第１の撮像装置と第２の撮像装置は、魚眼レンズを備え、
前記合成制御手段は、前記判別手段によって前記相対的な位置関係が前記第１の位置関係であると判別された場合に、更に、前記情報取得手段によって取得した光軸の位置ずれが許容範囲内であれば、前記第１の撮像装置と前記第２の撮像装置により撮像される各魚眼画像から全天球の画像を生成する合成形式を設定する、
ことを特徴とする請求項４に記載の画像処理装置。
前記合成制御手段は、前記判別手段によって前記相対的な位置関係が前記第２の位置関係であると判別された場合に、更に、前記第１の撮像装置と前記第２の撮像装置との間の距離が許容範囲内であれば、その間の距離の長さに応じて、前記第１の撮像装置と前記第２の撮像装置により撮像される各画像からパノラマ画像、又は３次元画像を生成する合成形式を設定する、
ことを特徴とする請求項５に記載の画像処理装置。
前記情報取得手段は、更に第１の撮像装置と第２の撮像装置から撮影条件を取得し、
前記合成制御手段は、前記判別手段によって相対的な位置関係が所定の条件を満たすと判別された場合に、前記情報取得手段によって取得された撮影条件が合成処理に適合する場合に、その合成処理の合成形式を設定する、
ことを特徴とする請求項１乃至１０の何れか１項に記載の画像処理装置。
前記第１の撮像装置と第２の撮像装置によって撮像される各画像を合成処理する合成手段を更に備え、
前記合成手段は、前記合成制御手段によって設定された合成形式に基づいて前記各画像に対して合成処理を行う、
ことを特徴とする請求項１乃至１１の何れか１項に記載の画像処理装置。
前記合成制御手段により設定される合成形式を報知する報知手段を更に備える、
ことを特徴とする請求項１乃至１２の何れか１項に記載の撮像装置。
前記情報取得手段は、前記第１の撮像装置と第２の撮像装置に備えられている姿勢検出部から光軸方向に関する情報を取得する、
ことを特徴とする請求項２に記載の撮像装置。
前記第１の撮像装置と第２の撮像装置は、魚眼レンズを用いて連続的に撮像し、
前記情報取得手段は、前記第１の撮像装置及び第２の撮像装置によって連続的に撮像された画像を解析してその被写体の動きから光軸方向に関する情報を取得する、
ことを特徴とする請求項２に記載の撮像装置。
前記第１の撮像装置を備える画像処理装置であって、
前記情報取得手段は、前記第１の撮像装置から光軸方向に関する情報を取得すると共に、当該画像処理装置とは異なる他の画像処理装置に備えられている前記第２の撮像装置から光軸方向に関する情報を取得する、
ことを特徴とする請求項２に記載の画像処理装置。
前記第１の撮像装置と前記第２の撮像装置の光軸方向が変位可能となるように前記第１の撮像装置と第２の撮像装置を支持する支持部材を更に備え、
前記判別手段は、前記支持部材に支持されている前記第１の撮像装置と第２の撮像装置との変位に基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすか否かを判別する、
ことを特徴とする請求項１乃至１６の何れか１項に記載の画像処理装置。
前記支持部材は、前記第１の撮像装置と前記第２の撮像装置の光軸方向が逆方向となる位置関係から同方向となる位置関係の間で変位可能となるように前記第１の撮像装置と第２の撮像装置を支持し、
前記判別手段は、前記第１の撮像装置と第２の撮像装置の光軸方向が逆方向又はその逆方向に対して許容範囲内の方向となる第１の位置関係、前記第１の撮像装置と第２の撮像装置の光軸方向が同方向又はその同方向に対して許容範囲内の方向となる第２の位置関係、前記第１の位置関係と第２の位置関係との間における所定の中間点方向又はその中間点方向に対して許容範囲内の方向となる第３の位置関係を前記所定の条件を満たすと判別する、
ことを特徴とする請求項１７に記載の画像処理装置。
複数の画像を取得する画像取得手段を更に備え、
前記情報取得手段は、前記画像取得手段によって取得された複数の画像から前記光軸情報、及び前記位置情報を取得し、
前記判別手段は、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすかを判別する、
ことを特徴とする請求項２に記載の画像処理装置。
前記判別手段は、前記画像取得手段によって取得された複数の画像の付帯情報を評価する評価手段を更に備え、前記評価手段による評価結果に基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすかを判別する
ことを特徴とする請求項１９に記載の画像処理装置。
画像処理装置における画像処理方法であって、
第１の撮像装置と第２の撮像装置の位置関係に関する位置情報を取得する処理と、
前記取得された前記位置情報に基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすかを判別する処理と、
前記相対的な位置関係が所定の条件を満たすと判別された場合には、その位置関係で前記第１の撮像装置と第２の撮像装置によって撮像される各画像を合成処理の対象としてその合成形式を設定する制御を行う処理と、
を含むことを特徴とする画像処理方法。
画像処理装置のコンピュータに対して、
第１の撮像装置と第２の撮像装置の位置関係に関する位置情報を取得する機能と、
前記取得された前記位置情報に基づいて、前記第１の撮像装置と前記第２の撮像装置との相対的な位置関係が所定の条件を満たすかを判別する機能と、
前記相対的な位置関係が所定の条件を満たすと判別された場合には、その位置関係で前記第１の撮像装置と第２の撮像装置によって撮像される各画像を合成処理の対象としてその合成形式を設定する制御を行う機能と、
を実現させるためのプログラム。