JP7291168B2 - ビデオフレームの処理方法及び装置 - Google Patents

Description

本出願の実施例は、コンピューター技術分野に関し、具体的には、コンピュータービジョン技術分野、特にビデオフレームの処理方法及び装置に関する。

画像の歪みはレンズ歪みとも呼ばれ、光学レンズに固有の透視歪曲、つまり透視による歪曲の総称である。様々なシーンで撮影した画像、例えば、広角レンズや長距離で撮影した画像には明らかな歪みがある。歪みの場合、画像におけるオブジェクトは実際のオブジェクトよりも大きな変形を生じた。これは、画像の美しさと識別に影響を与えるだけでなく、画像検出などの後続の画像処理に幾つかの障害を引き起こしてしまった。

関連技術では、歪み補正により歪み画像を処理すること、つまり、画像を特別な処理をかけて歪みを除去することによって、画質を改善し、画像内のシーンを実際のシーンに近づけることができる。

本開示の実施例はビデオフレームの処理方法、装置、電子機器及び記録媒体を提供する。

第１の態様によれば、ビデオフレームの処理方法であって、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定ラジアル歪みパラメーターの指定値を取得するステップと、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られるステップと、第１の初期補正ビデオフレームのぞれぞれにおいて、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択するステップと、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定するステップを含み、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下であり、前記指定ラジアル歪みパラメーターが一次ラジアル歪みパラメーターではなく、前記第１の初期補正ビデオフレームのぞれぞれに対応する少なくとも一部領域が一致している、方法を提供する。

第２の態様によれば、ビデオフレームの処理装置であって、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定ラジアル歪みパラメーターの指定値を取得するように構成された第１の取得ユニットと、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られるように構成された第１の補正ユニットと、第１の初期補正ビデオフレームのそれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択するように構成された選択ユニットと、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定するように構成された決定ユニットとを備え、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下であり、前記指定ラジアル歪みパラメーターが一次ラジアル歪みパラメーターではなく、前記第１の初期補正ビデオフレームのそれぞれに対応する少なくとも一部領域が一致している、装置を提供する。

第３の態様によれば、電子機器であって、一つまたは複数のプロセッサと、一つまたは複数のコンピュータプログラムを記憶するための記憶装置と、を備え、前記１つまたは複数のコンピュータプログラムが前記１つまたは複数のプロセッサにより実行されると、前記１つまたは複数のプロセッサに、上記したビデオフレームの処理方法のいずれかに記載の実施例の方法を実行させる、電子機器を提供する。

第４の態様によれば、コンピュータプログラムが記録されたコンピュータ読み取り可能な記録媒体であって、当該コンピュータプログラムがプロセッサにより実行されると、上記したビデオフレームの処理方法のいずれかに記載の実施例の方法を実現させるコンピュータ読み取り可能な記録媒体を提供する。

第５の態様によれば、コンピュータプログラムであって、当該コンピュータプログラムがプロセッサにより実行されると、上記したビデオフレームの処理方法のいずれかに記載の実施例の方法を実現させるコンピュータプログラムを提供する。

本出願発明によれば、各候補となる一次段ラジアル歪みパラメーターを利用して歪み補正を行い、直線セグメントの数により歪み補正効果が最も良い候補となる一次ラジアル歪みパラメーターを処理対象ビデオフレームの一次ラジアル歪みパラメーターとして決定することができる。この実施形態は、ビデオフレームに対してキャリブレーション等の前処理なしで、ビデオに対してリアルタイムでより正確な歪み補正処理を実現することができる。候補となる一次ラジアル歪みパラメーターをより大きな値で制限することによって、候補となる一次ラジアル歪みパラメーターを通常のより大きな値の特性とより合わせて、最終的に得られたターゲット一次ラジアル歪みパラメーターを真の値とより合わせることを確保することができる。

本出願の他の特徴、目的及び利点は、以下の図面を参照してなされる非限定的な実施例に係る詳細な説明を読むことにより、より明らかになる。

本出願の幾つかの一実施例を適用可能な例示的なシステムアーキテクチャを示す図である。 本出願に係るビデオフレームの処理方法の一実施例のフローチャートである。 本出願に係るビデオフレームの処理方法の適用シーンを示す模式図である。 本出願に係るビデオフレームの処理方法の他の実施例のフローチャートである。 本出願に係るビデオフレームの処理装置の一実施例の概略構成図である。 本出願の実施例を実現するのに適したビデオフレームの処理方法の電子機器のブロック図である。

以下、添付の図面と併せて本出願の例示的な実施例を説明する。なお、本出願実施例に含まれた様々な詳細は、ただ理解を容易にするための一例であることを理解されたい。従って、当業者は、ここで記載の実施例が本出願の範囲や主旨を逸脱しない限り、種々な置き換え、変更を行うことができることを認識すべきである。同様に、明確さと簡潔さのために、以下に既知の機能と構成に関する説明を省略する。

説明すべきなのは、本出願の実施例及び実施例における特徴は、矛盾を生じない限り、相互に組み合わせることができる。以下、図面及び実施例を参照しながら本出願を詳細に説明する。

図１に本出願に係るビデオフレームの処理方法又はビデオフレームの処理装置を適用できる例示的なシステムアーキテクチャ１００が示されている。

図１に示されたように、システムアーキテクチャ１００は、端末機器１０１、１０２、１０３、ネットワーク１０４、サーバ１０５を含むことができる。ネットワーク１０４は、端末機器１０１、１０２、１０３とサーバ１０５との間で通信リンクを提供するための媒体である。ネットワーク１０４には、有線又は無線通信回線、光ファイバケーブル等の各種の接続形態が含まれていてもよい。

ユーザーが端末機器１０１、１０２、１０３によりネットワーク１０４を介してサーバ１０５とインタラクションすることによって、メッセージ等を送受信することができる。端末機器１０１、１０２、１０３には、例えば、ビデオアプリケーション、ライブアプリケーション、即時通信ツール、メールクライアント、ソーシャルプラットフォームソフトウェア等、様々な通信クライアントアプリケーションをインストールすることができる。

ここでの端末機器１０１、１０２、１０３は、ハードウェアであってもよいし、ソフトウェアであってもよい。端末機器１０１、１０２、１０３は、ハードウェアである場合、ディスプレイスクリーンを有する様々な電子機器であってもよく、スマートフォン、タブレットコンピュータ、電子ブックリーダー、ノート型携帯コンピュータ及びデスクトップコンピュータ等を含むがこれらに限定されない。端末機器１０１、１０２、１０３は、ソフトウェアである場合、上記に例示した電子機器にインストールすることができる。端末機器は、複数のソフトウェア又はソフトウェアモジュール（例えば分散サービスを提供するために用いられる複数のソフトウェア又はソフトウェアモジュール）として実現されてもよく、単一のソフトウェア又はソフトウェアモジュールとして実現されてもよいが、ここで具体的に限定されない。

サーバ１０５は、様々なサービスを提供するサーバであってもよく、例えば、端末機器１０１、１０２、１０３にサポートを提供するバックエンドサーバであってもよい。バックエンドサーバは、受信した処理対象ビデオフレーム等のデータに対し解析等の処理を実行し、処理の結果（例えばターゲット一次ラジアル歪みパラメーター）を端末機器にフィードバックすることができる。

説明すべきなのは、本出願実施例が提供するビデオフレームの処理方法は、サーバ１０５又は端末機器１０１、１０２、１０３によって実行される。相応的に、ビデオフレームの処理装置は、サーバ１０５又は端末機器１０１、１０２、１０３に設けられる。

なお、図１における端末機器、ネットワーク、サーバの数はただ一例であることを理解されたい。実際のニーズに応じて、任意の数の端末機器、ネットワーク、サーバを備えることができる。

次に、図２を参照する。図２に、本出願に係るビデオフレームの処理方法の一実施例のフロー２００が示される。上記したビデオフレームの処理方法は、以下のステップを含む。

ステップ２０１において、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定ラジアル歪みパラメーターの指定値を取得し、そのうち、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下であり、指定ラジアル歪みパラメーターが一次ラジアル歪みパラメーターではない。

本実施例において、ビデオフレームの処理方法を実行する実行主体（例えば図１に示すサーバ又は端末機器）は、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター（即ちｋ１）を取得することができる。また、前記実行主体は、一次ラジアル歪みパラメーター以外の指定ラジアル歪みパラメーターに対して、当該指定ラジアル歪みパラメーターの指定値を取得することができる。実践中、前記実行主体はローカル又は他の電子機器から上記のプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定値を直接に取得することができる。ここでの処理対象ビデオフレームは、カメラにより撮影されたビデオフレーム原図であっても良く、ビデオフレーム原図が一定の処理（例えばスクリーンショット、スタイルチェンジ等）を経って得られたビデオフレームであってもよい。

ラジアル歪みパラメーターは、例えば一次ラジアル歪みパラメーター、二次ラジアル歪みパラメーター（ｋ２）、また三次ラジアル歪みパラメーター（ｋ３）などの複数のラジアル歪みパラメーターを含んでもよい。相応的に、ここでの指定ラジアル歪みパラメーターは、二次ラジアル歪みパラメーターを含んでも良く、また三次ラジアル歪みパラメーターを含んでも良い。各指定ラジアル歪みパラメーターはいずれも相応的な指定値がある。異なる指定ラジアル歪みパラメーターの値は同様であっても良く、例えばいずれも０である。

一例として、指定値が０である場合、その絶対値が０であり、候補となる一次ラジアル歪みパラメーターが－０．２である場合、その絶対値が０．２であり、指定値の絶対値より大きくなります。

ステップ２０２において、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られる。

本実施例において、前記実行主体は、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーター及び各指定ラジアル歪みパラメーターの指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、ラジアル歪み補正の結果としては第１の初期補正ビデオフレームである。実践中、前記実行主体は、指定の焦点距離をラジアル歪み補正のパラメーターとして、前記ラジアル歪み補正を行うことができる。

ステップ２０３において、第１の初期補正ビデオフレームのぞれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択し、そのうち、前記第１の初期補正ビデオフレームのぞれぞれに対応する少なくとも一部領域が一致している。

本実施例において、前記実行主体は選択ステップを実行することができる。即ち、得られた第１の初期補正ビデオフレームのそれぞれに、ビデオフレームの少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択する。第１の初期補正ビデオフレームの少なくとも一部領域とは、第１の初期補正ビデオフレームの一部領域又は全領域を指す。異なる第１の初期補正ビデオフレームに対応する少なくとも一部領域が一致している。ここでの直線セグメントとは湾曲していないセグメントを指す。

ステップ２０４において、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定する。

本実施例において、前記実行主体は、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定することができる。

本出願の実施例が提供する方法は各候補となる一次段ラジアル歪みパラメーターを利用して歪み補正を行い、直線セグメントの数により歪み補正効果が最も良い候補となる一次ラジアル歪みパラメーターを処理対象ビデオフレームの一次ラジアル歪みパラメーターとして正確に決定することができる。当該実施形態は、ビデオフレームに対してキャリブレーションなどの前処理なしで、ビデオに対してリアルタイムでより正確な歪み補正処理を実現することができる。候補となる一次ラジアル歪みパラメーターをより大きな値で制限することによって、候補となる一次ラジアル歪みパラメーターを通常のより大きな値の特性とより合わせて、最終的に得られたターゲット一次ラジアル歪みパラメーターを真の値とより合わせることを確保することができる。

本実施例のいくつかの選択可能な実現形態において、少なくとも一部領域は第１の初期補正ビデオフレームにおいて指定中心領域以外の領域である。

これらの選択可能な実現形態において、前記少なくとも一部領域は第１の初期補正ビデオフレームにおいて指定中心領域を除く領域であってもよい。例えば、指定中心領域は、画像の中心点を中心とする矩形領域であってもよい。当該矩形領域の幅と高さの比率は、第１の初期補正ビデオフレームの幅と高さの比率と同様であってもよい。例えば、当該矩形領域の幅と高さはぞれぞれ第１の初期補正ビデオフレームの幅と高さの三分の一であってもよい。

これらの実現形態は、第１の初期補正ビデオフレームにおけるよりひどく歪んだエッジ領域のみを操作の対象とすることによって、第１の初期補正ビデオフレームの全画像の検出による時間のかかる問題を回避し、歪み補正の速度を向上させることができる。

本実施例のいくつかの選択可能な実現形態において、複数の候補となる一次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる一次ラジアル歪みパラメーター間に第１のプリセット間隔値がある。複数の候補となる二次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる二次ラジアル歪みパラメーター間に第２のプリセット間隔値がある。

これらの選択可能な実現形態において、任意の二つの隣接する候補となる一次ラジアル歪みパラメーター間の間隔、と他の二つの隣接する候補となる一次ラジアル歪みパラメーター（上記した任意の二つの隣接する候補となる一次ラジアル歪みパラメーターと他の二つの隣接する候補となる一次ラジアル歪みパラメーターとは同一の一次ラジアル歪みパラメーターが存在する場合と存在しない場合がある。）間の間隔は同様であっても良い。任意の二つの隣接する候補となる二次ラジアル歪みパラメーター間の間隔、と他の二つの隣接する候補となる二次ラジアル歪みパラメーター間の間隔は同様であっても良い。ここでの第１のプリセット間隔値と第２のプリセット間隔値は同様であっても異なってもよく、例えば、第１のプリセット間隔値は第２のプリセット間隔値より大きくなってもよい。

一例として、第１のプリセット間隔値は０．０５である場合、候補となる一次ラジアル歪みパラメーターは、－０．２、－０．１５、－０．１、－０．０５、０を含んでも良い。

これらの実現形態によっては、候補値を均一に取得することができるため、候補値の不均一な分布により真の値が候補値のより大きい間隔にあることによるターゲット一次ラジアル歪みパラメーターの不正確さを回避し、歪み補正の精度を向上させる。

次に、図３を参照する。図３は、本実施例に係るビデオフレームの処理方法の適用シーンの概略図である。図３の適用シーンにおいて、実行主体３０１は処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター３０２、及び一次ラジアル歪みパラメーター以外の指定ラジアル歪みパラメーターの指定値３０３を取得し、そのうち、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下である。実行主体３０１は各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーター３０２と指定値３０３に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレーム３０４が得られる。実行主体３０１は、第１の初期補正ビデオフレームのぞれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレーム３０５を選択する選択ステップを実行し、そのうち、前記第１の初期補正ビデオフレームのぞれぞれに対応する少なくとも一部領域が一致している。実行主体３０１は、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーター３０６として決定する。

さらに、図４を参照する。図４に、ビデオフレームの処理方法の別の実施例のフロー４００が示されている。当該フロー４００は、以下のステップを含む。

ステップ４０１において、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定ラジアル歪みパラメーターの指定値を取得し、そのうち、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下であり、前記指定ラジアル歪みパラメーターが一次ラジアル歪みパラメーターではない。

本実施例において、ビデオフレームの処理方法を実行する実行主体（例えば図１に示すサーバ又は端末機器）は、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター（即ちｋ１）を取得することができる。また、前記実行主体は、一次ラジアル歪みパラメーター以外の指定ラジアル歪みパラメーターについて、当該指定ラジアル歪みパラメーターの指定値を取得することができる。実践中、前記実行主体は、ローカル又は他の電子機器から上記のプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定値を直接に取得することができる。ここでの処理対象ビデオフレームは、カメラにより撮影されたビデオフレーム原図であっても良く、ビデオフレーム原図が一定の処理（例えばスクリーンショット、スタイルチェンジ等）を経って得られたビデオフレームであってもよい。

ステップ４０２において、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られる。

本実施例において、前記実行主体は、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーター及び各指定ラジアル歪みパラメーターの指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、ラジアル歪み補正の結果としては第１の初期補正ビデオフレームである。実践中、前記実行主体は、指定の焦点距離をラジアル歪み補正のパラメーターとして、上記のラジアル歪み補正を行うことができる。

ステップ４０３において、第１の初期補正ビデオフレームのそれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択し、そのうち、前記第１の初期補正ビデオフレームのそれぞれに対応する少なくとも一部領域が一致している。

本実施例において、前記実行主体は選択ステップを実行することができる。即ち、得られた第１の初期補正ビデオフレームのそれぞれに、ビデオフレームの少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択する。第１の初期補正ビデオフレームの少なくとも一部領域とは、第１の初期補正ビデオフレームの一部領域又は全領域を指す。異なる第１の初期補正ビデオフレームに対応する少なくとも一部領域が一致している。ここでの直線セグメントとは湾曲していないセグメントを指す。

ステップ４０４において、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定する。

本実施例において、前記実行主体は、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定することができる。

ステップ４０５において、処理対象ビデオフレームにプリセットされた複数の候補となる二次ラジアル歪みパラメーターを取得し、そのうちに最も大きな候補となる二次ラジアル歪みパラメーターは最も大きな候補となる一次ラジアル歪みパラメーターよりも小さくなる。

本実施例において、指定ラジアル歪みパラメーターは二次ラジアル歪みパラメーターを含み、前記実行主体は、一次ラジアル歪みパラメーターの決定と同様に二次ラジアル歪みパラメーターを決定することができる。具体的に、前記実行主体は、プリセットされた複数の候補となる二次ラジアル歪みパラメーターを取得することができる。実際には、二次ラジアル歪みパラメーターが小さいことが多いので、二次ラジアル歪みパラメーターの割り当て値は全体的に小さくすることができる。例えば、一次ラジアル歪みパラメーターの最も大きな割り当て値は０．２である場合、二次ラジアル歪みパラメーターの最も大きな割り当て値は０．１又は０．０５であってもよい。

ステップ４０６において、各候補となる二次ラジアル歪みパラメーターについて、当該候補となる二次ラジアル歪みパラメーターとターゲット一次ラジアル歪みパラメーターに基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第２の初期補正ビデオフレームが得られる。

本実施例において、前記実行主体は、各候補となる二次ラジアル歪みパラメーターについて、当該パラメーター及びターゲット一次ラジアル歪みパラメーターに基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、ここでのラジアル歪み補正結果を第２の初期補正ビデオフレームとすることができる。

ステップ４０７において、第２の初期補正ビデオフレームのぞれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第２の初期補正ビデオフレームを選択し、そのうち、前記第２の初期補正ビデオフレームのぞれぞれに対応する少なくとも一部領域が一致している。

本実施例において、前記実行主体は、ステップ４０６により得られた第２の初期補正ビデオフレームに対して選択ステップを実行することができる。即ち、第２の初期補正ビデオフレームのぞれぞれに、少なくとも一部領域に含まれる直線セグメントの数により、最適な歪み補正効果と対応する第２の初期補正ビデオフレームを選択することができる。

ステップ４０８において、選択された第２の初期補正ビデオフレームに対応する候補となる二次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット二次ラジアル歪みパラメーターとして決定するとともに上記の選択された第２の初期補正ビデオフレームを処理対象ビデオフレームのターゲット補正結果とする。

本実施例において、前記実行主体は、今回の選択ステップにより選択された第２の初期補正ビデオフレームに対応する候補となる二次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット二次ラジアル歪みパラメーターとして決定することができる。前記実行主体は、ここで選択された第２の初期補正ビデオフレームを処理対象ビデオフレームのターゲット補正結果とすることができる。

本実施例は、ターゲット一次ラジアル歪みパラメーターを利用して、各候補となる二次ラジアル歪みパラメーターのぞれぞれに対応する歪み補正結果を決定することができるので、その中から最適な歪み補正結果を選択して、真の値と最も合う二次ラジアル歪みパラメーターを判断することができる。

本実施例のいくつかの選択可能な実現形態において、処理対象ビデオフレームが少なくとも二つの処理対象ビデオフレームを含み、少なくとも二つの処理対象ビデオフレームのうち、隣接する撮影時間の任意の二つのビデオの撮影時間差がプリセットされた時間差以下である。上記した方法は、少なくとも二つの処理対象ビデオフレームと各処理対象ビデオフレームの指定初期焦点距離をモーションリカバリ構造モジュール（Ｓｔｒｕｃｔｕｒｅ ｆｒｏｍ Ｍｏｔｉｏｎ、ＳＦＭ）に入力し、少なくとも二つの処理対象ビデオフレームにおける各処理対象ビデオフレームのターゲット焦点距離が得られるステップと、上記した各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、初期補正ビデオフレームが得られるステップに含まれた、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーター、指定値とターゲット焦点距離に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、初期補正ビデオフレームが得られるステップと、を更に含む。そのうち、前記少なくとも二つの処理対象ビデオフレームにおける処理対象ビデオフレームの幅が広いほど、当該処理対象ビデオフレームの指定初期焦点距離が長くなる。

これらの選択可能な実現形態において、前記実行主体は、少なくとも二つの処理対象ビデオフレームおよび処理対象ビデオフレームに対して指定された指定初期焦点距離を、モーションリカバリ構造（Ｓｔｒｕｃｔｕｒｅ ｆｒｏｍ Ｍｏｔｉｏｎ、ＳＦＭ）モジュールに入力することによって、モーションリカバリ構造モジュールにより指定初期焦点距離を調整し、ターゲット焦点距離が得られる。このように、前記実行主体は、当該候補となる一次ラジアル歪みパラメーター、指定値、ターゲット焦点距離を利用して処理対象ビデオフレームに対して歪み補正を行うことによって、初期補正ビデオフレームが得られる。

少なくとも二つの処理対象ビデオフレームにおいて異なる処理対象ビデオフレームの指定初期焦点距離は同様でも異なってもよい。実践中、上記の少なくとも二つの処理対象ビデオフレームは同一のカメラで撮影したビデオフレームであっても良いので、サイズは同様であってもよい。指定初期焦点距離は、処理対象ビデオフレームのサイズに関連付けることができ、例えば指定初期焦点距離と処理対象ビデオフレームの幅又は高さの比率は、指定値であってもよく、指定値の範囲内［０．７、０．９］であってもよい。即ち、前記実行主体は、プリセットされた規則に従って当該範囲内から選択しても良く、ランダムに当該範囲内から選択しても良い。

任意の処理対象ビデオフレームについて、少なくとも二つの処理対象ビデオフレームのうち、当該処理対象ビデオフレームの撮影時間の前後の処理対象ビデオフレームのみは、撮影時間が隣接するビデオフレームである。少なくとも二つの処理対象ビデオフレームは、カメラで撮影した連続ビデオフレームであってもよく、カメラで撮影したビデオフレームから数フレームごとに取得されたビデオフレームであってもよく、例えば１秒間に３０フレームを撮影し、３０フレームごとに取得された一つのフレームを処理対象ビデオフレームとする。したがって、上記の隣接するビデオフレームとは、上記の少なくとも二つの処理対象ビデオフレームの撮影時間が隣接していることを意味する。

例えば、少なくとも二つの処理対象ビデオフレームは合計三つのビデオフレームであり、撮影時間はそれぞれ、第１のフレームが３点０８分００秒、第２のフレームが３点０８分０１秒、第３のフレームが３点０８分０２秒である。第１のフレームと第２のフレームは隣接するビデオフレームであり、第２のフレームと第３のフレームは撮影時間が隣接するビデオフレームである。

これらの実現形態は、焦点距離の初期値とモーションリカバリ構造を利用して、処理対象画像の焦点距離を正確に決定することができる。

本実施例のいくつかの選択可能な実現形態において、処理対象ビデオフレームは、固定の焦点距離によるターゲットカメラで撮影したビデオフレームであり、上記した方法は、ターゲットカメラで撮影した、処理対象ビデオフレーム以外のターゲットビデオフレームを取得するステップと、ターゲット焦点距離、ターゲット一次ラジアル歪みパラメーター、ターゲット二次ラジアル歪みパラメーターに基づいて、ターゲットビデオフレームに対してラジアル歪み補正を行うステップを更に含む。

これらの選択可能な実現形態において、前記処理対象ビデオフレームは、ターゲットカメラで撮影したものであり、当該カメラで撮影したビデオフレームの焦点距離は固定されている。前記実行主体は、処理対象ビデオフレームにより得られた一次ラジアル歪みパラメーター、二次ラジアル歪みパラメーター、ターゲット焦点距離を利用して、当該ターゲットカメラで撮影した他のビデオフレームに対してラジアル歪み補正を行うことができる。これらの実現形態は、カメラで撮影したビデオフレームの一部により歪み補正のパラメーターを取得することができ、当該カメラで撮影した他のビデオフレームの歪み補正で広く利用されている。

さらに図５を参照すると、上図に示す方法による実現形態として、本出願がビデオフレームの処理装置の一実施例を提供する。当該装置実施例は、図２に示す方法実施例に対応する。以下に記載の特徴に加えて、当該装置実施例は、図２に示す方法実施例と同様な又は相応的な特徴或いは効果を更に含むことができる。当該装置は様々な電子機器に適用できる。

図５に示されたように、本実施例に係るビデオフレームの処理装置５００は、第１の取得ユニット５０１、第１の補正ユニット５０２、選択ユニット５０３、決定ユニット５０４を含む。そのうち、前記第１の取得ユニット５０１は、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定ラジアル歪みパラメーターの指定値を取得するように構成されたものであり、そのうち、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下であり、前記指定ラジアル歪みパラメーターが一次ラジアル歪みパラメーターではない。また、前記第１の補正ユニット５０２は、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られるように構成されたものである。また、前記選択ユニット５０３は、第１の初期補正ビデオフレームのそれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択するように構成されたものであり、そのうち、第１の初期補正ビデオフレームのぞれぞれに対応する少なくとも一部領域が一致している。また、前記決定ユニット５０４は、選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定するように構成されたものである。

本実施例において、ビデオフレームの処理装置５００における第１の取得ユニット５０１、第１の補正ユニット５０２、選択ユニット５０３、決定ユニット５０４の具体的な処理及びそれによる技術効果について、それぞれ図２に対応する実施例のステップ２０１、ステップ２０２、ステップ２０３、ステップ２０４の関連する説明を参照されたいので、ここでは説明を省略する。

本実施例のいくつかの選択可能な実現形態において、少なくとも一部領域が初期補正ビデオフレームにおいて指定中心領域以外の領域である。

本実施例のいくつかの選択可能な実現形態において、指定ラジアル歪みパラメーターは、二次ラジアル歪みパラメーターを含み、上記した装置は第２の取得ユニット、第２の補正ユニット、を更に含む。そのうちに、前記第２の取得ユニットは、処理対象ビデオフレームにプリセットされた複数の候補となる二次ラジアル歪みパラメーターを取得するように構成されたものであり、そのうちに最も大きな候補となる二次ラジアル歪みパラメーターが最も大きな候補となる一次ラジアル歪みパラメーターより小さくなる。また、前記第２の補正ユニットは、各候補となる二次ラジアル歪みパラメーターについて、当該候補となる二次ラジアル歪みパラメーターとターゲット一次ラジアル歪みパラメーターに基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第２の初期補正ビデオフレームが得られるように構成されたものである。また、前記初期生成ユニットは、第２の初期補正ビデオフレームのぞれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第２の初期補正ビデオフレームを選択するように構成されたものであり、そのうち、第２の初期補正ビデオフレームのそれぞれに対応する少なくとも一部領域が一致している。また、前記実行ユニットは、選択された第２の初期補正ビデオフレームに対応する候補となる二次ラジアル歪みパラメーターを、処理対象ビデオフレームのターゲット二次ラジアル歪みパラメーターとして決定し、上記の選択された第２の初期補正ビデオフレームを処理対象ビデオフレームのターゲット補正結果とするように構成されたものである。

本実施例のいくつかの選択可能な実現形態において、処理対象ビデオフレームが少なくとも二つの処理対象ビデオフレームを含み、少なくとも二つの処理対象ビデオフレームのうち、隣接する撮影時間の任意の二つのビデオの撮影時間差がプリセットされた時間差以下である。上記した装置は、焦点距離決定ユニット、第１の補正ユニットを更に備える。そのうち、前記焦点距離決定ユニットは、少なくとも二つの処理対象ビデオフレームと各処理対象ビデオフレームの指定初期焦点距離をモーションリカバリ構造モジュールに入力し、少なくとも二つの処理対象ビデオフレームにおける各処理対象ビデオフレームのターゲット焦点距離が得られるように構成されたものであり、そのうち、前記少なくとも二つの処理対象ビデオフレームにおける処理対象ビデオフレームの幅が広いほど、当該処理対象ビデオフレームの指定初期焦点距離が長くなる。また、前記第１の補正ユニットは、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーター、指定値、ターゲット焦点距離に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られることによって、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られるように構成されたものである。

本実施例のいくつかの選択可能な実現形態において、処理対象ビデオフレームは、固定の焦点距離によるターゲットカメラで撮影したビデオフレームであり、上記した装置は、ターゲットカメラで撮影した、処理対象ビデオフレーム以外のターゲットビデオフレームを取得するように構成されたビデオフレーム取得ユニットと、ターゲット焦点距離、ターゲット一次ラジアル歪みパラメーター、ターゲット二次ラジアル歪みパラメーターに基づいて、ターゲットビデオフレームに対してラジアル歪み補正を行うように構成された第３の補正ユニットとを更に備える。

本実施例のいくつかの選択可能な実現形態において、複数の候補となる一次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる一次ラジアル歪みパラメーター間に第１のプリセット間隔値がある。複数の候補となる二次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる二次ラジアル歪みパラメーター間に第２のプリセット間隔値がある。

本出願の実施例によれば、本出願は電子機器と読み取り可能な記録媒体を更に提供する。

図６に示されたように、本出願の実施例に係るビデオフレームの処理方法による電子機器のブロック図である。電子機器は、ラップトップコンピューター、デスクトップコンピューター、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、メインフレームコンピューター、その他の適切なコンピューターなど、様々な形態のデジタルコンピューターを示すことを目的としている。電子機器は、パーソナルデジタル処理、携帯電話、スマートフォン、ウェアラブルデバイス、およびその他の同様のコンピュータデバイスなど、様々な形式のモバイルデバイスを表すこともできる。本明細書に示す部品、それらの接続と関係、及びそれらの機能は単なる例であり、本明細書に記載及び／又は要求とされる本出願の実現を制限することを意図するものではない。

図６に示されたように、当該電子機器は、１つ又は複数のプロセッサ６０１、メモリ６０２、及び各部品を接続するための、高速インタフェースと低速インタフェースを含むインタフェースを含む。各部品は、異なるバスにより相互に接続しており、共通のメインボードに設置してもよく、必要に応じて他の方法により設置してもよい。プロセッサは、電子機器内に実行された命令を処理することができ、前記命令は、メモリに記憶された命令或いはメモリにある外部入力/出力装置（例えば、インタフェースに結合された表示機器）にＧＵＩのグラフィック情報を表示させるための命令を含む。他の実施形態では、必要に応じて、複数のプロセッサ及び/又は複数のバスを複数のメモリと複数のメモリとともに使用することができる。同様、複数の電子機器と接続して、各機器に幾つかの必要とする操作（例えば、サーバアレイ、ブレードサーバのグループ、或いはマルチプロセッサシステム）を提供することができる。図６はプロセッサ６０１を例として示されている。

メモリ６０２は、本出願が提供する非一時的（瞬時ではなく）コンピュータ読み取り可能な記録媒体である。そのうち、メモリに記憶された少なくとも一つのプロセッサによって実行され得る命令によって、少なくとも一つのプロセッサに本出願が提供するビデオフレームの処理方法を実行させる。本出願に係る非一時的コンピュータ読み取り可能な記録媒体にコンピュータ命令が記憶され、当該コンピュータ命令はコンピュータに本出願が提供するビデオフレームの処理方法を実行させる。

メモリ６０２は、非一時的コンピュータ読み取り可能な記録媒体として、非一時的ソフトウェアプログラム、非一時的コンピュータ実行可能なプログラム及びモジュールを記憶するために用いられ、例えば、本出願の実施例に係るビデオフレームの処理方法と対応するプログラム命令/モジュール（例えば、図５に示す第１の取得ユニット５０１、第１の補正ユニット５０２、選択ユニット５０３、決定ユニット５０４）であってもよい。プロセッサ６０１は、メモリ６０２に記憶された非一時的ソフトウェアプログラム、命令及びモジュールを実行することによって、サーバにおける様々な機能アプリケーション及びデータ処理を実行する。よって、前記した方法実施例に係るビデオフレームの処理方法を実現する。

メモリ６０２は、記憶プログラム領域と記憶データ領域を含んでも良く、前記記憶プログラム領域は、オペレーティングシステム、少なくとも一つの機能が必要とするアプリケーションプログラムを記憶することができ、前記記憶データ領域は、ビデオフレームの処理による電子機器で作成されたデータ等を記憶することができる。また、メモリ６０２は、高速ランダムアクセスメモリを含んでも良く、非一時的メモリを含んでも良く、例えば少なくとも一つ磁気ディスク記憶装置、フラッシュ記憶装置、又は他の非一時的ソリッドステート記憶装置であってもよい。幾つかの実施例において、メモリ６０２はプロセッサ６０１に対して遠隔設定されたメモリを選択しても良く、これらの遠隔メモリは、ネットワークを介してビデオフレームの処理による電子機器に接続することができる。前記ネットワークの一例としてインターネット、企業イントラネット、ローカルエリアネットワーク、モバイル通信ネットワーク及びそれらの組み合わせを含むがこれらに限定されない。

ビデオフレームの処理方法による電子機器は、入力装置６０３、出力装置６０４をさらに含んでも良い。プロセッサ６０１、メモリ６０２、入力装置６０３、出力装置６０４は、バスまたは他の方法で接続することがでいる。図６では、バス接続を例として示されている。

入力装置６０３は、入力された数値、文字情報を受信することができ、ビデオフレームの処理による電子機器のユーザ設定及び機能制御に関連するキー信号入力を生成することもでき、例えばタッチスクリーン、キーパッド、マウス、トラックパッド、タッチパッド、インジケータースティック、1つまたは複数のマウスボタン、トラックボール、ジョイスティックなどの入力装置であってもよい。出力装置６０４は、表示機器、補助照明装置（例えば、ＬＥＤ）、触覚フィードバック装置（例えば、振動モーター）等を含むことができる。当該表示機器は、液晶ディスプレイ（ＬＣＤ）、発光ダイオード（ＬＥＤ）ディスプレイ、プラズマディスプレイを含むがこれらに限定されていない。幾つかの実施形態において、表示機器はタッチスクリーンであってもよい。

ここで記載のシステムと技術の様々な実施形態は、デジタル電子回路システム、集積回路システム、専用ＡＳＩＣ（専用集積回路）、コンピュータハードウェア、ファームウェア、ソフトウェア、及び/又はそれらの組み合わせにより実現することができる。これらの様々な実施形態は、一つ又は複数のコンピュータプログラムにおいて実行されることを含み、当該一つ又は複数のコンピュータプログラムは少なくとも一つのプログラム可能なプロセッサを含むプログラム可能なシステムで実行及び/又は解釈することができ、当該プログラム可能なプロセッサは、専用または通用のプログラム可能なプロセッサであってもよく、記憶システム、少なくとも一つの入力装置、少なくとも一つの出力装置からデータと命令を受信し、データと命令を当該記憶システム、当該少なくとも一つの入力装置、当該少なくとも一つの出力装置に転送してもよい。

これらのコンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、またはコードとも呼ばれる）には、プログラム可能なプロセッサの機械語命令が含まれ、高レベルのプロセス及び/又はオブジェクト指向のプログラミング言語、及び/又はアセンブラ/機械語によりこれらのコンピュータプログラムを実行する。本明細書で使用された、「機械読み取り可能な記録媒体」と「コンピュータ読み取り可能な記録媒体」という用語は、機械命令及び/又はデータをプログラム可能なプロセッサのいずれかのコンピュータプログラム製品、機器、及び/又は装置（例えば、磁気ディスク、光ディスク、メモリ、プログラマブルロジックデバイス（ＰＬＤ））に提供するためのものを指し、機器命令を機械読み取り可能な信号として受信するための機器読み取り可能媒体を含む。「機械読み取り可能な信号」という用語は、机器命令及び/又はデータをプログラム可能なプロセッサに提供するためのいずれかの信号である。

ユーザとのインタラクションを提供するために、コンピュータにここで記載のシステムと技術を実行することができる。当該コンピュータは、ユーザに情報を表示するための表示装置（例えば、ＣＲＴ（陰極線管）或いはＬＣＤ（液晶ディスプレイ）モニター）と、ユーザが当該キーボードと当該ポインティングデバイスにより入力をコンピュータに提供するキーボードとポインティングデバイス（例えば、マウスまたはトラックボール）を備える。他の種類の装置は、ユーザとのインタラクションを提供するためのものであってもよく、例えば、ユーザに提供するフィードバックは、任意の形式の感覚フィードバック（例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバック）であってよく、任意の形式（音響入力、音声入力、または触覚入力を含む）ユーザからの入力を受け取ることができる。

ここで記載のシステムと技術をバックエンド部品を含むコンピューターシステム（例えば、データサーバ）、或いは中間部品を含むコンピューターシステム（例えば、アプリケーションサーバ）、或いはフロントエンド部品を含むコンピューターシステム（例えば、グラフィカルユーザーインターフェース或いはネットワークブラウザを有するユーザコンピュータは、ユーザが当該グラフィカルユーザーインターフェース或いは当該ネットワークブラウザによりここで記載のシステムと技術の実施形態とインタラクションする）、或いはこのバックエンド部品、中間部品、或いはフロントエンド部品の任意の組み合わせのコンピューターシステムで実行してもよい。任意の形式或いは媒体によるデジタルデータ通信（例えば、通信ネットワーク）によりシステムの部品を相互に接続することができる。通信ネットワークの例として、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）とインターネットを含む。

コンピュータシステムには、クライアントとサーバを含んでも良い。クライアントとサーバは、通常に互いに遠く離れており、通常に通信ネットワークを介してインタラクションをする。クライアントとサーバの関係は、対応するコンピュータで実行された、お互いにクライアントとサーバーの関係を持つコンピュータープログラムによって生成される。

図面のうちのフローチャート及びブロック図は、本出願の様々な実施例に係るシステム、方法及びコンピュータプログラム製品によって実現できるアーキテクチャ、機能及び動作の表示例である。これについては、フローチャート又はブロック図における各ブロックは、モジュール、プログラムセグメント、又はコードの一部を表すことができる。当該モジュール、プログラムセグメント、又はコードの一部には、所定のロジック機能を実現するための１つ又は複数の実行可能命令が含まれている。さらに注意すべきなのは、一部の代替となる実施態様においては、ブロックに示されている機能は図面に示されているものとは異なる順序で実行することも可能である。例えば、連続して示された二つのブロックは、実際には係る機能に応じて、ほぼ並行して実行されてもよく、時には逆の順序で実行されてもよい。さらに注意すべきなのは、ブロック図及び／又はフローチャートにおけるすべてのブロック、ならびにブロック図及び／又はフローチャートにおけるブロックの組み合わせは、所定の機能又は操作を実行する専用のハードウェアベースのシステムで実現することもできれば、専用のハードウェアとコンピュータ命令との組み合わせで実現することもできる。

本出願の実施例に記載された手段はソフトウェアで実現されてもよく、ハードウェアで実現されてもよい。記載されたユニットは、プロセッサに設置されてもよく、例えば、「第１の取得ユニット、第１の補正ユニット、選択ユニットと決定ユニットとを備えるプロセッサ」として記載されてもよい。ここで、これらのユニットの名称は、ある場合において当該ユニットその自体を限定するものではなく、例えば、決定ユニットは、「選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーター的ユニットとして決定する」 として記載されてもよい。

一方、本出願がコンピュータ読み取り可能な記録媒体を更に提供する。当該コンピュータ読み取り可能な記録媒体は、上記の実施例に記載の装置に含まれるものであってもよく、当該装置に組み込まれずに単独で存在してもよい。上記のコンピュータ読み取り可能な記録媒体は、一つまたは複数のコンピュータプログラムが記憶される。上記の１つまたは複数のコンピュータプログラムが当該装置により実行されると、当該装置に、処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーター、及び指定ラジアル歪みパラメーターの指定値を取得させる。そのうち、前記指定値の絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下であり、前記指定ラジアル歪みパラメーターが一次ラジアル歪みパラメーターではない。また、各候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと指定値に基づいて、処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームが得られる。第１の初期補正ビデオフレームのそれぞれに、少なくとも一部領域に数が最も多い直線セグメントを含む第１の初期補正ビデオフレームを選択し、そのうち、第１の初期補正ビデオフレームのそれぞれに対応する少なくとも一部領域が一致している。選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定する。

以上の記載は、本出願の好ましい実施例、及び使用された技術的原理に関する説明に過ぎない。当業者であれば、本出願に係る発明の範囲が、上記の技術的特徴の特定の組み合わせからなる解決策に限定されるものではなく、上記の本出願の趣旨を逸脱しない範囲で、上記の技術的特徴又はそれらの同等の特徴の任意の組み合わせからなる他の解決策も含むべきであることを理解すべきである。例えば、上記の特徴と本出願に開示された類似の機能を有する技術的特徴（それらに限られない）とを相互に置き換えてなる解決策が該当する。

Claims (15)

1. ビデオフレームの処理方法であって、
   処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーターを取得し、指定ラジアル歪みパラメーターを、その絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下である指定値に設定するステップであって、前記指定ラジアル歪みパラメーターは、一次ラジアル歪みパラメーターを除いた他のラジアル歪みパラメーターである、ステップと、
   各前記候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと前記指定値に設定された前記指定ラジアル歪みパラメーターとに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームを得るステップと、
   対応する少なくとも一部の領域が一致している前記第１の初期補正ビデオフレームのそれぞれにおいて、少なくとも一部の領域に含まれた直線セグメントの数が最も多い第１の初期補正ビデオフレームを選択するステップと、
   選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、前記処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定するステップと、を含む、
   方法。
2. 前記少なくとも一部の領域は第１の初期補正ビデオフレームにおいて指定中心領域以外の領域である、
   請求項１に記載の方法。
3. 前記指定ラジアル歪みパラメーターは二次ラジアル歪みパラメーターを含み、
   上記した方法は、
   前記処理対象ビデオフレームにプリセットされた複数の候補となる二次ラジアル歪みパラメーターを取得するステップと、
   各前記候補となる二次ラジアル歪みパラメーターについて、当該候補となる二次ラジアル歪みパラメーターと前記ターゲット一次ラジアル歪みパラメーターに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第２の初期補正ビデオフレームを得るステップと、
   対応する少なくとも一部の領域が一致している前記第２の初期補正ビデオフレームのそれぞれにおいて、少なくとも一部の領域に含まれた直線セグメントの数が最も多い第２の初期補正ビデオフレームを選択するステップと、
   選択された第２の初期補正ビデオフレームに対応する候補となる二次ラジアル歪みパラメーターを、前記処理対象ビデオフレームのターゲット二次ラジアル歪みパラメーターとして決定するとともに上記の選択された第２の初期補正ビデオフレームを前記処理対象ビデオフレームのターゲット補正結果とするステップと、を更に含み
   最も大きな前記候補となる二次ラジアル歪みパラメーターは最も大きな前記候補となる一次ラジアル歪みパラメーターよりも小さい、
   請求項１に記載の方法。
4. 前記処理対象ビデオフレームが少なくとも二つの処理対象ビデオフレームを含み、前記少なくとも二つの処理対象ビデオフレームのうち、隣接する撮影時間の任意の二つのビデオの撮影時間差がプリセットされた時間差以下であり、
   上記した方法は、
   前記少なくとも二つの処理対象ビデオフレームと各処理対象ビデオフレームの指定初期焦点距離をモーションリカバリ構造モジュールに入力し、前記少なくとも二つの処理対象ビデオフレームにおける各処理対象ビデオフレームのターゲット焦点距離を得るステップをさらに含み、
   上記した各前記候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと前記指定値に設定された前記指定ラジアル歪みパラメーターとに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームを得るステップは、
   各前記候補となる一次ラジアル歪みパラメーターについて、前記候補となる一次ラジアル歪みパラメーターと、前記指定値と、前記ターゲット焦点距離とに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームを得るステップ、を更に含み、
   前記少なくとも二つの処理対象ビデオフレームにおける処理対象ビデオフレームの幅が広いほど、当該処理対象ビデオフレームの指定初期焦点距離が長くなる
   請求項３に記載の方法。
5. 前記処理対象ビデオフレームは、固定の焦点距離を有するターゲットカメラで撮影したビデオフレームであり、
   上記した方法は、
   前記ターゲットカメラで撮影した、前記処理対象ビデオフレーム以外のターゲットビデオフレームを取得するステップと、
   前記ターゲット焦点距離と、前記ターゲット一次ラジアル歪みパラメーターと、前記ターゲット二次ラジアル歪みパラメーターとに基づいて、前記ターゲットビデオフレームに対してラジアル歪み補正を行うステップと、
   を更に含む、請求項４に記載の方法。
6. 前記複数の候補となる一次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる一次ラジアル歪みパラメーター間に第１のプリセット間隔値があり、
   前記複数の候補となる二次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる二次ラジアル歪みパラメーター間に第２のプリセット間隔値がある
   請求項１に記載の方法。
7. ビデオフレームの処理装置であって、
   処理対象ビデオフレームにプリセットされた複数の候補となる一次ラジアル歪みパラメーターを取得し、指定ラジアル歪みパラメーターの指定値を、その絶対値が各候補となる一次ラジアル歪みパラメーターの絶対値以下である指定値に設定するように構成された第１の取得ユニットであって、前記指定ラジアル歪みパラメーターは、一次ラジアル歪みパラメーターを除いた他のラジアル歪みパラメーターである第１の取得ユニットと、
   各前記候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと前記指定値に設定された前記指定ラジアル歪みパラメーターとに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームを得るように構成された第１の補正ユニットと、
   対応する少なくとも一部の領域が一致している前記第１の初期補正ビデオフレームのそれぞれにおいて、少なくとも一部の領域に含まれた直線セグメントの数が最も多い第１の初期補正ビデオフレームを選択するように構成された選択ユニットと、
   選択された第１の初期補正ビデオフレームに対応する候補となる一次ラジアル歪みパラメーターを、前記処理対象ビデオフレームのターゲット一次ラジアル歪みパラメーターとして決定するように構成された決定ユニットとを備える
   装置。
8. 前記少なくとも一部の領域は第１の初期補正ビデオフレームにおいて指定中心領域以外の領域である、
   請求項７に記載の装置。
9. 前記指定ラジアル歪みパラメーターは二次ラジアル歪みパラメーターを含み、
   上記した装置は、
   前記処理対象ビデオフレームにプリセットされた複数の候補となる二次ラジアル歪みパラメーターを取得するように構成された第２の取得ユニットと、
   各前記候補となる二次ラジアル歪みパラメーターについて、当該候補となる二次ラジアル歪みパラメーターと前記ターゲット一次ラジアル歪みパラメーターに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第２の初期補正ビデオフレームを得るように構成された第２の補正ユニットと、
   対応する少なくとも一部の領域が一致している前記第２の初期補正ビデオフレームのそれぞれにおいて、少なくとも一部の領域に含まれた直線セグメントの数が最も多い第２の初期補正ビデオフレームを選択するように構成された初期生成ユニットと、
   選択された第２の初期補正ビデオフレームに対応する候補となる二次ラジアル歪みパラメーターを、前記処理対象ビデオフレームのターゲット二次ラジアル歪みパラメーターとして決定するとともに上記の選択された第２の初期補正ビデオフレームを前記処理対象ビデオフレームのターゲット補正結果とするように構成された実行ユニットと、を更に備え、
   最も大きな前記候補となる二次ラジアル歪みパラメーターは最も大きな前記候補となる一次ラジアル歪みパラメーターよりも小さい
   請求項７に記載の方法。
10. 前記処理対象ビデオフレームが少なくとも二つの処理対象ビデオフレームを含み、前記少なくとも二つの処理対象ビデオフレームのうち、隣接する撮影時間の任意の二つのビデオの撮影時間差がプリセットされた時間差以下であり、
    上記した装置は、
    前記少なくとも二つの処理対象ビデオフレームと各処理対象ビデオフレームの指定初期焦点距離をモーションリカバリ構造モジュールに入力し、前記少なくとも二つの処理対象ビデオフレームにおける各処理対象ビデオフレームのターゲット焦点距離を得るように構成された焦点距離決定ユニットをさらに備え、
    前記第１の補正ユニットは、さらに
    各前記候補となる一次ラジアル歪みパラメーターについて、当該候補となる一次ラジアル歪みパラメーターと、前記指定値に設定された前記指定ラジアル歪みパラメーターと、前記ターゲット焦点距離とに基づいて、前記処理対象ビデオフレームに対してラジアル歪み補正を行い、第１の初期補正ビデオフレームを得るように構成され、
    前記少なくとも二つの処理対象ビデオフレームにおける処理対象ビデオフレームの幅が広いほど、当該処理対象ビデオフレームの指定初期焦点距離が長くなる
    請求項９に記載の方法。
11. 前記処理対象ビデオフレームは、固定の焦点距離を有するターゲットカメラで撮影したビデオフレームであり、
    上記した装置は、
    前記ターゲットカメラで撮影した、前記処理対象ビデオフレーム以外のターゲットビデオフレームを取得するように構成されたビデオフレーム取得ユニットと、
    前記ターゲット焦点距離と、前記ターゲット一次ラジアル歪みパラメーターと、前記ターゲット二次ラジアル歪みパラメーターとに基づいて、前記ターゲットビデオフレームに対してラジアル歪み補正を行うように構成された第３の補正ユニットと、
    を更に備える、請求項１０に記載の装置。
12. 前記複数の候補となる一次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる一次ラジアル歪みパラメーター間に第１のプリセット間隔値があり、
    前記複数の候補となる二次ラジアル歪みパラメーターのうち、任意の隣接する値の候補となる二次ラジアル歪みパラメーター間に第２のプリセット間隔値がある
    請求項７に記載の装置。
13. 電子機器であって、
    一つまたは複数のプロセッサと、
    一つまたは複数のコンピュータプログラムが記憶されたメモリと、を備え、
    前記１つまたは複数のコンピュータプログラムが前記１つまたは複数のプロセッサにより実行されると、前記１つまたは複数のプロセッサに、請求項１～７のいずれか１項に記載の方法を実行させる、電子機器。
14. コンピュータプログラムが記録されたコンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータプログラムがプロセッサにより実行されると、請求項１～６のいずれか１項に記載の方法を実現させることを特徴とするコンピュータ読み取り可能な記憶媒体。
15. コンピュータプログラムであって、
    前記コンピュータプログラムがプロセッサにより実行されると、請求項１～６のいずれか１項に記載の方法を実現させることを特徴とするコンピュータプログラム。

Images