JP2022160646A - ビデオジッタの検出方法、装置、電子機器および記憶媒体 - Google Patents

Abstract

【課題】後続の安定化装置または画像の安定化処理を容易にするために、ビデオにジッタが発生しているか否かを検出するには、客観的かつ迅速で有効な方法、装置、電子機器および記憶媒体を提供する。【解決手段】方法は、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、移動距離に基づいて、ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、ターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定する。【効果】ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。【選択図】図１

Description

本開示は、画像処理技術の分野に関し、具体的にインテリジェント推奨およびメディアクラウド技術の分野に関し、特にビデオジッタの検出方法、装置、電子機器および記憶媒体に関する。

ビデオの撮影、録画、監視の過程で、撮像装置が揺れ、撮影されたビデオ画像の品質が低下する場合がある。従って、後続の安定化装置または画像の安定化処理を容易にするために、ビデオにジッタが発生しているか否かを検出するには、客観的かつ迅速で有効な方法が必要である。

本開示は、ビデオジッタの検出方法、装置、電子機器および記憶媒体を提供する。

本開示の一態様によれば、ビデオジッタの検出方法を提供し、ターゲットビデオフレームと前記ターゲットビデオフレームの前の複数の履歴ビデオフレームを取得するステップと、前記ターゲットビデオフレームおよび前記複数の履歴ビデオフレームの各前記ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定するステップと、設定された方向での前のビデオフレームに対する各前記ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するステップと、設定された方向での前記ターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、前記ターゲット周期が設定された周期よりも小さい場合、前記ビデオにジッタがあると決定されるステップと、を含む。

本開示の別の態様によれば、ビデオジッタの検出装置を提供し、ターゲットビデオフレームと前記ターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する取得モジュールと、前記ターゲットビデオフレームおよび前記複数の履歴ビデオフレームの各前記ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定する第１の決定モジュールと、設定された方向での前のビデオフレームに対する各前記ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する第２の決定モジュールと、設定された方向での前記ターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、前記ターゲット周期が設定された周期よりも小さい場合、前記ビデオにジッタがあると決定される第３の決定モジュールと、を備える。

本開示の別の態様によれば、電子機器を提供し、少なくとも１つのプロセッサと、該少なくとも１つのプロセッサと通信可能に接続されたメモリと、を備え、前記メモリには、前記少なくとも１つのプロセッサによって実行される命令が記憶されており、前記命令は、前記少なくとも１つのプロセッサによって実行される場合、前記少なくとも１つのプロセッサが上記一態様の方法を実行できる。

本開示の別の態様によれば、コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体を提供し、ここで、前記コンピュータ命令は、コンピュータに上記一態様の方法を実行させる。

本開示の別の態様によれば、コンピュータプログラムを提供し、前記コンピュータプログラムがプロセッサによって実行される場合、上記一態様の方法が実現される。

なお、この部分に記載の内容は、本開示の実施例の肝心または重要な特徴を特定することを意図しておらず、本開示の範囲を限定することも意図していない。本出願の他の特徴は下記の明細書の記載を通して理解しやすくなる。

図面は、本出願をより良く理解するためのものであり、本開示を限定するものではない。
本開示の実施例に係るビデオジッタの検出方法の概略フローチャートである。 本開示の実施例に係る別のビデオジッタの検出方法の概略フローチャートである。 本開示の実施例に係る別のビデオジッタの検出方法の概略フローチャートである。 本開示の実施例に係る別のビデオジッタの検出方法の概略フローチャートである。 本開示の実施例に係るビデオジッタの検出装置の概略構成図である。 本開示の実施例による例示的な電子機器６００の概略ブロック図である。

以下、図面と組み合わせて本出願の例示的な実施例を説明する。理解を容易にするために、その中には本発明の実施例の様々な詳細が含まれ、それらは単なる例示と見なされるべきである。したがって、当業者は、本発明の範囲及び精神から逸脱することなく、本明細書に記載の実施例に対して様々な変更及び修正を行うことができる。また、わかりやすくかつ簡潔にするために、以下の説明では、周知の機能及び構造の説明を省略する。

以下、図面を参照して、本開示の実施例のビデオジッタの検出方法、装置、電子機器および記憶媒体を説明する。

関連技術では、ジッタ振幅に基づいて、ビデオにジッタがあるか否かを判断し、撮影装置がゆっくり往復運動すると、算出されたジッタ振幅が大きくなる可能性があり、ターゲットビデオフレームにジッタがあると見なされるが、実は撮影装置の動きであるため、誤判定が発生する。このため、本開示の実施例はビデオジッタの検出方法を提供し、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。本開示では、ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。

図１は、本開示の実施例に係るビデオジッタの検出方法の概略フローチャートである。

図１に示すように、この方法は、以下のステップ１０１～１０４を含む。

ステップ１０１では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する。

本開示の実施例では、ビデオはビデオフレームで構成され、ターゲットビデオフレームは、ビデオ再生プロセスにおける任意の一つのビデオフレーム、またはビデオ再生プロセスにおける現在のビデオフレームであり得る。ターゲットビデオフレームは、ビデオ内のビデオクリップ内の任意の一つのフレーム、または特定の一つのフレームにすることもできる。

例えば、ビデオクリップＡには、区別するために、「１、２、３...、３０」との番号が付けられた３０つのビデオフレームが含まれ、ターゲットビデオフレームが３０番目のフレーム、即ち３０番のビデオフレームである場合、１～２９番のビデオフレームは、３０番のビデオフレームより前の履歴のビデオフレームである。ターゲットビデオフレームが２８番目のフレーム、即ち２８番のビデオフレームである場合、１～２７番のビデオフレームは、２８番のビデオフレームより前の履歴ビデオフレームである。

ステップ１０２、ターゲットビデオフレームおよび複数の履歴ビデオフレームの各ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定する。

ここで、各ビデオフレームには、ターゲットビデオフレームと、ターゲットビデオフレームより前の複数の履歴ビデオフレームが含まれる。

本開示の実施例では、各ビデオフレーム内の２つの隣接するビデオフレーム間の設定された方向での移動距離を決定することで、各ビデオフレーム内の各フレームの設定された方向での移動距離を決定する。ここで、設定された方向は、水平方向、または垂直方向、または水平方向と垂直方向、または水平方向と垂直方向の一方の方向にすることができる。

可能な実現形態として、各ビデオフレーム内のいずれかの隣接するビデオフレーム間のアフィン変換行列を決定し、アフィン変換行列によって、隣接するビデオフレームの設定された方向での前のフレームに対する次のフレームの移動距離が得られる。

ステップ１０３では、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する。

本開示の実施例では、各ビデオフレーム内の設定された方向での前のビデオフレームに対する各フレームの移動距離に基づいて、設定された方向での各ビデオフレームの移動軌跡を決定し、各ビデオフレームの移動軌跡に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、ひいてはターゲット振幅とターゲット周期とに基づいて、ターゲットビデオフレームにジッタがあるか否かを決定する。本開示の実施例では、ターゲットビデオフレームにジッタがあるか否かを判断する際に考慮すべき要素を追加することにより、ビデオフレームのジッタ判定の精度を向上させる。

ステップ１０４では、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。

本開示の実施例では、設定された方向でのターゲットビデオフレームの決定された目標振幅および目標周期に基づいて、ターゲット振幅が設定された振幅よりも大きく、ターゲット周期が設定された周期よりも小さいと決定された場合、ターゲットビデオフレームにジッタがあると決定され、ターゲットビデオフレームから取得されたビデオにジッタがあると決定され、フレームのビデオにジッタがある。振幅によって、ビデオにジッタがあるか否かを決定する従来技術の方法と比較して、ビデオキャプチャデバイスが通常の往復運動をしているときに、大きな振幅によるジッタの誤判定を回避し、ビデオジッタの決定の精度を向上させる。

本開示の技術案では、関与するユーザの個人情報の取得、保存、および適用はすべて、関連する法律および規制の規定に準拠し、公序良俗に違反しない。

本開示の実施例のビデオジッタの検出方法では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。本開示では、ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。

上記の実施例に基づいて、本実施例は、別のビデオジッタの検出方法を提供し、図２は本開示の実施例に係る別のビデオジッタの検出方法の概略フローチャートであり、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を如何に決定するかを具体的に説明し、図２に示すように、この方法は、以下のステップ２０１～２０６を含む。

ステップ２０１では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する。

具体的には、前述の実施例の説明を参照することができ、原理は同じであり、本実施例では詳しく説明しない。

ステップ２０２では、各ビデオフレームについて、ビデオフレーム内の特徴点とビデオフレームの前のビデオフレーム内の特徴点をマッチングし、ビデオフレーム内の第１のマッチング特徴点とビデオフレームの前のビデオフレーム内の第２のマッチング特徴点を決定する。

ここで、ビデオフレーム内の特徴点は、ビデオ内のオブジェクトの形状、色、テクスチャ、および他の特性を含む１つまたは複数のピクセルポイントの組み合わせであり得る。

本開示の実施例の実施形態では、隣接する２つのビデオフレーム画像を取得し、前のビデオフレーム画像と次のビデオフレーム画像から複数の特徴点の特徴を抽出し、例えば、ＳＵＲＦアルゴリズムに基づいてビデオフレーム画像内の特徴点を抽出し、特徴点の特徴をマッチングし、前のビデオフレーム画像と次のビデオフレーム画像内のマッチングされた特徴点を取得し、特徴点マッチングペアを構成することができる。区別しやすくなるように、各ビデオフレームについて、本開示の実施例では、このビデオフレーム内の第１のマッチング特徴点と呼ばれ、このビデオフレームの前のビデオフレーム内の第１のマッチング特徴点とマッチングする第２のマッチング特徴点と呼ばれる。例えば、ビデオフレーム画像の特徴点はそれぞれＰ１、Ｐ２、Ｐ３...、Ｐｎであり、前のビデオフレーム画像の対応するマッチングされる特徴点はそれぞれＱ１、Ｑ２、Ｑ３...、Ｑｎである。ここで、Ｐ１とＱ１は特徴点マッチングペアであり、Ｐ２とＱ２は特徴点マッチングペアであり、Ｐ３とＱ３は特徴点マッチングペアである。特徴点のマッチングでは、ブルートフォース（Ｂｒｕｔｅ
Ｆｏｒｃｅ）または高速近似最近傍（ＦＬＡＮＮ）アルゴリズムを使用して特徴をマッチングすることができ、高速近似最近傍アルゴリズムは、最も近いマッチング距離と次に最も近いマッチング距離との比率が、設定された閾値を超えるか否かを判断し、設定された閾値を超える場合、マッチングが成功したと判断されることにより、間違うマッチングポイントペアが削減される。

ステップ２０３では、設定された方向での各第２のマッチング特徴点に対する各第１のマッチング特徴点の移動距離を決定する。

ここで、設定された方向は、水平方向及び/又は垂直方向である。画像を収集するための撮影装置の揺れは、水平方向の動きであることがあるし、垂直方向の変位であることがあるし、水平方向と垂直方向の揺れが同時に発生していることもあるため、２方向の移動距離を決定することにより、後続のジッタ決定の精度を向上させることができる。

本開示の実施例では、各第１のマッチング特徴点の設定された方向での移動距離、及び各第２のマッチング特徴点の設定された方向での移動距離を決定することにより、各第２のマッチング特徴点に対する各第１のマッチング特徴点の移動距離を決定することができる。

ステップ２０４では、第１のマッチング特徴点の数が、設定された特徴点の数よりも大きい場合、各第１のマッチング特徴点の移動距離の平均値を、設定された方向での前のビデオフレームに対するビデオフレームの移動距離とする。

本開示の実施例では、第１のマッチング特徴点の数を決定し、第１のマッチング特徴点の数と設定された特徴点の数とを比較し、第１のマッチング特徴点の数が、設定された特徴点の数よりも大きいことを決定することにより、第１のマッチング特徴点の数が少ないときに誤ってマッチングする特徴点による誤判定を回避し、精度を向上させる。さらに、第１のマッチング特徴点の移動距離の平均値を、設定された方向での前のビデオフレームに対するビデオフレームの移動距離とする。

なお、第１のマッチング特徴点の数が設定された特徴点の数以下である場合、ビデオフレームは前のビデオフレームに対して設定された方向に移動していないとみなされる。

ステップ２０５では、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する。

ステップ２０６では、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。

具体的に、ステップ２０５とステップ２０６は、前述の実施例の説明を参照することができ、原理は同じであり、本実施例では詳しく説明しない。

本開示の実施例のビデオジッタの検出方法では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。本開示では、ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定するとき、各ビデオフレーム内のマッチングされる特徴点の総数を判断することにより、誤ってマッチングされた特徴点による誤判定を減少し、各ビデオフレームの移動距離を決定する精度を向上させる。

上記の実施例に基づいて、本実施例は別の実施形態を提供し、各ビデオフレームについて、設定距離よりも移動距離が大きいマッチングされた特徴点の数を決定することにより、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離の精度を向上させ、図３は、本開示の実施例に係る別のビデオジッタの検出方法の概略フローチャートであり、図３に示すように、この方法は、以下のステップ３０１～３０７をさらに含む。

ステップ３０１では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する。

ステップ３０２では、各ビデオフレームについて、ビデオフレーム内の特徴点とビデオフレームの前のビデオフレーム内の特徴点をマッチングし、ビデオフレーム内の第１のマッチング特徴点とビデオフレームの前のビデオフレーム内の第２のマッチング特徴点を決定する。

ステップ３０３では、各第２のマッチング特徴点に対する各第１のマッチング特徴点の移動距離を決定する。

具体的に、ステップ３０１～３０３は、前述の実施例の説明を参照することができ、原理は同じであり、本実施例では詳しく説明しない。

ステップ３０４では、第１のマッチング特徴点のうち、移動距離が設定距離よりも大きい第３のマッチング特徴点の数を集計し、第３のマッチング特徴点の数が第３の設定数よりも大きいか、または第１のマッチング特徴点の数に占める第３のマッチング特徴点の数の割合が第１の割合よりも大きいと決定される。

本開示の実施例では、第１のマッチング特徴点のうち、移動距離が設定距離よりも大きい第３のマッチング特徴点の数を集計して、第３のマッチング特徴点の数が第３の設定数よりも大きいか、または第１のマッチング特徴点の数に占める第３のマッチング特徴点の数の割合が第１の割合よりも大きいと決定され、各第１のマッチング特徴点のうち移動距離が大きい特徴点の数または特徴点の割合を決定することにより、対応するビデオフレームには、多数の特徴点が移動することを決定し、ビデオフレーム内のオブジェクトの一部の動きのため、ビデオフレーム内の動きがあると誤判断することを避け、ビデオフレームの動きの判断の精度を向上させる。

なお、第３のマッチング特徴点の数が第３の設定数以下であり、又は第１のマッチング特徴点の数に占める第３のマッチング特徴点の数の割合が第１の割合以下であると決定される場合、ビデオ内の一部のオブジェクトが移動し、ビデオフレームが前のビデオフレームに対して移動しないと見なされる。

ステップ３０５では、第１のマッチング特徴点の数が設定された特徴点の数よりも大きく、第３のマッチング特徴点の数が第３の設定数よりも大きいか、または第１のマッチング特徴点の数に占める第３のマッチング特徴点の数の割合が第１の割合よりも大きい場合、各第１のマッチング特徴点の移動距離の平均値を、設定された方向での前のビデオフレームに対するビデオフレームの移動距離とする。

本開示の実施例では、第１のマッチング特徴点の数が設定された特徴点の数よりも大きく、第３のマッチング特徴点の数が第３の設定数よりも大きいか、または第１のマッチング特徴点の数に占める第３のマッチング特徴点の数の割合が第１の割合よりも大きいと決定される場合、対応するビデオフレームに動きがあると決定され、ビデオフレームの各第１のマッチング特徴点の移動距離の平均値を、設定された方向での前のビデオフレームに対するビデオフレームの移動距離とすることにより、各ビデオフレームの動きの判断の精度を向上させる。

ステップ３０６では、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する。

ステップ３０７では、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。

具体的に、ステップ３０６とステップ３０７は、前述の実施例の説明を参照することができ、原理は同じであり、本実施例では詳しく説明しない。

本開示の実施例のビデオジッタの検出方法では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。本開示では、ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定する場合、各ビデオフレーム内のマッチングされた特徴点の総数、及び設定された要件を満たす特徴点の移動距離の割合、または設定された要件を満たす移動する特徴点の数を判断することによって、ビデオフレーム内の一部のオブジェクトの移動による誤判断を減少し、各ビデオフレームの移動距離を決定する精度を向上させる。

上記の実施例に基づいて、本実施例は、別のビデオジッタの検出方法を提供し、図４は、本開示の実施例に係る別のビデオジッタの検出方法の概略フローチャートであり、図４に示すように、この方法は、以下のステップ４０１～４０７を含む。

ステップ４０１では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する。

ステップ４０２では、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定する。

具体的に、ステップ４０１とステップ４０２は、前述の実施例における関連する説明を参照することができ、原理は同じであり、本実施例では詳しく説明しない。

ステップ４０３では、各移動距離に基づいて、設定された順序に従って移動距離リストを生成する。

ここで、設定された順序は、各ビデオフレームの生成順序を示す。

本開示の実施例の実施形態では、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離と各ビデオフレームの生成順序とに基づいて、移動距離リストにデータを順次に書き込む。例えば、各ビデオフレームには合計１０個のフレームがあり、各ビデオフレームの生成順序に基づいて、１から１０までの番号が付けられ、ここで、１０番のフレームは直近の一つのフレームであり、９番のフレームは、１０番のフレームの前のフレームであり、このように推察すると、１番のフレームは最も早く生成されたフレームであるため、設定された方向での１～１０番のフレームの移動距離は、移動距離リストの左から右に入力される。

本開示の実施例では、移動距離リストに含まれる各ビデオフレームの移動距離の数が、設定された閾値の数よりも大きい場合、移動距離リストは、ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するたに後で使用される複数のビデオフレームを絞り出すために使用されるため、前列に生成されたビデオフレームを削除することにより、移動距離リストに含まれる移動距離の数を低減し、計算量を減らすとともに、移動距離リストに含まれる各ビデオフレームの移動距離に基づいてターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する精度を向上させる。

ステップ４０４では、移動距離リストに基づいて、移動距離の絶対値が設定された距離閾値よりも大きい第１の設定数の連続ビデオフレームを決定する。

本開示の実施例の実施形態では、移動距離リストにおいて、設定された順序とは逆方向に、各ビデオフレームに対応する移動距離リストから、移動距離の絶対値が設定された距離閾値よりも大きい第１の設定数の連続ビデオフレームを決定することにより、移動距離が短い、または移動がないビデオフレームを除外し、有效な連続ビデオフレームを決定し、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するために用いられる連続ビデオフレームの数を減らし、精度を向上させる。

例えば、移動距離リストにおいて、１０番のフレームから１番のフレームまでクエリを実行し、移動距離の絶対値が設定された距離閾値よりも大きい第１の設定数の連続ビデオフレームを決定し、例えば１０フレームである。

ステップ４０５では、第１の設定数の連続ビデオフレームにおいて、移動距離の絶対値が極値である第２の設定数の候補ビデオフレームを決定する。

ここで、第２の設定数は、第１の設定数よりも小さい。例えば、第１の設定数は１０フレームであり、第２の設定数は３フレームである。

本開示の実施例では、移動距離の絶対値が極値である第２の設定数の候補ビデオフレームを決定し、即ち、複数の局所移動距離の絶対値の極値点を決定することにより、移動距離をさらに絞り出す。

例えば、前で決定された１０個の連続ビデオフレームから、局所移動距離が極値点である第２の設定数のビデオフレームを決定し、例えば３フレームである。

ステップ４０６では、設定された方向での第２の設定数の候補ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する。

本開示の実施例では、第２の設定数の候補ビデオフレーム移動距離が大きく、ジッタが存在する可能性のある各ビデオフレームを示し、ひいては、ジッタが生じる可能性がある第２の設定数の候補ビデオフレームの設定された方向での移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を推定することにより、ターゲット振幅とターゲット周期の２つのパラメータに基づいて、ターゲットビデオフレームにジッタがあるか否かを決定し、ターゲットビデオフレームのジッタ決定の精度を向上させることができる。

本開示の実施例の実施形態では、第２の設定数の候補ビデオフレームにおいて、設定された方向での隣接する候補ビデオフレームの移動距離に基づいて、基準ビデオフレームを決定する。１つのシナリオでは、第２の設定数が２以上である場合、第２の設定数の候補ビデオフレームから、隣接関係のある候補ビデオフレームペアがあると決定される場合、複数の候補ビデオフレームペアから、移動距離の短い候補ビデオフレームを絞り出し、ひいては、絞り出される候補ビデオフレームの数が２つになるまで、上記のスクリーニング操作を繰り返し、そして、最終的にスクリーニングされた２つの候補ビデオフレームから、移動距離が大きい候補ビデオフレームを基準ビデオフレームとして選択する。

例えば、第２の設定数の候補ビデオフレームは３であり、距離リストの順序に従ってそれぞれＡ、Ｂ、Ｃになり、ここで、候補ビデオフレームＡの移動距離が最も大きく、候補ビデオフレームＢの移動距離は、候補ビデオフレームＣの移動距離よりも大きく、候補ビデオフレームＣおよび候補ビデオフレームＢの移動距離の絶対値を比較すると、候補ビデオフレームＣは、移動距離が小さい候補ビデオフレームであると決定され、候補ビデオフレームＢおよび候補ビデオフレームＡの移動距離の絶対値を比較すると、候補ビデオフレームＢは、移動距離が小さい候補ビデオフレームであると決定され、ひいては、候補ビデオフレームＣおよび候補ビデオフレームＢの移動距離を比較すると、移動距離が大きい候補ビデオフレームＢは基準ビデオフレームであると決定される。

他のシーンでは、第２の設定数が１である場合、この極値に対応する候補ビデオフレームが基準ビデオフレームとして使用され、基準ビデオフレームがある場合、設定された方向でのターゲットビデオフレームのターゲット振幅とターゲット周期は両方とも０であり、ビデオにジッタがないと決定される。

ひいては、ターゲットビデオフレームの設定された方向での移動距離を、設定された方向でのターゲットビデオフレームのターゲット振幅とする。そして、前記基準ビデオフレームと隣接する候補ビデオフレームとの間のフレーム差に基づいて、設定された方向でのターゲットビデオフレームのターゲット周期を決定する。

ここで、１つのシーンでは、基準ビデオフレームに隣接する候補ビデオフレームが２つある場合、基準ビデオフレームと、いずれの隣接する候補ビデオフレームの間のフレーム間隔を決定し、フレーム間隔に基づいて、基準ビデオフレームと任意の隣接する一つの候補ビデオフレームの間の周期、即ちＴ１とＴ２を決定し、ひいては、Ｔ１またはＴ２をターゲットビデオフレームのターゲット周期として、または、Ｔ１とＴ２の平均値をターゲットビデオフレームのターゲット周期とする。

ここで、Ｔ１またはＴ２を決定する方法については、本開示の実施例では、Ｔ１を例にすると、例えば、基準ビデオフレームは上記で決定された候補ビデオフレームＢであり、候補ビデオフレームＢと候補ビデオフレームＡとの間のフレーム間隔は３フレームであり、ターゲットビデオフレームを収集するデバイスの撮影フレームレートを取得し、フレームレートに基づいて１フレームの長さをｔ１として決定し、１フレームの長さにフレーム間隔の２倍を掛け、基準ビデオフレームＢと隣接する候補ビデオフレームＡの間の周期、即ちｔ１*３*２とする。

他のシーンでは、基準ビデオフレームに隣接する候補ビデオフレームが１つある場合、基準ビデオフレームと隣接する候補ビデオフレームとの間のフレーム間隔によって決定される期間を、ターゲットビデオフレームのターゲット周期とする。

ひいては、決定されたターゲットビデオフレームのターゲット振幅およびターゲット周期に基づいて、ターゲットビデオフレームにジッタがあるか否かを正確に決定することができ、ジッタ決定の精度を向上させる。本開示の実施例では、第２の設定数が大きい場合、第２の設定数の候補ビデオフレームから、基準ビデオフレームを繰り返して絞り出し、基準ビデオフレームの移動距離に基づいてターゲットビデオフレームのターゲット振幅を決定することができ、これにより、ターゲット振幅の決定精度が向上し、さらに、基準ビデオフレームと隣接するフレームとの間のフレーム間隔に基づいて、ターゲット周期を決定し、ターゲット周期の推定の精度も高くなる。

ステップ４０７では、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。

具体的に、前述の実施例の説明を参照することができ、本実施例では詳しく説明しない。

本開示の実施例のビデオジッタの検出方法では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。本開示では、ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。

上記の実施例では、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ターゲットビデオフレームにジッタがあると決定され、ビデオにジッタがあると判断される。ビデオジッタの決定の精度を向上させるために、上記の実施例に基づいて、本開示の実施例は、別のビデオジッタの検出方法を提供し、ターゲットビデオフレームにジッタがあると決定した後、ターゲットビデオフレームの後に取得された複数の連続ビデオフレームを取得し、上記のターゲットビデオフレームの決定方法を使用して、ターゲットビデオフレームの後の連続ビデオフレーム内の各ビデオの設定された方向での振幅と周期を決定し、各ビデオ在設定された方向での振幅と周期とに基づいて、ジッタのある連続ビデオフレームの数を決定し、ジッタのある連続ビデオフレームの数が第１のフレームの数よりも大きい場合、ビデオにジッタがあると判断される。本開示の実施例では、連続する複数のビデオフレームのジッタ状態を決定することにより、ビデオにジッタのある各フレームビデオフレームを決定することができ、つまり、ビデオのジッタの開始時間と終了時間を決定することができ、これにより、ジッタのあるビデオ部分を正確に特定し、ビデオジッタの決定の精度を向上させ、その後のジッタ除去とジッタ分析に根拠を提供する。

上記実施例を実現するために、本実施例は、ビデオジッタの検出装置を提供する。

図５は、本開示の実施例に係るビデオジッタの検出装置の概略構成図であり、図５に示すように、この装置は、以下のモジュールを備える。

取得モジュール５１は、ターゲットビデオフレームと前記ターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する。

第１の決定モジュール５２は、ターゲットビデオフレームおよび複数の履歴ビデオフレームの各ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定する。

第２の決定モジュール５３は、設定された方向での前のビデオフレームに対する各前記ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する。

第３の決定モジュール５４は、設定された方向での前記ターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、前記ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。

さらに、本開示の実施例の実施形態では、第２の決定モジュール５３は、さらに、各前記移動距離に基づいて、設定された順序に従って移動距離リストを生成し、前記設定された順序は、各前記ビデオフレームの生成順序を示し、前記移動距離リストに基づいて、移動距離の絶対値が設定された距離閾値よりも大きい第１の設定数の連続ビデオフレームを決定し、前記第１の設定数の連続ビデオフレームにおいて、移動距離の絶対値が極値である第２の設定数の候補ビデオフレームを決定し、前記第２の設定数は、前記第１の設定数よりも小さく、第３の決定ユニットは、設定された方向での前記第２の設定数の候補ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する。

本開示の実施例の実施形態では、第２の決定モジュール５３は、さらに、前記第２の設定数の候補ビデオフレームにおいて、設定された方向での隣接する候補ビデオフレームの移動距離に基づいて、基準ビデオフレームを決定し、設定された方向での前記基準ビデオフレームの移動距離を、設定された方向での前記ターゲットビデオフレームのターゲット振幅とし、前記基準ビデオフレームと隣接する候補ビデオフレームとの間のフレーム差に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット周期を決定する。

本開示の実施例の実施形態では、第１の決定モジュール５２は、さらに、各前記ビデオフレームについて、前記ビデオフレーム内の特徴点と前記ビデオフレームの前のビデオフレーム内の特徴点をマッチングし、前記ビデオフレーム内の第１のマッチング特徴点と前記ビデオフレームの前のビデオフレーム内の第２のマッチング特徴点を決定し、各前記第２のマッチング特徴点に対する各前記第１のマッチング特徴点の移動距離を決定し、前記第１のマッチング特徴点の数が、設定された特徴点の数よりも大きい場合、各前記第１のマッチング特徴点の移動距離の平均値を、前のビデオフレームに対する前記ビデオフレームの設定された方向での移動距離とする。

本開示の実施例の実施形態では、第１の決定モジュール５２は、さらに、前記第１のマッチング特徴点のうち移動距離が設定距離よりも大きい第３のマッチング特徴点の数を集計し、前記第３のマッチング特徴点の数が第３の設定数よりも大きいか、または前記第１のマッチング特徴点の数に占める前記第３のマッチング特徴点の数の割合が第１の割合よりも大きいと決定される。

本開示の実施例の実施形態では、第３の決定モジュール５４、さらに、前記ターゲットビデオフレームの後に取得された複数の連続ビデオフレームを取得し、設定された方向での前記連続ビデオフレーム内の各前記ビデオフレームの振幅と周期に基づいて、ジッタのある連続ビデオフレームの数を決定し、前記ジッタのある連続ビデオフレームの数が第１のフレームの数よりも大きい場合、前記ビデオにジッタがあると決定される。

本開示の実施例の実施形態では、前記設定された方向には水平方向及び/又は垂直方向が含まれる。

なお、前述の方法の実施例における説明は、本実施例の装置にも適用可能であり、原理は同じであり、本実施例では詳しく説明しない。

本開示の実施例のビデオジッタの検出装置では、ターゲットビデオフレームとターゲットビデオフレームの前の複数の履歴ビデオフレームを取得し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離を決定し、設定された方向での前のビデオフレームに対する各ビデオフレームの移動距離に基づいて、設定された方向でのターゲットビデオフレームのターゲット振幅およびターゲット周期を決定し、設定された方向でのターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される。本開示では、ビデオフレームのジッタ振幅と周期とに基づいてビデオフレームのジッタを決定することにより、ジッタの誤判定を回避し、ビデオのジッタ検出の精度を向上させる。

上記実施例を実現するために、本開示の実施例は、電子機器をさらに提供し、少なくとも１つのプロセッサと、前記少なくとも１つのプロセッサと通信可能に接続されたメモリと、を備え、前記メモリには、前記少なくとも１つのプロセッサによって実行される命令が記憶されており、前記命令は、前記少なくとも１つのプロセッサによって実行される場合、前記少なくとも１つのプロセッサが上記の方法の実施例の前記方法を実行できる。

上記実施例を実現するために、本開示の実施例は、コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体をさらに提供し、ここで、前記コンピュータ命令は、コンピュータに上記の方法の実施例の前記方法を実行させる。

上記実施例を実現するために、本開示の実施例は、コンピュータプログラムをさらに提供し、前記コンピュータプログラムがプロセッサによって実行される場合、上記の方法の実施例の前記方法が実現される。

本開示の実施例によれば、本開示は、電子機器、読み取り可能な記憶媒体、及びコンピュータプログラムをさらに提供する。

図６は、本開示の実施例を実施するための例示的な電子機器６００の概略ブロック図である。電子機器は、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、携帯情報端末、サーバ、ブレードサーバ、メインフレームコンピュータ、及び他の適切なコンピュータなどの様々な形態のデジタルコンピュータを表すことを目のとする。電子機器は、パーソナルデジタルプロセシング、セルラー電話、スマートフォン、ウェアラブルデバイス、及び他の同様のコンピューティングデバイスなど、様々な形態のモバイルデバイスを表してもよい。本明細書に示されるコンポーネント、それらの接続及び関係、並びにそれらの機能は、単なる例であり、本明細書に記載及び／または求められる本願の実現を限定することを意図しない。

図６に示すように、電子機器６００は、ＲＯＭ（Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、リードオンリーメモリ）６０２に記憶されたコンピュータプログラム、または記憶ユニット６０８からＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ、ランダムアクセスメモリ）６０３にローディングされたコンピュータプログラムに基づいて、様々な適切な動作と処理を実行できる計算ユニット６０１を備える。ＲＡＭ６０３には、電子機器６００の動作に必要な各種のプログラム及びデータをさらに記憶することができる。計算ユニット６０１と、ＲＯＭ６０２と、ＲＡＭ６０３とは、バス６０４を介して互いに接続されている。Ｉ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ、入力／出力）インタフェース６０５もバス６０４に接続されている。

電子機器６００における複数のコンポーネントは、Ｉ／Ｏインタフェース６０５に接続されており、その複数のコンポーネントは、キーボードやマウスなどの入力ユニット６０６と、種々なディスプレイやスピーカなどの出力ユニット６０７と、磁気ディスクや光学ディスクなどの記憶ユニット６０８と、ネットワークカード、モデム、無線通信トランシーバーなどの通信ユニット６０９と、を備える。通信ユニット６０９は、電子機器６００がインターネットのようなコンピュータネット及び／または種々なキャリアネットワークを介して他の機器と情報／データを交換することを可能にする。

計算ユニット６０１は、処理及び計算能力を有する様々な汎用及び／または専用の処理コンポーネントであってもよい。計算ユニット６０１のいくつかの例としては、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ、中央処理ユニット）、ＧＰＵ（Ｇｒａｐｈｉｃ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔｓ、グラフィックス処理ユニット）、様々な専用のＡＩ（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ、人工知能）計算チップ、様々な機械学習モデルアルゴリズムを実行する計算ユニット、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ、デジタル信号プロセッサ）、及び任意の適切なプロセッサ、コントローラ、マイクロコントローラなどを備えるが、これらに限定されない。計算ユニット６０１は、上記で説明された各方法及び処理、例えば本開示の第１の態様の実施例に記載のビデオジッタの検出方法又は本開示の第２の態様の実施例に記載のビデオジッタの検出方法を実行する。例えば、いくつかの実施形態では、ビデオジッタの検出方法を、記憶ユニット６０８のような機械読み取り可能な媒体に有形的に含まれるコンピュータソフトウエアプログラムとして実現されてもよい。一部の実施形態では、コンピュータプログラムの一部または全ては、ＲＯＭ６０２及び／または通信ユニット６０９を介して、電子機器６００にロード及び／またはインストールされてもよい。コンピュータプログラムがＲＡＭ６０３にロードされて計算ユニット６０１によって実行される場合に、前述したビデオジッタの検出方法の一つまたは複数を実行することができる。代替的に、他の実施例では、計算ユニット６０１は、他の任意の適当な方式（例えば、ファームウェア）によりビデオジッタの検出方法を実行するように構成されてもよい。

ここで記載されているシステムまたは技術の各種の実施形態は、デジタル電サブ回路システム、集積回路システム、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ、フィールドプログラマブルゲートアレイ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ－Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ、専用集積回路）、ＡＳＳＰ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｓｔａｎｄａｒｄ Ｐｒｏｄｕｃｔ、専用標準品）、ＳＯＣ（Ｓｙｓｔｅｍ Ｏｎ Ｃｈｉｐ、システムオンチップ）、ＣＰＬＤ（Ｃｏｍｐｌｅｘ Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ、コンプレックスプログラマブルロジックデバイス）、コンピュータのハードウェア、ファームウェア、ソフトウェア、及び／またはこれらの組み合わせによって実現することができる。これらの各実施形態は、少なくとも１つのプログラマブルプロセッサを備えるプログラマブルシステムにて実行及び／または解釈される１つまたは複数のコンピュータプログラムにより実行することを含み得、当該プログラマブルプロセッサは、ストレージシステム、少なくとも１つの入力デバイス、及び少なくとも１つの出力デバイスからデータ及び命令を受け取り、データ及び命令を該ストレージシステム、当該少なくとも１つの入力デバイス、及び当該少なくとも１つの出力デバイスに転送することができる専用または汎用のプログラマブルプロセッサであってもよい。

本開示の方法を実施するためのプログラムコードは、１または複数のプログラミング言語の組み合わせで記述されていてもよい。これらのプログラムコードは、プロセッサ又はコントローラによって実行されるとされた際に、フローチャート及び／またはブロック図で規定された機能・動作が実施されるように、汎用コンピュータや専用コンピュータまたは他のプログラム可能な人間の画像復元装置のプロセッサやコントローラに提供されてもよい。プログラムコードは、機械上で完全に実行されるか、機械上で部分的に実行されるか、独立したソフトウェアパッケージとして機械上で部分的に実行されるとともにリモートマシン上で部分的に実行されるか、またはリモートマシンまたはサーバ上で完全に実行されてもよい。

本開示の文脈において、機械読み取り可能な媒体は、命令実行システム、装置またはデバイスによって使用されるために、または命令実行システム、装置またはデバイスと組み合わせて使用されるためのプログラムを含むか、または記憶することができる有形媒体であってもよい。機械読み取り可能な媒体は、機械読み取り可能な信号媒体であってもよいし、機械読み取り可能な記憶媒体であってもよい。機械読み取り可能な媒体としては、電子の、磁気の、光学の、電磁の、赤外線の、半導体システム、装置、デバイス、またはこれらの任意の適切な組み合わせが挙げられるが、これらに限定されない。機械読み取り可能な記憶媒体のより具体的な例としては、１または複数のラインに基づく電気の接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、ＥＰＲＯＭ（消去可能なプログラム可能なリードオンリメモリ）またはフラッシュメモリ、光ファイバ、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｃ Ｒｅａｄ－Ｏｎｌｙ Ｍｅｍｏｒｙ、ポータブルコンパクトディスク読み取り専用メモリ）、光記憶装置、磁気記憶装置、またはこれらの任意の適切な組み合わせが挙げられる。

ユーザとのインタラクションを提供するために、ここで説明されているシステム及び技術をコンピュータで実施することができ、当該コンピュータは、ユーザに情報を表示するためのディスプレイ装置（例えば、ＣＲＴ（Ｃａｔｈｏｄｅ－Ｒａｙ Ｔｕｂｅ、陰極線チューブ）またはＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ、液晶ディスプレイ）モニタ）と、キーボード及びポインティングデバイス（例えば、マウスまたはトラックボール）とを有し、ユーザは、当該キーボード及び当該ポインティングデバイスによって入力をコンピュータに提供することができる。他の種類の装置も、ユーザとのインタラクションを提供するために用いられることができ、例えば、ユーザに提供されるフィードバックは、任意の形式のセンシングフィードバック（例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバック）であってもよく、任意の形式（音響入力と、音声入力と、触覚入力とを含む）でユーザからの入力を受信することができる。

ここで説明されるシステム及び技術は、バックエンドコンポーネントを備えるコンピューティングシステム（例えば、データサーバとする）、またはミドルウェアコンポーネントを備えるコンピューティングシステム（例えば、アプリケーションサーバー）、またはフロントエンドコンポーネントを備えるコンピューティングシステム（例えば、グラフィカルユーザインタフェースまたはウェブブラウザを有するユーザコンピュータであり、ユーザは、当該グラフィカルユーザインタフェースまたは当該ウェブブラウザによってここで説明されるシステム及び技術の実施形態とインタラクションする）、またはこのようなバックエンドコンポーネントと、ミドルウェアコンポーネントと、フロントエンドコンポーネントの任意の組み合わせを備えるコンピューティングシステムで実施することができる。任意の形式または媒体のデジタルデータ通信（例えば、通信ネットワーク）によってシステムのコンポーネントを互いに接続することができる。通信ネットワークの例は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ、ローカルエリアネットワーク）と、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ、ワイドエリアネットワーク）と、インターネットと、ブロックチェーンネットワークとを含む。

コンピュータシステムは、クライアントとサーバとを備えることができる。クライアントとサーバは、一般的に、互いに離れており、通常に通信ネットワークを介してインタラクションする。対応するコンピュータで実行され、互いにクライアント－サーバ関係を有するコンピュータプログラムによってクライアントとサーバとの関係が生成される。ここで、サーバはクラウドサーバであってもよく、クラウドコンピューティングサーバまたはクラウドホストとも呼ばれ、クラウドコンピューティングサービス体系のうちのホスト製品であり、従来の物理ホストとＶＰＳサービス（「Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｓｅｒｖｅｒ」、また、「ＶＰＳ」と略記する）では、管理が難しく、業務拡張性が弱いという欠点を解決している。サーバーは、分散システムのサーバー、またはブロックチェーンを結合したサーバーであってもよい。

ここで、人工知能は、コンピュータに人間のある思考過程及び知能行為（例えば、学習、推論、考え、計画など）をシミュレーションさせることを研究する学科であり、ハードウェアレベルの技術とソフトウェアレベルの技術との両方がある。人工知能ハードウェア技術は、一般に、コンピュータビジョン技術、音声認識技術、自然言語処理技術及び学習／深層学習、ビッグデータ処理技術、ナレッジグラフ技術などのいくつかの態様を含む。

なお、上記のした様々な形態のフローを用いて、ステップを並び替え、追加または削除を行うことができることを理解されるべきである。例えば、本開示に記載された各ステップは、本願に開示された技術案の所望の結果が達成できる限り、並列に実行されてもよいし、順番に実行されてもよいし、異なる順序で実行されてもよい。本明細書は制限されない。

上記具体的な実施形態は、本開示の保護範囲を限定するものではない。当業者であれば、設計要件及び他の要因に応じて、様々な修正、組み合わせ、サブ組合、及び代替を行うことができることは理解される。本願の精神及び原理内で行われたあらゆる修正、同などの置換及び改善などは、いずれも本開示の保護範囲内に含まれるべきである。

Claims (17)

1. ターゲットビデオフレームと前記ターゲットビデオフレームの前の複数の履歴ビデオフレームを取得するステップと、
   前記ターゲットビデオフレームおよび前記複数の履歴ビデオフレームの各前記ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定するステップと、
   設定された方向での前のビデオフレームに対する各前記ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するステップと、
   設定された方向での前記ターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、前記ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定されるステップと、
   を含む、ビデオジッタの検出方法。
2. 前記設定された方向での前のビデオフレームに対する各前記ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するステップが、
   各前記移動距離に基づいて、設定された順序に従って移動距離リストを生成するステップであって、前記設定された順序は、各前記ビデオフレームの生成順序を示すステップと、
   前記移動距離リストに基づいて、移動距離の絶対値が設定された距離閾値よりも大きい第１の設定数の連続ビデオフレームを決定するステップと、
   前記第１の設定数の連続ビデオフレームにおいて、移動距離の絶対値が極値である第２の設定数の候補ビデオフレームを決定するステップであって、前記第２の設定数は、前記第１の設定数よりも小さいステップと、
   設定された方向での前記第２の設定数の候補ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するステップと、
   を含む請求項１に記載の方法。
3. 前記設定された方向での前記第２の設定数の候補ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定するステップが、
   前記第２の設定数の候補ビデオフレームにおいて、設定された方向での隣接する候補ビデオフレームの移動距離に基づいて、基準ビデオフレームを決定するステップと、
   設定された方向での前記基準ビデオフレームの移動距離を、設定された方向での前記ターゲットビデオフレームのターゲット振幅とするステップと、
   前記基準ビデオフレームと隣接する候補ビデオフレームとの間のフレーム差に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット周期を決定するステップと、
   を含む請求項２に記載の方法。
4. 前記ターゲットビデオフレームおよび前記複数の履歴ビデオフレームの各前記ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定するステップが、
   各前記ビデオフレームについて、前記ビデオフレーム内の特徴点と前記ビデオフレームの前のビデオフレーム内の特徴点をマッチングし、前記ビデオフレーム内の第１のマッチング特徴点と前記ビデオフレームの前のビデオフレーム内の第２のマッチング特徴点を決定するステップと、
   
   各前記第２のマッチング特徴点に対する各前記第１のマッチング特徴点の移動距離を決定するステップと、
   前記第１のマッチング特徴点の数が、設定された特徴点の数よりも大きい場合、各前記第１のマッチング特徴点の移動距離の平均値を、前のビデオフレームに対する前記ビデオフレームの設定された方向での移動距離とするステップと、
   を含む請求項１に記載の方法。
5. 前記各前記第１のマッチング特徴点の移動距離の平均値を、前のビデオフレームに対する前記ビデオフレームの設定された方向での移動距離とするステップの前に、
   前記第１のマッチング特徴点のうち移動距離が設定距離よりも大きい第３のマッチング特徴点の数を集計するステップと、
   前記第３のマッチング特徴点の数が第３の設定数よりも大きいか、または前記第１のマッチング特徴点の数に占める前記第３のマッチング特徴点の数の割合が第１の割合よりも大きいと決定されるステップと、
   を含む請求項４に記載の方法。
6. 前記ビデオにジッタがあると判断されるステップが、
   前記ターゲットビデオフレームの後に取得された複数の連続ビデオフレームを取得するステップと、
   設定された方向での前記連続ビデオフレーム内の各前記ビデオフレームの振幅と周期に基づいて、ジッタのある連続ビデオフレームの数を決定するステップと、
   前記ジッタのある連続ビデオフレームの数が第１のフレームの数よりも大きい場合、前記ビデオにジッタがあると決定されるステップと、
   を含む請求項１から５のいずれか一項に記載の方法。
7. 前記設定された方向には、水平方向及び/又は垂直方向が含まれる請求項１から５のいずれか一項に記載の方法。
8. ターゲットビデオフレームと前記ターゲットビデオフレームの前の複数の履歴ビデオフレームを取得する取得モジュールと、
   前記ターゲットビデオフレームおよび前記複数の履歴ビデオフレームの各前記ビデオフレームについて、設定された方向での前のビデオフレームに対する移動距離を決定する第１の決定モジュールと、
   設定された方向での前のビデオフレームに対する各前記ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する第２の決定モジュールと、
   設定された方向での前記ターゲットビデオフレームのターゲット振幅が設定された振幅より大きく、前記ターゲット周期が設定された周期よりも小さい場合、ビデオにジッタがあると決定される第３の決定モジュールと、
   を備える、ビデオジッタの検出装置。
9. 前記第２の決定モジュールが、
   各前記移動距離に基づいて、設定された順序に従って移動距離リストを生成し、前記設定された順序は、各前記ビデオフレームの生成順序を示し、
   前記移動距離リストに基づいて、移動距離の絶対値が設定された距離閾値よりも大きい第１の設定数の連続ビデオフレームを決定し、
   前記第１の設定数の連続ビデオフレームにおいて、移動距離の絶対値が極値である第２の設定数の候補ビデオフレームを決定し、前記第２の設定数は、前記第１の設定数よりも小さく、
   第３の決定ユニットは、設定された方向での前記第２の設定数の候補ビデオフレームの移動距離に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット振幅およびターゲット周期を決定する請求項８に記載の装置。
10. 前記第２の決定モジュールが、
    前記第２の設定数の候補ビデオフレームにおいて、設定された方向での隣接する候補ビデオフレームの移動距離に基づいて、基準ビデオフレームを決定し、
    設定された方向での前記基準ビデオフレームの移動距離を、設定された方向での前記ターゲットビデオフレームのターゲット振幅とし、
    前記基準ビデオフレームと隣接する候補ビデオフレームとの間のフレーム差に基づいて、設定された方向での前記ターゲットビデオフレームのターゲット周期を決定する請求項９に記載の装置。
11. 前記第１の決定モジュールが、
    各前記ビデオフレームについて、前記ビデオフレーム内の特徴点と前記ビデオフレームの前のビデオフレーム内の特徴点をマッチングし、前記ビデオフレーム内の第１のマッチング特徴点と前記ビデオフレームの前のビデオフレーム内の第２のマッチング特徴点を決定し、
    
    各前記第２のマッチング特徴点に対する各前記第１のマッチング特徴点の移動距離を決定し、
    
    前記第１のマッチング特徴点の数が、設定された特徴点の数よりも大きい場合、各前記第１のマッチング特徴点の移動距離の平均値を、前のビデオフレームに対する前記ビデオフレームの設定された方向での移動距離とする請求項８に記載の装置。
12. 前記第１の決定モジュールが、
    前記第１のマッチング特徴点のうち移動距離が設定距離よりも大きい第３のマッチング特徴点の数を集計し、
    前記第３のマッチング特徴点の数が第３の設定数よりも大きいか、または前記第１のマッチング特徴点の数に占める前記第３のマッチング特徴点の数の割合が第１の割合よりも大きいと決定される請求項１１に記載の装置。
13. 前記第３の決定モジュールが、
    前記ターゲットビデオフレームの後に取得された複数の連続ビデオフレームを取得し、
    設定された方向での前記連続ビデオフレーム内の各前記ビデオフレームの振幅と周期に基づいて、ジッタのある連続ビデオフレームの数を決定し、
    前記ジッタのある連続ビデオフレームの数が第１のフレームの数よりも大きい場合、前記ビデオにジッタがあると決定される請求項８から１２のいずれか一項に記載の装置。
14. 前記設定された方向には、水平方向及び/又は垂直方向が含まれる請求項８から１２のいずれか一項に記載の装置。
15. 少なくとも１つのプロセッサと、
    該少なくとも１つのプロセッサと通信可能に接続されたメモリと、
    を備え、
    前記メモリには、前記少なくとも１つのプロセッサによって実行される命令が記憶されており、前記命令が、前記少なくとも１つのプロセッサによって実行される場合、前記少なくとも１つのプロセッサが請求項１から５のいずれか一項に記載の方法を実行できる電子機器。
16. コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体であって、
    前記コンピュータ命令が、コンピュータに請求項１から５のいずれか一項に記載の方法を実行させる非一時的なコンピュータ読み取り可能な記憶媒体。
17. コンピュータプログラムがプロセッサによって実行される場合、請求項１から５のいずれか一項に記載の方法が実現されるコンピュータプログラム。

Images