JP2022529414A

JP2022529414A - 誤動作のない動き検出のための方法及びシステム

Info

Publication number: JP2022529414A
Application number: JP2021560090A
Authority: JP
Inventors: 洪偉張
Original assignee: Guangdong Oppo Mobile Telecommunications Corp Ltd
Current assignee: Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date: 2019-04-23
Filing date: 2019-04-23
Publication date: 2022-06-22
Also published as: WO2020215227A1; CN113711272A

Abstract

一方法は、第１の複数の回数について確認方法を実行する工程であって、この確認方法は、第１のフレームを使用して取得された第１の動き又はシーン変化をバウンディングする第１のバウンディングボックス、及び第２のフレームを用いて取得された第２の動き又はシーン変化をバウンディングする第２のバウンディングボックスとの間のサイズ差を取得する工程、並びに上記第１のフレーム及び上記第２のフレームを更新する工程を含み、上記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、上記サイズ差は所定の閾値よりも大きく、上記第２の複数の回数は所定の複数の回数よりも大きいか又は等しい工程と、上記第２の複数の回数についてのそれぞれについての上記サイズ差に基づいて、上記第１の複数の回数のそれぞれについての上記第１のフレーム及び上記第２のフレームにおける動き又はシーン変化が連続的な動きに属していると判断する工程とを含む。【選択図】図１

Description

本開示は、動き検出の分野に関し、より詳細には、誤動作のない動き検出のための方法及びシステムに関する。

動き検出は、一連のフレーム内の移動物体を識別する技術である。第１のフレーム群は、互いに並置され、移動物体によって変化している状態にされるピクセルを含む。第２のフレーム群は、互いに並置され、カメラの動きによって変化している状態にされるピクセルを含む。第１のフレーム群を第２のフレーム群から区別することは困難である場合があり、その結果、誤った動き検出が行われる可能性がある。

本開示の目的は、誤動作のない動き検出のための方法及びシステムを提案することである。

本開示の第１の態様では、コンピュータ実装方法は、連続する第１の複数の回数（回）について確認方法を実行する工程であって、この確認方法は、連続する複数の第１のフレームを取得する工程、上記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、上記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程、連続する複数の第２のフレームを取得する工程であって、上記第２のフレームは上記第１のフレームに続く工程、上記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、上記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程、上記第１のバウンディングボックスと上記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程、及び上記第１のフレームを上記第２のフレームになるように更新し、上記第２のフレームを上記第２のフレームに続く複数の第３のフレームになるように更新する工程を含み、上記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、上記第１のサイズ差は第１の所定の閾値よりも大きく、上記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい工程と、上記第２の複数の回数のそれぞれについての上記第１のサイズ差に基づいて、上記第１の複数の回数のそれぞれについての上記第１のフレームにおける動き又はシーン変化及び上記第２のフレームにおける動き又はシーン変化が連続的な動きに属していると判断する工程とを含む。

本開示の第２の態様では、コンピュータ実装方法は、連続する第１の複数の回数（回）について確認方法を実行する工程であって、この確認方法は、連続する複数の第１のフレームを取得する工程、上記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、上記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程、連続する複数の第２のフレームを取得する工程であって、上記第２のフレームは上記第１のフレームに続く工程、上記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、上記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第２の特性値を取得する工程、及び上記第１の特性値と上記第２の特性値との間の第１の特性値差を取得する工程を含み、上記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、上記第１の特性値差は第１の所定の閾値よりも大きく、上記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい工程と、上記第２の複数の回数のそれぞれについての上記第１の特性値差に基づいて、上記第１の複数の回数のそれぞれについての上記第１のフレームにおける動き又はシーン変化及び上記第２のフレームにおける動き又はシーン変化が連続的な動きに属していると判断する工程とを含む。

本開示の第３の態様では、システムは、少なくとも１つのメモリと、少なくとも１つのプロセッサとを含む。この少なくとも１つのメモリは、プログラム命令を格納するように構成されている。上記少なくとも１つのプロセッサは、そのプログラム命令を実行するように構成されており、このプログラム命令は、上記少なくとも１つのプロセッサに、連続する第１の複数の回数（回）について確認方法を実行する工程であって、この確認方法は、連続する複数の第１のフレームを取得する工程、上記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、上記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程、連続する複数の第２のフレームを取得する工程であって、上記第２のフレームは上記第１のフレームに続く工程、上記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、上記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程、上記第１のバウンディングボックスと上記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程、及び上記第１のフレームを上記第２のフレームになるように更新し、上記第２のフレームを上記第２のフレームに続く複数の第３のフレームになるように更新する工程を含み、上記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、上記第１のサイズ差は第１の所定の閾値よりも大きく、上記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい工程と、上記第２の複数の回数のそれぞれについての上記第１のサイズ差に基づいて、上記第１の複数の回数のそれぞれについての上記第１のフレームにおける動き又はシーン変化及び上記第２のフレームにおける動き又はシーン変化が連続的な動きに属していると判断する工程とを含む工程を実行させる。

本開示の第４の態様では、システムは、少なくとも１つのメモリと、少なくとも１つのプロセッサとを含む。この少なくとも１つのメモリは、プログラム命令を格納するように構成されている。上記少なくとも１つのプロセッサは、そのプログラム命令を実行するように構成されており、このプログラム命令は、上記少なくとも１つのプロセッサに、連続する第１の複数の回数（回）について確認方法を実行する工程であって、この確認方法は、連続する複数の第１のフレームを取得する工程、上記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、上記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程、連続する複数の第２のフレームを取得する工程であって、上記第２のフレームは上記第１のフレームに続く工程、上記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、上記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第２の特性値を取得する工程、及び上記第１の特性値と上記第２の特性値との間の第１の特性値差を取得する工程を含み、上記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、上記第１の特性値差は第１の所定の閾値よりも大きく、上記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい工程と、上記第２の複数の回数のそれぞれについての上記第１の特性値差に基づいて、上記第１の複数の回数のそれぞれについての上記第１のフレームにおける動き又はシーン変化及び上記第２のフレームにおける動き又はシーン変化が連続的な動きに属していると判断する工程とを含む工程を実行させる。

本開示又は関連技術の実施形態をより明確に示すために、以下の図が、実施形態において説明され、ここで簡単に紹介される。図面は単に本開示のいくつかの実施形態であることは明らかであり、当業者は、前提を置くことなく、これらの図に従って他の図を得ることができる。

図１は、本開示の一実施形態に係る端末における入力、処理、及び出力用のハードウェアモジュールを示すブロック図である。図２は、本開示の一実施形態に係るスローモーションキャプチャリング方法を示すフローチャートである。図３は、本開示の実施形態に係るスローモーションキャプチャリング方法において、スローモーションキャプチャを自動的にトリガするために誤動作のない動き検出を実行する工程を示すフローチャートである。図４は、本開示の一実施形態に係る、現在のフレームセットにおいて動き又はシーン変化を検出する工程を示すフローチャートである。図５は、本開示の一実施形態に係る、現在のフレームセットにおいて動き又はシーン変化を検出する工程における画像を説明する図であり、この工程は、移動物体の例に適用される。図６は、本開示の一実施形態に係る、現在のフレームセットにおいて動き又はシーン変化を検出する工程における画像を説明する図であり、この工程は、点滅の例に適用される。図７は、本開示の一実施形態に係る、第１のピクセル差分画像及び第２のピクセル差分画像を使用してＡＮＤ演算を実行する工程を示すフローチャートである。図８は、本開示の一実施形態に係る、ＡＮＤ演算を実行する工程の後に実行される浸食演算を実行する工程を示すフローチャートである。図９は、本開示の一実施形態に係る、浸食演算を実行する工程における画像を示す図である。図１０は、本開示の一実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差を使用して、連続的な動きの確認を実行する工程を示すフローチャートであり、現在のバウンディングボックスは、現在検出された動き（モーション）又はシーン変化をバウンディングする。図１１は、本開示の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差を使用して、連続的な動きの確認を実行する工程における画像を示す図であり、現在のフレームセットにおけるモーション又はシーン変化が、連続的な動きに属していると判断される図である。図１２は、本開示の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差を使用して、連続的な動きの確認を実行する工程における画像を示す図であり、現在のフレームセットにおける動き又はシーン変化が、連続的な動きに属していないと判断される図である。図１３は、本開示の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差を使用して、連続的な動きの確認を実行する工程における画像を示す図であり、現在のフレームセットにおける動き又はシーン変化が、連続的な動きに属していないと判断される図である。図１４は、本開示の別の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程を示すフローチャートであり、現在の特性値は、現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルを特徴づける。図１５は、本開示の他の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程における画像を示す図であり、現在のフレームセットにおける動き又はシーン変化が、連続的な動きに属していると判断される図である。図１６は、本開示の他の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程における画像を示す図であり、現在のフレームセットにおける動き又はシーン変化が、連続的な動きに属していないと判断される図である。図１７は、本開示の他の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程における画像を示す図であり、現在のフレームセットにおける動き又はシーン変化が、連続的な動きに属していないと判断される図である。図１８は、本開示のさらに別の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程を示すフローチャートである。図１９は、本開示のさらに別の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程を示すフローチャートである。図２０は、本開示のさらに別の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差、及び現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程を示すフローチャートである。図２１は、本開示のさらに別の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差、及び現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程を示すフローチャートである。図２２は、本開示のさらに別の実施形態に係る、現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルの現在の特性値をさらに使用して、連続的な動きの確認を実行する工程を示すフローチャートである。

本開示の実施形態が、以下に添付図面を参照しながら、技術的事項、構造的特徴、達成された対象、及び効果に関して詳細に説明される。具体的には、本開示の実施形態における用語は、単に特定の実施形態の目的を説明するためのものであり、本発明を限定するものではない。

異なる図の間の同じ参照数字は、説明が他のものに適用される１つのものについて実質的に同じ要素を示す。

本明細書中で使用される「使用又は使用する」という用語は、対象物が工程を実行するために直接採用される場合、又は、対象物が少なくとも１つの介在する工程によって変更され、変更された対象物がその工程を実行するために直接採用される場合を指す。

いくつかの実施態様は、本明細書では閾値と関連して説明されている。値と閾値との関係を説明するために本明細書で使用される用語「より大きい」（又は同様の用語）は、用語「よりも大きいか又は等しい」、「以上」（又は同様の用語）と互換的に使用されてもよい。同様に、値と閾値との関係を説明するために本明細書で使用される用語「未満」（又は同様の用語）は、用語「未満又は等しい」、「以下」（又は同様の用語）と互換的に使用されてもよい。本明細書で使用される、閾値を「超える」（又は同様の用語）は、閾値が使用される文脈に応じて、「閾値より大きい」、「閾値よりも大きいか又は等しい」、「閾値より小さい」、「閾値よりも小さいか又は等しい」、あるいは他の同様の用語と互換的に使用されてもよい。

図１は、本開示の一実施形態に係る端末１００における入力、処理、及び出力用のハードウェアモジュールを示すブロック図である。図１を参照すると、端末１００は、カメラモジュール１０２と、プロセッサモジュール１０４と、メモリモジュール１０６と、ディスプレイモジュール１０８と、ストレージモジュール１１０と、有線又は無線通信モジュール１１２と、バス１１４とを含む。一実施形態では、端末１００は、携帯電話、スマートフォン、タブレット、ノートブックコンピュータ、デスクトップコンピュータ、又は動き検出を実行するのに十分な計算能力を有する任意の電子デバイスであってもよい。

カメラモジュール１０２は、入力用ハードウェアモジュールであり、バス１１４を介してプロセッサモジュール１０４に送信されるべき複数のフレームを連続してキャプチャする（取り込む）ように構成されている。プロセッサモジュール１０４は、フレームを使用して、図２を参照して説明されるプレビューストリーム及びビデオストリームを生成する。一実施形態では、カメラモジュール１０２が通常のキャプチャ（取り込み）を行う場合、カメラモジュール１０２は３０ｆｐｓ等の通常のフレームレートでキャプチャし、カメラモジュール１０２がスローモーションキャプチャを行う場合、カメラモジュール１０２は１２０ｆｐｓ、２４０ｆｐｓ、又は４８０ｆｐｓ等の高いフレームレートでキャプチャする。一実施形態では、カメラモジュール１０２は、ＲＧＢカメラ、又は、グレースケールカメラを含む。別の実施形態では、フレームは、ストレージモジュール１１０、又は有線又は無線通信モジュール１１２等の別の入力用ハードウェアモジュールを使用して取得されてもよい。ストレージモジュール１１０は、バス１１４を介してプロセッサモジュール１０４に送信されるべきフレームを格納するように構成されている。有線又は無線通信モジュール１１２は、有線又は無線の通信を介してネットワークからフレームを受信するように構成されており、フレームは、バス１１４を介してプロセッサモジュール１０４に送信されるべきものである。

メモリモジュール１０６は、プログラム命令を格納しており、このプログラム命令は、プロセッサモジュール１０４によって実行され、これにより、プロセッサモジュール１０４は、誤動作のない動き検出を実行する。一実施形態では、プロセッサモジュール１０４は、誤動作のない動き検出を使用してスローモーションキャプチャを自動的にトリガするスローモーションキャプチャリング方法を実行する。スローモーションキャプチャリング方法については、図２を参照して説明する。一実施形態では、メモリモジュール１０６は、少なくとも１つのメモリを含む一過性又は非一過性のコンピュータ可読媒体であってもよい。一実施形態では、プロセッサモジュール１０４は、バス１１４を介して、カメラモジュール１０２、メモリモジュール１０６、ディスプレイモジュール１０８、ストレージモジュール１１０、及び有線若しくは無線通信モジュール１１２に直接若しくは間接的に信号を送信し、並びに／又は、カメラモジュール１０２、メモリモジュール１０６、ディスプレイモジュール１０８、ストレージモジュール１１０、及び有線若しくは無線通信モジュール１１２から直接若しくは間接的に信号を受信する少なくとも１つのプロセッサを含む。一実施形態では、この少なくとも１つのプロセッサは、中央処理装置（ＣＰＵ）（複数可）、グラフィックス処理装置（ＧＰＵ）（複数可）、及び／又はデジタル信号プロセッサ（ＤＳＰ）（複数可）であってもよい。上記ＣＰＵは、フレーム、プログラム命令の一部、及びその他のデータ又は命令を、バス１１４を介して、ＧＰＵ（複数可）、及び／又はＤＳＰ（複数可）に送ってもよい。

ディスプレイモジュール１０８は、出力用ハードウェアモジュールであり、バス１１４を介してプロセッサモジュール１０４から受信したプレビューストリーム及び／又はビデオストリームを表示するように構成されている。別の実施形態では、プレビューストリーム及び／又はビデオストリームは、ストレージモジュール１１０、又は有線若しくは無線通信モジュール１１２等の別の出力用ハードウェアモジュールを使用して出力されてもよい。ストレージモジュール１１０は、バス１１４を介してプロセッサモジュール１０４から受信したビデオストリームを格納するように構成されている。有線又は無線通信モジュール１１２は、プレビューストリーム及び／又はビデオストリームを、有線又は無線の通信を介してネットワークに送信するように構成されており、このプレビューストリーム及び／又はビデオストリームは、バス１１４を介してプロセッサモジュール１０４から受信される。

端末１００は、その構成要素のすべてがバス１１４によって一緒に統合されるコンピューティングシステムの１つのタイプである。カメラモジュール１０２の代わりにリモートカメラモジュールを有するコンピューティングシステム等の他のタイプのコンピューティングシステムは、本開示の企図された範囲内にある。

図２は、本開示の一実施形態に係るスローモーションキャプチャリング方法２００を示すフローチャートである。図１及び図２を参照すると、スローモーションキャプチャリング方法２００は、以下の工程を含む。

工程２０２において、ジャイロスコープからサンプルが取得される。サンプルは、カメラモジュール１０２についての回転運動があるか否かを示す。工程２０４において、カメラモジュール１０２についての回転運動がある場合には、工程２０６が進められ、そうでない場合には、工程２０８が進められる。工程２０６において、ユーザはポーズを修正することを案内される。カメラモジュール１０２についての回転運動は、例えば、カメラモジュール１０２がスローモーションキャプチャを実行するためにユーザが端末１００を保持する際のユーザの手の震えによって生じることがある。スローモーションキャプチャを実行する際にカメラモジュール１０２についての回転運動があると、カメラモジュール１０２でキャプチャされたフレームにブレが含まれる可能性があるからである。それゆえ、工程２０８でスローモーションキャプチャがトリガされる前に、ユーザがポーズを修正するように案内される。

工程２０８において、スローモーションキャプチャを自動的にトリガするために、プレビューストリームを用いて誤動作のない動き検出が実施される。工程２０８は、図３～図２２を参照して説明される。

工程２１０において、スローモーションキャプチャが実行され、ビデオストリームに反映され、検出結果がプレビューストリームに示される。工程２０８でスローモーションキャプチャがトリガされた後、プロセッサモジュール１０４は、カメラモジュール１０２にスローモーションキャプチャを実行させ、スローモーションキャプチャによってキャプチャされたフレームがビデオストリームに反映される。スローモーションキャプチャを反映したビデオストリームの一部は、例えば、ストレージモジュール１１０に記録されてもよい。スローモーション撮影の原因となる移動物体である検出結果がスローモーション撮影時に、プレビューストリームに表示される。プレビューストリームのフレームレートは、３０ｆｐｓ等の通常のフレームレートで連続的に表示される。ユーザは、表示モジュール１０８を用いてプレビューストリームを閲覧することにより、検出結果をリアルタイムで閲覧することができる。工程２１２において、スローモーションキャプチャが所定の期間継続した場合、工程２１４が進められ、そうでない場合には、方法２００は工程２１０にループバックする。上記所定の期間は、例えば、１０秒であってもよい。工程２１４において、スローモーションキャプチャが終了される。

図３は、本開示の一実施形態に係るスローモーションキャプチャリング方法２００において、スローモーションキャプチャを自動的にトリガするために、誤動作のない動き検出を実行する工程２０８を示すフローチャートである。図１～図３を参照すると、工程２０８は、以下の工程を含む。

工程３０２において、現在のフレームセットが取得される。現在のフレームセットは、連続する複数のフレームを含む。現在のフレームセットは、プレビューストリームを使用して取得される。

工程３０４において、現在のフレームセットにおける動き（モーション）又はシーン変化が検出されて、現在検出された動き又はシーン変化が生成される。現在のフレームセットは、互いに並置され、変化している第１のピクセルを含む。この第１のピクセルは、現在のフレームセットにおける移動物体の動き又は現在のフレームセットにおけるシーン変化を含んでもよい。シーン変化は、カメラモジュール１０２の動きによって引き起こされてもよい。一実施形態では、工程３０４は、ピクセル差分法等の動き検出法により、現在のフレームセットにおける動き又はシーン変化を識別する現在検出された動き又はシーン変化を生成する。別の実施形態では、現在検出された動き又はシーン変化は、動きベクトル法によって生成される。工程３０４は、動きをシーン変化から区別しない。工程３０４は、図４～図９を参照してさらに説明される。図４～図９を参照して説明される実施形態では、現在のフレームセットは３つのフレームを有している。別の実施形態では、現在のフレームセットは、連続する２つのフレームを有する。

工程３０６において、現在検出された動き又はシーン変化を使用して、連続的な動きの確認が実行される。工程３０６は、動きをシーン変化から区別する。工程３０６は、図１０～図２２を参照して説明される。工程３０８において、連続的な動きが検出された場合には、工程２１０が進められ、そうでない場合には、工程２０８が工程３０２にループバックして、次の反復のための現在のフレームセットを取得する。工程３０８は、図１０の工程１０１４、図１４の１４１４、又は図２１の２１１６のスローモーションキャプチャ開始フラグに基づいて、連続的な動きが検出されたか否かを判断する。

図４は、本開示の一実施形態に係る、現在のフレームセットにおける動き又はシーン変化を検出する工程３０４を示すフローチャートである。工程３０４は、ピクセル差分法を使用して実行される。工程３０４は、以下の工程を含む。工程４０２において、現在のフレームセットにおける前々回のフレームと現在のフレームとの間の第１のピクセル差分画像が取得される。工程４０４において、現在のフレームセットにおける前回のフレームと現在のフレームとの間の第２のピクセル差分画像が取得される。工程４０６において、第１のピクセル差分画像及び第２のピクセル差分画像を用いてＡＮＤ演算が実行され、現在検出された動き又はシーン変化を含む第１の画像が取得される。

図５は、本開示の実施形態に係る、現在のフレームセットにおいて動き又はシーン変化を検出する工程３０４における画像５０２～５１２を説明する図であり、工程３０４が移動物体の例に適用される図である。図４及び図５を参照すると、現在のフレームセットは、前々回のフレーム５０２と、前回のフレーム５０４と、現在のフレーム５０６とを連続して含む。前々回のフレーム５０２は、移動中の第１の位置にある移動物体のピクセル５１４を含む。前回のフレーム５０４は、移動中の第２の位置にある移動物体のピクセル５１６を含む。現在のフレーム５０６は、移動中の第３の位置にある移動物体のピクセル５１８を含む。前回のフレーム５０４及び現在のフレーム５０６におけるピクセル５１４並びにピクセル５１４と並置されたピクセル、前々回のフレーム５０２及び現在のフレーム５０６におけるピクセル５１６並びにピクセル５１６と並置されたピクセル、並びに前々回のフレーム５０２及び前回のフレーム５０４におけるピクセル５１８並びにピクセル５１８と並置されたピクセルは、変化しており、現在のフレームセットにおける移動物体の動きを含む。

工程４０２において、現在のフレームセットにおける前々回のフレーム５０２と現在のフレーム５０６との間の第１のピクセル差分画像５０８が取得される。第１のピクセル差分画像５０８は、それぞれが前々回のフレーム５０２における対応するピクセルのピクセル値と、この対応するピクセルと並置されている現在のフレーム５０６におけるピクセルのピクセル値との間の差の絶対値に等しいピクセル値を有する複数のピクセルを含む。一実施形態では、本開示全体にわたるすべてのピクセル値は、輝度値（例えば、ルーマ又はルミナンス）である。別の実施形態では、本開示全体にわたるすべてのピクセル値は、カラー値である。それゆえ、第１のピクセル差分画像５０８におけるピクセル５２０は、前々回のフレーム５０２及び現在のフレーム５０６における移動物体の動きに起因するピクセル差を示す。

工程４０４において、現在のフレームセットにおける前回のフレーム５０４と現在のフレーム５０６との間の第２のピクセル差分画像５１０が取得される。第２のピクセル差分画像５１０は、それぞれが、前回のフレーム５０４における対応するピクセルのピクセル値と、この対応するピクセルと並置されている現在のフレーム５０６におけるピクセルのピクセル値との間の差の絶対値に等しいピクセル値を有する複数のピクセルを含む。それゆえ、第２のピクセル差分画像５１０におけるピクセル５２２は、前回のフレーム５０４及び現在のフレーム５０６における移動物体の動きに起因するピクセル差を示す。

工程４０６において、第１のピクセル差分画像５０８及び第２のピクセル差分画像５１０を使用してＡＮＤ演算が実行され、現在検出された動き又はシーン変化を含む第１の画像５１２が取得される。このＡＮＤ演算は、ピクセル差を示している第１のピクセル差分画像５０８におけるピクセル５２０及び第２のピクセル差分画像５１０におけるピクセル５２２の交わり（共通部分）５２４を求める。第１のピクセル差分画像５０８におけるピクセル５２０及び第２のピクセル差分画像５１０におけるピクセル５２２との交わり５２４は、現在検出された動き又はシーン変化５２４を含む。

図６は、本開示の実施形態に係る、現在のフレームセットにおいて動き又はシーン変化を検出する工程３０４における画像６０２～６１２を説明する図であり、工程３０４が点滅（フリッカリング）の例に適用される図である。図４及び図６を参照すると、現在のフレームセットは、前々回のフレーム６０２と、前回のフレーム６０４と、現在のフレーム６０６とを連続して含む。前々回のフレーム６０２は、第１の光強度条件の照明下での静的シーンのピクセルを含む。前回のフレーム６０４は、第２の光強度条件の照明下での静的シーンのピクセルを含む。現在のフレーム６０６は、第１の光強度条件の照明下での静的シーンのピクセルを含む。第１の光強度条件は、点滅により第２の光強度条件とは異なる。

工程４０２において、現在のフレームセットにおける前々回のフレーム６０２と現在のフレーム６０６との間の第１のピクセル差分画像６０８が取得される。第１のピクセル差分画像６０８は、それぞれが、前々回のフレーム６０２における対応するピクセルのピクセル値と、対応するピクセルと並置されている現在のフレーム６０６におけるピクセルのピクセル値との間の差の絶対値に等しいピクセル値を有する複数のピクセルを含む。前々回のフレーム６０２及び現在のフレーム６０６のシーンは静止しており、同じ光量条件下にあるため、前回のフレーム６０４及び現在のフレーム６０６における動き又はシーン変化に起因するピクセル差を示す第１のピクセル差分画像６０８におけるピクセルは存在しない。

工程４０４において、現在のフレームセットにおける前回のフレーム６０４と現在のフレーム６０６との間の第２のピクセル差分画像６１０が取得される。第２のピクセル差分画像６１０は、それぞれが前回のフレーム６０４における対応するピクセルのピクセル値と、この対応するピクセルと並置されている現在のフレーム６０６におけるピクセルのピクセル値との間の差の絶対値に等しいピクセル値を有する複数のピクセルを含む。前々回のフレーム６０２及び現在のフレーム６０６のシーンは静止しており、異なる光量条件下にあるため、第２のピクセル差分画像６１０におけるすべてのピクセルは、前々回のフレーム６０４及び現在のフレーム６０６における動き又はシーン変化に起因するピクセル差を示す。

工程４０６において、第１のピクセル差分画像６０８及び第２のピクセル差分画像６１０を使用してＡＮＤ演算が実行され、現在検出された動き又はシーン変化を含む第１の画像６１２が取得される。このＡＮＤ演算は、ピクセル差を示している第１のピクセル差分画像６０８におけるピクセル及び第２のピクセル差分画像６１０におけるピクセルの交わりを求める。第１のピクセル差分画像６０８にはピクセル差を示すピクセルがないので、交わりは無（ヌル）である。それゆえ、点滅によるピクセル差を示す第２のピクセル差分画像６１０におけるピクセルが、スローモーションキャプチャを誤ってトリガすることはない。

図７は、本開示の一実施形態に係る、第１のピクセル差分画像及び第２のピクセル差分画像を使用してＡＮＤ演算を行う工程４０６を示すフローチャートである。図７を参照すると、工程７０２において、第１のピクセル差分画像及び第２のピクセル差分画像に対してＡＮＤ演算が実行され、ＡＮＤ画像が取得される。工程７０４において、このＡＮＤ画像は縮小閾値を用いて２値化されて２値画像が取得され、この２値画像は第１の画像である。ＡＮＤ画像における各ピクセルについて、各ピクセルが縮小閾値よりも大きいピクセル値を有する場合、上記２値画像における対応するピクセルは２５５のピクセル値を有し、各ピクセルが縮小閾値より小さいか又は等しいピクセル値を有する場合、２値画像における対応するピクセルは０のピクセル値を有する。別の実施形態では、第１のピクセル差分画像及び第２のピクセル差分画像が最初に２値化されて２値化画像が生成され、その後、これらの２値化画像に対してＡＮＤ演算が実行される。

図８は、本開示の一実施形態に係る、ＡＮＤ演算を実行する工程４０６の後に実行される浸食演算（消去操作、ｅｒｏｄｉｎｇｏｐｅｒａｔｉｏｎ）を実行する工程８０２を示すフローチャートである。図８を参照すると、工程４０６は、工程８０２をさらに含む。工程８０２において、浸食演算が第１の画像に対して実行されて、浸食された画像が取得され、現在検出された動き又はシーン変化が、この浸食された画像において示される。

図９は、本開示の一実施形態に係る、浸食演算を実行する工程８０２における画像９０２を示す図である。図５、図８、及び図９を参照すると、工程８０２において、浸食演算が第１の画像５１２に対して実行されて、浸食された画像９０２が取得され、現在検出された動き又はシーン変化９０４が、浸食された画像９０２において示される。一実施形態では、浸食演算は、クロス構造カーネル（十字構造カーネル）９０６を用いて実行される。一実施形態では、クロス構造カーネル９０６は、３×３のサイズを有する。別の実施形態では、クロス構造カーネルは、５×５のサイズを有し、１のピクセル値を有する中央行を有する。さらに別の実施形態では、クロス構造カーネルは、５×５のサイズを有し、１のピクセル値を有する中央３行を有する。クロス構造カーネル９０６と同じサイズを有する画像の領域に、クロス構造カーネル９０６を使用した浸食演算を適用することにより、その領域において、ピクセル値１を有するクロス構造カーネル９０６のピクセルに対応するすべてのピクセルがピクセル値２５５を有する場合には、クロス構造カーネル９０６のピクセル９０８に対応するピクセルが保持される。上記領域では、１のピクセル値を有するクロス構造カーネル９０６のピクセルに対応するピクセルのうち、２５５未満のピクセル値を有するものがあれば、クロス構造カーネル９０６のピクセル９０８に対応するピクセルは保持されない。検出された動き又はシーン変化９０４の一部は、ビュー９１０において拡大される。ビュー９１０では、各細い点線のボックスがピクセルである。太い点線は、第１画像５１２における交わり５２４の境界の一部である。太い実線は、検出された動き又はシーン変化９０２の境界の一部分である。ピクセル９１２からピクセル９１４に１つずつ移動する対応する中心を有する第１の画像５１２の複数の領域のそれぞれに、クロス構造カーネル９０６を使用して浸食演算を適用することにより、検出された動き又はシーン変化９０２の一部分の境界９１６は、太い点線から太い実線に移動する。浸食演算はさらに、最も大きく変化する現在のフレームセットにおけるピクセルを見つける。

図１０は、本開示の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差を使用して、連続的な動きの確認を実行する工程３０６を示すフローチャートであり、現在のバウンディングボックスは、現在検出された動き又はシーン変化をバウンディングする（その境界を画定する）。図３及び図１０を参照すると、工程３０６は、以下の工程を含む。工程１００２において、現在検出された動き又はシーン変化をバウンディングする現在のバウンディングボックスが取得される。工程１００４において、現在のバウンディングボックスと、前回に検出された動き又はシーン変化をバウンディングする前回のバウンディングボックスとの間の第１のサイズ差が取得される。工程１００６において、前回のフレームセットが現在のフレームセットになるように更新される。工程１００８において、第１のサイズ差が第１の所定のサイズ差閾値よりも大きい場合には、工程１０１０が進められ、そうでない場合には、工程１０１２が進められる。工程１０１０において、満足回数変数が増分（インクリメント）される。工程１０１２において、満足回数変数が第１の所定の複数の回数よりも大きいか又は等しい場合、工程１０１４が進められ、そうでない場合には、工程３０８が進められる。工程１０１４において、スローモーションキャプチャ開始フラグがアサートされる。工程１０１４が実行された後、工程３０８が進められる。

図１１は、本開示の実施形態に係る、現在のバウンディングボックス１１０８と前回のバウンディングボックス１１０６との間の第１のサイズ差を使用して連続的な動きの確認を実行する工程３０６における画像１１０２及び１１０４を示す図であり、現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していると判断される図である。図１１は、図５の移動物体の例に続く例を説明する。図３、図５、図９、図１０、及び図１１を参照すると、工程１００２において、現在検出された動き又はシーン変化９０４をバウンディングする現在のバウンディングボックス１１０８が取得される。現在のバウンディングボックス１１０８の上側の境界は、現在検出された動き又はシーン変化９０４の上端のピクセルによって定義され、現在のバウンディングボックス１１０８の右側の境界は、現在検出された動き又はシーン変化９０４の右端のピクセルによって定義され、現在のバウンディングボックス１１０８の下側の境界は、現在検出された動き又はシーン変化９０４の下端のピクセルによって定義され、現在のバウンディングボックス１１０８の左側の境界は、現在検出された動き又はシーン変化９０４の左端のピクセルによって定義される。一実施形態では、現在のバウンディングボックス１１０８は、上側の境界及び左側の境界によって定義される左上の座標、並びに下側の境界と右側の境界によって定義される右下の座標のフォーマットを有する。

工程１００４において、現在のバウンディングボックス１１０８と、前回に検出された動き又はシーン変化１１１０をバウンディングする前回のバウンディングボックス１１０６との間の第１のサイズ差が取得される。前回に検出された動き又はシーン変化１１１０は、（図３の）工程２０８が実行される前回の反復における現在検出された動き又はシーン変化である。現在（今回）の反復における現在のフレームセットは、前回の反復における現在のフレームセットに続く。すなわち、現在の反復における現在のフレームセットにおけるフレームが時刻ｔ－２、ｔ－１及びｔのものである場合、前回の反復における現在のフレームセットにおけるフレームは、時刻ｔ－５、ｔ－４及びｔ－３のものである。前回のバウンディングボックス１１０６は、前回の反復における現在検出された動き又はシーン変化をバウンディングする現在バウンディングボックスである。一実施形態では、工程１００４は、前回のバウンディングボックス１１０６の辺１１１２と、前回のバウンディングボックス１１０６の辺１１１２に平行な現在のバウンディングボックス１１０８の辺１１１４との間の第１の辺長差を取得することと、前回のバウンディングボックス１１０６の辺１１１６と、前回のバウンディングボックス１１０６の辺１１１６に平行な現在のバウンディングボックス１１０８の辺１１１８との間の第２の辺長差を取得することであって、辺１１１２が辺１１１６に対して垂直であることとを含む。第１のサイズ差は、第１の辺長差及び第２の辺長差を含む。

工程１００６において、前回のフレームセットが、現在のフレームセットになるように更新される。工程１００６は、前回のバウンディングボックスを現在のバウンディングボックス１１０８になるように更新することを含む。このようにして、工程１００４は、次の反復で実行されてもよい。

工程１００８において、第１のサイズ差が第１の所定のサイズ差閾値よりも大きい場合には、工程１０１０が進められ、そうでない場合には、工程１０１２が進められる。一実施形態では、第１の所定のサイズ差閾値は、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む。一実施形態では、工程１００８は、第１の辺長差が第１の所定の辺長閾値よりも大きく、かつ、第２の辺長差が第２の所定の辺長閾値よりも大きいか否かを判断することを含む。第１の辺長差が第１の所定の辺長閾値よりも大きく、かつ、第２の辺長差が第２の所定の辺長閾値よりも大きい場合には、工程１０１０が進められ、そうでない場合には、工程１０１２が進められる。一実施形態では、第１の所定の辺長閾値は、現在のフレームセットにおけるフレーム５０２の幅の１０分の１に等しい。第２の所定の辺長閾値は、現在のフレームセットにおけるフレーム５０２の高さの１０分の１に等しい。

上記実施形態では、第１の辺長差及び第２の辺長差は絶対的な差（絶対値差分）であり、それゆえ、第１の所定の辺長閾値及び第２の所定の辺長閾値は実数による。別の実施形態では、第１の辺長差及び第２の辺長差は、比率又は割合（％）による相対的な差（相対値差分）である。上記実施形態では、所定の辺長閾値は２つである。別の実施形態では、第１の辺長差と第２の辺長差の両方について、所定の辺長閾値は１つだけである。上記実施形態では、第１のサイズ差が第１の所定のサイズ差閾値よりも大きくなるためには、第１の辺長差及び第２の辺長差の両方が、第１の所定の辺長閾値及び第２の所定の辺長閾値よりも対応して大きくなる必要がある。別の実施形態では、第１のサイズ差が第１の所定のサイズ差閾値よりも大きくなるためには、第１の辺長差及び第２の辺長差のうちの少なくとも一方が、第１の所定の辺長閾値及び第２の所定の辺長閾値よりも対応して大きくなる必要がある。上記実施形態では、第１のサイズ差は、第１の辺長差及び第２の辺長差を含む。別の実施形態では、第１のサイズ差は、前回のバウンディングボックス１１０６及び現在のバウンディングボックス１１０８との間の面積差を含む。

工程１００８において、一実施形態では、第１のサイズ差は絶対値である。別の実施形態では、第１のサイズ差は、現在のバウンディングボックス１１０８のサイズから前回のバウンディングボックス１１０６のサイズを減算することによって得られる非絶対値である。さらに別の実施形態では、第１のサイズ差は絶対値であり、工程３０６は、現在のバウンディングボックス１１０８のサイズから前回のバウンディングボックス１１０６のサイズを減算して第２のサイズ差を取得することをさらに含み、第２のサイズ差がゼロよりも大きい場合、工程１０１０が進められる。この第２のサイズ差は非絶対値である。

図１１の例では、前回のフレームセット及び現在のフレームセットにおける移動物体の動きにより、第１のサイズ差は第１の所定のサイズ差閾値よりも大きく、第１のサイズ差は絶対値又は非絶対値である。第１のサイズ差及び第２のサイズ差を含む実施形態では、第２のサイズ差はゼロよりも大きい。それゆえ、工程１０１０が進められる。工程１０１０において、満足回数変数が増分される。満足回数変数は、工程１００８の少なくとも１つの条件が満足される各回を追跡する。

上記の実施形態では、満足回数変数は、増分によって追跡される。別の実施形態では、満足回数変数は、減分（デクリメント）、乗算、又は除算によって追跡される。

工程１０１２において、満足回数変数が第１の所定の複数の回数よりも大きいか又は等しい場合には、工程１０１４が進められ、そうでない場合には、工程３０８が進められる。工程１０１４において、スローモーションキャプチャ開始フラグがアサートされる。以下の実施形態における第１の所定の複数の回数の数の理由は、図１３を参照して説明される。一実施形態では、工程１００８の条件が満たされたことに基づいてのみ、工程１０１０が実行される。さらに、第１のサイズ差が絶対値である実施形態では、第１の所定の複数の回数は、少なくとも３回である。第１の例では、連続する第１のフレームセットから第４のフレームセットまでの移動物体の動きにより、工程１００８の少なくとも１つの条件は、前回のフレームセット及び現在のフレームセットが第１のフレームセット及び第２のフレームセットである場合、前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回のフレームセット及び現在のフレームセットが第３のフレームセット及び第４のフレームセットである場合に満たされる。第１の例は、図１１の例を含み、工程１００８の少なくとも１つの条件が満たされる他の回数（回）のそれぞれは、図１１の例と同様である。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していると判断される。スローモーションキャプチャ開始フラグがアサートされる。第１の複数の回数は、満足回数変数がゼロに等しい状態から始まり、満足回数変数が第１の所定の複数の回数に等しい状態で終了する。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、時折、移動物体の動きが、例えば、速度が低下し、その結果、工程１００８の少なくとも１つの条件が満たされないことがある。この場合、満足回数変数は同じに保たれ、第１の複数の回数は３回より多く、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。

第１のサイズ差が非絶対値である実施形態では、第１の所定の複数の回数は少なくとも２回である。第１の例では、第１フレームセットと第２フレームセット、第２フレームセットと第３フレームセット、及び第３フレームセットと第４フレームセットについて、工程１００８の少なくとも１つの条件が３回満たされることと比較して、第２の例では、第１フレームセットと第２フレームセット、及び第２フレームセットと第３フレームセットについて、工程１００８の少なくとも１つの条件が２回満たされる。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していると判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は２回である。別の例では、時折、移動物体の動きが、例えば、速度が低下し、その結果、工程１００８の少なくとも１つの条件が満たされないことがある。この場合、満足回数変数は同じに保たれ、第１の複数の回数は２回より多く、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。

絶対値として第１のサイズ差を含み、非絶対値として第２のサイズ差を含む実施形態では、第１の所定の複数の回数は、少なくとも２回である。第１の例では、第１のフレームセットと第２のフレームセット、第２のフレームセットと第３のフレームセット、及び第３のフレームセットと第４のフレームセットについて、工程１００８の少なくとも１つの条件が３回満たされることと比較して、第３の例では、第１のフレームセットと第２のフレームセット、及び第２のフレームセットと第３のフレームセットについて、工程１００８の少なくとも１つの条件が２回満たされる。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していると判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は２回である。別の例では、時折、移動物体の動きが、例えば、速度が低下し、その結果、工程１００８の少なくとも１つの条件が満たされないことがある。この場合、満足回数変数は同じに保たれ、第１の複数の回数は２回より多く、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。

図１２～図１３は、本開示の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差を使用して連続的な動きの確認を実行する工程３０６における画像１３０２、１３０４、１２０６、１２０８、１３１０、及び１３１２を示す図であり、現在のフレームセットにおけるモーション又はシーン変化が連続的な動きに属していないと判断される図である。図１３は、静止している状態から動いている状態になるカメラモジュール１０２、動いている状態から動いている状態になるカメラモジュール１０２、及び動いている状態から静止している状態になるカメラモジュール１０２の例を示す。図１２は、図１２の例が図１１の例と比較されるために、図１３の動いている状態から動いている状態になるカメラモジュール１０２を示す。図１１の例と比較して、図１２の例には以下のような違いがある。工程１００２において、現在検出された動き又はシーン変化１２１６をバウンディングする現在のバウンディングボックス１２１２が取得される。カメラの動きは、シーン変化をもたらす全体的な動きの一種であるため、現在検出された動き又はシーン変化１２１６は、画像１２０８のほぼ全体を占める。図１１の例における移動物体の動きは、局所的な動きの一種である。現在のバウンディングボックス１２１２は、現在検出された動き又はシーン変化１２１６をバウンディングするため、現在のバウンディングボックス１２１２は、画像１２０８の境界に近い。工程１００４において、現在のバウンディングボックス１２１２と、前回に検出された動き又はシーン変化１２１４をバウンディングする前回のバウンディングボックス１２１０との間の第１のサイズ差が取得される。前回に検出された動き又はシーン変化１２１４は、カメラの動きのために、画像１２０６のほぼ全体を占める。前回のバウンディングボックス１２１０も、画像１２０６の境界に近い。工程１００８において、現在のバウンディングボックス１２１２及び前回のバウンディングボックス１２１０の両方が、対応する画像１２０８及び１２０６の境界に近いため、第１のサイズ差は第１の所定のサイズ差閾値よりも大きくはない。それゆえ、図１１の例における前回のフレームセット及び現在のフレームセットにおける動きが、前回のフレームセット及び現在のフレームセットにおけるシーン変化から区別されてもよい。

図１３の第１の例では、工程１００８における第１のサイズ差は、絶対値である。図１１の例を含む第１の例と比較して、図１３の第１の例には以下のような違いがある。カメラモジュール１０２が静止している状態から動いている状態になったことにより、第１のフレームセットのシーンは静止しており、第２のフレームセットのシーンはシーン変化を有する。カメラモジュール１０２が動いている状態から動いている状態になったことにより、第２のフレームセットにおけるシーンはシーン変化を有し、第３のフレームセットにおけるシーンはシーン変化を有する。カメラモジュール１０２が動いている状態から静止している状態になったことにより、第３のフレームセットにおけるシーンはシーン変化を有し、第４のフレームセットのシーンはシーン変化を有する。第１のフレームセットから第４のフレームセットまでは連続している。前回のフレームセット及び現在のフレームセットが第１のフレームセット及び第２のフレームセットである場合、前回のバウンディングボックスは無（ヌル）であり、現在のバウンディングボックス１３１４は画像１３０４の境界に近く、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも大きくなる。前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回のバウンディングボックス１２１０は画像１２０６の境界に近く、現在のバウンディングボックス１２１２は画像１２０８の境界に近く、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも小さいか又は等しくなる。前回のフレームセット及び現在のフレームセットが第３フレームセット及び第４フレームセットである場合、前回のバウンディングボックス１３１６が画像１３１０の境界に近く、現在のバウンディングボックスは無（ヌル）であるため、第１のサイズ差は第１の所定のサイズ差閾値よりも大きくなる。それゆえ、工程１００８の少なくとも１つの条件が２回満たされる。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断されるためには、工程１０１２における第１の所定の複数の回数は、少なくとも３回である必要がある。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断される。工程３０６は、スローモーションキャプチャ開始フラグをアサートすることなく、工程３０８に進む。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、満足回数変数は同じに保たれる。第１の複数の回数は３回より多い。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１３の第２の例では、工程１００８における第１のサイズ差は、非絶対値である。図１３の第１の例と比較して、図１３の第２の例には以下のような違いがある。前回のフレームセット及び現在のフレームセットが第１のフレームセット及び第２のフレームセットである場合、前回のバウンディングボックスが無（ヌル）であり、現在のバウンディングボックス１３１４が画像１３０４の境界に近く、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも大きくなる。前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回のバウンディングボックス１２１０は画像１２０６の境界に近く、現在のバウンディングボックス１２１２は画像１２０８の境界に近く、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも小さいか又は等しくなる。前回のフレームセット及び現在のフレームセットが第３フレームセット及び第４フレームセットである場合、前回のバウンディングボックス１３１６は画像１３１０の境界に近く、現在のバウンディングボックスは無（ヌル）であり、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも小さいか又は等しくなる。それゆえ、工程１００８の少なくとも１つの条件が１回満たされる。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断されるためには、工程１０１２における第１の所定の複数の回数は、少なくとも２回である必要がある。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、満足回数変数は同じに保たれる。第１の複数の回数は３回より多い。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１３の第３の例では、工程１００８における第１のサイズ差及び第２のサイズ差は、対応して絶対値及び非絶対値である。図１３の第１の例と比較して、図１３の第３の例には以下のような違いがある。前回のフレームセット及び現在のフレームセットが第１のフレームセット及び第２のフレームセットである場合、前回のバウンディングボックスは無（ヌル）であり、現在のバウンディングボックス１３１４は画像１３０４の境界に近く、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも大きくなり、第２のサイズ差はゼロよりも大きくなる。前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回のバウンディングボックス１２１０は画像１２０６の境界に近く、現在のバウンディングボックス１２１２は画像１２０８の境界に近く、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも小さいか又は等しくなる。前回のフレームセット及び現在のフレームセットが第３のフレームセット及び第４のフレームセットである場合、前回のバウンディングボックス１３１６は画像１３１０の境界に近く、現在のバウンディングボックスは無（ヌル）であり、このため、第１のサイズ差は第１の所定のサイズ差閾値よりも大きくなり、第２のサイズ差がゼロよりも小さいか又は等しくなる。それゆえ、工程１００８の少なくとも１つの条件が１回満たされる。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断されるためには、工程１０１２における第１の所定の複数の回数は、少なくとも２回である必要がある。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、満足回数変数は同じに保たれる。第１の複数の回数は３回より多い。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１４は、本開示の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程３０６を示すフローチャートであり、現在の特性値は、現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルを特徴づける。図３及び図１４を参照すると、工程３０６は、以下の工程を含む。工程１４０２において、現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルの現在の特性値が取得される。工程１４０４において、現在の特性値と、前回に検出された動き又はシーン変化によって影響を受けるすべてのピクセルの前回の特性値との間の第１の特性値差が取得される。工程１４０６において、前回のフレームセットが、現在のフレームセットになるように更新される。工程１４０８において、第１の特性値差が第１の所定の特性値閾値よりも大きい場合、工程１４１０が進められ、そうでない場合には、工程１４１２が進められる。工程１４１０において、満足回数変数が増分される。工程１４１２において、満足回数変数が第１の所定の複数の回数よりも大きいか又は等しい場合、工程１４１４が進められ、そうでない場合には、工程３０８が進められる。工程１０１４において、スローモーションキャプチャ開始フラグがアサートされる。工程１４１４が実行された後、工程３０８が進められる。

図１５は、本開示の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程３０６における画像１５０２及び１５０４を示す図であり、現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していると判断される図である。図１５は、図５の移動物体の例に続く例を示す。図３、図５、図９、図１４、及び図１５を参照すると、工程１４０２において、現在検出された動き又はシーン変化９０４によって影響を受けるすべてのピクセルの現在の特性値が取得される。一実施形態では、現在の特性値は、現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である。一実施形態では、現在の特性値は、現在検出された動き又はシーン変化９０４のすべてのピクセル１５１０のピクセル数である。現在の特性値は、現在検出された動き又はシーン変化９０４の正確なピクセル数を考慮する、現在検出された動き又はシーン変化９０４の特性であり、図９のパターンとは異なるパターンで満たされている現在検出された動き又はシーン変化９０４によって示される。別の実施形態では、現在の特性値は、画像１５０４の総ピクセル数における、現在検出された動き又はシーン変化９０４の全ピクセル１５１０のピクセルの割合（％）である。

工程１４０４において、現在の特性値と、前回に検出された動き又はシーン変化１５０８によって影響を受けるすべてのピクセルの前回の特性値との間の第１の特性値差が取得される。前回に検出された動き又はシーン変化１５０８は、（図３の）工程２０８が実行される前回の反復において現在検出された動き又はシーン変化である。現在の反復における現在のフレームセットは、前回の反復における現在のフレームセットに続く。すなわち、現在の反復における現在のフレームセットのフレームが時刻ｔ－２、ｔ－１及びｔのものである場合、前回の反復における現在のフレームセットのフレームは時刻ｔ－５、ｔ－４及びｔ－３のものである。前回の特性値は、前回の反復において現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルの現在の特性値である。

工程１４０６において、前回のフレームセットは現在のフレームセットになるように更新される。工程１４０６は、前回の特性値を現在の特性値になるように更新することを含む。このようにして、工程１４０４は、次の反復で実行されてもよい。

工程１４０８において、第１の特性値差が第１の所定の特性値閾値よりも大きい場合には、工程１４１０が進められ、そうでない場合には、工程１４１２が進められる。一実施形態では、第１の所定の特性値閾値は、現在のフレームセットのフレーム５０２の幅に現在のフレームセットのフレーム５０２の高さを掛けたものの８００分の１に等しい。

上記実施形態では、第１の特性値差は絶対的な差であり、それゆえ、第１の特性値差は実数による。別の実施形態では、第１の特性値差は、比率又は割合（％）による相対的な差である。

工程１４０８において、一実施形態において、第１の特性値差は絶対値である。別の実施形態では、第１の特性値差は、現在の特性値から前回の特性値を減算することによって得られる非絶対値である。さらに別の実施形態では、第１の特性値差は絶対値であり、工程３０６は、現在の特性値から前回の特性値を減算して第２の特性値差を取得することをさらに含み、第２の特性値差がゼロより大きい場合、工程１４１０が進められる。この第２の特性値差は非絶対値である。

図１５の例では、前回のフレームセット及び現在のフレームセットにおける移動物体の動きにより、第１の特性値差は第１の所定の特性値差閾値よりも大きく、第１の特性値差は絶対値又は非絶対値である。第１の特性値差及び第２の特性値差を含む実施形態では、第２の特性値差はゼロより大きい。それゆえ、工程１４１０が進められる。工程１４１０において、満足回数変数が増分される。満足回数変数は、工程１４０８の少なくとも１つの条件が満足される各回を追跡する。

上記の実施形態では、満足回数変数は、増分によって追跡される。別の実施形態では、満足回数変数は、減分、乗算、又は除算によって追跡される。

工程１４１２において、満足回数変数が第１の所定の複数の回数よりも大きいか又は等しい場合には、工程１４１４が進められ、そうでない場合には、工程３０８が進められる。工程１４１４において、スローモーションキャプチャ開始フラグがアサートされる。以下の実施形態における第１の所定の複数の回数の数の理由は、図１７を参照して説明される。一実施形態では、工程１４０８の条件が満たされたことに基づいてのみ、工程１４１０が実行される。さらに、第１の特性値差が絶対値である実施形態では、第１の所定の複数の回数は、少なくとも３回である。第１の例では、連続する第１のフレームセットから第４のフレームセットまでの移動物体の動きにより、前回のフレームセット及び現在のフレームセットが第１のフレームセット及び第２のフレームセットである場合、前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回のフレームセット及び現在のフレームセットが第３のフレームセット及び第４のフレームセットである場合に、工程１４０８の少なくとも１つの条件が満たされる。第１の例は、図１５の例を含み、工程１４０８の少なくとも１つの条件が満たされる他の回数（回）のそれぞれは、図１５の例と同様である。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していると判断される。スローモーションキャプチャ開始フラグがアサートされる。第１の複数の回数は、満足回数変数がゼロに等しい状態から始まり、満足回数変数が第１の所定の複数の回数に等しい状態で終了する。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、時折、移動物体の動きが、例えば、速度が低下し、その結果、工程１４０８の少なくとも１つの条件が満たされないことがある。この場合、満足回数変数は同じに保たれ、第１の複数の回数は３回より多く、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。

第１の特性値差が非絶対値である実施形態では、第１の所定の複数の回数は少なくとも２回である。第１の例では、第１のフレームセットと第２のフレームセット、第２のフレームセットと第３のフレームセット、及び第３のフレームセットと第４のフレームセットについて、工程１４０８の少なくとも１つの条件が３回満たされることと比較して、第２の例では、第１のフレームセットと第２のフレームセット、及び第２のフレームセットと第３のフレームセットについて、工程１４０８の少なくとも１つの条件が２回満たされる。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していると判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は２回である。別の例では、時折、移動物体の移動が、例えば、速度が低下し、その結果、工程１４０８の少なくとも１つの条件が満たされないことがある。この場合、満足回数変数は同じに保たれ、第１の複数の回数は２回より多く、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。

絶対値として第１の特性値差を含み、非絶対値として第２の特性値差を含む実施形態では、第１の所定の複数の回数は、少なくとも２回である。第１の例では、第１のフレームセットと第２のフレームセット、第２のフレームセットと第３のフレームセット、及び第３のフレームセットと第４のフレームセットについて、工程１４０８の少なくとも１つの条件が３回満たされることと比較して、第３の例では、第１のフレームセットと第２のフレームセット、及び第２のフレームセットと第３のフレームセットについて、工程１４０８の少なくとも１つの条件が２回満たされる。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していると判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は２回である。別の例では、時折、移動物体の移動が、例えば、速度が低下し、その結果、工程１４０８の少なくとも１つの条件が満たされないことがある。この場合、満足回数変数は同じに保たれ、第１の複数の回数は２回より多く、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。

図１６～図１７は、本開示の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程３０６における画像１７０２、１７０４、１６０６、１６０８、１７１０、及び１７１２を示す図であり、現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断される図である。図１７は、静止している状態から動いている状態になるカメラモジュール１０２、動いている状態から動いている状態になるカメラモジュール１０２、及び動いている状態から静止している状態になるカメラモジュール１０２の例を示す。図１６は、図１６の例が図１５の例と比較されるために、図１７の動いている状態から動いている状態になるカメラモジュール１０２を示す。図１５の例と比較して、図１６の例には以下のような違いがある。工程１４０２において、現在検出された動き又はシーン変化１６１６によって影響を受けるすべてのピクセルの現在の特性値が取得される。カメラの動きはシーン変化をもたらす全体的な動きの一種であるため、現在検出された動き又はシーン変化１６１６は、画像１６０８のほぼ全体を占める。図１５の例における移動物体の動きは、局所的な動きの一種である。現在の特性値は、現在検出された動き又はシーン変化１６１６によって影響を受けるすべてのピクセル１６１２のピクセル数であるため、現在の特性値は、画像１６０８のピクセルの総数に近い。工程１４０４において、現在の特性値と、前回に検出された動き又はシーン変化１６１４によって影響を受けるすべてのピクセル１６１０の前回の特性値との間の第１の特性値差が取得される。前回に検出された動き又はシーン変化１６１４は、カメラの動きのために、画像１６０６のほぼ全体を占める。前回の特性値も、画像１６０６の総ピクセル数に近い。工程１４０８において、現在の特性値及び前回の特性値の両方が、対応する画像１６０８及び１６０６のピクセルの総数に近いため、第１の特性値差は第１の所定の特性値差閾値よりも大きくはない。それゆえ、図１５の例における前回のフレームセット及び現在のフレームセットにおける動きが、前回のフレームセット及び現在のフレームセットにおけるシーン変化から区別されてもよい。

図１７の第１の例では、工程１４０８における第１の特性値差は、絶対値である。図１５の例を含む第１の例と比較して、図１７の第１の例には以下のような違いがある。カメラモジュール１０２が静止している状態から動いている状態になったことにより、第１のフレームセットのシーンは静止しており、第２のフレームセットのシーンはシーン変化を有する。カメラモジュール１０２が動いている状態から動いている状態になったことにより、第２のフレームセットにおけるシーンはシーン変化を有し、第３のフレームセットにおけるシーンはシーン変化を有する。カメラモジュール１０２が動いている状態から静止している状態になったことにより、第３のフレームセットのシーンはシーン変化を有し、第４のフレームセットのシーンはシーン変化を有する。第１のフレームセットから第４のフレームセットまでは連続している。前回のフレームセット及び現在のフレームセットが第１のフレームセット及び第２のフレームセットである場合、前回の特性値はゼロであり、現在の特性値は画像１７０４の総ピクセル数に近く、このため、第１の特性値差は第１の所定の特性値差閾値よりも大きくなる。前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回の特性値は画像１６０６の総ピクセル数に近く、現在の特性値は画像１６０８の総ピクセル数に近く、このため、第１の特性値差は第１の所定の特性値差閾値よりも小さいか又は等しくなる。前回のフレームセット及び現在のフレームセットが第３フレームセット及び第４フレームセットである場合には、前回の特性値は画像１７１０の総ピクセル数に近く、現在の特性値はゼロであり、このため、第１の特性値差は第１の所定の特性値差閾値よりも大きくなる。それゆえ、工程１４０８の少なくとも１つの条件が２回満たされる。第１の複数の回数のそれぞれについて、前回のフレームセットの動き又はシーン変化、及び現在のフレームセットの動き又はシーン変化が連続的な動きに属していないと判断されるためには、工程１４１２における第１の所定の複数の回数は、少なくとも３回である必要がある。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していないと判断される。工程３０６は、スローモーションキャプチャ開始フラグをアサートすることなく、工程３０８に進む。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、満足回数変数は同じに保たれる。第１の複数の回数は３回より多い。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１７の第２の例では、工程１４０８における第１の特性値差は、非絶対値である。図１７の第１の例と比較して、図１７の第２の例には以下のような違いがある。前回のフレームセット及び現在のフレームセットが第１フレームセット及び第２フレームセットである場合、前回の特性値はゼロであり、現在の特性値は画像１７０４の総ピクセル数に近く、このため、第１の特性値差は第１の所定の特性値差閾値よりも大きくなる。前回のフレームセット及び現在のフレームセットが第２のフレームセット及び第３のフレームセットである場合、前回の特性値は画像１６０６の総ピクセル数に近く、現在の特性値は画像１６０８の総ピクセル数に近く、このため、第１の特性値差は第１の所定の特性値差閾値よりも小さいか又は等しくなる。前回のフレームセット及び現在のフレームセットが第３フレームセット及び第４フレームセットである場合、前回の特性値は画像１７１０の総ピクセル数に近く、現在の特性値はゼロであるため、第１の特性値差は第１の所定の特性値差閾値よりも小さくなる。それゆえ、工程１４０８の少なくとも１つの条件が１回満たされる。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断されるためには、工程１４１２における第１の所定の複数の回数は、少なくとも２回である必要がある。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していないと判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、満足回数変数は同じに保たれる。第１の複数の回数は３回より多い。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１７の第３の例では、工程１４０８における第１の特性値差及び第２の特性値差は、対応して絶対値及び非絶対値である。図１７の第１の例と比較して、図１７の第３の例には以下のような違いがある。前回のフレームセット及び現在のフレームセットが第１フレームセット及び第２フレームセットである場合、前回の特性値はゼロであり、現在の特性値は画像１７０４の総ピクセル数に近く、このため、第１の特性値差が第１の所定の特性値差閾値よりも大きくなり、第２の特性値差がゼロよりも大きくなる。前回のフレームセット及び現在のフレームセットが第２フレームセット及び第３フレームセットである場合、前回の特性値は画像１６０６の総ピクセル数に近く、現在の特性値は画像１６０８の総ピクセル数に近く、このため、第１の特性値差は第１の所定の特性値差閾値よりも小さいか又は等しくなる。前回のフレームセット及び現在のフレームセットが第３フレームセット及び第４フレームセットである場合、前回の特性値は画像１７１０の総ピクセル数に近く、現在の特性値はゼロであり、このため、第１の特性値差は第１の所定の特性値差閾値よりも大きくなり、第２の特性値差はゼロよりも小さいか又は等しくなる。それゆえ、工程１４０８の少なくとも１つの条件が１回満たされる。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化が連続的な動きに属していないと判断されるためには、工程１４１２における第１の所定の複数の回数が、少なくとも２回である必要がある。それゆえ、第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していないと判断される。一例では、第１のフレームセット及び第２のフレームセットが処理される前には、満足回数変数はゼロに等しい。第１の複数の回数は３回である。別の例では、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、満足回数変数は同じに保たれる。第１の複数の回数は３回より多い。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１８は、本開示のさらに別の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程３０６を示すフローチャートである。図１４の実施形態と比較して、図１８の実施形態は、工程１４０６と工程１４１２との間に、いくつかの置き換えられた工程１４０８、工程１４１０、工程１８０２、及び工程１８０４を有する。工程１４０８において、第１の特性値差が第１の所定の特性値閾値よりも大きい場合、工程１４１０が進められ、そうでない場合には、工程１８０２が進められる。工程１８０２において、第１の特性値差がゼロよりも小さいか又は等しい場合、工程１８０４が進められ、そうでない場合には、工程１４１２が進められる。工程１８０４において、満足変数がゼロよりも大きい場合には、満足回数変数が減分される。

図１８の実施形態では、第１の特性値差は、非絶対値である。一実施形態では、工程１４０８の条件が第１の複数の回数のうち少なくとも１つの第２の回数だけ満たされ、工程１８０２の条件が第１の複数の回数のうち少なくとも１つの第３の回数だけ満たされた場合、少なくとも１つの第２の回数は、少なくとも第１の所定の複数の回数だけ、少なくとも１つの第３の回数よりも多い。第１の所定の複数の回数は２回である。図１５を参照して説明された第２の例において、工程１４０８の条件が満たされていない場合に満足回数変数が同じに保たれることと比較して、図１８の例では、工程１８０２の条件が満たされているか否かに基づいて、満足回数変数が減分されてもよく、又は同じに保たれてもよい。このようにして、移動物体の動きが減速したことにより、少なくとも１つの第３の回数が１回である場合、第１の複数の回数は４回であり、少なくとも１つの第２の回数は３回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。図１７を参照して説明された第２の例において、工程１４０８の条件が満たされていない場合に満足回数変数が同じに保たれることと比較して、図１８の例では、工程１８０２の条件が満たされているか否かに基づいて、満足回数変数が減分されてもよく、又は同じに保たれてもよい。このようにして、カメラモジュール１０２が動いている状態から動いている状態になったこと、及びカメラモジュール１０２が動いている状態から静止している状態になったことにより、少なくとも１つの第３の回数が２回である場合、第１の複数の回数は３回であり、少なくとも１つの第２の回数は１回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していないと判断される。少なくとも１つの第３の回数が３回である場合、カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多いときに、第１の複数の回数は４回であり、少なくとも１つの第２の回数は１回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１９は、本開示のさらに別の実施形態に係る、現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程３０６を示すフローチャートである。図５及び図１９を参照すると、図１８の実施形態と比較して、図１９の実施形態は、工程１８０２に代わる工程１９０２を有する。工程１９０２において、第１の特性値差がゼロよりも小さいか又は等しく、第２の特性値差が第２の所定の特性値閾値よりも大きいか又は等しい場合には、工程１８０４が進められ、そうでない場合には、工程１４１２が進められる。一実施形態において、第２の所定の特性値閾値は、現在のフレームセットのフレーム５０２の幅に、現在のフレームセットのフレーム５０２の高さを掛けたものの１６００分の１に等しい。

図１９の実施形態では、第１の特性値差は非絶対値であり、第２の特性値差は第１の特性値差の絶対値である。一実施形態では、工程１４０８の条件が第１の複数の回数のうちの少なくとも１つの第２の回数で満たされた場合、そして工程１９０２の条件が第１の複数の回数のうちの少なくとも１つの第３の回数で満たされた場合、少なくとも１つの第２の回数は、少なくとも第１の所定の複数の回数だけ、少なくとも１つの第３の回数よりも多い。第１の所定の複数の回数は２回である。図１８の例では、例えば移動物体の動きが減速したことにより、減少量に関わらず満足回数変数が減分されることと比較して、図１９の例では、減速量が一定限度を超える場合にのみ満足回数変数が減分される。図１８の例でカメラモジュール１０２が動いている状態から動いている状態になったことにより減分される満足回数変数と比較して、図１９の例では、カメラモジュール１０２が動いている状態から動いている状態になった場合、満足回数変数は同じに保たれる。このように、カメラモジュール１０２が動いている状態から静止している状態になったことにより、少なくとも１つの第３の回数が１回である場合、第１の複数の回数は３回であり、少なくとも１つの第２の回数は１回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していないと判断される。カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多い場合、カメラモジュール１０２が動いている状態から静止している状態になったことにより、少なくとも１つの第３の回数はまだ１回であり、第１の複数の回数は４回であり、少なくとも１つの第２の回数は１回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図１５を参照して説明された第２の例において、工程１４０８の条件が満たされていない場合に満足回数変数が同じに保たれることと比較して、図１９では、工程１９０２の条件が満たされているか否かに基づいて、満足回数変数が減分されてもよく、又は同じに保たれてもよい。このようにして、移動物体の動きが減速したことにより、少なくとも１つの第３の回数が１回である場合、第１の複数の回数は４回であり、少なくとも１つの第２の回数は３回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していると判断されてもよい。図１７を参照して説明された第２の例において、工程１４０８の条件が満たされていない場合に満足回数変数が同じに保たれることと比較して、図１８では、工程１８０２の条件が満たされているか否かに基づいて、満足回数変数が減分されてもよく、又は同じに保たれてもよい。このように、カメラモジュール１０２が動いている状態から動いている状態になったことと、カメラモジュール１０２が動いている状態から静止している状態になったことにより、少なくとも１つの第３の回数が２回である場合、第１の複数の回数は３回であり、少なくとも１つの第２の回数は１回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、連続的な動きに属していないと判断される。カメラモジュール１０２が動いている状態から動いている状態になるまでのフレームセットが多いときに、少なくとも１つの第３の回数が３回である場合、第１の複数の回数は４回であり、少なくとも１つの第２の回数は２回である。第１の複数の回数のそれぞれについて、前回のフレームセットにおける動き又はシーン変化、及び現在のフレームセットにおける動き又はシーン変化は、依然として連続的な動きに属していないと判断されてもよい。

図２０～図２１は、それぞれ、本開示のさらに別の実施形態に係る、現在のバウンディングボックスと前回のバウンディングボックスとの間の第１のサイズ差、及び現在の特性値と前回の特性値との間の第１の特性値差を使用して、連続的な動きの確認を実行する工程３０６を示すフローチャートである。一実施形態では、図１０及び図１４、図１８、又は図１９の実施形態が組み合わされる。図１０と図１４、図１８、又は図１９の実施形態を組み合わせることにより、連続的な動きの確認は、例えば、小さな移動物体の動きをノイズから区別する誤動作のない動き検出をさらに確実にする。組み合わせた後、実施形態のすべての条件が絶対値のみを含む場合、第１の所定の複数の回数は少なくとも３回であり、実施形態の少なくとも１つの条件が非絶対値を含む場合、第１の所定の複数の回数は少なくとも２回である。図１９の工程１４０６と１４１２の間の工程を図１０の工程１００８の「はい」の分岐に直接挿入することにより、図１０及び図１９の実施形態を組み合わせた実施形態と比較して、図２０～図２１の実施形態には以下のような違いがある。工程１００８において、第１のサイズ差が第１の所定のサイズ差閾値よりも大きい場合、工程１４０８が進められ、そうでない場合には、図１０の工程１０１２に進む代わりに、図２１の工程２１０２が進められる。工程２１０２において、第１の特性値差が第２の所定の特性値閾値よりも大きい場合、工程１０１０が進められ、そうでない場合には、工程２１０４が進められる。図２０の工程２００２は、図１０の工程１００６と、図１４の工程１４０６との組み合わせである。工程２１０４は、図１９の工程１９０２と同様であり、図２１の第３の所定の特性値閾値は、図１９の第２の所定の特性値閾値である。一実施形態では、工程２１０２における第２の所定の特性値閾値は、現在のフレームセットのフレーム５０２の幅に現在のフレームセットのフレーム５０２の高さを掛けたものの４００分の１に等しい。工程２１０２が含まれることで、同じ場所にある移動物体の動きが検出可能になり、スローモーションキャプチャをトリガすることが可能になる。図２２は、本開示のさらに別の実施形態に係る、現在検出された動き又はシーン変化によって影響を受けるすべてのピクセルの現在の特性値をさらに使用して、連続的な動きの確認を実行する工程３０６を示すフローチャートである。図２０及び図２１の工程３０６と比較して、図２２の工程３０６は、工程２００２と工程１００８の間に以下の工程をさらに含む。工程２２０２において、現在の特性値が所定の特性値閾値よりも大きい場合、工程１００８が進められ、そうでない場合には、工程２２０４が進められる。工程２２０４において、スローモーションキャプチャ開始フラグがデアサートされ、満足回数変数がリセットされる。一実施形態では、所定の特性値閾値は、現在のフレームセットのフレーム５０２の幅の１０分の１と、現在のフレームセットのフレーム５０２の高さの１０分の１との最小値に等しい。

いくつかの実施形態は、以下の特徴及び／又は利点の１つ又は組み合わせを有する。関連技術では、フレームセットにおける変化が動きに属するか否かは、変化をバウンディングするバウンディングボックスがバウンディングボックス閾値よりも大きい周囲を有するか否かに基づいて判断される。この方法では、カメラモジュールが動いている状態から動いている状態になったことによるシーン変化は、移動物体の動きと区別することができない。この関連技術と比較して、本開示のいくつかの実施形態は、連続的な動きの確認を実行する。それゆえ、移動物体の動きは、カメラモジュールが静止している状態から動いている状態、カメラモジュールが動いている状態から動いている状態、及びカメラモジュールが動いている状態から静止している状態に起因するシーン変化から区別することができる。さらに、本開示のいくつかの実施形態は、ピクセル差分画像に対してＡＮＤ演算を実行し、検出された動き又はシーン変化を生成する。それゆえ、検出された動き又はシーン変化は、点滅に起因しないであろう。当業者であれば、本開示の実施形態で説明及び開示されたシステム又はコンピュータ実装方法のユニット、モジュール、レイヤ、ブロック、アルゴリズム、及び工程のそれぞれが、ハードウェア、ファームウェア、ソフトウェア、又はそれらの組み合わせを使用して実現されることを理解する。機能がハードウェアで実行されるか、ファームウェアで実行されるか、ソフトウェアで実行されるかは、技術計画の適用条件や設計要件に依存する。当業者であれば、特定の応用例ごとに異なる方法を使用して機能を実現することができるが、そのような実現方法は本開示の範囲を超えないはずである。本開示の実施形態における開示されたシステム、及びコンピュータ実装方法は、他の方法で実現できることを理解されたい。上述した実施形態は、例示的なものに過ぎない。モジュールの分割は、単に論理的な機能に基づくものであり、現実には他の分割法が存在する。モジュールは物理的なモジュールであってもよく、又はなくてもよい。複数のモジュールが１つの物理的なモジュールに結合又は統合されることが可能である。いずれかのモジュールが複数の物理的なモジュールに分割されることも可能である。いくつかの特性が省略されたり、スキップされたりすることも可能である。他方、表示又は議論されている相互結合、直接結合、又は通信可能な結合は、電気的、機械的、又は他の種類の形態の方法によって、間接的又は通信的にかかわらず、いくつかのポート、デバイス、又はモジュールを介して動作する。

説明のための分離構成要素としてのモジュールは、物理的に分離されているか、又は分離されていない。モジュールは、一箇所に配置されているか、複数のネットワークモジュール上に分散して配置されている。モジュールの一部又は全部は、実施形態の目的に応じて使用される。ソフトウェア機能モジュールが実現され、製品として使用・販売される場合は、そのソフトウェア機能モジュールは、コンピュータ可読記憶媒体に記憶することができる。このような理解に基づき、本開示が提案する技術計画は、本質的に又は部分的にソフトウェア製品の形態として実現することができる。あるいは、従来技術に有益な技術計画の一部分を、ソフトウェア製品の形態として実現することができる。そのソフトウェア製品は、本開示の実施形態によって開示される工程のすべて又は一部を実行するために、システムの少なくとも１つのプロセッサに対する複数のコマンドを含めて、コンピュータ可読記憶媒体に記憶される。記憶媒体としては、ＵＳＢディスク、モバイルハードディスク、リードオンリーメモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、フロッピーディスク（登録商標）、又はプログラム命令を記憶することができる他の種類の媒体が挙げられる。本開示は、最も実用的で好ましい実施形態と考えられるものに関連して説明されてきたが、本開示は、開示された実施形態に限定されるものではなく、添付の特許請求の範囲の最も広い解釈の範囲から逸脱しない範囲でなされた様々な変形例を包含することを意図していることが理解される。

Claims

コンピュータ実装方法であって、
連続する第１の複数の回数について確認方法を実行する工程であって、前記確認方法は、
連続する複数の第１のフレームを取得する工程、
前記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、
前記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程、
連続する複数の第２のフレームを取得する工程であって、前記第２のフレームは前記第１のフレームに続く工程、
前記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、
前記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程、
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程、及び
前記第１のフレームを前記第２のフレームになるように更新し、前記第２のフレームを前記第２のフレームに続く複数の第３のフレームになるように更新する工程
を含み、前記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、前記第１のサイズ差は第１の所定の閾値よりも大きく、前記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい
工程と、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程と
を含むコンピュータ実装方法。
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の前記第１のサイズ差を取得する工程が、
前記第１のバウンディングボックスの第１の辺と、前記第１のバウンディングボックスの前記第１の辺に平行な前記第２のバウンディングボックスの辺との間の第１の辺長差を取得する工程と、
前記第１のバウンディングボックスの第２の辺と、前記第１のバウンディングボックスの前記第２の辺に平行な前記第２のバウンディングボックスの辺との間の第２の辺長差を取得する工程であって、前記第２の辺が前記第１の辺に垂直であり、前記第１のサイズ差が、前記第１の辺長差及び前記第２の辺長差を含む工程と
を含む請求項１に記載のコンピュータ実装方法。
前記第１の所定の閾値が、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む請求項２に記載のコンピュータ実装方法。
前記第１の辺長差が前記第１の所定の辺長閾値よりも大きく、前記第２の辺長差が前記第２の所定の辺長閾値よりも大きい請求項３に記載のコンピュータ実装方法。
前記第１の所定の辺長閾値が前記第１のフレームのうちの１つの幅の１０分の１に等しく、前記第２の所定の辺長閾値が前記第１のフレームのうちの前記１つの高さの１０分の１に等しい請求項３に記載のコンピュータ実装方法。
前記第１のサイズ差が絶対値である請求項１に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも３回である請求項６に記載のコンピュータ実装方法。
前記第１のサイズ差が、前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算することによって取得される請求項１に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項８に記載のコンピュータ実装方法。
前記第１のサイズ差が絶対値であり、
前記確認方法が、
前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算して第２のサイズ差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２のサイズ差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項１０に記載のコンピュータ実装方法。
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいてのみ、前記連続的な動きに属していると判断される請求項１に記載のコンピュータ実装方法。
前記確認方法が、
前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程と、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第２の特性値を取得する工程と、
前記第１の特性値と前記第２の特性値との間の第１の特性値差を取得する工程であって、前記第２の複数の回数のそれぞれについて、前記第１の特性値差は第２の所定の閾値よりも大きい工程と
をさらに含み、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１に記載のコンピュータ実装方法。
前記第１の特性値が、前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数であり、
前記第２の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である
請求項１３に記載のコンピュータ実装方法。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅に前記第１のフレームのうちの前記１つの高さを掛けたものの８００分の１に等しい請求項１４に記載のコンピュータ実装方法。
前記第１の特性値差が絶対値である請求項１３に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも３回である請求項１６に記載のコンピュータ実装方法。
前記第１の特性値差が、前記第２の特性値から前記第１の特性値を減算することによって取得される請求項１３に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項１８に記載のコンピュータ実装方法。
前記第１の特性値差が絶対値であり、
前記確認方法が、
前記第２の特性値から前記第１の特性値を減算して第２の特性値差を取得する工程であって、前記第２の複数の回数のそれぞれについて、前記第２の特性値差はゼロよりも大きい工程
をさらに含み、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２の特性値差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１３に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項２０に記載のコンピュータ実装方法。
前記確認方法が、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第１の特性値は第２の所定の閾値よりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値にさらに基づいて、前記連続的な動きに属していると判断される
請求項１に記載のコンピュータ実装方法。
前記第１の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である請求項２２に記載のコンピュータ実装方法。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅の１０分の１と、前記第１のフレームのうちの１つの高さの１０分の１との最小値に等しい請求項２３に記載のコンピュータ実装方法。
前記第１のフレームが、連続する第３のフレーム、第４のフレーム、及び第５のフレームを含む請求項１に記載のコンピュータ実装方法。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第３のフレームと前記第５のフレームとの間の第１のピクセル差分画像を取得する工程と、
前記第４のフレームと前記第５のフレームとの間の第２のピクセル差分画像を取得する工程と、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用してＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む第１の画像を取得する工程と
を含む請求項２５に記載のコンピュータ実装方法。
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用して前記ＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む前記第１の画像を取得する工程が、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像に対して前記ＡＮＤ演算を実行して、第２の画像を取得する工程と、
前記第２の画像を２値化して、前記第１の画像を得る工程と
を含む請求項２６に記載のコンピュータ実装方法。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第１の画像に対して浸食演算を実行して、第２の画像を得る工程であって、前記第１の検出された動き又はシーン変化が、前記第２の画像において示される工程
をさらに含む請求項２６に記載のコンピュータ実装方法。
前記浸食演算が、クロス構造カーネルを用いて実行される請求項２８に記載のコンピュータ実装方法。
ジャイロスコープからサンプルを取得する工程であって、前記サンプルは、カメラモジュールについての回転運動がないことを示す工程
をさらに含み、
前記確認方法が前記サンプルに基づいて実行され、
前記第１のフレームが、前記カメラモジュールを使用して取得され、
前記第２のフレームが、前記カメラモジュールを使用して取得される
請求項１に記載のコンピュータ実装方法。
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程が、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、カメラモジュールに対してスローモーションキャプチャをトリガする工程
を含み、
前記第１のフレームが、前記カメラモジュールを使用して取得され、
前記第２のフレームが、前記カメラモジュールを使用して取得される
請求項１に記載のコンピュータ実装方法。
コンピュータ実装方法であって、
連続する第１の複数の回数について確認方法を実行する工程であって、前記確認方法は、
連続する複数の第１のフレームを取得する工程、
前記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、
前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程、
連続する複数の第２のフレームを取得する工程であって、前記第２のフレームは前記第１のフレームに続く工程、
前記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第２の特性値を取得する工程、及び
前記第１の特性値と前記第２の特性値との間の第１の特性値差を取得する工程
を含み、前記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、前記第１の特性値差は第１の所定の閾値よりも大きく、前記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい
工程と、
前記第２の複数の回数のそれぞれについての前記第１の特性値差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程と
を含むコンピュータ実装方法。
前記第１の特性値が、前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数であり、
前記第２の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である
請求項３２に記載のコンピュータ実装方法。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅に前記第１のフレームのうちの前記１つの高さを掛けたものの８００分の１に等しい請求項３３に記載のコンピュータ実装方法。
前記第１の特性値差が絶対値である請求項３２に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも３回である請求項３５に記載のコンピュータ実装方法。
前記第１の特性値差が、前記第２の特性値から前記第１の特性値を減算することによって取得される請求項３２に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項３７に記載のコンピュータ実装方法。
前記第１の複数の回数のうちの少なくとも１つの回数のうちのそれぞれについて、前記第１の特性値差がゼロよりも小さいか又は等しく、
前記第２の複数の回数が、少なくとも前記第１の所定の複数の回数だけ、前記少なくとも１つの回数よりも多く、
前記第１の所定の複数の回数が２回である
請求項３２に記載のコンピュータ実装方法。
前記第１の特性値差が絶対値であり、
前記確認方法が、
前記第２の特性値から前記第１の特性値を減算して第２の特性値差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２の特性値差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２の特性値差にさらに基づいて、前記連続的な動きに属していると判断される
請求項３２に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項３９に記載のコンピュータ実装方法。
前記第１の特性値差が絶対値であり、
前記確認方法が、
前記第２の特性値から前記第１の特性値を減算して第２の特性値差を取得する工程
をさらに含み、前記第１の複数の回数のうちの少なくとも１つの回数のうちのそれぞれについて、前記第１の特性値差が第２の所定の閾値よりも大きいか又は等しく、前記第２の特性値差がゼロ未満であり、
前記第２の複数の回数が、少なくとも前記第１の所定の複数の回数だけ、前記少なくとも１つの回数よりも多く、
前記第１の所定の複数の回数が２回である
請求項３２に記載のコンピュータ実装方法。
前記少なくとも１つの回数及び前記第２の複数の回数以外の前記第１の複数の回数のうちの第３の複数の回数のそれぞれについて、前記第１の特性値差が前記第２の所定の閾値未満であり、前記第２の特性値差がゼロ未満である請求項４２に記載のコンピュータ実装方法。
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値差に基づいてのみ、前記連続的な動きに属していると判断される請求項３２に記載のコンピュータ実装方法。
前記確認方法が、
前記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程と、
前記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程と、
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程と
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第１のサイズ差は第２の所定の閾値よりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項３２に記載のコンピュータ実装方法。
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の前記第１のサイズ差を取得する工程が、
前記第１のバウンディングボックスの第１の辺と、前記第１のバウンディングボックスの前記第１の辺に平行な前記第２のバウンディングボックスの辺との間の第１の辺長差を取得する工程と、
前記第１のバウンディングボックスの第２の辺と、前記第１のバウンディングボックスの前記第２の辺に平行な前記第２のバウンディングボックスの辺との間の第２の辺長差を取得する工程であって、前記第２の辺が前記第１の辺に垂直であり、前記第１のサイズ差が、前記第１の辺長差及び前記第２の辺長差を含む工程と
を含む請求項４５に記載のコンピュータ実装方法。
前記第２の所定の閾値が、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む請求項４６に記載のコンピュータ実装方法。
前記第１の辺長差が前記第１の所定の辺長閾値よりも大きく、前記第２の辺長差が前記第２の所定の辺長閾値よりも大きい請求項４７に記載のコンピュータ実装方法。
前記第１の所定の辺長閾値が前記第１のフレームのうちの１つの幅の１０分の１に等しく、前記第２の所定の辺長閾値が前記第１のフレームのうちの前記１つの高さの１０分の１に等しい請求項４７に記載のコンピュータ実装方法。
前記第１のサイズ差が絶対値である請求項４５に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも３回である請求項５０に記載のコンピュータ実装方法。
前記第１のサイズ差が、前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算することによって取得される請求項４５に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項５２に記載のコンピュータ実装方法。
前記第１のサイズ差が絶対値であり、
前記確認方法が、
前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算して第２のサイズ差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２のサイズ差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項４５に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項５４に記載のコンピュータ実装方法。
前記確認方法が、
前記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程と、
前記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程と、
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程と
をさらに含み、前記第２の複数の回数の少なくとも１つの回数について、前記第１のサイズ差は第２の所定の閾値よりも小さいか又は等しく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数の前記少なくとも１つの回数についての前記第１のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項３２に記載のコンピュータ実装方法。
前記第１の特性値が、前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数であり、
前記第２の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である
請求項５６に記載のコンピュータ実装方法。
前記第１の所定の閾値が、前記第１のフレームのうちの１つの幅に前記第１のフレームのうちの前記１つの高さを掛けたものの４００分の１に等しい請求項５７に記載のコンピュータ実装方法。
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の前記第１のサイズ差を取得する工程が、
前記第１のバウンディングボックスの第１の辺と、前記第１のバウンディングボックスの前記第１の辺に平行な前記第２のバウンディングボックスの辺との間の第１の辺長差を取得する工程と、
前記第１のバウンディングボックスの第２の辺と、前記第１のバウンディングボックスの前記第２の辺に平行な前記第２のバウンディングボックスの辺との間の第２の辺長差を取得する工程であって、前記第２の辺が前記第１の辺に垂直であり、前記第１のサイズ差が、前記第１の辺長差及び前記第２の辺長差を含む工程と
を含む請求項５６に記載のコンピュータ実装方法。
前記第２の所定の閾値が、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む請求項５９に記載のコンピュータ実装方法。
前記第１の辺長差が前記第１の所定の辺長閾値よりも小さいか又は等しく、前記第２の辺長差が、前記第２の所定の辺長閾値よりも小さいか又は等しい請求項６０に記載のコンピュータ実装方法。
前記第１の所定の辺長閾値が前記第１のフレームのうちの１つの幅の１０分の１に等しく、前記第２の所定の辺長閾値が前記第１のフレームのうちの前記１つの高さの１０分の１に等しい請求項６０に記載のコンピュータ実装方法。
前記第１のサイズ差が絶対値である請求項５６に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも３回である請求項６３に記載のコンピュータ実装方法。
前記第１のサイズ差が、前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算することによって取得される請求項６６に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項６５に記載のコンピュータ実装方法。
前記第１のサイズ差が絶対値であり、
前記確認方法が、
前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算して第２のサイズ差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２のサイズ差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項５６に記載のコンピュータ実装方法。
前記第１の所定の複数の回数が少なくとも２回である請求項６７に記載のコンピュータ実装方法。
前記確認方法が、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第１の特性値は第２の所定の閾値よりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値にさらに基づいて、前記連続的な動きに属していると判断される
請求項３２に記載のコンピュータ実装方法。
前記第１の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である請求項６９に記載のコンピュータ実装方法。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅の１０分の１と、前記第１のフレームのうちの１つの高さの１０分の１との最小値に等しい請求項７０に記載のコンピュータ実装方法。
前記第１のフレームが、連続する第３のフレーム、第４のフレーム、及び第５のフレームを含む請求項３２に記載のコンピュータ実装方法。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第３のフレームと前記第５のフレームとの間の第１のピクセル差分画像を取得する工程と、
前記第４のフレームと前記第５のフレームとの間の第２のピクセル差分画像を取得する工程と、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用してＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む第１の画像を取得する工程と
を含む請求項７２に記載のコンピュータ実装方法。
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用して前記ＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む前記第１の画像を取得する工程が、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像に対して前記ＡＮＤ演算を実行して、第２の画像を取得する工程と、
前記第２の画像を２値化して、前記第１の画像を得る工程と
を含む請求項７３に記載のコンピュータ実装方法。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第１の画像に対して浸食演算を実行して、第２の画像を得る工程であって、前記第１の検出された動き又はシーン変化が、前記第２の画像において示される工程をさらに含む請求項７３に記載のコンピュータ実装方法。
前記浸食演算が、クロス構造カーネルを用いて実行される請求項７５に記載のコンピュータ実装方法。
ジャイロスコープからサンプルを取得する工程であって、前記サンプルは、カメラモジュールについての回転運動がないことを示す工程
をさらに含み、
前記確認方法が前記サンプルに基づいて実行され、
前記第１のフレームが、前記カメラモジュールを使用して取得され、
前記第２のフレームが、前記カメラモジュールを使用して取得される
請求項３２に記載のコンピュータ実装方法。
前記第２の複数の回数のそれぞれについての前記第１の特性値差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程が、
前記第２の複数の回数のそれぞれについての前記第１の特性値差に基づいて、カメラモジュールに対してスローモーションキャプチャをトリガする工程
を含み、
前記第１のフレームが、前記カメラモジュールを使用して取得され、
前記第２のフレームが、前記カメラモジュールを使用して取得される
請求項３２に記載のコンピュータ実装方法。
システムであって、
プログラム命令を格納するように構成されている少なくとも１つのメモリと、
前記プログラム命令を実行するように構成されている少なくとも１つのプロセッサと
を含み、前記プログラム命令は、前記少なくとも１つのプロセッサに、
連続する第１の複数の回数について確認方法を実行する工程であって、前記確認方法は、
連続する複数の第１のフレームを取得する工程、
前記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、
前記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程、
連続する複数の第２のフレームを取得する工程であって、前記第２のフレームは前記第１のフレームに続く工程、
前記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、
前記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程、
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程、及び
前記第１のフレームを前記第２のフレームになるように更新し、前記第２のフレームを前記第２のフレームに続く複数の第３のフレームになるように更新する工程
を含み、前記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、前記第１のサイズ差は第１の所定の閾値よりも大きく、前記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい
工程と、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程と
を含む工程を実行させるシステム。
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の前記第１のサイズ差を取得する工程が、
前記第１のバウンディングボックスの第１の辺と、前記第１のバウンディングボックスの前記第１の辺に平行な前記第２のバウンディングボックスの辺との間の第１の辺長差を取得する工程と、
前記第１のバウンディングボックスの第２の辺と、前記第１のバウンディングボックスの前記第２の辺に平行な前記第２のバウンディングボックスの辺との間の第２の辺長差を取得する工程であって、前記第２の辺が前記第１の辺に垂直であり、前記第１のサイズ差が、前記第１の辺長差及び前記第２の辺長差を含む工程と
を含む請求項７９に記載のシステム。
前記第１の所定の閾値が、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む請求項８０に記載のシステム。
前記第１の辺長差が前記第１の所定の辺長閾値よりも大きく、前記第２の辺長差が前記第２の所定の辺長閾値よりも大きい請求項８１に記載のシステム。
前記第１の所定の辺長閾値が前記第１のフレームのうちの１つの幅の１０分の１に等しく、前記第２の所定の辺長閾値が前記第１のフレームのうちの前記１つの高さの１０分の１に等しい請求項８１に記載のシステム。
前記第１のサイズ差が絶対値である請求項７９に記載のシステム。
前記第１の所定の複数の回数が少なくとも３回である請求項８４に記載のシステム。
前記第１のサイズ差が、前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算することによって取得される請求項７９に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項８６に記載のシステム。
前記第１のサイズ差が絶対値であり、
前記確認方法が、
前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算して第２のサイズ差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２のサイズ差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項７９に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項８８に記載のシステム。
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいてのみ、前記連続的な動きに属していると判断される請求項７９に記載のシステム。
前記確認方法が、
前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程と、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第２の特性値を取得する工程と、
前記第１の特性値と前記第２の特性値との間の第１の特性値差を取得する工程であって、前記第２の複数の回数のそれぞれについて、前記第１の特性値差は第２の所定の閾値よりも大きい工程と
をさらに含み、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値差にさらに基づいて、前記連続的な動きに属していると判断される
請求項７９に記載のシステム。
前記第１の特性値が、前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数であり、
前記第２の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である
請求項９１に記載のシステム。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅に前記第１のフレームのうちの前記１つの高さを掛けたものの８００分の１に等しい請求項９２に記載のシステム。
前記第１の特性値差が絶対値である請求項９１に記載のシステム。
前記第１の所定の複数の回数が少なくとも３回である請求項９４に記載のシステム。
前記第１の特性値差が、前記第２の特性値から前記第１の特性値を減算することによって取得される請求項９１に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項９６に記載のシステム。
前記第１の特性値差が絶対値であり、
前記確認方法が、
前記第２の特性値から前記第１の特性値を減算して第２の特性値差を取得する工程であって、前記第２の複数の回数のそれぞれについて、前記第２の特性値差はゼロよりも大きい工程
をさらに含み、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２の特性値差にさらに基づいて、前記連続的な動きに属していると判断される
請求項９１に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項９８に記載のシステム。
前記確認方法が、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第１の特性値は第２の所定の閾値よりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値にさらに基づいて、前記連続的な動きに属していると判断される
請求項７９に記載のシステム。
前記第１の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である請求項１００に記載のシステム。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅の１０分の１と、前記第１のフレームのうちの１つの高さの１０分の１との最小値に等しい請求項１０１に記載のシステム。
前記第１のフレームが、連続する第３のフレーム、第４のフレーム、及び第５のフレームを含む請求項７９に記載のシステム。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第３のフレームと前記第５のフレームとの間の第１のピクセル差分画像を取得する工程と、
前記第４のフレームと前記第５のフレームとの間の第２のピクセル差分画像を取得する工程と、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用してＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む第１の画像を取得する工程と
を含む請求項１０３に記載のシステム。
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用して前記ＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む前記第１の画像を取得する工程が、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像に対して前記ＡＮＤ演算を実行して、第２の画像を取得する工程と、
前記第２の画像を２値化して、前記第１の画像を得る工程と
を含む請求項１０４に記載のシステム。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第１の画像に対して浸食演算を実行して、第２の画像を得る工程であって、前記第１の検出された動き又はシーン変化が、前記第２の画像において示される工程
をさらに含む請求項１０４に記載のシステム。
前記浸食演算が、クロス構造カーネルを用いて実行される請求項１０６に記載のシステム。
ジャイロスコープ、並びに
前記第１のフレーム及び前記第２のフレームを取得するように構成されているカメラモジュール
をさらに含み、
前記少なくとも１つのプロセッサにより実行される工程が、
前記ジャイロスコープからサンプルを取得する工程であって、前記サンプルは、前記カメラモジュールについての回転運動がないことを示す工程をさらに含み、前記確認方法が、前記サンプルに基づいて実行される請求項７９に記載のシステム。
前記第１のフレーム及び前記第２のフレームを取得するように構成されているカメラモジュールをさらに含み、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程が、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記カメラモジュールに対してスローモーションキャプチャをトリガする工程
を含む請求項７９に記載のシステム。
システムであって、
プログラム命令を格納するように構成されている少なくとも１つのメモリと、
前記プログラム命令を実行するように構成されている少なくとも１つのプロセッサと
を含み、前記プログラム命令は、前記少なくとも１つのプロセッサに、
連続する第１の複数の回数について確認方法を実行する工程であって、前記確認方法は、
連続する複数の第１のフレームを取得する工程、
前記第１のフレームにおける動き又はシーン変化を検出して、第１の検出された動き又はシーン変化を生成する工程、
前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程、
連続する複数の第２のフレームを取得する工程であって、前記第２のフレームは前記第１のフレームに続く工程、
前記第２のフレームにおける動き又はシーン変化を検出して、第２の検出された動き又はシーン変化を生成する工程、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第２の特性値を取得する工程、及び
前記第１の特性値と前記第２の特性値との間の第１の特性値差を取得する工程
を含み、前記第１の複数の回数のうちの第２の複数の回数のそれぞれについて、前記第１の特性値差は第１の所定の閾値よりも大きく、前記第２の複数の回数は第１の所定の複数の回数よりも大きいか又は等しい
工程と、
前記第２の複数の回数のそれぞれについての前記第１の特性値差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程と
を含む工程を実行させるシステム。
前記第１の特性値が、前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数であり、
前記第２の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である
請求項１１０に記載のシステム。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅に前記第１のフレームのうちの前記１つの高さを掛けたものの８００分の１に等しい請求項１１１に記載のシステム。
前記第１の特性値差が絶対値である請求項１１０に記載のシステム。
前記第１の所定の複数の回数が少なくとも３回である請求項１１３に記載のシステム。
前記第１の特性値差が、前記第２の特性値から前記第１の特性値を減算することによって取得される請求項１１０に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項１１５に記載のシステム。
前記第１の複数の回数のうちの少なくとも１つの回数のうちのそれぞれについて、前記第１の特性値差がゼロよりも小さいか又は等しく、
前記第２の複数の回数が、少なくとも前記第１の所定の複数の回数だけ、前記少なくとも１つの回数よりも多く、
前記第１の所定の複数の回数が２回である
請求項１１０に記載のシステム。
前記第１の特性値差が絶対値であり、
前記確認方法が、
前記第２の特性値から前記第１の特性値を減算して第２の特性値差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２の特性値差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２の特性値差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１１０に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項１１７に記載のシステム。
前記第１の特性値差が絶対値であり、
前記確認方法が、
前記第２の特性値から前記第１の特性値を減算して第２の特性値差を取得する工程
をさらに含み、前記第１の複数の回数のうちの少なくとも１つの回数のうちのそれぞれについて、前記第１の特性値差が第２の所定の閾値よりも大きいか又は等しく、前記第２の特性値差がゼロ未満であり、
前記第２の複数の回数が、少なくとも前記第１の所定の複数の回数だけ、前記少なくとも１つの回数よりも多く、
前記第１の所定の複数の回数が２回である
請求項１１０に記載のシステム。
前記少なくとも１つの回数及び前記第２の複数の回数以外の前記第１の複数の回数のうちの第３の複数の回数のそれぞれについて、前記第１の特性値差が前記第２の所定の閾値未満であり、前記第２の特性値差がゼロ未満である請求項１２０に記載のシステム。
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値差に基づいてのみ、前記連続的な動きに属していると判断される請求項１１０に記載のシステム。
前記確認方法が、
前記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程と、
前記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程と、
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程と
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第１のサイズ差は第２の所定の閾値よりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１１０に記載のシステム。
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の前記第１のサイズ差を取得する工程が、
前記第１のバウンディングボックスの第１の辺と、前記第１のバウンディングボックスの前記第１の辺に平行な前記第２のバウンディングボックスの辺との間の第１の辺長差を取得する工程と、
前記第１のバウンディングボックスの第２の辺と、前記第１のバウンディングボックスの前記第２の辺に平行な前記第２のバウンディングボックスの辺との間の第２の辺長差を取得する工程であって、前記第２の辺が前記第１の辺に垂直であり、前記第１のサイズ差が、前記第１の辺長差及び前記第２の辺長差を含む工程と
を含む請求項１２３に記載のシステム。
前記第２の所定の閾値が、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む請求項１２４に記載のシステム。
前記第１の辺長差が前記第１の所定の辺長閾値よりも大きく、前記第２の辺長差が前記第２の所定の辺長閾値よりも大きい請求項１２５に記載のシステム。
前記第１の所定の辺長閾値が前記第１のフレームのうちの１つの幅の１０分の１に等しく、前記第２の所定の辺長閾値が前記第１のフレームのうちの前記１つの高さの１０分の１に等しい請求項１２５に記載のシステム。
前記第１のサイズ差が絶対値である請求項１２５に記載のシステム。
前記第１の所定の複数の回数が少なくとも３回である請求項１２８に記載のシステム。
前記第１のサイズ差が、前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算することによって取得される請求項１２５に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項１３０に記載のシステム。
前記第１のサイズ差が絶対値であり、
前記確認方法が、
前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算して第２のサイズ差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２のサイズ差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１２５に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項１３２に記載のシステム。
前記確認方法が、
前記第１の検出された動き又はシーン変化をバウンディングする第１のバウンディングボックスを取得する工程と、
前記第２の検出された動き又はシーン変化をバウンディングする第２のバウンディングボックスを取得する工程と、
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の第１のサイズ差を取得する工程と
をさらに含み、前記第２の複数の回数の少なくとも１つの回数について、前記第１のサイズ差は第２の所定の閾値よりも小さいか又は等しく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数の前記少なくとも１つの回数についての前記第１のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１１０に記載のシステム。
前記第１の特性値が、前記第１の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数であり、
前記第２の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である
請求項１３４に記載のシステム。
前記第１の所定の閾値が、前記第１のフレームのうちの１つの幅に前記第１のフレームのうちの前記１つの高さを掛けたものの４００分の１に等しい請求項１３５に記載のシステム。
前記第１のバウンディングボックスと前記第２のバウンディングボックスとの間の前記第１のサイズ差を取得する工程が、
前記第１のバウンディングボックスの第１の辺と、前記第１のバウンディングボックスの前記第１の辺に平行な前記第２のバウンディングボックスの辺との間の第１の辺長差を取得する工程と、
前記第１のバウンディングボックスの第２の辺と、前記第１のバウンディングボックスの前記第２の辺に平行な前記第２のバウンディングボックスの辺との間の第２の辺長差を取得する工程であって、前記第２の辺が前記第１の辺に垂直であり、前記第１のサイズ差が、前記第１の辺長差及び前記第２の辺長差を含む工程と
を含む請求項１３４に記載のシステム。
前記第２の所定の閾値が、第１の所定の辺長閾値及び第２の所定の辺長閾値を含む請求項１３７に記載のシステム。
前記第１の辺長差が前記第１の所定の辺長閾値よりも小さいか又は等しく、前記第２の辺長差が、前記第２の所定の辺長閾値よりも小さいか又は等しい請求項１３８に記載のシステム。
前記第１の所定の辺長閾値が前記第１のフレームのうちの１つの幅の１０分の１に等しく、前記第２の所定の辺長閾値が前記第１のフレームのうちの前記１つの高さの１０分の１に等しい請求項１３８に記載のシステム。
前記第１のサイズ差が絶対値である請求項１３４に記載のシステム。
前記第１の所定の複数の回数が少なくとも３回である請求項１４１に記載のシステム。
前記第１のサイズ差が、前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算することによって取得される請求項１４４に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項１４３に記載のシステム。
前記第１のサイズ差が絶対値であり、
前記確認方法が、
前記第２のバウンディングボックスのサイズから前記第１のバウンディングボックスのサイズを減算して第２のサイズ差を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第２のサイズ差はゼロよりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第２のサイズ差にさらに基づいて、前記連続的な動きに属していると判断される
請求項１３４に記載のシステム。
前記第１の所定の複数の回数が少なくとも２回である請求項１４５に記載のシステム。
前記確認方法が、
前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルの第１の特性値を取得する工程
をさらに含み、前記第２の複数の回数のそれぞれについて、前記第１の特性値は第２の所定の閾値よりも大きく、
前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が、前記第２の複数の回数のそれぞれについての前記第１の特性値にさらに基づいて、前記連続的な動きに属していると判断される
請求項１１０に記載のシステム。
前記第１の特性値が、前記第２の検出された動き又はシーン変化によって影響を受けるすべてのピクセルのピクセル数である請求項１４７に記載のシステム。
前記第２の所定の閾値が、前記第１のフレームのうちの１つの幅の１０分の１と、前記第１のフレームのうちの１つの高さの１０分の１との最小値に等しい請求項１４８に記載のシステム。
前記第１のフレームが、連続する第３のフレーム、第４のフレーム、及び第５のフレームを含む請求項１１０に記載のシステム。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第３のフレームと前記第５のフレームとの間の第１のピクセル差分画像を取得する工程と、
前記第４のフレームと前記第５のフレームとの間の第２のピクセル差分画像を取得する工程と、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用してＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む第１の画像を取得する工程と
を含む請求項１５０に記載のシステム。
前記第１のピクセル差分画像及び前記第２のピクセル差分画像を使用して前記ＡＮＤ演算を実行して、前記第１の検出された動き又はシーン変化を含む前記第１の画像を取得する工程が、
前記第１のピクセル差分画像及び前記第２のピクセル差分画像に対して前記ＡＮＤ演算を実行して、第２の画像を取得する工程と、
前記第２の画像を２値化して、前記第１の画像を得る工程と
を含む請求項１５１に記載のシステム。
前記第１のフレームにおける前記動き又は前記シーン変化を検出して、前記第１の検出された動き又はシーン変化を生成する工程が、
前記第１の画像に対して浸食演算を実行して、第２の画像を得る工程であって、前記第１の検出された動き又はシーン変化が、前記第２の画像において示される工程
をさらに含む請求項１５１に記載のシステム。
前記浸食演算が、クロス構造カーネルを用いて実行される請求項１５３に記載のシステム。
ジャイロスコープ、並びに
前記第１のフレーム及び前記第２のフレームを取得するように構成されているカメラモジュール
をさらに含み、
前記少なくとも１つのプロセッサにより実行される工程が、
前記ジャイロスコープからサンプルを取得する工程であって、前記サンプルは、前記カメラモジュールについての回転運動がないことを示す工程をさらに含み、前記確認方法が、前記サンプルに基づいて実行される請求項１１０に記載のシステム。
前記第１のフレーム及び前記第２のフレームを取得するように構成されているカメラモジュール
をさらに含み、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記第１の複数の回数のそれぞれについての前記第１のフレームにおける前記動き又は前記シーン変化及び前記第２のフレームにおける前記動き又は前記シーン変化が連続的な動きに属していると判断する工程が、
前記第２の複数の回数のそれぞれについての前記第１のサイズ差に基づいて、前記カメラモジュールに対してスローモーションキャプチャをトリガする工程
を含む請求項１１０に記載のシステム。