JP2016105587A

JP2016105587A - デジタルビデオストリームの情報を可視化する方法及び装置

Info

Publication number: JP2016105587A
Application number: JP2015214438A
Authority: JP
Inventors: ヨーンレーン，; Yoon Lane
Original assignee: Axis AB
Current assignee: Axis AB
Priority date: 2014-11-20
Filing date: 2015-10-30
Publication date: 2016-06-09
Anticipated expiration: 2035-10-30
Also published as: CN105635667B; KR101847590B1; US10878850B2; EP3023987B1; TW201625010A; KR20160060553A; US20160148649A1; EP3023987A1; JP6291464B2; TWI684360B; CN105635667A

Abstract

【課題】処理用リソース消費を低減し、短時間に発生する事象を容易に発見できるデジタルビデオストリーム情報を可視化する方法、装置及びプログラムを提供する。【解決手段】装置１は、デジタルビデオストリームの画像フレームの複数グループをマージすることによって形成される一連のマージされた画像フレームを記憶するように構成されたメモリ１２と、複数のマージされた画像フレームを一連のブレンドされた画像フレームへとブレンドするように構成されたブレンドモジュール１４と、一連のブレンドされた画像フレームを表示するように構成されたディスプレイ１６を備える。【選択図】図１

Description

本発明はデジタルビデオストリームの情報の可視化に関し、特に、デジタルビデオストリームの早送り再生に関する。

ビデオカメラがエリアの監視に用いられることがしばしばある。一又は複数のデジタルビデオストリームの形態で取得されたビデオデータは、リアルタイムで閲覧されるか、又はデータベースに記憶されオフラインでチェックされる。デジタルビデオストリーム内で起こっている事象を発見すべく、記憶されたビデオデータの全体をサーチするために、デジタルビデオストリーム全体で早送り再生を用いたマニュアルでのサーチが使用されることが多い。しかしながら、デジタル録画されたビデオの早送り再生は多くの処理用リソースを消費し、且つ事象が短時間でのみ発生している場合には発見が困難であり得る。

上記に鑑み、本発明の目的は、先述した従来技術による不利益が大幅に低減されるデジタルビデオストリーム情報を可視化する方法及び装置を提供することである。

本発明の第１の態様によれば、上記の目的がデジタルビデオストリーム情報の可視化方法によって達成される。本方法は、デジタルビデオストリームの画像フレームの複数のグループをマージすることにより形成される一連のマージされた画像フレーム（ｍｅｒｇｅｄｉｍａｇｅｆｒａｍｅｓ）を受信することと、複数のマージされたフレームを一連のブレンドされた画像フレーム（ｂｌｅｎｄｅｄｉｍａｇｅｆｒａｍｅｓ）へとブレンドすることであって、複数のマージされた画像フレームの各々が複数のブレンドされた画像フレームに寄与する、ブレンドすることと、一連のブレンドされた画像フレームをディスプレイ上に表示することと、を含む。

複数のブレンドされた画像フレームに寄与する上記の複数のマージされた画像フレームの各々に従って、一連のブレンドされた画像フレームを形成することにより、一連のブレンドされた画像フレームが生成される。複数のオリジナルの画像フレームの各々からの情報が複数のブレンドされた画像フレームに寄与する。結果として、オリジナルフレームからの情報が複数のブレンドされた画像フレーム内に存在することとなる。従って、関心対象の情報がオリジナルの画像フレームの１つ（又は少数）にのみ存在する場合でも、この関心対象の情報が、ブレンドされた画像フレームの複数（少数より多く）に存在することとなる。即ち、一連のブレンドされた画像フレームが再生される場合、再生が早送り再生でありながらも、関心対象の情報がオリジナルフレームよりも多数のブレンドされた画像にわたって存在することとなる。ビデオストリームのオリジナルの画像フレーム中の関心対象の情報は、関心対象の情報がもともと存在した画像フレーム数と比較して、より多数のブレンドされた画像フレームにわたり「ゴースト（薄い像）」として存在する。

本方法は更に、各マージされたフレームに寄与する画像フレーム数を設定することを含み得る。

本方法は更に、ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数を設定することを含み得る。

マージされた画像フレームが寄与するブレンドされた画像フレームのうちの少なくとも２つの間で変化するように、マージされた画像フレームの寄与度の重みが設定され得る。

代替的に、マージされた画像フレームの寄与度の重みは、マージされた画像フレームが寄与するブレンドされた画像フレームの各々において一定であるように設定され得る。

ブレンドされた画像フレームを画像フレームのビデオストリームとして連続的に表示することによって、一連のブレンドされた画像フレームの表示が実施され得る。

代替的に又は付加的に、一連のブレンドされた画像フレームの表示が、ブレンドされた画像フレームをディスプレイ上に並べて表示することによって実施されてもよい。

本方法は更に、デジタルビデオストリームの画像フレームの複数のグループを一連のマージされた画像フレームへとマージすることを含み得る。

本方法は更に、ビデオストリームからの画像フレームの複数のグループを一連のマージされた画像フレームへとマージする前に、画像フレームの解像度を低下させることを含み得る。

代替的に、本方法は更に、ビデオストリームからの画像フレームの複数のグループを一連のマージされた画像フレームへとマージする際に、画像フレームの解像度を低下させることを含み得る。

本方法は更に、デジタルビデオストリーム中の関心対象の事象を検出すること、及び、当該事象を含むデジタルビデオストリームの画像フレームについての画像フレームの寄与度の重みを、当該事象を含まないデジタルビデオストリームの画像フレームについての画像フレームの寄与度の重みとは異なるように設定することを含み得る。

本方法は更に、デジタルビデオストリーム中の関心対象の事象を検出すること、及び、当該事象を含むマージされた画像フレームについてのマージされた画像フレームの寄与度の重みを、当該事象を含まないマージされた画像フレームについてのマージされた画像フレームの寄与度の重みとは異なるように設定すること含み得る。

本発明の第２の態様によれば、上記の目的が、デジタルビデオストリーム情報の可視化するための装置によって達成される。本装置は、デジタルビデオストリームの画像フレームの複数のグループをマージすることによって形成される一連のマージされた画像フレームを記憶するように構成されたメモリ、複数のマージされたフレームを一連のブレンドされた画像フレームへとブレンドするように構成されたブレンドモジュールであって、複数のマージされた画像フレームの各々が複数のブレンドされた画像フレームに寄与する、ブレンドモジュール、及び、一連のブレンドされた画像フレームを表示するように構成されたディスプレイを備える。

本装置は更に、デジタルビデオストリームの画像フレームの複数のグループを一連のマージされた画像フレームへとマージするように構成されたマージモジュールを含み得る。

上述した方法の特徴は、可能な場合にはこの第２の態様にも適用される。無用な繰り返しを避けるため上述を参照する。

本発明は、特許請求の範囲に記載されたすべての可能な特徴の組み合わせに関連することに留意されたい。

本発明の利用可能性の更なる範囲は、以下の詳細な説明から明らかになるであろう。しかしながら、この詳細な説明よって本発明の範囲内の様々な変更及び修正が当業者に明らかとなるため、詳細な説明及び具体例は、本発明の好適な実施形態を示しながらも例示的な形でのみ提示されることを理解されたい。

従って、記載のデバイス及び記載の方法は変形し得るため、この発明は記載のデバイスの特定の構成要素部品又は記載の方法のステップに限定されないことを理解されたい。本明細書で使用される用語は、特定の実施形態を説明する目的のためにすぎず、限定的であることを意図しないことを更に理解されたい。明細書及び添付の特許請求の範囲で使用されるように、冠詞（「ａ」、「ａｎ」、「ｔｈｅ」、及び「ｓａｉｄ」）は、文脈によって他のことが明らかに示されない限り、１つ又は複数の要素があることを意味していると意図されることに留意するべきである。従って、例えば、「ユニット」（ａｕｎｉｔ）又は「当該ユニット」（ｔｈｅｕｎｉｔ）に言及した場合、これは幾つかのデバイスなどを含んでもよい。更に、「備える」「含む」「包含する」及び同様の表現は、他の要素又はステップを除外しない。

本発明の上記の態様及びその他の態様を、本発明の実施形態を示す添付の図面を参照しながら更に詳細に説明する。図面は発明を具体的な実施形態へと限定するものでなく、本発明の説明及び理解のためのものである。

図面に示すように、レイヤーとエリアのサイズは図示目的のために誇張され、本発明の実施形態の一般構造を示すために提供される。類似の参照番号は、全体を通して類似の要素を指す。

デジタルビデオストリームの情報を可視化するための装置の概略図である。デジタルビデオストリームの情報を可視化するための方法のブロック図である。

これより、本発明の現時点で好ましい実施形態を示す添付図面を参照して、本発明を以下により詳細に説明する。しかしながら本発明は多くの異なる形態で実施されることができ、本明細書で説明される実施形態に限定されるものと解釈されるべきではなく、これらの実施形態はむしろ、本開示が包括的で完全となるように提供されており、当業者に本発明の範囲を十分に伝えるためのものである。

図１は、デジタルビデオストリーム情報を可視化するための装置１を示す。特に、デジタルビデオストリームの早送り再生のためのものである。装置１は、マージモジュール１０、メモリ１２、ブレンドモジュール１４、及びディスプレイ１６を備える。

装置１は、デジタルビデオストリームに関連するビデオデータを生成するか又は受信するように構成される。装置１がデジタルビデオストリームに関連するビデオデータを生成するように構成されている場合、装置１は、画像記録モジュール（図示せず）を備える。画像記録モジュールは、例えば、画像センサ及び画像プロセッサを備え、且つ画像センサによって捕捉された画像データを処理するように構成されたモジュールであり得る。装置１がデジタルビデオストリームに関連するビデオデータを受信するように構成されている場合、装置１は入力ポート（図示せず）を備え、これを介してデジタルビデオストリームに関連するビデオデータが受信される。入力ポートは、デジタルネットワークポート又はデジタルビデオストリームに関連するビデオデータの受信に適した任意の他のポートであり得る。代替的に、入力ポートは、ＵＳＢメモリスティックなどの交換可能なメモリを受容するように構成されたメモリポートであり得る。

マージモジュール１０は、画像フレームの複数のグループを、デジタルビデオストリームから一連のマージされた画像フレームへとマージする（併合する）ように構成される。これは、下記の実施例によって可視化され得る。下記の画像フレームを含むデジタルビデオストリームを想定されたい。
ＡＢＣＤＥＦＧＨＩＪＫＬＭＮＯＰＱＲＳＴＵＶＷＸ
次いで、マージモジュール１０は、下記に従って、一連のマージされた画像フレーム（ＭＦ）を生成するように構成される。
ＭＦ_１＝１／３Ａ＋１／３Ｂ＋１／３Ｃ
ＭＦ^２＝１／３Ｄ＋１／３Ｅ＋１／３Ｆ
ＭＦ_３＝１／３Ｇ＋１／３Ｈ＋１／３Ｉ
ＭＦ_４＝１／３Ｊ＋１／３Ｋ＋１／３Ｌ
ＭＦ_５＝１／３Ｍ＋１／３Ｎ＋１／３Ｏ
ＭＦ_６＝１／３Ｐ＋１／３Ｑ＋１／３Ｒ
ＭＦ_７＝１／３Ｓ＋１／３Ｔ＋１／３Ｕ
ＭＦ_８＝１／３Ｖ＋１／３Ｗ＋１／３Ｘ
この実施例によれば、マージされた画像フレームの各々は、デジタルビデオストリームの３つの異なるオリジナルの画像フレームからの画像データを含む。しかしながら、一連のマージされた画像フレームがデジタルビデオストリームの画像フレームの複数のグループをマージすることによって形成される限り、他の可能性もまた実行可能であることが理解されよう。一連のマージされた画像フレームは、マージされた画像フレームの数がオリジナルの画像フレームの数よりも少なく形成される。これは、例えば、各オリジナルの画像フレームが単一のマージされた画像フレームにのみ寄与するように、オリジナルの画像フレームの複数のグループをマージすることよってなされ得る。一連のマージされた画像フレームの再生に際し、デジタルビデオストリームについて、デジタルビデオストリームの早送り再生と同じ又は同様のフレームレートの使用が達成される。これは、一連のマージされた画像フレーム中の画像フレーム数がデジタルビデオストリームの画像フレームの数と比較して減少しているからである。マージモジュール１０は、各マージされたフレームに寄与する画像フレームの数を設定するように構成され得る。各マージされたフレームに寄与する画像フレームの数は、装置１のユーザによって、例えば、キーボード、マウス、トラックボール、マイクロフォン、又は装置１に接続された任意の他の適切な入力装置との相互作用により設定され得る。マージされた画像フレームの各々に寄与する画像フレームの数は、マージされた画像フレームの各々について同じであるように設定され得る。代替的に、マージされた画像フレームの各々に寄与する画像フレームの数は、マージされた画像フレーム間で異なるように設定されてもよい。マージされた画像フレームの各々に寄与する画像フレームの数は、マージされた画像フレーム間で動的に変化するように構成されてもよい。マージされた画像フレームの各々に寄与する画像フレームの数のそのような動的変化は、例えば、シーン中の動きレベルによって制御されるか、又はシーン中で発生する特定のタイプの事象によって引き起こされてもよい。シーン中の動きレベルが高い場合、マージされた画像フレームの各々に寄与する画像フレームの数は低く設定され、シーン中の動きレベルが低い場合、マージされた画像フレームの各々に寄与する画像フレームの数は高く設定される。但しこれとは逆でもよい。マージされた画像フレームの各々に寄与する画像フレームの数の変化させることにより、マージされたフレームのフレームレートは一定でないことがある。マージされたフレームの一定でないフレームレートは、後述のブレンドを実施する際に補償され得る。代替的に、マージされたフレームの一定でないフレームレートが補償されず、従って、得られた一連のブレンドされた画像フレームの再生スピードが変動してもよい。

デジタルビデオストリームのオリジナルの画像フレームの画像データは、アルファ合成（Ａｌｐｈａｃｏｍｐｏｓｉｔｉｎｇ）、多重ブレンド、及びスクリーンブレンドなどの様々なマージ技法を用いて加算され得る。その他のマージ技法も利用可能であることを当業者は理解するであろう。

種々の画像フレームからマージされた画像フレームの各々への寄与の、画像フレームの寄与度の重みは、マージモジュール１０で設定されてもよい。画像フレームの寄与度の重みは、装置１のユーザによって、例えば、キーボード、マウス、トラックボール、マイクロフォン、又は装置１に接続された任意の他の適切な入力装置との相互作用により設定され得る。上記の実施例のように、画像フレームの寄与度の重みは、特定のマージされた画像フレームに寄与するすべての画像フレームについて等しくなるように設定され得る。代替的に、画像フレームの寄与度の重みは、特定のマージされた画像フレームに寄与する画像フレームについて異なるように設定されてもよい。画像フレームの寄与度の重みは、マージされた画像フレーム間で動的に変化してもよい。画像フレームの寄与度の重みのそのような動的な変化は、例えば、画像フレーム中で発生する事象の検出によって制御され得る。ある画像フレームが何らかの理由でより興味深いとされる場合、当該画像フレームはより大きい画像フレームの寄与度の重みを取得し得る。より興味深いとされる画像フレームは、デジタルビデオストリーム中の関心対象の事象の発見に用いるビデオ分析によって発見され得る。例えば、顔検出アルゴリズムが、例えば、ある顔が他の画像フレームよりも見やすい一又は複数の画像フレームを示すことができる。デジタルビデオストリーム中の関心対象の事象の発見に、他の種のビデオ分析が使用されてもよい。

メモリ１２は、一連のマージされた画像フレームを受信し記憶するように構成される。メモリ１２は、デジタルデータの記憶に適した任意の種類の揮発性又は非揮発性メモリであり得る。一連のマージされた画像フレームはデジタルデータである。

ブレンドモジュール１４は、一連のマージされた画像フレームの複数のマージされたフレームを、一連のブレンドされた画像フレーム（ＢＦ）へとブレンドする（合成する）ように構成される。複数のマージされた画像フレームの各々は、複数のブレンドされた画像フレームに寄与している。従って、マージされた画像フレームの群をブレンドすることによって、一連のブレンドされた画像フレームが形成される。これは、下記の実施例によって可視化され得る。
ＢＦ_１＝１／３ＭＦ１＋１／３ＭＦ２＋１／３ＭＦ３
ＢＦ_２＝１／３ＭＦ２＋１／３ＭＦ３＋１／３ＭＦ４
ＢＦ_３＝１／３ＭＦ３＋１／３ＭＦ４＋１／３ＭＦ５
ＢＦ_４＝１／３ＭＦ４＋１／３ＭＦ５＋１／３ＭＦ６
ＢＦ_５＝１／３ＭＦ５＋１／３ＭＦ６＋１／３ＭＦ７
ＢＦ_６＝１／３ＭＦ６＋１／３ＭＦ７＋１／３ＭＦ８
この実施例によれば、ブレンドされた画像フレームの各々は、一連のマージされた画像フレームのうちの３つの異なるマージされた画像フレームからの画像データを含む。しかしながら、一連のブレンドされた画像フレームが、一連のマージされた画像フレームのマージされた画像フレームの複数のグループをブレンドすることによって形成される限り、他の可能性もまた実行可能であることが理解されよう。更には、一連のマージされた画像フレームのマージされた画像フレームのうちの少なくとも幾つかは、１つよりも多いブレンドされた画像フレームに寄与する。従って、複数のマージされた画像フレームの各々が、複数のブレンドされた画像フレームに寄与する。マージされた画像フレームがどのように一連のブレンドされた画像フレームへとブレンドされるかに依存して、一連のブレンドされた画像フレーム中のブレンドされた画像フレームの数が、一連のマージされた画像フレームのマージされた画像フレームの数と比較して、低減され得る。従って、一連のブレンドされた画像フレームの再生時、一連のマージされた画像フレームの再生と比較して向上したデジタルビデオストリームの再生スピードが達成され得る。

ブレンドモジュール１４は、ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数が設定されるように、構成され得る。ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数は、装置１のユーザによって、例えば、キーボード、マウス、トラックボール、マイクロフォン、又は装置１に接続された任意の他の適切な入力装置との相互作用により設定され得る。ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数は、ブレンドされた画像フレームの各々について同じであるように設定され得る。代替的に、ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数は、ブレンドされた画像フレーム間で異なるように構成されてもよい。ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数は、ブレンドされた画像フレーム間で動的に変化するように設定されてもよい。ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数は、マージされた画像フレームに寄与する画像フレームの数が動的に設定されていることに起因するフレームレートの変化を補償するために制御され得る。ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数は更に、或いは組み合わせとして、より多くのブレンドされた画像フレーム中の特に興味深い事象を含むマージされた画像フレームを含めるように増加されてもよい。特に興味深い事象を含むマージされた画像フレームは、デジタルビデオストリーム中の関心対象の事象の発見に用いるビデオ分析によって発見され得る。例えば、顔検出アルゴリズムが、例えば、ある顔が他の画像フレームよりも見やすい一又は複数の画像フレームを示すことができる。デジタルビデオストリーム中の関心対象の事象の発見に、他の種のビデオ分析が使用されてもよい。

一連のマージされた画像フレームのマージされた画像フレームの画像データは、アルファ合成、多重ブレンド、及びスクリーンブレンドなどの様々なマージ技法を用いて加算され得る。その他のブレンド技法も利用可能であることを当業者は理解するであろう。

種々のマージされた画像フレームからブレンドされた画像フレームの各々への寄与についてのマージされた画像フレームの寄与度の重みが、ブレンドモジュール１０で設定されてもよい。マージされた画像フレームの寄与度は、装置１のユーザによって、例えば、キーボード、マウス、トラックボール、マイクロフォン、又は装置１に接続された任意の他の適切な入力装置との相互作用により設定され得る。上記の実施例のように、マージされた画像フレームの寄与度の重みは、特定のマージされた画像フレームに寄与するすべてのマージされた画像フレームについて等しくなるように設定され得る。代替的に、マージされた画像フレームの寄与度の重みは、特定のブレンドされた画像フレームに寄与するマージされた画像フレームについて異なるように設定されてもよい。これを下記の実施例で示す。
ＢＦ’_１＝１／４ＭＦ１＋１／２ＭＦ２＋１／４ＭＦ３
ＢＦ’_２＝１／４ＭＦ２＋１／２ＭＦ３＋１／４ＭＦ４
ＢＦ’_３＝１／４ＭＦ３＋１／２ＭＦ４＋１／４ＭＦ５
ＢＦ’_４＝１／４ＭＦ４＋１／２ＭＦ５＋１／４ＭＦ６
ＢＦ’_５＝１／４ＭＦ５＋１／２ＭＦ６＋１／４ＭＦ７
ＢＦ’_６＝１／４ＭＦ６＋１／２ＭＦ７＋１／４ＭＦ８
上記の実施例で、マージされた画像フレームは、ブレンドされた画像フレームへとフェード方式でブレンドされる。即ち、画像フレームの寄与は、一連のブレンドされた画像フレームにフェードインされ（徐々に強められ）、且つ／又は一連のブレンドされた画像フレームからフェードアウトされ（徐々に弱められ）得る。

代替的に又は付加的に、マージされた画像フレームの寄与度の重みは、ブレンドされた画像フレーム間で動的に変化するように設定され得る。関心対象であるとマークされたマージされた画像フレームは、マークされていないマージされた画像フレームよりも高いマージされた画像フレームの寄与度の重みを有し得る。マージされた画像フレームのマーキングは、デジタルビデオストリーム中の関心対象の事象を発見するビデオ分析によって引き起こされ得る。

ディスプレイ１６は、一連のブレンドされた画像フレームを表示するように構成される。一連のブレンドされた画像フレームの表示は、ブレンドされた画像フレームを画像フレームのビデオストリームとして連続的に表示することによって、実施され得る。代替的に、一連のブレンドされた画像フレームの表示が、ブレンドされた画像フレームをディスプレイ上に並べて表示することによって実施されてもよい。

装置１は、解像度設定モジュール１８を備え得る。解像度設定モジュール１８は、デジタルビデオストリームの画像フレームの解像度を設定するように構成され得る。解像度設定モジュール１８は、マージモジュール１０がビデオストリームからの画像フレームの複数のグループを一連のマージされた画像フレームへとマージするように構成される前に、画像フレームのうちの少なくとも幾つかの解像度を低下させるように構成され得る。代替的に、解像度設定モジュール１８及びマージモジュール１０が協働して、ビデオストリームからの画像フレームの複数のグループを一連のマージされた画像フレームへとマージする際に、画像フレームの解像度を低下させるように構成されてもよい。

装置１は事象検出モジュール２０も備える。事象検出モジュール２０は、関心対象の情報を含むデジタルビデオストリーム内の事象（一又は複数）を検出するように構成される。事象は、デジタルビデオストリームによって示されたシーン中で動く物体（例えば、人、車、動物、又はシーン中で動くその他の物体）であり得る。代替的に又は付加的に、事象は、デジタルビデオストリームで示されているシーン中に存在する特定のタイプの物体（例えば、人の顔、車のナンバー、又はシーン中に存在する特定のタイプのその他の物体）であり得る。

検出された事象（一又は複数）に関連する情報は、上述の画像フレームの寄与度の重み及び／又はマージされた画像フレームの寄与度の重みの制御に用いられ得る。事象検出モジュール２０によって検出された事象（一又は複数）を含む、オリジナル画像フレーム及び／又はマージされた画像フレームは、事象検出モジュール２０によって検出された事象（一又は複数）を含まないオリジナル画像フレーム及び／又はマージ画像フレームよりも大きい重みを付与される。

更には、オリジナルの画像フレームの検出された事象（一又は複数）を含むエリアを、オリジナルの画像フレームのシーンの背景に関連するエリアとは異なって重み付けするために、デジタルビデオストリーム内の検出された事象（一又は複数）に関連する情報は、マージモジュール１０によって使用され得る。代替的に又は付加的に、デジタルビデオストリーム内の検出された事象（一又は複数）に関連する情報は、マージ画像フレームの検出された事象（一又は複数）を含むエリアを、マージ画像フレームのうちシーンの背景に関するエリアとは異なって加重するために、ブレンドモジュール１４によって使用されてもよい。シーンの背景とは、オリジナル画像フレーム及び／又はマージ画像フレームのうち、検出された事象（一又は複数）を含まないエリアであり得る。

装置１のマージモジュール１０、ブレンドモジュール１４、画像解像度設定モジュール１８、及び／又は事象検出モジュール２０は、処理装置によって実行されるソフトウェアコードとして、装置１に実装されたハードウェアとして、又はこれらの両方として、実装され得る。装置１は、追加のメモリ（図示せず）も備え得る。マージモジュール１０、ブレンドモジュール１４、及び／又は画像解像度設定モジュール１８は、追加のメモリからの／追加のメモリ上のデータを記憶及び／又は読み出すように構成され得る。追加のメモリは、デジタルデータの記憶に適した任意の種類の揮発性又は非揮発性メモリであり得る。

図２は、デジタルビデオストリーム情報を可視化するための方法のブロック図を示す。本方法は、デジタルビデオストリームの画像フレームの複数のグループを、一連のマージ画像フレームへとマージすること（Ｓ２００）、複数のマージされたフレームを、一連のブレンドされた画像フレームへとブレンドすること（Ｓ２０２）であって、複数のマージ画像フレームの各々が複数のブレンドされた画像フレームに寄与する、ブレンドすること（Ｓ２０２）、及び、一連のブレンドされた画像フレームを表示すること（Ｓ２０４）を含む。

当業者は、本発明はいかなる意味においても、上述した好ましい実施形態に限定されないことを理解するであろう。寧ろ、添付の特許請求項の範囲内で多くの修正例及び変形例が可能である。

例えば、装置１は、マージモジュール１０を備える代わりに、一連のマージされたフレームを他の装置から受信するように構成されてもよい。この場合の他の装置は、例えば、図１に関して上述したマージモジュールによって構成されたマージモジュールを備えた、デジタルビデオカメラであってもよい。

装置１のディスプレイ１６は、図１に示す装置１と一体化した部分を形成し得る。しかしながら、ディスプレイは、ブレンドモジュール、メモリ、及び／又はマージモジュールを備えた処理デバイスに接続された周辺機器の部分であってよく、当該処理デバイス及び当該周辺機器が装置１を形成していてもよい。

更に、当業者は、開示された実施形態の変形例を、図面、記載内容、及び添付の特許請求項の精査により理解し、且つ特許請求される本発明を実施する際に実行することが可能である。

Claims

デジタルビデオストリームの情報を可視化するための方法であって、
前記デジタルビデオストリームの画像フレームの複数のグループをマージすることによって形成される一連のマージされた画像フレームを受信することと、
複数のマージされたフレームを一連のブレンドされた画像フレームへとブレンドすることであって、複数の前記マージされた画像フレームの各々が複数の前記ブレンドされた画像フレームに寄与する、ブレンドすることと、
前記一連のブレンドされた画像フレームをディスプレイ（１６）上に表示することと
を含む、方法。
マージされたフレームの各々に寄与する画像フレームの数を設定することを更に含む、請求項１に記載の方法。
ブレンドされた画像フレームの各々に寄与するマージされた画像フレームの数を設定することを更に含む、請求項１又は２に記載の方法。
前記マージされた画像フレームが寄与する前記ブレンドされた画像フレームのうちの少なくとも２つの間で変化するように、マージされた画像フレームの寄与度の重みが設定される、請求項１から３の何れか一項に記載の方法。
前記マージされた画像フレームが寄与する前記ブレンドされた画像フレームの各々において一定であるように、マージされた画像フレームの寄与度の重みが設定される、請求項１から４の何れか一項に記載の方法。
前記一連のブレンドされた画像フレームを前記表示することが、前記ブレンドされた画像フレームを、ブレンドされた画像フレームのビデオストリームとして連続的に表示することによって実施される、請求項１から５の何れか一項に記載の方法。
前記一連のブレンドされた画像フレームを前記表示することが、前記ブレンドされた画像フレームを、前記ディスプレイ上に並べて表示することによって実施される、請求項１から６の何れか一項に記載の方法。
前記デジタルビデオストリームのマージ画像フレームの複数のグループを、前記一連のマージされた画像フレームへとマージすることを更に含む、請求項１から７の何れか一項に記載の方法。
前記ビデオストリームからの画像フレームの複数のグループを前記一連のマージされた画像フレームへとマージする前に、前記画像フレームの解像度を低下させることを更に含む、請求項８に記載の方法。
前記ビデオストリームからの画像フレームの複数のグループを前記一連のマージされた画像フレームへとマージする際に、前記画像フレームの解像度を低下させることを更に含む、請求項８に記載の方法。
前記デジタルビデオストリーム中の関心対象の事象を検出すること、及び、前記事象を含む前記デジタルビデオストリームの画像フレームについての画像フレームの寄与度の重みを、前記事象を含まない前記デジタルビデオストリームの画像フレームについての画像フレームの寄与度の重みとは異なるように設定することを更に含む、請求項８から１０の何れか一項に記載の方法。
前記デジタルビデオストリーム中の関心対象の事象を検出すること、及び、前記事象を含むマージされた画像フレームについてのマージされた画像フレームの寄与度の重みを、前記事象を含まないマージされた画像フレームについてのマージされた画像フレームの寄与度の重みとは異なるように設定することを更に含む、請求項１から１０の何れか一項に記載の方法。
デジタルビデオストリームの情報を可視化するための装置であって、
前記デジタルビデオストリームの画像フレームの複数のグループをマージすることによって形成される一連のマージされた画像フレームを記憶するように構成された、メモリ（１２）、
複数のマージされたフレームを一連のブレンドされた画像フレームへとブレンドするように構成されたブレンドモジュール（１４）であって、複数の前記マージされた画像フレームの各々が複数の前記ブレンドされた画像フレームに寄与する、ブレンドモジュール（１４）、及び
前記一連のブレンドされた画像フレームを表示するように構成された、ディスプレイ（１６）
を備える、装置。
前記デジタルビデオストリームからの画像フレームの複数のグループを前記一連のマージされた画像フレームへとマージするように構成された、マージモジュール（１０）を更に備える、請求項１３に記載の装置。
処理能力を有するデバイス上で実行されると請求項１から１２の何れか一項に記載の方法を実施するプログラムを実行するように記憶している、コンピュータ可読記録媒体。