JP7273901B2 - ビデオシーケンス編成方法、装置、電子設備、記憶媒体、及びプログラム - Google Patents

Description

本開示は、情報処理の分野に関し、特にディープラーニング、仮想現実、クラウドコンピューティング、ビデオ編成処理などの分野に関する。

コンピュータ技術の発展に伴い、人工知能、ディープラーニング、仮想現実、クラウドコンピューティングなどの技術は大きくユーザーの生活に応用され、ライブ配信、ショートビデオ、オンライントレーニングなどの様々な応用シーンにおいて、ユーザーとのインタラクションの役割を果たしている。これらのシーンにおいて、仮想のキャラクタ（２Ｄ又は３Ｄ）を用いて実際のキャラクタ代わりにしたり、該仮想のキャラクタを実際のキャラクタと合わせて、共にビデオ録画したりすることができる。

携帯設備や携帯端末などの電子設備は、従来よりもさらにスマート化し、チップの解析能力はさらに強く、特にビデオ情報の解析、画面のレンダリングなどは従来のものよりもより速く、より鮮明となっていることで、ユーザーのビデオ情報に対するニーズは日増しに高まり、ビデオ録画が多様化するか否かは、ユーザーのインタラクティブ体験に直接影響し、ビデオ録画の多様化は、ビデオコンテンツを豊富にすることもできる。しかし、関連技術において、ビデオの多様化をどのように高めるかについては、有効な解決策が存在していない。

本開示は、ビデオシーケンス編成方法、装置、電子設備、及び記憶媒体を提供する。

本開示の１つの態様は、ビデオシーケンス編成方法を提供し、該方法は、
人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得することと、
前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出することと、
前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダムに混合配列するランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることと、を含む。

本開示の他の態様は、ビデオシーケンス編成装置を提供し、該装置は、
人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得するためのビデオ取得モジュールと、
前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出するためのビデオ抽出モジュールと、
前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとするためのビデオ編成モジュールと、を備える。

本開示の他の態様は、電子設備をさらに提供し、当該電子設備は、
少なくとも１つのプロセッサと、
少なくとも１つのプロセッサに通信接続されるメモリと、を備え、
メモリには、少なくとも１つのプロセッサにより実行可能な命令が記憶されており、
命令は、少なくとも１つのプロセッサにより実行される場合、本開示の実施形態の任意のビデオシーケンス編成方法を実行させることを特徴とする。

本開示の他の態様は、コンピュータ命令を記憶した非一過性のコンピュータ可読記憶媒体をさらに提供し、当該コンピュータ命令を記憶した非一過性のコンピュータ可読記憶媒体は、本開示の実施形態の任意のビデオシーケンス編成方法をコンピュータに実行させる。

本開示の他の態様は、プログラムを提供し、該プログラムは、
コンピュータにおいて、プロセッサにより実行される場合、本開示の実施形態の任意のビデオシーケンス編成方法を実現する。

本開示において、人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得する。前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出し、前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとする。本開示を用いることにより、ビデオ編成の多様化を向上することができる。

ここに記載された内容は、本開示の実施形態のキーポイント又は重要な特徴を記述することを意図せず、また、本開示の範囲を制限することにも用いられないことを理解すべきである。本開示の他の特徴については、下記の明細書を通して説明を促す。

添付図面は、本方案をより良く理解するためのものであり、本開示を限定するものではない。

関連技術における仮想のキャラクタの生成に用いられる原版ビデオシーケンスの単方向再生の概略図である。 関連技術における仮想のキャラクタの生成に用いられる原版ビデオシーケンスの双方向ループ再生の概略図である。 本開示の実施形態のマスタシーケンスの概略図である。 本開示の実施形態のスレーブシーケンスの概略図である。 本開示の実施形態によるビデオシーケンス編成方法のフロー概略図である。 本開示の実施形態による２Ｄデジタルの人体のビデオ画面を生成する概略図である。 本開示の実施形態による原版ビデオシーケンスの編成再生の概略図である。 本開示の実施形態による２つの原版ビデオマスタシーケンスの編成再生の概略図である。 本開示の実施形態による３つの原版ビデオマスタシーケンスの編成再生の概略図である。 本開示の実施形態による１マスタ１スレーブシーケンス間の編成再生の概略図である。 本開示の実施形態による１マスタ多スレーブシーケンス間の編成再生の概略図である。 本開示の実施形態による遷移フレームを生成する概略図である。 本開示の実施形態によるビデオシーケンス編成装置の構成構造概略図である 本開示の実施形態によるビデオシーケンス編成方法を実現するための電子設備のブロック図である。

以下、図面を組み合わせて本開示の例示的な実施形態を説明し、理解を容易にするためにその中には本開示の実施形態の様々な詳細事項が含まれており、それらは単なる例示的なものと見なされるべきである。したがって、当業者は、本開示の範囲及び精神から逸脱することなく、ここで説明される実施形態に対して様々な変更と修正を行うことができる。同様に、わかりやすくかつ簡潔にするために、以下の説明では、周知の機能及び構造の説明を省略する。

本明細書における用語「及び／又は」は、単に関連オブジェクトを記述する関連関係であり、表示には３つの関係が存在でき、例えば、Ａ及び／又はＢは、Ａが単独で存在する、ＡとＢとが同時に存在する、Ｂが単独で存在するという３つの状況を表すことができる。本明細書における用語「少なくとも１つ」は、複数のうちの任意の１つ又は複数のうちの少なくとも２つの任意の組み合わせを表し、例えば、Ａ、Ｂ、Ｃのうちの少なくとも１つを含むは、Ａ、Ｂ、及びＣからなる集合から選択された任意の１つ又は複数の要素を含むことを表すことができる。本明細書における用語「第１」、「第２」は、複数の類似の技術用語を指して区別することを表し、順序を限定する、又は２つのみと限定する意図ではなく、例えば、第１特徴と第２特徴とは、２つのタイプ／２つの特徴があることを指し、第１特徴は１つ又は複数であり、第２特徴も１つ又は複数であることができる。

さらに、本明細書をよりよく説明するために、以下の具体的な実施形態において多くの具体的な詳細が示される。当業者は、特定の詳細がなくとも、本開示を同様に実施することができることを理解すべきである。いくつかの例において、当業者の熟知している方法、手段、要素、及び回路は、本開示の主旨を明確にするため、詳細に説明しない。

ライブ配信、ショートビデオ、オンライントレーニングなどの様々な応用シーンにおいて、仮想のキャラクタ（２Ｄ又は３Ｄ）を実際のキャラクタ代わりにする、又は該仮想のキャラクタを実際のキャラクタと合わせて、共にビデオ録画するシーンを例とすると、ディープラーニングなどの技術を用いて該仮想のキャラクタを生成することができ、例えば、ディープラーニングモデルに音声を入力することで、該仮想のキャラクタの顔部位を生成でき、かつ仮想のキャラクタの顔部位の動作（口型動作、表情動作などを含む）と該音声とがリズム及び語義の内容などにおいて一致することで、仮想のキャラクタが該音声内容を話すビデオ画面を得られる。該ビデオ画面において、顔以外の身体部分の動作は、あらかじめ録画された原版ビデオから得られる。

図１は、関連技術における仮想のキャラクタの生成に用いられる原版ビデオシーケンスの単方向再生の概略図であり、図１に示すように、原版ビデオシーケンスにおける複数のビデオフレームは、単方向再生状態、即ち順方向再生であり、録画により該原版ビデオを得る。図２は、関連技術における仮想のキャラクタの生成に用いられる原版ビデオシーケンスの双方向ループ再生の概略図であり、図２に示すように、原版ビデオシーケンスにおける複数のビデオフレームは、順方向再生であってもよく、図２において、三角形により標識されたフレーム「Ｎ０」に基づいて逆方向再生されてもよく、双方向ループ再生を実現することで、録画により該原版ビデオを得る。ここで、図１～図２はそれぞれ、ビデオの０、１、２、３、４、５秒目のビデオ画面を示す。

該原版ビデオの長さ及び内容は、録画終了後に変更することが困難であり、上述の仮想のキャラクタを生成するプロセスに該原版ビデオを応用し、得られる仮想のキャラクタのビデオ画面の長さは制限されており、内容は単一である。

本開示により、整列標識フレーム（逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つの標識フレーム）に基づいて、初期ビデオフレーム（マスタシーケンス及び／又はスレーブシーケンスにより構成されたビデオフレーム）において抽出されたビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを新たなビデオシーケンスとし、ランダム混合配列処理のプロセスにおいて、ユーザーのニーズに基づいて該新たなビデオシーケンスの長さを調整することができ、長さは制限をうけない。該新たなビデオシーケンスの内容は、更なるランダム性を備え、多様化を示す。

本開示に係る技術用語は、以下のように説明される。

１）マスタ動作シーケンス（マスタシーケンスと簡略に称する）は、仮想のキャラクタのアイドル状態における動作ビデオシーケンスである。図３は、本開示の実施形態のマスタシーケンスの概略図であり、図３に示すように、マスタ動作シーケンス全体において、仮想のキャラクタは基本的に１つの姿勢を保ち、わずかな動作しか伴わない。

２）スレーブ動作シーケンス（スレーブシーケンスと簡略に称する）は、マスタシーケンスとマッチングするシーケンスである。図４は、本開示の実施形態のスレーブシーケンスの概略図であり、図４に示すように、該スレーブシーケンスにおいて、仮想のキャラクタはマスタ動作シーケンスにおける姿勢から始まり、大きな動作（例えば、手を振る、左右に手を伸ばすなど）を行い、その後手を元の位置に戻し、マスタシーケンスの姿勢に戻る。

３）逆方向フレームは、図２に示すように、三角形により標識されたフレーム「Ｎ０」であり、逆方向フレームとして逆方向再生を行うことができる。該フレームにおいて順方向再生を行うこともでき、ここで、該フレームは逆方向フレームとして逆方向再生の機能を備えることを示していることを理解すべきである。

４）ジャンプフレームは、マスタシーケンスの任意の１フレームであってもよく、また、スレーブシーケンスの開始フレーム（第１フレーム）と終了フレーム（最後のフレーム）であってもよく、ジャンプフレームは、異なる動作シーケンス間のジャンプ再生を実現するために用いられる。

５）遷移フレームは、２つの異なるシーケンスのジャンプフレーム間で、補間アルゴリズム又はニューラルネットワークモデルにより生成された補間フレームである。

本開示の実施形態に基づいて、ビデオシーケンス編成方法を提供し、図５は、本開示の実施形態によるビデオシーケンス編成方法のフロー概略図であり、該方法は、ビデオシーケンス編成装置に応用することができる。例えば、該装置は、端末、サーバ、又は他の処理装置に配置される場合、ビデオフレームの抽出、ビデオフレームのランダム混合配列などを実行することができる。ここで、端末は、ユーザデバイス（ＵＥ、Ｕｓｅｒ Ｅｑｕｉｐｍｅｎｔ）、携帯デバイス、携帯電話、コードレス電話、パーソナルデジタルアシスタント（ＰＤＡ、Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、ハンドヘルドデバイス、コンピューティングデバイス、車載デバイス、ウェアラブルデバイスなどであってもよい。いくつかの可能な実施形態において、該方法はさらに、プロセッサがメモリに記憶されたコンピュータ可読命令をコールすることにより実現されてもよい。図５に示されるように、以下のステップＳ１０１、Ｓ１０２、Ｓ１０３を含む。

Ｓ１０１において、人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得する。

Ｓ１０２において、前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出する。

Ｓ１０３において、前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとする。

Ｓ１０１～Ｓ１０３に基づく例において、第１ビデオシーケンスを構成するマスタ動作シーケンス（マスタシーケンスと簡略に称する）及び受動シーケンス（スレーブシーケンスと簡略に称する）に対して、ランダム混合配列処理を加えることができるため、整列標識フレーム（逆方向フレーム、ジャンプフレーム、及び遷移フレームなど）に基づき、該マスタシーケンス及び該スレーブシーケンスにおけるビデオフレームをランダム混合配列処理することができる、即ち、前記ビデオフレームの再生順序の切り替え、又は複数のシーケンス間の切り替え（例えば、少なくとも２つのマスタシーケンス間の切り替え、少なくとも２つのマスタシーケンスとスレーブシーケンス間の切り替えなど）であり、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとする。該第２ビデオシーケンスの長さ、ビデオフレームの編成は、任意の短時間の第１ビデオシーケンスに基づき生成されることができるため、この例を用いて、任意の時間の長さ、任意の再生順序の複数のビデオシーケンスの整列組み合わせを得ることができ、即ち、第２ビデオシーケンスは、第１ビデオシーケンスの固定の長さに限定されず、例えば、再生時間が３０分間である第１ビデオシーケンスは、ニーズに応じて６０分間又はそれより長い再生時間の第２ビデオシーケンスを生成することができる。第２ビデオシーケンスは、第１ビデオシーケンスの順方向再生又は逆方向再生順序に制限されず、さらに第１ビデオシーケンスの各シーケンス（マスタシーケンス及びスレーブシーケンス）、又はあるシーケンスのビデオフレーム間でジャンプ又は遷移を行うことができ、ニーズに応じて、更なるビデオフレームがランダム混合配列された第２ビデオシーケンスを生成することができ、ビデオフレームの編成のランダム性を増やす。

本開示により、人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得することができる。前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出し、前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理することができる。例えば、逆方向フレームに基づいてビデオフレームの逆方向再生を行う、ジャンプフレームに基づいて１つのシーケンスから別の異なるシーケンスへ切り替える、ジャンプフレームに基づいて他の異なるシーケンスへの切り替えをトリガする、さらに遷移フレームに基づいてシーケンスにおける具体的なフレームにさらに切り替えることができるため、ランダム混合配列処理により得られたこれらの任意の整列組み合わせを第２ビデオシーケンスとし、ビデオフレームのランダム性を増やし、ビデオ編成の多様化を向上することができ、かつビデオの長さは、ユーザーのニーズに応じて編成することができ、長さは制限されない。

本開示は、ライブ配信、ショートビデオ、オンライントレーニングなどのシーンにおいて、仮想のキャラクタ（２Ｄ又は３Ｄ）を用いて実際のキャラクタの代わりにする又はシミュレートするシーンに限定せず、限られた数のビデオシーケンスをより豊富で多様なビデオシーケンスに組み合わせる様々な応用シーンに適応することができる。

図６は、本開示の実施形態による２Ｄデジタルの人体のビデオ画面を生成する概略図であり、本開示のランダム混合配列により得られた第２ビデオシーケンスを、仮想のキャラクタ（２Ｄデジタルの人体など）により生成したシーンに応用し、入力された音声に基づいて２Ｄデジタルの人体の顔部位を得ることができ、該第２ビデオシーケンスを原版ビデオとし、２Ｄデジタルの人体の顔部位を該原版ビデオにおける顔部位を除く他の部分動作と総合し、該２Ｄデジタル人体を含むビデオ画像を得ることにより、２Ｄデジタルの人体のリアリティを高め、より自然で実際の人間に近づく。具体的には以下を含む。

一、ディープラーニング技術を通して、音声（例えば、音声合成技術ＴＴＳにより生成する）をニューラルネットワークモデル（例えば、顔生成モデル）に入力することで、２Ｄ顔（顔部位を含む）を生成し、該２Ｄ顔は、内容（例えば、リズム、意味等）において入力した音声と一致する顔画像（口型及び表情を含む）である。

ここで、２Ｄデジタルの人体のイメージは、自ら定義して設計（即ち仮想のキャラクタ）してもよく、実際の人物Ａからでもよく、該人物Ａに対して、音声内容を話すビデオ画面を生成し、画面における人物Ａの、本人が実際に話しているのではない、発言の画面をコントロールすることができ、音声（リズム、語義の内容）と顔の動作（口型動作、表情動作を含む）との一致性をはかることができる。

入力された音声が人物Ａの実際の音声からではない場合、音声収集方法は、１）音声合成技術（ＴＴＳ）により生成された、人物Ａの発言に近い音声、２）別の人物Ｂの音声、３）ＴＴＳにより生成された別の音声（必ずしも実際の人物に対応するものではなく、アニメーションの吹き替えなどであってもよい）を含むことができる。

二、該２Ｄ顔と身体の他の部分とをマッチングするプロセスにおいて、既存の原版ビデオから抽出することができる。原版ビデオの場合、上述の第２ビデオシーケンス（即ち、第１ビデオシーケンスが上述のビデオ編成を経て得た第２ビデオシーケンスであり、それを該原版ビデオとする。）を読み取り、該第２ビデオシーケンスに基づいて該原版ビデオを得、該原版ビデオの各フレームに対して復号し、複数の原版フレームを得、各原版フレームに対して処理を行った後に２つの情報を出力することができる。

ここで、１つ目の情報は、切り取られた顔部位（即ち、該顔生成モデルを入力して得た２Ｄ顔）である。２つ目の情報は、各原版フレームの顔部位に対してマスク処理を行った後、得られたマスクカバー原版フレームである。最終的に、生成された該２Ｄ顔を、該マスクカバー原版フレームとアライメント、融合した後、出力ビデオフレームへとつなぎ合わせることで、直接再生表示を行う、又は圧縮符号化した後、直接ネットワーク上にアップロードし再生を行う。ニーズに応じて生成される第２ビデオシーケンスがビデオフレームの長さの無制限及び編成のランダム性を増やしたため、該第２ビデオシーケンスに基づいて得られた該原版ビデオは、長さ及びビデオ編成においてさらにランダムであり、生成した２Ｄデジタル人体はさらに自然となり、実際の人間に近づくことができ、２Ｄデジタル人体の柔軟性、動作の豊富度及び制御性も大幅に向上する。

上述の２Ｄデジタルの人体は、
１）ニュース報道、オーディオ読み上げ、ビデオライブ配信のための仮想キャスター、
２）カスタマーサービスに用いられるデジタルアシスタント、
３）教育トレーニングに用いられる仮想教師などを含むがこれらに限定されない様々な応用シナリオに適用することができる。

上述の２Ｄデジタルの人体の訓練が完了し、オンラインにデプロイした後、上述の応用シーンに応用され、顔の動作は顔生成モデルを通して音声信号から生成されるため、顔以外の身体部分の動作は予め録画された原版ビデオから得られる。デジタル人体表示の全てのプロセスにおいて、原版ビデオからフレームごとに抽出し、該フレームを基に入力音声に対応する２Ｄ顔を生成するため、原版ビデオ編成の優劣が２Ｄデジタルの人体全体のイメージ、動作のリアリティ、多様化を決定する。

原版ビデオの長さ及び内容は、一般的に訓練素材を録画すると同時に録画され、訓練完了後に変更することは困難である。長時間表示を必要とするデジタル人体に対して、長時間の連続再生可能な原版ビデオが必要だが、具体的な応用において、どのくらいの時間の原版ビデオであれば十分であるかを判断することは困難である。同時に、連続原版ビデオにおける動作も、幅の比較的小さい身体動作である場合のみ、音声内容と動作画面とに大きな違和感が生じる（例えば、製品を紹介するときに「手を振ってさよならをする」動作を行う）ことを避けることができる。ビデオ録画後の再生時にビデオ内の動作のタイミングの一致性を保証するため、フレーム間の前後順序を乱さず、時間順序に従って順方向再生又は逆方向再生しなければならないため、２Ｄデジタルの人体の原版フレームの読み取り順序（又は再生順序と称する）は、図１に示すような単方向の順序再生又は図２に示すような双方向ループ再生のいずれを用いても自然ではなく、モードが単一である。

ここで、単方向順序再生は、原版フレーム自体が録画されたときの時間軸方向に基づいて、第１フレームから最後のフレームまで再生し、終了する。このため、長時間の表示を行う場合は、長時間の原版ビデオを録画する必要があり、例えば、３０分再生する場合、３０分の原版ビデオを予め録画する必要があり、録画した原版ビデオの長さが３０分未満であれば、３０分の再生表示を完了することはできない。しかし本開示では、第１ビデオシーケンスに対して上述のビデオ編成を経て第２ビデオシーケンスを得、該第２ビデオフレームを該原版ビデオとし、整列標識フレーム（逆方向フレーム、ジャンプフレーム及び遷移フレーム等）に基づいてランダム混合配列を行うことができるため、短時間の連続する原版ビデオを利用して任意の時間の長さの原版ビデオを生成することができるため、時間の長さの制限を受けない。

双方向ループ再生は、原版フレームの第１フレームから最後のフレーム（Ｎ０フレーム）まで順方向再生を行った後、逆方向再生を行う（三角形は、最後のフレームが逆方向フレームであることを示す）。順方向及び逆方向から構成される双方向ループ再生は、任意の時間の長さの原版フレームを生成することができる。ただし、生成された２Ｄデジタルの人体の「単調で、非現実的」な感想を深める「ループ反復」的な再生モードにユーザーが気づかないようにするため、原版フレームの時間の長さも十分に長くする必要がある。このため、このような「ループ再生」の感覚がある編成再生モードを打破し、「ランダムで自然」な感覚をもたらす必要がある。しかし本開示において、ランダム混合配列を通して任意の時間の長さの原版ビデオを生成するだけでなく、ランダム信号を利用して特定の時刻にて対応する比較的大きな動作幅のビデオ画面をトリガするため、２つ又は複数の連続しない原版ビデオ（マスタシーケンス及び／又はスレーブシーケンス）間で切り替え編成を行う。

１つの実施形態において、前記逆方向フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームの再生順序を調整すること、をさらに含み、ここで、前記逆方向フレームは、前記第１ビデオシーケンスにおける開始フレーム（例えば、第１フレーム）を除いた他のビデオフレームを含む。本実施形態により、逆方向フレームに基づいて再生順序を調整でき、該逆方向フレームに基づいて新たな順序の組み合わせを得ることで、短時間で連続する第１ビデオシーケンスを利用して任意の時間の長さの第２ビデオシーケンスを生成することを実現する。

１つの実施形態において、前記ジャンプフレーム及び／又は遷移フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームを接続することをさらに含み、ここで、前記第１ビデオシーケンスが前記マスタシーケンスを含む場合、前記ジャンプフレームは前記マスタシーケンスにおける任意のビデオフレームであり、前記第１ビデオシーケンスが前記スレーブシーケンスを含む場合、前記ジャンプフレームは前記スレーブシーケンスの開始フレーム（例えば、第１フレーム）及び終了フレーム（例えば、最後のフレーム）である。前記第１ビデオシーケンスに異なるマスタシーケンス及び／又は異なるスレーブシーケンスが含まれる場合、前記遷移フレームは、前記異なるマスタシーケンス及び／又は前記異なるスレーブシーケンス間で切り替えられる少なくとも１つの前記ジャンプフレームに基づいて得られた補間フレームである。本実施形態により、マスタシーケンス及びスレーブシーケンスにおけるジャンプフレームに基づいて、異なるシーケンス（マスタシーケンスと他のマスタシーケンス間の切り替え、マスタシーケンスとスレーブシーケンス間の切り替え、スレーブシーケンスと他のスレーブシーケンス間の切り替えなど）間の正確な切り替えを行い、さらにジャンプフレームを遷移フレームと総合し、具体的なフレームに切り替えるより正確な切り替え効果を得ることができる。

１つの実施形態において、前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることは、前記第１ビデオシーケンスにおける前記ビデオフレームを順方向再生することと、前記整列標識フレームは前記逆方向フレームであると検出した場合、第１ランダム信号に基づいて、前記ビデオフレームの逆方向再生を行うことと、前記ビデオフレームの順方向再生及び逆方向再生に基づいて得られた整列組み合わせを前記第２ビデオシーケンスとすることと、を含む。

１つの例において、該第１ビデオシーケンスとするマスタシーケンス及び／又はスレーブシーケンスを取得することができる。ここで、マスタシーケンスにおいて、開始フレーム（例えば、第１フレーム）を除いた他のビデオフレームは、いずれも逆方向フレームとすることができる。スレーブシーケンスにおいて、開始フレーム（例えば、第１フレーム）を除いた他のビデオフレームも、いずれも逆方向フレームとすることができる。

本実施形態は、２Ｄデジタルの人体生成シーンに応用することができ、ビデオシーケンス編成を行うプロセスにおいて、第１フレームから開始して順方向の順序で該第１ビデオシーケンス（例えば、マスタシーケンス及び／又はスレーブシーケンスから構成されるビデオシーケンス）を再生することができ、該第１ビデオシーケンスの中間のあるフレームまで再生した場合、第１ランダム信号が受信された場合、第１ランダム信号（順方向再生又は逆方向再生をトリガする）を受信したとき、該第１ランダム信号に呼応し、第１ランダム信号が順方向再生をトリガする場合、引き続き該中間フレームから順方向再生をトリガする。第１ランダム信号が逆方向再生をトリガするために用いられる場合、第１ビデオシーケンスにおいて存在する整列標識フレームは逆方向フレームであり、該逆方向フレームまで再生された後に逆方向再生を実行する、又は、該中間フレームは逆方向フレームであり、該中間フレームから逆方向再生を実行する。前記ビデオフレームの順方向再生及び逆方向再生に基づいて得られた整列組み合わせを上述の第２ビデオシーケンスとする。

この例を用いると、上述の逆方向フレームに基づくランダム方策を導入することにより、比較的短い第１ビデオシーケンスを利用して、任意の時間の長さの再生シーケンスを生成することができ、同時に、シーケンス順序の組み合わせのランダム性をある程度高める。２Ｄデジタルの人体生成シーンを例にすると、第１ビデオシーケンスは即ち原版ビデオであり、原版ビデオの顔部位にマスクを追加することでカバーし、マスクカバー原版フレームを得、生成したターゲット顔（音声をニューラルネットワークモデルに入力することで得られた２Ｄ顔画像であり、該２Ｄ顔画像が含む口型及び表情は、入力した音声とリズム、意味等の内容においてマッチングする）と、該マスクカバーの原版フレームとをアライメント、融合した後、出力ビデオフレームへとつなぎ合わせることで、直接再生を行う、又はネットワークにアップロードして再生を行うことができる。原版ビデオの長さ及びビデオ編成がよりランダムとなるため、生成された２Ｄデジタルの人体はより自然となる。

１つの実施形態において、前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることは、前記第１ビデオシーケンスにおける第１マスタシーケンスを取得することと、前記第１マスタシーケンスの前記整列標識フレームは前記ジャンプフレームであると検出した場合、第２ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスを除いた他のマスタシーケンスに切り替えることと、前記第１マスタシーケンス及び前記他のマスタシーケンスに基づいて得られた整列組み合わせを、前記第２ビデオシーケンスとすることと、を含む。

１つの例において、マスタシーケンスとマスタシーケンス間の切り替えは、第１ビデオシーケンスにおける第１マスタシーケンスをまず読み取ることができ、第１マスタシーケンスのあるジャンプフレームが読み込まれたとき、第２ランダム信号（該他のマスタシーケンスへのジャンプ再生をトリガする）を受信し、第２ランダム信号に呼応し、第２ランダム信号が他のマスタシーケンスへのジャンプ再生をトリガするために用いられる場合、該他のマスタシーケンス（該他のマスタシーケンスは、１つ又は複数であってもよい）にジャンプし、該ジャンプフレームに基づいて新しいシーケンス順序の組み合わせを得るまでループして反復する。

１つの実施形態において、２つのマスタシーケンスである場合、前記他のマスタシーケンスが１つの第２マスタシーケンスである場合、前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第３ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスに切り替えることをさらに含む。本実施形態により、ジャンプフレームに基づいて２つのマスタシーケンス間で切り替えを実行し、より多くのシーケンスの順序の組み合わせを得ることができ、正確な切り替えを実現することができる。

１つの実施形態において、複数のマスタシーケンスである場合、他のマスタシーケンスが、第２マスタシーケンス、第３のシーケンス、…第ｉシーケンスのような複数のマスタシーケンスである場合、前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第４ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいて対応するシーケンスに切り替えることと、前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行うこと、又は、前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行った後、前記第１マスタシーケンスに切り替えることと、をさらに含み、ｉは３より大きい正の整数である。本実施形態により、ジャンプフレームに基づいて複数のマスタシーケンス間の切り替えを実行し、より多くのシーケンスの順序の組み合わせを得ることができ、正確な切り替えを実現することができる。

１つの実施形態において、前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることは、前記第１ビデオシーケンスにおける第１マスタシーケンス及び第１スレーブシーケンスを取得することと、前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第５ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１スレーブシーケンスに切り替えることと、第１スレーブシーケンスの終了フレームが再生されるまで、前記第１スレーブシーケンスにおけるビデオフレームを順方向再生することと、前記終了フレームをジャンプフレームとし、かつ前記第１マスタシーケンスに切り替えること、又は前記終了フレームをジャンプフレームとし、前記整列標識フレームが前記遷移フレームであることと総合して、前記ジャンプフレームに基づいて、ジャンプ再生をトリガした後、前記遷移フレームに基づいて、前記第１マスタシーケンスにおける指における指定フレームに切り替えることと、を含む。

１つの例において、第１ビデオシーケンスにおける第１マスタシーケンスをまず読み取り、第１マスタシーケンスのあるジャンプフレームが読み取られたとき、第５ランダム信号（スレーブシーケンスへのジャンプ再生をトリガする）を受信することができ、該第５ランダム信号に呼応し、第５ランダム信号がスレーブシーケンスへのジャンプ再生をトリガするために用いられる場合、１つ又は複数のスレーブシーケンスにジャンプする。該ジャンプフレームに基づいて新たなシーケンスの順序の組み合わせを得るまで、ループし反復する。ここで、スレーブシーケンスにおいて、第１フレームと最後のフレームのみをジャンプフレームとすることができ、スレーブシーケンスの再生は順方向再生であることができ、中断され得ない。

上述の例は、マスタシーケンスからスレーブシーケンスへの切り替えであり、スレーブシーケンスからマスタシーケンスへの切り替えであってもよいため、ここでは繰り返し言及しない。

１つの実施形態において、マスタシーケンスとスレーブシーケンス間の切り替えで、前記第１マスタシーケンスは、１つ又は複数であり、第１スレーブシーケンスは、１つ又は複数である。前記第１マスタシーケンス及び第１スレーブシーケンス間の、異なるシーケンスの１マスタ１スレーブ編成再生モード、異なるシーケンスの１マスタ多スレーブ編成再生モード及び異なるシーケンスの多マスタ多スレーブ編成再生モードの少なくとも１つのモードに基づいて前記ジャンプ再生を行うことができる。本実施形態により、複数の編成再生モード（「１マスタ１スレーブ」、「１マスタ多スレーブ」及び「多マスタ多スレーブ」）及びジャンプフレームを用いて異なるシーケンス間の切り替えを行い、より多くのシーケンスの順序の組み合わせを得ることができ、正確な切り替えを実現することができる。

応用例
本開示の実施形態を応用した処理フローは、以下の内容を含む。

一、短時間の連続した原版ビデオを利用して任意の時間の長さの原版ビデオを生成する

図７は、本開示の実施形態による原版ビデオシーケンスの編成再生の概略図であり、図７に示すように、編成再生は、図２に示すような双方向ループ再生において行うことができ、逆方向フレームをさらに増やし、第１フレームを除いたすべてのフレームを逆方向フレームとすることができ、２Ｄデジタルの人体生成プロセスにおいて、図７に示すような編成再生モード（即ち、各フレームが必要に応じて、又はランダムに順方向再生か逆方向再生かを決定することができる）に基づいて、第１フレームから順序再生し、中間のあるフレーム、例えば第１０フレームまで再生されたとき、続いて順方向再生を行うか逆方向再生を行うかをランダムに判定することができる。このようなランダム方策を導入することにより、比較的短い原版ビデオを利用して任意の時間の長さの再生シーケンスを生成することができ、同時に、シーケンスの順序の組み合わせのランダム性をある程度高めることができる。

二、２つ又は複数の連続しない原版ビデオ間で切り替え編成を行う

１、２つのマスタシーケンス間の編成再生

図８は、本開示の実施形態による２つの原版ビデオマスタシーケンスの編成再生の概略図であり、図８に示すように、原版シーケンス再生時のランダム性を豊かにするため、２つのマスタシーケンスを用いることができ、各マスタシーケンスは図７に示すような編成再生モード（各フレームは必要に応じて又はランダムに順方向再生か逆方向再生かを決定することができる）をサポートし、さらに、２つのマスタシーケンス間は、ジャンプフレームと遷移フレームとにより相互間の切り替えを実現することができる。各マスタシーケンスの各フレームは、いずれもジャンプフレームとすることができ、実際の応用のニーズに基づいて、数フレームごと（図８では３フレームごと）に１つのジャンプフレームを設定することができ、又は、ジャンプフレーム間の間隔を自ら定義することができる。

上述の２つのマスタシーケンス間の編成再生は、以下を含む。

１）２Ｄデジタルの人体を生成するとき、マスタシーケンス＃１をまず読み取り、読み取り順序は図７に示す編成再生を参照し、あるジャンプフレームを読み取ると、ランダムトリガ又は外部信号トリガを通して、マスタシーケンス＃２にジャンプするか否かを決定することができる

２）マスタシーケンス＃２にジャンプした後も、編成再生を用いて読み取りを行い、ランダムトリガ又は外部信号トリガによりマスタシーケンス＃１にジャンプするか否かを決定する。

３）このようにループし反復することにより、２つのマスタシーケンスを利用してより豊かな再生順序を生成することができる。

２、複数のマスタシーケンス間の編成再生

図９は、本開示の実施形態による３つの原版ビデオマスタシーケンスの編成再生の概略図であり、図９に示すように、上述の図８に示される２つのマスタシーケンス間の編成再生を基に、少なくともより多くのマスタシーケンスを増やすことができ、３つ（図９に示すように）又はそれ以上のマスタシーケンス間の編成再生とする。

複数のマスタシーケンス間の編成再生は、以下を含む。

１）２Ｄデジタルの人体を生成するとき、マスタシーケンス＃１をまず読み取り、読み取り順序は図７に示す編成再生を参照し、あるジャンプフレームを読み取ると、ランダムトリガ又は外部信号トリガを通して、マスタシーケンス＃２又はマスタシーケンス＃３又は他のマスタシーケンスにジャンプするか否かを決定することができる。

２）マスタシーケンス＃２にジャンプすると仮定すると、マスタシーケンス＃２に対しても編成再生を用いて読み取り、その後ランダムトリガ又は外部信号トリガによりマスタシーケンス＃１又はマスタシーケンス＃３又は他のマスタシーケンスにジャンプするか否かを決定する。

３）このようにループし反復し、複数のマスタシーケンスを利用してより豊かな再生順序を生成することができる。

マスタシーケンス２とマスタシーケンス３の間にも上述と同様のジャンプ再生が存在する（例えば、図９に示すように）、簡潔にするため、図９ではマスタシーケンス２とマスタシーケンス３の間のジャンプ再生は図示されていないことを留意すべきである。

３、「１マスタ１スレーブ」シーケンス間の編成再生

マスタシーケンスの各フレームはいずれもジャンプフレームとすることができるが、スレーブシーケンスは第１フレームと最後のフレームのみ、ジャンプフレームとすることができ、より良い切り替えのために、スレーブシーケンスの再生は順方向再生のみであり、中断されないように設定することができる。

図１０は、本開示の実施形態による１マスタ１スレーブシーケンス間の編成再生の概略図であり、図１０に示すように、「１マスタ１スレーブ」の２つのシーケンス間の編成再生は、以下を含む。

１）２Ｄデジタル人体を生成するとき、マスタシーケンスをまず読み取り、読み取り順序は図７に示す編成再生を参照し、あるジャンプフレームを読み取ると、ランダムトリガ又は外部信号トリガを通してスレーブシーケンスにジャンプするか否かを決定することができる。

２）スレーブシーケンスにジャンプしたと仮定すると、最後のフレームを再生するまで。スレーブシーケンスに対して順方向順序再生を用いて読み取り、遷移フレームに基づいてマスタシーケンスのあるジャンプフレームに切り替える。

３）マスタシーケンスに戻った後、ステップ１）を実行することで、ループ反復し、「１マスタ１スレーブ」の２つのシーケンスを利用してより豊かな再生順序を生成することができる。

４、「１マスタ多スレーブ」シーケンス間の編成再生

図１１は、本本開示の実施形態による１マスタ多スレーブシーケンス間の編成再生の概略図であり、図１１に示すように、図１０に示される「１マスタ１スレーブ」の編成再生を基に、より多くのスレーブシーケンスを増やし、「１マスタ多スレーブ」シーケンス間の編成再生を完了することができる。「１マスタ多スレーブ」の２つのシーケンス間の編成再生は、以下を含む。

１）２Ｄデジタルの人体を生成するとき、マスタシーケンスをまず読み取り、読み取り順序は図７に示す編成再生を参照し、あるジャンプフレームを読み取ると、ランダムトリガ又は外部信号トリガを通して、スレーブシーケンス＃１、スレーブシーケンス＃２、又は他のスレーブシーケンスにジャンプするか否かを決定することができる。

２）スレーブシーケンス＃１にジャンプしたと仮定すると、最後のフレームを再生するまで、スレーブシーケンスに対して順方向順序再生を用いて読み取り、遷移フレームに基づいてマスタシーケンスのあるジャンプフレームに切り替える。

３）マスタシーケンスに戻った後、さらに第１）ステップを実行することで、ループ反復し、「１マスタ多スレーブ」方式を利用してマスタシーケンスからより大きな幅の動作へのジャンプ再生を実現し、動作の編成コントロールを実現することができる。

マスタシーケンスと２つのスレーブシーケンスの間は、ジャンプフレームと遷移フレームを通して連結して再生することができ、２つのスレーブシーケンス間はジャンプ再生を行うことはできないことに留意すべきである。

５、「多マスタ多スレーブ」シーケンス間の編成再生

図１１に示す「１マスタ多スレーブ」シーケンス再生に、マスタシーケンス＃２、マスタシーケンス＃３などを増やし、「多マスタ多スレーブ」シーケンス間の編成再生を構成することができ、マスタシーケンスとマスタシーケンスの間の切り替え（図８を参照）、マスタシーケンスとスレーブシーケンスの間の切り替え（図１０を参照）は、いずれもジャンプフレームと遷移フレームを通して連結して再生することができ、より豊かな再生順序及び動作編成コントロールを実現することができる。全体的なジャンプ関係は複雑であり、ここでは概略図を示さない。

三、２つの連続しないビデオ間のジャンプにより、２つの連続しないビデオ間のジャンプに必要な遷移フレームを生成する。

図１２は、本開示の実施形態による遷移フレームを生成する概略図であり、図１２に示すように、ディープラーニングアルゴリズムにより得られた訓練後モデル（オプティカルフロー補間モデル）に基づいて該遷移フレーム生成することができることは、以下を含む。

１）原版データ又はより多くのビデオデータを利用してダウンサンプリング抽出フレームを通して訓練データ及び目標オプティカルフローデータを作成することにより、オプティカルフロー補間モデルを訓練する。

２）異なる動作シーケンスからの２つのジャンプフレームを訓練されたオプティカルフロー補間モデルに入力し、補間オプティカルフローシーケンスを生成する。

３）２つのジャンプフレームと生成した補間オプティカルフローシーケンスとを共に画像合成モジュールに入力し、最終的に補間画像シーケンス（即ち、該２つのジャンプフレーム間の遷移フレーム）を生成する。

本開示の実施形態によれば、ビデオシーケンス編成装置を提供し、図１３は、本開示の実施形態によるビデオシーケンス編成装置の構成構造概略図であり、図１３に示すように、人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得するためのビデオ取得モジュール４１と、前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出するためのビデオ抽出モジュール４２と、前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとするためのビデオ編成モジュール４３と、を備える。

１つの実施形態において、前記逆方向フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームの再生順序を調整するための再生順序調整モジュールをさらに備え、ここで、前記逆方向フレームは、前記第１ビデオシーケンスにおける開始フレームを除いた他のビデオフレームを含む。

１つの実施形態において、前記ジャンプフレーム及び／又は遷移フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームを接続するためのビデオフレーム接続モジュールをさらに備える。ここで、前記第１ビデオシーケンスが前記マスタシーケンスを含む場合、前記ジャンプフレームは前記マスタシーケンスにおける任意のビデオフレームである。前記第１ビデオシーケンスが前記スレーブシーケンスを含む場合、前記ジャンプフレームは前記スレーブシーケンスの開始フレーム及び終了フレームである。前記第１ビデオシーケンスに異なるマスタシーケンス及び／又は異なるスレーブシーケンスが含まれる場合、前記遷移フレームは、前記異なるマスタシーケンス及び／又は前記異なるスレーブシーケンス間で切り替えられる少なくとも１つの前記ジャンプフレームに基づいて得られた補間フレームである。

１つの実施形態において、前記ビデオ編成モジュールは、前記第１ビデオシーケンスにおける前記ビデオフレームを順方向再生することと、前記整列標識フレームが前記逆方向フレームであると検出した場合、第１ランダム信号に基づいて、前記ビデオフレームの逆方向再生を行うことと、前記ビデオフレームの順方向再生及び逆方向再生に基づいて得られた整列組み合わせを前記第２ビデオシーケンスとすることと、に用いられる。

１つの実施形態において、前記ビデオ編成モジュールは、前記第１ビデオシーケンスにおける第１マスタシーケンスを取得することと、前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第２ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスを除いた他のマスタシーケンスに切り替えることと、前記第１マスタシーケンス及び前記他のマスタシーケンスに基づいて得られた整列組み合わせを、前記第２ビデオシーケンスとすることとに用いられる。

１つの実施形態において、前記ビデオ編成モジュールは、前記他のマスタシーケンスが第２マスタシーケンスである場合、前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第３ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスに切り替えることにさらに用いられる。

１つの実施形態において、前記ビデオ編成モジュールは、前記他のマスタシーケンスが第２マスタシーケンス、第３シーケンス、・・・及び第ｉシーケンスである場合、前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第４ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいて対応するシーケンスに切り替えることと、前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行うこと、又は、前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行った後、前記第１マスタシーケンスに切り替えることと、にさらに用いられる。ここで、ｉは３より大きい正の整数である。

１つの実施形態において、前記ビデオ編成モジュールは、前記第１ビデオシーケンスにおける第１マスタシーケンス及び第１スレーブシーケンスを取得することと、前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第５ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１スレーブシーケンスに切り替えることと、第１スレーブシーケンスの終了フレームが再生されるまで、前記第１スレーブシーケンスにおけるビデオフレームを順方向再生することと、前記終了フレームをジャンプフレームとし、かつ前記第１マスタシーケンスに切り替えること、又は前記終了フレームをジャンプフレームとし、前記整列標識フレームが前記遷移フレームであることと総合して、前記ジャンプフレームに基づいて、ジャンプ再生をトリガした後、前記遷移フレームに基づいて、前記第１マスタシーケンスにおける指における指定フレームに切り替えることと、に用いられる。

１つの実施形態において、前記第１マスタシーケンスは、１つ又は複数であり、第１スレーブシーケンスは、１つ又は複数である。前記ビデオ編成モジュールは、前記第１マスタシーケンス及び第１スレーブシーケンス間の、異なるシーケンスの１マスタ１スレーブ編成再生モード、異なるシーケンスの１マスタ多スレーブ編成再生モード及び異なるシーケンスの多マスタ多スレーブ編成再生モードの少なくとも１つのモードに基づいて、前記ジャンプ再生を行うことにさらに用いられる。

本開示の実施形態に係る装置における各モジュールの機能は、上述の方法において対応する記述を参照することができ、ここでは繰り返し言及しない。

本開示の実施形態によれば、本開示の実施形態は、電子設備、可読記憶媒体及びプログラムをさらに提供する。

図１４は、本開示の実施例によるビデオシーケンス編成方法を実現するための電子設備のブロック図である。電子設備は、各形式のデジタルコンピュータを指し、例えば、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、大型コンピュータ、及びその他の適合するコンピュータが挙げられる。電子設備は、各形式の移動装置をさらに指し、例えば、パーソナルデジタルアシスタント、セルラー電話、スマートフォン、ウェアラブルデバイス、及びその他の類似のコンピュータ装置が挙げられる。本開示に記載されているコンポーネント、それらの接続関係、及び機能は例示的なものに過ぎず、本開示に記載・特定されているものの実現を限定するわけではない。

図１４に示すように、設備８００は、リードオンリーメモリ（ＲＯＭ）８０２に記憶されたコンピュータプログラム命令、又は記憶ユニット８０８からランダムアクセスメモリ（ＲＡＭ）８０３にローディングされたコンピュータプログラム命令に基づいて、各種の適切な動作と処理を実行できる計算ユニット８０１を含む。ＲＡＭ８０３には、設備８００の動作に必要な各種のプログラム及びデータをさらに記憶することができる。計算ユニット８０１と、ＲＯＭ８０２と、ＲＡＭ８０３とは、バス８０４を介して互いに接続されている。入力／出力（Ｉ／Ｏ）インタフェース８０５もバス８０４に接続されている。

設備８００における複数のコンポーネントは、Ｉ／Ｏインタフェース８０５に接続されており、その複数のコンポーネントは、キーボードやマウスなどの入力ユニット８０６と、種々なディスプレイやスピーカなどの出力ユニット８０７と、磁気ディスクや光学ディスクなどの記憶ユニット８０８と、ネットワークカード、モデム、無線通信トランシーバーなどの通信ユニット８０９と、を備える。通信ユニット８０９は、設備８００がインターネットのようなコンピュータネット及び／又は種々なキャリアネットワークを介して他の設備と情報／データを交換することを許可する。

計算ユニット８０１は、処理及び計算能力を有する様々な汎用及び／又は専用の処理コンポーネントであってもよい。計算ユニット８０１のいくつかの例としては、中央処理装置（ＣＰＵ）、グラフィックス処理ユニット（ＧＰＵ）、様々な専用の人工知能（ＡＩ）計算チップ、様々な機械学習モデルアルゴリズムを実行する計算ユニット、デジタル信号プロセッサ（ＤＳＰ）、及び任意の適切なプロセッサ、コントローラ、マイクロコントローラなどを備えるが、これらに限定されない。計算ユニット８０１は、上述で説明された各方法及び処理、例えば融合順序付けモデルの訓練方法、検索の順序付け方法を実行する。例えば、いくつかの実施例では、融合順序付けモデルの訓練方法又は検索の順序付け方法を、記憶ユニット８０８のような機械読み取り可能な媒体に有形的に含まれるコンピュータソフトウエアプログラムとして実現することができる。一部の実施例では、コンピュータプログラムの一部又は全ては、ＲＯＭ８０２及び／又は通信ユニット８０９を介して、設備８００にロード及び／又はインストールすることができる。コンピュータプログラムがＲＡＭ８０３にロードされて計算ユニット８０１によって実行される場合に、前述したビデオシーケンス編成方法の一つ又は複数のステップを実行することができる。追加可能に、他の実施例では、計算ユニット８０１は、他の任意の適当な方式（例えば、ファームウェア）によりビデオシーケンス編成方法を実行するように構成することができる。

ここで記載されているシステム又は技術の各種の実施形態は、デジタル電子回路システム、集積回路システム、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、特定用途向け集積回路（ＡＳＩＣ）、特定用途向け標準品（ＡＳＳＰ）、システムオンチップ（ＳＯＣ）、コンプレックスプログラマブルロジックデバイス（ＣＰＬＤ）、コンピュータのハードウェア、ファームウェア、ソフトウェア、及び／又はこれらの組み合わせによって実現することができる。これらの各実施形態は、少なくとも１つのプログラマブルプロセッサを含むプログラマブルシステムにて実行及び／又は解釈される１つ又は複数のコンピュータプログラムにより実行することを含み得、該プログラマブルプロセッサは、ストレージシステム、少なくとも１つの入力デバイス、及び少なくとも１つの出力デバイスからデータ及び命令を受け取り、データ及び命令を該ストレージシステム、該少なくとも１つの入力デバイス、及び該少なくとも１つの出力デバイスに転送することができる専用又は汎用のプログラマブルプロセッサであってもよい。

本開示の方法を実行するためのプログラムコードは、一つ又は複数のプログラミング言語の任意の組み合わせで作成することができる。これらのプログラムコードは、汎用コンピュータ、専用コンピュータ又は他のプログラミングデータ処理装置のプロセッサ又はコントローラに提供されることにより、プログラムコードがプロセッサ又はコントローラによって実行される場合に、フローチャート及び／又はブロック図に規定された機能／動作を実行することができる。プログラムコードは、完全にマシンで実行されてもよいし、部分的にマシンで実行されてもよいし、独立したソフトパッケージとして部分的にマシンで実行されるとともに部分的にリモートマシンで実行されてもよし、又は完全にリモートマシン又はサーバで実行されてもよい。

本開示の説明において、機械読み取り可能な媒体は、有形な媒体であってもよく、命令実行システム、装置又は設備によって、又は命令実行システム、装置又は設備と合わせて使用されるプログラムを含み、又は記憶する。機械読み取り可能な媒体は、機械読み取り可能な信号媒体又は機械読み取り可能な記憶媒体であってもよい。機械読み取り可能な媒体は、電子、磁気、光学、電磁、赤外線、又は半導体システム、装置、又は設備、又は前述した内容の任意の適切な組み合わせを含むことができるがこれらに限定されない。機械読み取り可能な記憶媒体のさらなる具体例として、１つ又は複数の配線による電気的接続、ポータブルコンピュータディスクカートリッジ、ハードディスク、ランダムアクセスメモリ（ＲＡＭ）、リードオンリーメモリ（ＲＯＭ）、消去可能なプログラマブルリードオンリーメモリ（ＥＰＲＯＭ又はフラッシュメモリ）、光ファイバー、ポータブルコンパクトディスクリードオンリーメモリ（ＣＤ－ＲＯＭ）、光学記憶装置、磁気記憶装置、又は前述した内容の任意の組み合わせを含む。

ユーザーとのインタラクションを提供するために、コンピュータでここに記載されているシステム及び技術を実施することができ、当該コンピュータは、ユーザーに情報を表示するための表示装置（例えば、ＣＲＴ（陰極線管）又はＬＣＤ（液晶ディスプレイ）モニターなど）、ユーザーが入力をコンピュータに提供するためのキーボード及びポインティングデバイス（例えば、マウス又はトラックボールなど）を備えるができる。ユーザーとのインタラクションを提供するために、他の種類の装置を使用することもでき、例えば、ユーザーに提供するフィードバックは、いかなる形式のセンサーフィードバック（例えば、視覚フィードバック、聴覚フィードバック、又は触覚フィードバックなど）であってもよく、また、いかなる形式（例えば、音響入力、音声入力、触覚入力など）によって、ユーザーからの入力を受付取るができる。

ここに記載されているシステムと技術を、バックグラウンド部品に含まれる計算システム（例えば、データサーバとして）、又はミドルウェア部品を含む計算システム（例えば、アプリケーションサーバ）、又はフロント部品を含む計算システム（例えば、ＧＵＩ又はネットワークブラウザを有するユーザコンピュータが挙げられ、ユーザーがＧＵＩ又は当該ネットワークブラウザによって、ここに記載されているシステムと技術の実施形態とインタラクションすることができる）、又はこのようなバックグラウンド部品、ミドルウェア部品、又はフロント部品のいかなる組合した計算システムで実施することができる。如何なる形式又はメディアのデジタルデータ通信（例えば、通信ネットワーク）を介して、システムの部品を互いに接続することができる。通信ネットワークの例は、ローカルエリアネットワーク（ＬＡＮ）、ワイドエリアネットワーク（ＷＡＮ）及びインターネットを含む。

コンピュータシステムは、クライアントとサーバを含み得る。通常、クライアントとサーバは、互いに離れており、通信ネットワークを介してインタラクションを行うことが一般的である。対応するコンピュータで動作することで、クライアント－サーバの関係を有するコンピュータプログラムによってクライアントとサーバの関係を生み出す。

上記の様々な態様のフローを使用して、ステップを新たに順序付け、追加、又は削除することが可能であることを理解すべきである。例えば、本開示で記載された各ステップは、並列に実行しても良いし、順次に実行しても良いし、異なる順序で実行しても良い。本開示で開示された技術案が所望する結果を実現することができる限り、本開示ではこれに限定されない。

上記具体的な実施形態は、本開示の保護範囲に対する限定を構成するものではない。当業者は、設計事項やその他の要因によって、様々な修正、組み合わせ、サブ組み合わせ、及び代替が可能であることを理解するべきである。本開示の要旨及び原理原則内における変更、均等な置換及び改善等は、いずれも本開示の保護範囲に含まれるべきである。

Claims (21)

1. 人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得することと、
   前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出することと、
   前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることと、を含み、
   前記逆方向フレームは、逆方向再生の機能を備えるフレームであり、前記ジャンプフレームは、異なる動作シーケンス間のジャンプ再生を実現するために用いられるフレームであり、前記遷移フレームは、２つの異なるシーケンスのジャンプフレーム間で、補間アルゴリズム又はニューラルネットワークモデルにより生成された補間フレームである、
   ことを特徴とするビデオシーケンス編成方法。
2. 前記逆方向フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームの再生順序を調整すること、をさらに含み、
   前記逆方向フレームは、前記第１ビデオシーケンスにおける開始フレームを除いた他のビデオフレームを含む、
   ことを特徴とする請求項１に記載のビデオシーケンス編成方法。
3. 前記ジャンプフレーム及び／又は遷移フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームを接続すること、をさらに含み、
   前記第１ビデオシーケンスが前記マスタシーケンスを含む場合、前記ジャンプフレームは前記マスタシーケンスにおける任意のビデオフレームであり、
   前記第１ビデオシーケンスが前記スレーブシーケンスを含む場合、前記ジャンプフレームは前記スレーブシーケンスの開始フレーム及び終了フレームであり、
   前記第１ビデオシーケンスに異なるマスタシーケンス及び／又は異なるスレーブシーケンスが含まれる場合、前記遷移フレームは、前記異なるマスタシーケンス及び／又は前記異なるスレーブシーケンス間で切り替えられる少なくとも１つの前記ジャンプフレームに基づいて得られた補間フレームである、
   ことを特徴とする請求項１に記載のビデオシーケンス編成方法。
4. 前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることは、
   前記第１ビデオシーケンスにおける前記ビデオフレームを順方向再生することと、
   前記整列標識フレームが前記逆方向フレームであると検出した場合、第１ランダム信号に基づいて、前記ビデオフレームの逆方向再生を行うことと、
   前記ビデオフレームの順方向再生及び逆方向再生に基づいて得られた整列組み合わせを前記第２ビデオシーケンスとすることと、を含む、
   ことを特徴とする請求項１～３のいずれか１項に記載のビデオシーケンス編成方法。
5. 前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることは、
   前記第１ビデオシーケンスにおける第１マスタシーケンスを取得することと、
   前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第２ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスを除いた他のマスタシーケンスに切り替えることと、
   前記第１マスタシーケンス及び前記他のマスタシーケンスに基づいて得られた整列組み合わせを、前記第２ビデオシーケンスとすることと、を含む、
   ことを特徴とする請求項１～３のいずれか１項に記載のビデオシーケンス編成方法。
6. 前記他のマスタシーケンスが第２マスタシーケンスである場合、
   前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第３ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスに切り替えること、を含む、
   ことを特徴とする請求項５に記載のビデオシーケンス編成方法。
7. 前記他のマスタシーケンスが第２マスタシーケンス、第３シーケンス、・・・及び第ｉシーケンスである場合、
   前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第４ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいて対応するシーケンスに切り替えることと、
   前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行うこと、又は、前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行った後、前記第１マスタシーケンスに切り替えることと、を含み、
   ここで、ｉは３より大きい正の整数である、
   ことを特徴とする請求項５に記載のビデオシーケンス編成方法。
8. 前記第１ビデオシーケンスにおいて、整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとすることは、
   前記第１ビデオシーケンスにおける第１マスタシーケンス及び第１スレーブシーケンスを取得することと、
   前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第５ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１スレーブシーケンスに切り替えることと、
   第１スレーブシーケンスの終了フレームが再生されるまで、前記第１スレーブシーケンスにおけるビデオフレームを順方向再生することと、
   前記終了フレームをジャンプフレームとし、かつ前記第１マスタシーケンスに切り替えること、又は、前記終了フレームをジャンプフレームとし、前記整列標識フレームが前記遷移フレームであることと総合して、前記ジャンプフレームに基づいて、ジャンプ再生をトリガした後、前記遷移フレームに基づいて、前記第１マスタシーケンスにおける指定フレームに切り替えることと、を含む
   ことを特徴とする請求項１～３のいずれか１項に記載のビデオシーケンス編成方法。
9. 前記第１マスタシーケンスは、１つ又は複数であり、第１スレーブシーケンスは、１つ又は複数であり、
   前記第１マスタシーケンス及び第１スレーブシーケンス間の、異なるシーケンスの１マスタ１スレーブ編成再生モード、異なるシーケンスの１マスタ多スレーブ編成再生モード及び異なるシーケンスの多マスタ多スレーブ編成再生モードの少なくとも１つのモードに基づいて、前記ジャンプ再生を行う、
   ことを特徴とする請求項８に記載のビデオシーケンス編成方法。
10. 人体の第１姿勢を記述するためのマスタシーケンスと、人体の複数の第２姿勢を記述するためのスレーブシーケンスとを含む第１ビデオシーケンスを取得するビデオ取得モジュールと、
    前記第１ビデオシーケンスから前記マスタシーケンス及び前記スレーブシーケンスを抽出するビデオ抽出モジュールと、
    前記第１ビデオシーケンスにおいて、逆方向フレーム、ジャンプフレーム及び遷移フレームのうちの少なくとも１つを含む整列標識フレームが存在すると検出した場合、前記整列標識フレームに基づいて、前記マスタシーケンス及び前記スレーブシーケンスにおけるビデオフレームをランダム混合配列処理し、ランダム混合配列処理により得られた整列組み合わせを第２ビデオシーケンスとするビデオ編成モジュールと、を備え、
    前記逆方向フレームは、逆方向再生の機能を備えるフレームであり、前記ジャンプフレームは、異なる動作シーケンス間のジャンプ再生を実現するために用いられるフレームであり、前記遷移フレームは、２つの異なるシーケンスのジャンプフレーム間で、補間アルゴリズム又はニューラルネットワークモデルにより生成された補間フレームである、
    ことを特徴とするビデオシーケンス編成装置。
11. 前記逆方向フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームの再生順序を調整する再生順序調整モジュール、をさらに備え、
    前記逆方向フレームは、前記第１ビデオシーケンスにおける開始フレームを除いた他のビデオフレームを含む、
    ことを特徴とする請求項１０に記載のビデオシーケンス編成装置。
12. 前記ジャンプフレーム及び／又は遷移フレームに基づいて、前記第１ビデオシーケンスにおける前記ビデオフレームを接続するビデオフレーム接続モジュール、をさらに備え、
    前記第１ビデオシーケンスが前記マスタシーケンスを含む場合、前記ジャンプフレームは前記マスタシーケンスにおける任意のビデオフレームであり、
    前記第１ビデオシーケンスが前記スレーブシーケンスを含む場合、前記ジャンプフレームは前記スレーブシーケンスの開始フレーム及び終了フレームであり、
    前記第１ビデオシーケンスに異なるマスタシーケンス及び／又は異なるスレーブシーケンスが含まれる場合、前記遷移フレームは、前記異なるマスタシーケンス及び／又は前記異なるスレーブシーケンス間で切り替えられる少なくとも１つの前記ジャンプフレームに基づいて得られた補間フレームである、
    ことを特徴とする請求項１０に記載のビデオシーケンス編成装置。
13. 前記ビデオ編成モジュールは、
    前記第１ビデオシーケンスにおける前記ビデオフレームを順方向再生することと、
    前記整列標識フレームが前記逆方向フレームであると検出した場合、第１ランダム信号に基づいて、前記ビデオフレームの逆方向再生を行うことと、
    前記ビデオフレームの順方向再生及び逆方向再生に基づいて得られた整列組み合わせを前記第２ビデオシーケンスとすることと、に用いられる、
    ことを特徴とする請求項１０～１２のいずれか１項に記載のビデオシーケンス編成装置。
14. 前記ビデオ編成モジュールは、
    前記第１ビデオシーケンスにおける第１マスタシーケンスを取得することと、
    前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第２ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスを除いた他のマスタシーケンスに切り替えることと、
    前記第１マスタシーケンス及び前記他のマスタシーケンスに基づいて得られた整列組み合わせを、前記第２ビデオシーケンスとすることと、に用いられる、
    ことを特徴とする請求項１０～１２のいずれか１項に記載のビデオシーケンス編成装置。
15. 前記ビデオ編成モジュールは、
    前記他のマスタシーケンスが第２マスタシーケンスである場合、
    前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第３ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１マスタシーケンスに切り替えること、にさらに用いられる、
    ことを特徴とする請求項１４に記載のビデオシーケンス編成装置。
16. 前記ビデオ編成モジュールは、
    前記他のマスタシーケンスが第２マスタシーケンス、第３シーケンス、・・・及び第ｉシーケンスである場合、
    前記第２マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第４ランダム信号に基づいて、前記第２マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいて対応するシーケンスに切り替えることと、
    前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行うこと、又は、前記第２マスタシーケンス、前記第３シーケンス、・・・前記第ｉシーケンスにおいてジャンプ再生を行った後、前記第１マスタシーケンスに切り替えることと、にさらに用いられ、
    ここで、ｉは３より大きい正の整数である、
    ことを特徴とする請求項１４に記載のビデオシーケンス編成装置。
17. 前記ビデオ編成モジュールは、
    前記第１ビデオシーケンスにおける第１マスタシーケンス及び第１スレーブシーケンスを取得することと、
    前記第１マスタシーケンスの前記整列標識フレームが前記ジャンプフレームであると検出した場合、第５ランダム信号に基づいて、前記第１マスタシーケンスにおけるビデオフレームのジャンプ再生を行い、かつ前記第１スレーブシーケンスに切り替えることと、
    第１スレーブシーケンスの終了フレームが再生されるまで、前記第１スレーブシーケンスにおけるビデオフレームを順方向再生することと、
    前記終了フレームをジャンプフレームとし、かつ前記第１マスタシーケンスに切り替えること、又は、前記終了フレームをジャンプフレームとし、前記整列標識フレームが前記遷移フレームであることと総合して、前記ジャンプフレームに基づいて、ジャンプ再生をトリガした後、前記遷移フレームに基づいて、前記第１マスタシーケンスにおける指定フレームに切り替えることと、にさらに用いられる、
    ことを特徴とする請求項１０～１２のいずれか１項に記載のビデオシーケンス編成装置。
18. 前記第１マスタシーケンスは、１つ又は複数であり、第１スレーブシーケンスは、１つ又は複数であり、
    前記ビデオ編成モジュールは、
    前記第１マスタシーケンス及び第１スレーブシーケンス間の、異なるシーケンスの１マスタ１スレーブ編成再生モード、異なるシーケンスの１マスタ多スレーブ編成再生モード及び異なるシーケンスの多マスタ多スレーブ編成再生モードの少なくとも１つのモードに基づいて、前記ジャンプ再生を行うこと、にさらに用いられる、
    ことを特徴とする請求項１７に記載のビデオシーケンス編成装置。
19. 少なくとも１つのプロセッサと、
    前記少なくとも１つのプロセッサに通信接続されるメモリと、を備え、
    前記メモリには、前記少なくとも１つのプロセッサにより実行可能な命令が記憶されており、
    前記命令は、前記少なくとも１つのプロセッサにより実行される場合、請求項１～９のいずれか１項に記載のビデオシーケンス編成方法を実行させることを特徴とする電子設備。
20. コンピュータに請求項１～９いずれか１項に記載のビデオシーケンス編成方法を実行させる命令が記憶されている非一時的なコンピュータ可読記憶媒体。
21. コンピュータにおいて、プロセッサにより実行される場合、請求項１～９のいずれか１項にビデオシーケンス編成方法を実現することを特徴とするプログラム。
    
    

Images