JP2023552923A

JP2023552923A - ビデオのトランスコード方法、装置、電子機器及び記憶媒体

Info

Publication number: JP2023552923A
Application number: JP2023558930A
Authority: JP
Inventors: キアンワン，; シュジュンツァン，
Original assignee: ベイジンフィジュンテクノロジーカンパニーリミテッド
Priority date: 2021-04-30
Filing date: 2022-04-11
Publication date: 2023-12-19
Also published as: CN113014926B; US20240048778A1; WO2022228104A1; CN113014926A

Abstract

本出願は、ビデオのトランスコード方法、装置、電子機器及び記憶媒体を提案し、この方法は、ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報を取得し、第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成するステップと、透かし情報と復号化情報に基づいて、第２のビデオフレームにおけるマクロブロックのタイプを決定するステップと、各マクロブロックに対して、マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムに基づいて、マクロブロックの符号化のために必要な目標符号化パラメータを決定するステップと、各マクロブロックの目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成するステップと、を含む。【選択図】図２

Description

関連出願の相互引用

本出願は、中国特許出願番号が「２０２１１０４８７５６７．６」であり、出願日が２０２１年４月３０日である中国特許出願に基づいて提案され、当該中国特許出願の優先権を主張し、当該中国特許出願のすべての内容はここで参照として本出願に導入されている。

本出願は、画像処理技術の分野に関し、具体的にビデオのトランスコード方法、装置、電子機器及び記憶媒体に関する。

関連技術では、ソースビデオストリームに透かしを追加してトランスコードする場合、まずビデオを復号化し、その後にビデオフレームに透かしを追加し、最後に符号化する必要があり、このような汎用トランスコード方式は計算量が多く、実行時間が長く、ビデオ品質の損失が大きく、入出力のコードレートが一致しない。

本出願は、関連技術における技術的課題の少なくとも１つをある程度解決することを目的とする。

本出願の第１の態様の実施例は、ビデオのトランスコード方法を提案し、前記方法は、ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報を取得し、第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成するステップと、透かし情報と復号化情報に基づいて、第２のビデオフレームにおけるマクロブロックのタイプを決定するステップと、各マクロブロックに対して、マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムに基づいて、マクロブロックの符号化のために必要な目標符号化パラメータを決定するステップと、各マクロブロックの目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成するステップと、を含む。

本出願の第２の態様の実施例は、ビデオのトランスコード装置を提案し、前記装置は、ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報を取得し、第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成するための復号化モジュールと、透かし情報と復号化情報に基づいて、第２のビデオフレームにおけるマクロブロックのタイプを決定するためのマクロブロックタイプ取得モジュールと、各マクロブロックに対して、マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムに基づいて、マクロブロックの符号化のために必要な目標符号化パラメータを決定するためのパラメータ取得モジュールと、各マクロブロックの目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成するための符号化モジュールと、を備える。

本出願の第３の態様の実施例は、電子機器を提案し、少なくとも１つのプロセッサと、少なくとも１つのプロセッサと通信可能に接続されるメモリと、を備え、メモリには、少なくとも１つのプロセッサによって実行可能な命令が記憶され、命令は、少なくとも１つのプロセッサが本出願の第１の態様の実施例によって提供されるビデオのトランスコード方法を実行できるように、少なくとも１つのプロセッサによって実行される。

本出願の第４の様態の実施例は、コンピュータ命令が記憶されているコンピュータ読み取り可能な記憶媒体を提案し、コンピュータ命令は、コンピュータに本出願の第１の態様の実施例によって提供されるビデオのトランスコード方法を実行させる。

本出願の第５の態様の実施例は、コンピュータプログラムが含まれるコンピュータプログラム製品を提案し、コンピュータプログラムはプロセッサによって実行される場合、本出願の第１の様態の実施例によって提供されるビデオのトランスコード方法が実現される。

Ｈ．２６４の文法構成図である。本出願の一実施例によるビデオのトランスコード方法のフローチャートである。本出願の実施例によって提案されるマクロブロック分類の概略図である。本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。本出願の一実施例によるビデオトランスコードの装置の構成ブロック図である。本出願の一実施例による電子機器の概略構成図である。

以下、本出願の実施例について詳細に説明し、前記実施例の例は図面に示され、ここで、最初から最後まで同じまたは類似の符号は同じまたは類似の素子、または同じまたは類似の機能を有する素子を示す。以下、添付図面を参照して説明される実施例は例示的なものであり、本出願を説明するためだけであり、本出願に対する制限として理解されたくない。

Ｈ．２６４は、高度圧縮デジタルビデオ符号復号器規格であり、広く使用されているデジタルビデオ圧縮フォーマットである。Ｈ．２６４は主に、ベースラインプロファイル（ｂａｓｅｌｉｎｅｐｒｏｆｉｌｅ）、メインプロファイル（ｍａｉｎｐｒｏｆｉｌｅ）、高いプロファイル（ｈｉｇｈｐｒｏｆｉｌｅ）及び拡張プロファイル（ｅｘｔｅｎｄｅｄｐｒｏｆｉｌｅ）という４つのプロファイル（ｐｒｏｆｉｌｅ）がある。各種類のｐｒｏｆｉｌｅは異なる符号化ツールを使用する。例えば、ｂａｓｅｌｉｎｅｐｒｏｆｉｌｅはコンテキスト適応型可変長符号化（ＣｏｎｔｅｘｔＡｄａｐｔｉｖｅＶａｒｉａｂｌｅＬｅｎｇｔｈＣｏｄｉｎｇ、ＣＡＶＬＣ）及び内部符号化（ｉｎｔｒａ、Ｉ）／前方予測（Ｐｒｅｄｉｃｔｉｖｅ－ｃｏｄｅｄ、Ｐ）フレームのみをサポートし、ｈｉｇｈｐｒｏｆｉｌｅは、コンテキストベースの適応型バイナリ算術符号化（Ｃｏｎｔｅｘｔ－ｂａｓｅｄＡｄａｐｔｉｖｅＢｉｎａｒｙＡｒｉｔｈｍｅｔｉｃＣｏｄｉｎｇ、ＣＡＢＡＣ）と双方向予測（Ｂｉｄｉｒｅｃｔｉｏｎａｌｌｙ－ｐｒｅｄｉｃｔｅｄ、Ｂ）フレームとをサポートする。ライブビデオやオンデマンドではｂａｓｅｌｉｎｅｐｒｏｆｉｌｅ、ｍａｉｎｐｒｏｆｉｌｅ、ｈｉｇｈｐｒｏｆｉｌｅがよく使用される。

図１に示すように、Ｈ．２６４規格は、ネットワーク抽象化レイヤユニット（ＮｅｔｗｏｒｋＡｂｓｔｒａｃｔＬａｙｅｒＵｎｉｔ、ＮＡＬＵ）でビデオデータをカプセル化し、ＮＡＬＵは、シーケンスパラメータセット（ＳｅｑｕｅｎｃｅＰａｒａｍａｔｅｒＳｅｔ、ＳＰＳ）または画像パラメータセット（ｐｉｃｔｕｒｅｐａｒａｍｅｔｅｒｓｅｔ、ＰＰＳ）、瞬時符号化リフレッシュスライス（ｉｎｓｔａｎｔａｎｅｏｕｓｄｅｃｏｄｉｎｇｒｅｆｒｅｓｈｓｌｉｃｅ、ＩＤＲｓｌｉｃｅ）、スライス（ｓｌｉｃｅ）などのいくつかのタイプに分類することができる。ＳＰＳ／ＰＰＳには主に、ｐｒｏｆｉｌｅ、解像度、参照フレーム数などの主要なビデオ符号化パラメータが記憶される。ＩＤＲｓｌｉｃｅ／ｓｌｉｃｅは、実際のビデオ圧縮データを保存する。各ｓｌｉｃｅは多くのマクロブロックで構成され、マクロブロック情報は主に予測モード、ブロック化方式、及び残差を含む。

ビデオ符号化・復号化はフレーム内（ｉｎｔｒａ）とフレーム間（ｉｎｔｅｒ）という２種類の予測方法をサポートし、マクロブロックは主にＩ／Ｐ／Ｂという３つのタイプに分けられ、フレームタイプは主にＩ／Ｐ／Ｂという３つのタイプに分けられる。したがって、Ｂフレームを有するビデオストリームの場合、ビデオフレームの符号化順序と表示順序は異なる。Ｐ／Ｂフレームの場合、符号化器は複数の参照フレームを用いてフレーム間予測を行い、同時に、長期参照フレームを使用してビデオ品質をさらに向上させる。Ｈ．２６４フレーム間予測は重み付け予測をサポートし、参照ブロックのピクセルの重みを選択することで動き補償の残差を減少させることができる。ｂａｓｅｌｉｎｅ／ｍａｉｎｐｒｏｆｉｌｅは４ｘ４整数変換を使用するが、ｈｉｇｈｐｒｏｆｉｌｅは４ｘ４と８ｘ８という２種類の変換をサポートする。以上の符号化ツールに加えて、復号化されたフレームを出力する前に、符号復号器は、またビデオ品質を向上させるために、デブロッキングフィルタリングを呼び出す。

汎用トランスコードはソースストリームに透かしを追加したトランスコードを実現し、各モジュールの計算複雑さは、符号化器が８６％、復号化器が１１％、符号化器のレート歪み最適化（ＲａｔｅＤｉｓｔｏｒｔｉｏｎＯｐｔｉｍａｔｉｏｎ、ＲＤＯ）関数が６９％を占める。

理解を容易にするために、図１における用語を引き続き説明する：
１、ビデオ符号化レイヤ（ＶｉｄｅｏＣｏｄｉｎｇＬａｙｅｒ、ＶＣＬ）
２、ネットワーク抽出レイヤ（ＮｅｔｗｏｒｋＡｂｓｔｒａｃｔｉｏｎＬａｙｅｒ、ＮＡＬ）
３、スライスレイヤ（ＳｌｉｃｅＬａｙｅｒ）、スライスヘッダ（ＳｌｉｃｅＨｅａｄｅｒ）、スライスデータ（ＳｌｉｃｅＤａｔａ）
４、マクロブロック（ＭａｃｒｏＢｌｏｃｋ、ＭＢ）
５、マクロブロックレイヤ（ＭａｃｒｏｂｌｏｃｋＬａｙｅｒ）、タイプ（Ｔｙｐｅ）、予測モード（Ｐｒｅｄｉｃｔｉｏｎ）、マクロブロックモード（ＭａｃｒｏＢｌｏｃｋＰａｔｔｅｒｎ）、量子化値（ＱｕａｎｔｉｚａｔｉｏｎＰａｒａｍｅｔｅｒ、ＱＰ）、残差（Ｒｅｓｉｄｕａｌ）
６、フレーム内予測（ｉｎｔｒａｍｏｄｅｓ）、参照フレーム（ＲｅｆｅｒｅｎｃｅＦｒａｍｅｓ）、動きベクトル（Ｍｏｔｉｏｎｖｅｃｔｏｒｓ）

本出願は、ビデオのトランスコード方法、装置、電子機器及び記憶媒体を提案し、汎用トランスコード方案に存在する計算量が大きく、実行時間が長く、ビデオ品質の損失が大きく、入出力のコードレートが一致しないという課題を解決することができる。

以下、図面と併せて本出願の実施例によるビデオのトランスコード方法、装置、電子機器及び記憶媒体を説明する。

図２は、本出願の一実施例によるビデオのトランスコード方法のフローチャートである。図２に示すように、このビデオのトランスコード方法は以下のステップＳ２０１～Ｓ２０４を含む。

Ｓ２０１、ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報を取得し、第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成する。

本出願の実施例では、ソースビデオストリームを取得して、ソースビデオストリームを復号化器に入力して、復号化器によってソースビデオストリームを復号化することにより、ソースビデオストリーム内の第１のビデオフレームを取得し、第１のビデオフレームの復号化情報を抽出することができる。

いくつかの実施例では、復号化情報は、スライスヘッダ情報、参照フレームの並び替え情報、参照画像シーケンスマーク、復号化器の参照フレームリスト、デブロッキングフィルタリング前の再構成ピクセル及びマクロブロック情報などを含む。いくつかの実施例では、マクロブロック情報は、予測モード、ブロック化方式、残差及び量子化パラメータなどを含む。

第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成し。一方、透かし情報は、ビデオフレームに対してプライバシー保護、著作権保護または字幕解釈の役割を果たすことができ、他方、透かし情報は、ビデオフレーム内の修正されたピクセルも識別し、修正されたピクセルを含むマクロブロックに注目するようにトランスコード装置に指示する。いくつかの実施例では、透かし情報は、著作権情報、プライバシー情報、字幕情報などであってもよい。

Ｓ２０２、透かし情報と復号化情報に基づいて、第２のビデオフレームにおけるマクロブロックのタイプを決定する。

ビデオフレームは、符号化の基本単位である複数のマクロブロックに分割することができ、いくつかの実施例では、マクロブロックのサイズは１６×１６である。

本出願の実施例では、透かし情報は、一部のマクロブロック内の１つまたは複数のピクセルを部分的にまたはすべて変更することができる。透かし情報領域は、ビデオフレームにおけるピクセルが修正された領域であり、透かし情報の座標に基づいて第２のビデオフレームにおける修正されたピクセルの位置を決定し、そして第２のビデオフレームにおける修正されたピクセルが含まれるマクロブロックを第１のタイプのマクロブロックとして決定することができる。すなわち、第１のタイプはマクロブロックが透かし情報に直接関連することを指示する。非第１のタイプのマクロブロックでは、マクロブロック復号化情報内の予測モードに基づいて、第１のタイプのマクロブロックとの依存関係を確認し、第１のタイプのマクロブロックと依存関係が存在するか否かに基づいてマクロブロックのタイプを確認する。本出願の実施例では、復号化情報が第１のタイプのマクロブロックに依存するいずれか１つのマクロブロックのタイプを、第２のタイプとして確認し、復号化情報が第１のタイプのマクロブロックに依存しないいずれか１つのマクロブロックのタイプを、第３のタイプとして確認し、すなわち、フレーム内予測やフレーム間予測を行うとき、第２のタイプのマクロブロックの復号化情報は第１のタイプのマクロブロックに依存し、第３のタイプのマクロブロックの復号化情報は第１のタイプのマクロブロックに依存しない。これで、第２のビデオフレーム内のすべてのマクロブロックのタイプが取得される。マクロブロックの分類は図３に示すとおり、ここで、ｌｏｇｏは第１のタイプのマクロブロックを表し、ｑｕａｌｉｔｙは第２のタイプのマクロブロックを表し、ｃｏｐｙは第３のタイプのマクロブロックを表す。

マクロブロックのタイプを決定する目的は、マクロブロックのタイプに対して、マクロブロックのタイプとマッチングする目標符号化パラメータを選択的に取得することを容易にすることであり、これにより計算量を削減し、トランスコード速度を向上させる。

Ｓ２０３、各マクロブロックに対して、マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムに基づいて、マクロブロックの符号化のために必要な目標符号化パラメータを決定する。

マクロブロックの高速トランスコードを実現するために、本出願の実施例では、異なるマクロブロックのタイプに対して、異なる目標符号化パラメータが対応することができる。いくつかの実施例では、目標符号化パラメータは、予測モード、ブロック化方法、動きベクトル、整数変換サイズ、量子化パラメータ、及び残差などを含むことができる。

マクロブロックの参照符号化ピクセルはＲＤＯアルゴリズムの入力とされ、マクロブロックに対して選択された参照符号化ピクセルが往々にしてマクロブロックに対応するＲＤＯコスト値に影響を与える。本出願の実施例では、異なるタイプのマクロブロックに対して、異なる参照符号化ピクセルを選択し、参照符号化ピクセルが決定された後、マクロブロックの候補符号化パラメータをさらに取得することができ、ここで、候補符号化パラメータは復号化情報を含むことができる。マクロブロックの参照符号化ピクセルと復号化情報に対してＲＤＯアルゴリズム処理を行い、すなわちマクロブロックの参照符号化ピクセルと復号化情報とをＲＤＯアルゴリズムに入力すると、候補符号化パラメータ及びそれに対応するＲＤＯコスト値を取得することができる。さらに、ＲＤＯコスト値が最も小さい候補符号化パラメータを選択して、マクロブロックの符号化のために必要な目標符号化パラメータとすることができる。本出願の実施例では、マクロブロックを符号化する中に、符号化器のネイティブＲＤＯアルゴリズムを直接呼び出すことではなく、ＲＤＯアルゴリズムの論理を変更し、復号化情報を含む候補符号化パラメータに基づいてＲＤＯコスト値を計算し、その中から最小のものを目標符号化パラメータとして選択することにより、符号化中の演算量を低減することができる。

Ｓ２０４、各マクロブロックの目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成する。

いずれか１つのマクロブロックに対して、マクロブロックの目標符号化パラメータに基づいて、Ｈ．２６４ビデオ規格に従ってマクロブロックを符号化して、第２のビデオフレームに対応する目標符号化データを生成し、各フレームの目標符号化データに基づいて、目標ビデオストリームを生成する。

本出願の実施例によって提案されるビデオのトランスコード方法は、ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報を取得し、第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成し、透かし情報と復号化情報に基づいて、第２のビデオフレームにおけるマクロブロックのタイプを決定し、各マクロブロックに対して、マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムに基づいて、マクロブロックの符号化のために必要な目標符号化パラメータを決定し、各マクロブロックの目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成する。

この方法では、符号化中に復号化情報に基づいて符号化することができ、計算量を削減するだけでなく、追加される透かし情報のフレームタイプがソースビデオストリームと完全に一致することを保証し、画像品質にもほとんど損傷がなく、ビデオ品質が高い。

図４は、本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。図４に示すように、上記の実施例に基づいて、ステップＳ２０３は、ステップＳ４０１～Ｓ４０３を含むことができる。

Ｓ４０１、マクロブロックのタイプに基づいて、マクロブロックの参照符号化ピクセルを決定する。

透かし情報を挿入する必要がないビデオトランスコードに対して、符号化器は単に復号化情報を使用して再符号化するだけであり、符号化側と復号化側のデブロッキングフィルタリング前のピクセルは同じである。本出願の実施例では、ビデオトランスコード中にソースビデオストリームに透かし情報を挿入する必要があり、効率的で高品質なトランスコードの目的を達成するために、符号化器はできるだけ復号化情報を使用する必要がある。

透かし情報で修正された領域に対して、ビデオトランスコードの精度を保証するために、その参照符号化ピクセルは、透かし情報で修正されたピクセルを直接使用する必要がある。第１のタイプのマクロブロックは透かし情報で修正された領域を含むが、非第１のタイプのマクロブロックは透かし情報で修正された領域を含まないため、両者の参照符号化ピクセルには違いがあり、マクロブロックのタイプに基づいて適切な参照符号化ピクセルを選択する必要がある。

Ｓ４０２、マクロブロックの復号化情報及び参照符号化ピクセルに対してＲＤＯアルゴリズム処理を行って、マクロブロックの少なくとも１組の候補符号化パラメータ及び各組の候補符号化パラメータに対応するＲＤＯコスト値を生成する。

いくつかの実装では、符号化器はマクロブロックの復号化情報及び参照符号化ピクセルを使用して符号化パラメータ及びそれに対応するＲＤＯコスト値を生成し、いくつかの実装では、符号化器は、マクロブロック残差以外のマクロブロック復号化情報及び参照符号化ピクセルを使用して符号化パラメータ及びそれに対応するＲＤＯコスト値を生成する。

実際の応用シーンを組み合わせて、ネイティブＲＤＯアルゴリズムで符号化パラメータを取得する複雑さが高く、計算量が大きく、トランスコード速度が低いため、ビデオトランスコードの品質と速度を両立するために、マクロブロックに対して選択的に目標符号化パラメータを選択する必要がある。いくつかの実施例では、本出願の実施例では、マクロブロック復号化情報を使用して生成された符号化パラメータを１組の候補符号化パラメータとし、そのＲＤＯコスト値を取得し、マクロブロック残差以外のマクロブロック復号化情報を使用して生成された符号化パラメータを別の組の候補符号化パラメータとし、そのＲＤＯコスト値を取得し、候補符号化パラメータから目標符号化パラメータを選択する。

計算を簡素化するために、本出願の実施例では、ＲＤＯコスト値を比較し、候補符号化パラメータから目標符号化パラメータを確認し、ＲＤＯコスト値は最適な候補符号化パラメータをビデオトランスコードの目標符号化パラメータとして指示することができる。

Ｓ４０３、ＲＤＯコスト値に基づいて、少なくとも１組の候補符号化パラメータから、マクロブロックの符号化のために必要な目標符号化パラメータを決定する。

候補符号化パラメータのうち最小のＲＤＯコスト値に対応する候補符号化パラメータを、マクロブロックの目標符号化パラメータとして選択する。

いくつかの実施例では、誤差を低減するために、本出願の実施例では閾値を予め設定することができ、最小のＲＤＯコスト値が予め設定された閾値より大きい場合、符号化器のネイティブＲＤＯアルゴリズムを呼び出して、マクロブロックのネイティブＲＤＯコスト値とネイティブ符号化パラメータを取得し、最小のＲＤＯコスト値とネイティブＲＤＯコスト値を引き続き比較し、最小のＲＤＯコスト値がネイティブＲＤＯコスト値以下である場合、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータをマクロブロックの目標符号化パラメータとし、最小のＲＤＯコスト値がネイティブＲＤＯコスト値より大きい場合、ネイティブ符号化パラメータをマクロブロックの目標符号化パラメータとする。

図５は、本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。図５に示すように、上記の実施例に基づいて、マクロブロックのタイプが第１のタイプである場合、マクロブロックの符号化過程は以下のステップＳ５０１～Ｓ５０３を含む。

Ｓ５０１、第２のビデオフレームにおけるマクロブロックに対してタイプ認識を行って、マクロブロックのタイプが第１のタイプであると決定する。

ステップＳ１０２を参照すると、第２のビデオフレームにおける修正されたピクセルが含まれるマクロブロックを第１のタイプのマクロブロックとして決定し、すなわち第１のタイプはマクロブロックが透かし情報に直接関連することを指示する。

Ｓ５０２、第１のタイプのマクロブロックにおけるピクセルが透かし情報で修正されていない第１の領域と修正された第２の領域を決定する。

実装ではビデオフレームに透かしを挿入し、透かしは一部のマクロブロックの１つまたは複数のピクセルのみを占める可能性があり、すなわち第１のタイプのマクロブロックには、透かし情報で修正された領域が含まれる可能性があり、透かし情報で修正されていない領域が含まれる可能性もあるため、第１のタイプのマクロブロックを領域分割して、その参照符号化ピクセルを確認する必要がある。本出願の実施例では、ピクセルが透かし情報で修正されていない領域を第１の領域とし、ピクセルが透かし情報で修正された領域を第２の領域とする。ここで、第２の領域の参照符号化ピクセルは符号化器によって現在入力されているピクセルであり、現在入力されているピクセルは透かし情報で修正されたピクセルである。

透かし情報で修正されてない第１の領域に対して、復号化器のデブロッキングフィルタリング前の再構成ピクセルを第１の領域の参照符号化ピクセルとすることができ、符号化の品質を向上させるだけでなく、復号化情報がトランスコードされるため、ビデオトランスコードの効率を保証することができる。

透かし情報で修正された第２の領域に対して、その参照符号化ピクセルは、透かし情報で修正されたピクセルを直接使用することにより、ビデオトランスコードの精度を保証する。

Ｓ５０３、符号化器のネイティブＲＤＯアルゴリズムを呼び出し、第１のタイプのマクロブロックの参照符号化ピクセルに基づいて、第１のタイプのマクロブロックのネイティブ符号化パラメータを取得し、ネイティブ符号化パラメータを第１のタイプのマクロブロックの目標符号化パラメータとして決定する。

第１のタイプのマクロブロックに対して、ステップＳ５０２で取得された参照符号化ピクセルに基づいて、符号化器のネイティブＲＤＯアルゴリズムを呼び出してマクロブロックのネイティブ符号化パラメータを取得し、ネイティブ符号化パラメータを第１のタイプのマクロブロックの目標符号化パラメータとして決定する。目標符号化パラメータに基づいてマクロブロック符号化を行って、第２のビデオフレームに対応する目標符号化データを生成し、さらにトランスコードされた目標ビデオストリームを生成する。

本出願の実施例によるビデオトランスコード方法は、計算量を削減するだけでなく、追加される透かし情報のフレームタイプがソースビデオストリームと完全に一致することを保証し、画像品質にもほとんど損傷がなく、ビデオ品質が高い。

図６は、本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。図６に示すように、上記の実施例に基づいて、マクロブロックのタイプが第２のタイプである場合、マクロブロックの符号化過程は以下のステップＳ６０１～Ｓ６０８を含む。

Ｓ６０１、第２のビデオフレームにおけるマクロブロックに対してタイプ認識を行って、マクロブロックのタイプが第２のタイプであると決定し、復号化器のデブロッキングフィルタリング前の再構成ピクセルを、参照符号化ピクセルとする。

ここで、第２のタイプはマクロブロックと透かし情報を搬送するマクロブロックとの間に依存関係が存在することを指示する。

ステップＳ１０２を参照すると、第２のビデオフレームにおける修正されたピクセルが含まれない非第１のタイプに対して、予測モードにおけるマクロブロック復号化情報が第１のタイプのマクロブロックに依存するタイプを第２のタイプとして決定する。

復号化器のデブロッキングフィルタリング前の再構成ピクセルを非第１のタイプの参照符号化ピクセルとし、すなわち、第２のタイプのマクロブロックの参照符号化ピクセルはデブロッキングフィルタリング前の再構成ピクセルである。

Ｓ６０２、第２のタイプのマクロブロックの復号化情報及び参照符号化ピクセルに基づいて、第２のタイプのマクロブロックの少なくとも１組の候補符号化パラメータ及びそのＲＤＯコスト値を生成する。

本出願の実施例では、マクロブロック復号化情報及び参照符号化ピクセルを使用して生成された符号化パラメータを１組の候補符号化パラメータとし、そのＲＤＯコスト値を取得し、マクロブロック残差以外のマクロブロック復号化情報及び参照符号化ピクセルを使用して生成された符号化パラメータを別の組の候補符号化パラメータとし、そのＲＤＯコスト値を取得する。

符号化器のネイティブＲＤＯアルゴリズムは複雑さが高く、ＲＤＯアルゴリズムの呼び出し回数を減少させるために、本出願の実施例では、各組の候補符号化パラメータに対応するＲＤＯコスト値を比較して、目標符号化パラメータを取得する。

Ｓ６０３、最小のＲＤＯコスト値を決定し、最小のＲＤＯコスト値が予め設定された閾値より大きいか否かを判断する。

ＲＤＯはアルゴリズムモジュールであり、レート歪み（ＲａｔｅＤｉｓｔｏｒｔｉｏｎ、ＲＤ）曲線によってビデオ符号化器の優劣を比較することができ、ＲＤ二次元グラフで１つの最適な点を選択し、この最適な点は１つのコスト値に対応する。コスト値は最適な符号化方法を選択するための値であり、コスト値が最も小さいことは、このコスト値に対応する符号化パラメータがマクロブロックの最適な符号化パラメータであることを示す。したがって、マクロブロックの最適な符号化パラメータを選択するために、本出願の実施例は先に最小のＲＤＯコスト値と予め設定された閾値とを比較して、最小のＲＤＯコスト値が予め設定された閾値より大きいか否かを判断する。

Ｓ６０４、最小のＲＤＯコスト値が予め設定された閾値以下であることに応答して、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、第２のタイプのマクロブロックの目標符号化パラメータとして選択する。

最小のＲＤＯコスト値が予め設定された閾値以下であることに応答した場合、現在の最小のＲＤＯコスト値に対応する候補符号化パラメータが要求を満たすことを示し、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、第２のタイプのマクロブロックの符号化ときの目標符号化パラメータとすることができる。

Ｓ６０５、最小のＲＤＯコスト値が予め設定された閾値より大きいことに応答して、符号化器のネイティブＲＤＯアルゴリズムを呼び出して、第２のタイプのマクロブロックのネイティブＲＤＯコスト値とネイティブ符号化パラメータを取得する。

最小のＲＤＯコスト値が予め設定された閾値より大きいことに応答した場合、現在の最小のＲＤＯコスト値に対応する候補符号化パラメータが最適な符号化パラメータではない可能性があることを示し、符号化器のネイティブＲＤＯアルゴリズムを呼び出して、マクロブロックのネイティブＲＤＯコスト値とネイティブ符号化パラメータを取得し、ネイティブＲＤＯコスト値と現在の最小のＲＤＯコスト値とを引き続き比較して、最小のＲＤＯコスト値を更新する必要がある。

Ｓ６０６、最小のＲＤＯコスト値がネイティブＲＤＯコスト値より大きいか否かを判断する。

Ｓ６０７、最小のＲＤＯコスト値がネイティブＲＤＯコスト値以下である場合、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、マクロブロックの目標符号化パラメータとする。

最小のＲＤＯコスト値がネイティブＲＤＯコスト値以下である場合、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、マクロブロックの目標符号化パラメータとし、目標符号化パラメータに基づいてマクロブロック符号化を行って、第２のビデオフレームに対応する目標符号化データを生成し、さらにトランスコードされた目標ビデオストリームを生成する。

Ｓ６０８、最小のＲＤＯコスト値がネイティブＲＤＯコスト値より大きい場合、ネイティブ符号化パラメータをマクロブロックの目標符号化パラメータとする。

最小のＲＤＯコスト値がネイティブＲＤＯコスト値より大きい場合、ネイティブ符号化パラメータをマクロブロックの目標符号化パラメータとし、目標符号化パラメータに基づいてマクロブロック符号化を行って、第２のビデオフレームに対応する目標符号化データを生成し、さらにトランスコードされた目標ビデオストリームを生成する。

図７は、本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。図７に示すように、上記の実施例に基づいて、マクロブロックのタイプが第３のタイプである場合、マクロブロックの符号化過程は以下のステップＳ７０１～Ｓ７０３を含む。

Ｓ７０１、第２のビデオフレームにおけるマクロブロックに対してタイプ認識を行って、マクロブロックが第３のタイプのマクロブロックであると決定し、復号化器のデブロッキングフィルタリング前の再構成ピクセルを、参照符号化ピクセルとする。

ここで、第３のタイプのマクロブロックはマクロブロックと透かし情報を搬送するマクロブロックとの間に依存関係が存在しないことを指示する。

ステップＳ１０２を参照すると、第２のビデオフレームにおける修正されたピクセルが含まれない非第１のタイプに対して、予測モードにおけるマクロブロック復号化情報が第１のタイプのマクロブロックに依存しないタイプを第３のタイプとして決定する。

復号化器のデブロッキングフィルタリング前の再構成ピクセルを非第１のタイプの参照符号化ピクセルとし、すなわち、第３のタイプのマクロブロックの参照符号化ピクセルはデブロッキングフィルタリング前の再構成ピクセルである。

Ｓ７０２、第３のタイプのマクロブロックの復号化情報及び参照符号化ピクセルに基づいて、第３のタイプのマクロブロックの少なくとも１組の候補符号化パラメータ及びそのＲＤＯコスト値を生成する。

ステップＳ７０１、ステップＳ７０２の具体的な説明について、上記の実施例の関連する内容の説明を参照することができ、ここで説明を省略する。

Ｓ７０３、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、第３のタイプのマクロブロックの目標符号化パラメータとして選択する。

最適な符号化パラメータを取得するために、ＲＤＯコスト値が最も小さい候補符号化パラメータを選択して、第３のタイプのマクロブロックのマクロブロックの符号化のために必要な目標符号化パラメータとして決定することができる。目標符号化パラメータにに基づいてマクロブロック符号化を行って、第２のビデオフレームに対応する目標符号化データを生成し、さらにトランスコードされた目標ビデオストリームを生成する。

図８は、本出願の別の実施例によるビデオのトランスコード方法のフローチャートである。図８に示すように、上記の実施例に基づいて、ビデオのトランスコード方法は、ステップＳ８０１～Ｓ８０２をさらに含む。

Ｓ８０１、目標ビデオの符号化データとソースビデオの符号化データのサイズが一致しないことに応答して、マクロブロックのタイプに基づいて、マクロブロックの量子化値を調整するための優先順位を決定する。

目標ビデオの符号化データとソースビデオの符号化データのサイズが一致しないことに応答した場合、ビデオフレームのサイズを統一し、トランスコードの安定性を保証するために、量子化値を調整する必要がある。

ソースビデオストリームに透かし情報を挿入してビデオトランスコードを行う応用シーンでは、第１のタイプのマクロブロックと第２のタイプのマクロブロックの占める割合は小さく、マクロブロックの大部分は第３のタイプのマクロブロックであり、第３のタイプのマクロブロックのトランスコードが復号化情報に依存し、そのビデオ符号化データのサイズはほとんど変化しない。したがって、マクロブロックの量子化値を調整するための優先順位は、第１のタイプのマクロブロック、第２のタイプのマクロブロック、第３のタイプのマクロブロックである。すなわち、目標ビデオの符号化データとソースビデオの符号化データのサイズが一致しないことに応答した場合、まず第１のタイプのマクロブロックの量子化値を調整する。

Ｓ８０２、優先順位に従って、各タイプのマクロブロックの量子化値を順次に調整し、調整された量子化値に基づいてマクロブロックを量子化する。

目標ビデオの符号化データとソースビデオの符号化データのサイズが一致しないことに応答した場合、まず第１のタイプのマクロブロックの量子化値を調整し、調整された量子化値に基づいてマクロブロックを量子化し、調整された目標ビデオの符号化データがソースビデオの符号化データサイズと一致する場合、量子化調整が終了し、そうでなければ第２のタイプのマクロブロックの量子化値を調整し、２回目に調整された量子化値に基づいてマクロブロックを量子化し、調整された目標ビデオの符号化データがソースビデオの符号化データサイズと一致するか否かを引き続き判断し、一致する場合、量子化調整が終了し、そうでなければ、目標ビデオの符号化データがソースビデオの符号化データサイズと一致するまで、第３のタイプのマクロブロックの量子化値を引き続き調整し、３回目に調整された量子化値に基づいてマクロブロックを量子化する。

量子化は非可逆圧縮技術であり、ビデオフレームの品質に影響する。したがって、トランスコードされたビデオフレームの品質を保証するためには、量子化値の調整ごとに最低の品質要求を満たす必要がある。

図９に示すように、本出願の実施例は、ビデオのトランスコード装置９００をさらに提供し、前記装置は、ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報を取得し、第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成するための復号化モジュール９１０と、透かし情報と復号化情報に基づいて、第２のビデオフレームにおけるマクロブロックのタイプを決定するためのマクロブロックタイプ取得モジュール９２０と、各マクロブロックに対して、マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムに基づいて、マクロブロックの符号化のために必要な目標符号化パラメータを決定するためのパラメータ取得モジュール９３０と、各マクロブロックの目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成するための符号化モジュール９４０と、を備える。

さらに、本出願の実施例の可能な一実現形態では、パラメータ取得モジュール９３０は、
マクロブロックのタイプに基づいて、マクロブロックの参照符号化ピクセルを決定するための符号化ピクセル取得モジュール９３１と、マクロブロックの復号化情報及び参照符号化ピクセルに対してＲＤＯアルゴリズム処理を行って、マクロブロックの少なくとも１組の候補符号化パラメータ及び各組の候補符号化パラメータに対応するＲＤＯコスト値を生成するための予備パラメータ取得モジュール９３２と、ＲＤＯコスト値に基づいて、少なくとも１組の候補符号化パラメータから、マクロブロックの符号化のために必要な目標符号化パラメータを決定するための目標パラメータ取得モジュール９３３と、をさらに備える。

さらに、本出願の実施例の可能な一実現形態では、符号化ピクセル取得モジュール９３１は、さらに、非第１のタイプのマクロブロックに対して、復号化器のデブロッキングフィルタリング前の再構成ピクセルを、参照符号化ピクセルとし、第１のタイプのマクロブロックに対して、第１のタイプのマクロブロックにおけるピクセルが透かし情報で修正されていない第１の領域と修正された第２の領域を決定し、ここで、第１の領域の参照符号化ピクセルは復号化器のデブロッキングフィルタリング前の再構成ピクセルであり、第２の領域の参照符号化ピクセルは符号化器によって現在入力されているピクセルであり、現在入力されているピクセルは透かし情報で修正されたピクセルであり、ここで、第１のタイプのマクロブロックは透かし情報に関連することを指示する。

さらに、本出願の実施例の可能な一実現形態では、パラメータ取得モジュール９３０は、さらに、マクロブロックのタイプが非第１のタイプであることに応答して、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、マクロブロックの目標符号化パラメータとして選択する。

さらに、本出願の実施例の可能な一実現形態では、目標パラメータ取得モジュール９３３は、さらに、マクロブロックのタイプが第２のタイプであり、かつ最小のＲＤＯコスト値が予め設定された閾値より大きいことに応答して、符号化器のネイティブＲＤＯアルゴリズムを呼び出して、マクロブロックのネイティブＲＤＯコスト値とネイティブ符号化パラメータを取得し、ここで、第２のタイプはマクロブロックと透かし情報を搬送するマクロブロックとの間に依存関係が存在することを指示し、最小のＲＤＯコスト値がネイティブＲＤＯコスト値以下である場合、最小のＲＤＯコスト値に対応する１組の候補符号化パラメータを、マクロブロックの目標符号化パラメータとし、最小のＲＤＯコスト値がネイティブＲＤＯコスト値より大きい場合、ネイティブ符号化パラメータをマクロブロックの目標符号化パラメータとする。

さらに、本出願の実施例の可能な一実現形態では、目標パラメータ取得モジュール９３３は、さらに、マクロブロックのタイプが第１のタイプであることに応答して、符号化器のネイティブＲＤＯアルゴリズムを呼び出して、マクロブロックのネイティブ符号化パラメータを生成し、ネイティブ符号化パラメータをマクロブロックの目標符号化パラメータとして決定する。

さらに、本出願の実施例の可能な一実現形態では、符号化モジュール９４０は、さらに、マクロブロックの目標符号化パラメータに基づいて、マクロブロックに対してマクロブロック符号化を行って、第２のビデオフレームに対応する目標符号化データを生成し、各フレームの目標符号化データに基づいて、目標ビデオストリームを生成する。

さらに、本出願の実施例の可能な一実現形態では、マクロブロックタイプ取得モジュール９２０は、さらに、第２のビデオフレームに透かし情報が挿入された場合に修正されたピクセルを取得し、修正されたピクセルを含むマクロブロックのタイプを第１のタイプとして決定し、残りのいずれか１つのマクロブロックに対して、いずれか１つのマクロブロックの復号化情報に基づいて、いずれか１つのマクロブロックが第１のタイプのマクロブロックに依存するか否かを決定し、第１のタイプのマクロブロックに依存するいずれか１つのマクロブロックのタイプを、第２のタイプとして決定し、第１のタイプのマクロブロックに依存しないいずれか１つのマクロブロックのタイプを、第３のタイプとして決定する。

さらに、本出願の実施例の可能な一実現形態では、符号化モジュール９４０は、さらに、目標ビデオの符号化データとソースビデオの符号化データのサイズが一致しないことに応答して、マクロブロックのタイプに基づいて、マクロブロックの量子化値を調整するための優先順位を決定し、優先順位に従って、各タイプのマクロブロックの量子化値を順次に調整し、調整された量子化値に基づいてマクロブロックを量子化する。

本出願の実施例は電子機器をさらに提供する。

図１０は本出願の実施例によって提供される電子機器の概略構成図である。図１０に示すように、この電子機器１００は、記憶媒体１１０、プロセッサ１２０及びメモリ１１０に記憶され、プロセッサ１２０で実行可能なコンピュータプログラム製品を含み、プロセッサはコンピュータプログラムを実行する場合、前記のビデオのトランスコード方法が実現される。

当業者は、本考案の実施例が方法、システム、またはコンピュータプログラム製品として提供できることを理解されたい。したがって、本出願は、完全ハードウェア実施例、完全ソフトウェア実施例、またはソフトウェア及びハードウェアを組み合わせた実施例を採用することができる。さらに、本出願は、コンピュータ利用可能なプログラムコードを含む１つまたは複数のコンピュータ利用可能な記憶媒体（磁気ディスクメモリ、ＣＤ－ＲＯＭ、光学メモリなどを含むが、これらに限定されない）で実施されるコンピュータプログラム製品の形態を採用することができる。

本出願は、本出願の実施例に係る方法、デバイス（システム）およびコンピュータプログラム製品のフローチャートおよび／またはブロック図を参照して説明されたものである。フローチャートおよび／またはブロック図における各フローおよび／またはブロック、及びフローチャートおよび／またはブロック図におけるフローおよび／またはブロックの組み合わせは、コンピュータプログラム命令によって実現され得ることを理解されたい。これらのコンピュータプログラム命令を、汎用コンピュータ、専用コンピュータ、埋め込みプロセッサ、または他のプログラマブルデータ処理装置のプロセッサに提供して、コンピュータまたは他のプログラマブルデータ処理装置のプロセッサによって実行される命令が、フローチャートの１つまたは複数のフロー、および／またはブロック図の１つまたは複数のブロックにおいて指定された機能を実現するために使用される装置を生成することができる。

これらのコンピュータプログラム命令は、コンピュータ読み取り可能なメモリに記憶されている命令が、フローチャートの１つまたは複数のフローおよび／またはブロック図の１つまたは複数のブロックで指定された機能を実現する命令装置を含む製造品を生成するように、コンピュータまたは他のプログラマブルデータ処理装置を特定の方式で動作させるように導くことができるコンピュータ読み取り可能なメモリに記憶することもできる。

これらのコンピュータプログラム命令はまた、コンピュータまたは他のプログラマブル装置上で一連の動作ステップを実行してコンピュータ実装の処理を生成するように、コンピュータまたは他のプログラマブルデータ処理装置にロードされてもよく、これにより、コンピュータまたは他のプログラマブル装置上で実行される命令は、フローチャートの１つまたは複数のフローおよび／またはブロック図の１つまたは複数のブロックで指定された機能を実現するためのステップを提供する。

本出願の実施例はコンピュータ命令が記憶されているコンピュータ読み取り可能な記憶媒体をさらに提供し、このコンピュータ命令は、コンピュータに上記実施例のビデオのトランスコード方法を実行させる。

本出願の実施例は、コンピュータプログラムが含まれるコンピュータプログラム製品をさらに提供し、このコンピュータプログラムはプロセッサによって実行される場合、上記実施例のビデオのトランスコード方法が実現される。

なお、請求項において、括弧の間にある任意の参照符号は、請求項を限定するように構成されてはならない。「含む」という単語は、請求項に記載されていない部品またはステップを排除しない。部品の前にある単語「一」または「一つ」は、このような部品が複数存在することを排除しない。本出願は、いくつかの異なるコンポーネントを含むハードウェア、および適切なプログラミングを行うコンピュータによって実現することができる。いくつかの装置のユニットが列挙された請求項において、これらの装置のいくつかは、同一のハードウェアによって具体的に体現され得る。第１、第２、及び第３などの単語の使用は任意の順序を表していない。これらの単語は名称として解釈することができる。

また、「第１」、「第２」という用語は説明の目的にのみ使用され、相対的な重要性を示しまたは暗示し、示された技術的特徴の数を暗黙的に示すと理解されたくない。これにより、「第１」、「第２」と限定された特徴は、１つまたは複数の当該特徴を明示または暗黙的に含むことができる。本出願の説明では、「複数」という意味は、特に具体的な明確な限定がない限り、２つ以上である。

本開示のすべての実施例は、単独で実行されてもよく、他の実施例と組み合わせて実行されてもよく、いずれも本開示の要求の保護範囲とみなされる。

本出願の第５の態様の実施例は、コンピュータプログラムを提案し、コンピュータプログラムはプロセッサによって実行される場合、本出願の第１の様態の実施例によって提供されるビデオのトランスコード方法が実現される。

図１０は本出願の実施例によって提供される電子機器の概略構成図である。図１０に示すように、この電子機器１００は、記憶媒体１１０、プロセッサ１２０及びメモリ１１０に記憶され、プロセッサ１２０で実行可能なコンピュータプログラムを含み、プロセッサはコンピュータプログラムを実行する場合、前記のビデオのトランスコード方法が実現される。

当業者は、本考案の実施例が方法、システム、またはコンピュータプログラム製品として提供できることを理解されたい。したがって、本出願は、完全ハードウェア実施例、完全ソフトウェア実施例、またはソフトウェア及びハードウェアを組み合わせた実施例を採用することができる。さらに、本出願は、コンピュータ利用可能なプログラムコードを含む１つまたは複数のコンピュータ利用可能な記憶媒体（磁気ディスクメモリ、ＣＤ－ＲＯＭ、光学メモリなどを含むが、これらに限定されない）で実施されるコンピュータプログラムの形態を採用することができる。

本出願は、本出願の実施例に係る方法、デバイス（システム）およびコンピュータプログラムのフローチャートおよび／またはブロック図を参照して説明されたものである。フローチャートおよび／またはブロック図における各フローおよび／またはブロック、及びフローチャートおよび／またはブロック図におけるフローおよび／またはブロックの組み合わせは、コンピュータプログラム命令によって実現され得ることを理解されたい。これらのコンピュータプログラム命令を、汎用コンピュータ、専用コンピュータ、埋め込みプロセッサ、または他のプログラマブルデータ処理装置のプロセッサに提供して、コンピュータまたは他のプログラマブルデータ処理装置のプロセッサによって実行される命令が、フローチャートの１つまたは複数のフロー、および／またはブロック図の１つまたは複数のブロックにおいて指定された機能を実現するために使用される装置を生成することができる。

本出願の実施例は、コンピュータプログラムをさらに提供し、このコンピュータプログラムはプロセッサによって実行される場合、上記実施例のビデオのトランスコード方法が実現される。

Claims

ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報とを取得し、前記第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成するステップと、
前記透かし情報と前記復号化情報とに基づいて、前記第２のビデオフレームにおけるマクロブロックのタイプを決定するステップと、
各マクロブロックに対して、前記マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムとに基づいて、前記マクロブロックの符号化のために必要な目標符号化パラメータを決定するステップと、
各マクロブロックの前記目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成するステップと、
を含む、ビデオのトランスコード方法。
前記マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムとに基づいて、前記マクロブロックの符号化のために必要な目標符号化パラメータを決定するステップが、
前記マクロブロックのタイプに基づいて、前記マクロブロックの参照符号化ピクセルを決定するステップと、
前記マクロブロックの復号化情報及び前記参照符号化ピクセルに対してＲＤＯアルゴリズム処理を行って、前記マクロブロックの少なくとも１組の候補符号化パラメータ及び各組の候補符号化パラメータに対応するＲＤＯコスト値を生成するステップと、
前記ＲＤＯコスト値に基づいて、前記少なくとも１組の候補符号化パラメータから、前記マクロブロックの符号化のために必要な目標符号化パラメータを決定するステップと、
を含む請求項１に記載のビデオのトランスコード方法。
前記マクロブロックのタイプに基づいて、前記マクロブロックの参照符号化ピクセルを決定するステップが、
非第１のタイプのマクロブロックに対して、復号化器のデブロッキングフィルタリング前の再構成ピクセルを、前記参照符号化ピクセルとするステップと、
第１のタイプのマクロブロックに対して、前記第１のタイプのマクロブロックにおけるピクセルが前記透かし情報で修正されていない第１の領域と修正された第２の領域とを決定するステップであって、前記第１の領域の参照符号化ピクセルは前記復号化器のデブロッキングフィルタリング前の再構成ピクセルであり、前記第２の領域の参照符号化ピクセルは符号化器によって現在入力されているピクセルであり、前記現在入力されているピクセルは前記透かし情報で修正されたピクセルであるステップと、
を含み、
前記第１のタイプのマクロブロックが、前記透かし情報に関連することを指示する
請求項２に記載のビデオのトランスコード方法。
前記ＲＤＯコスト値に基づいて、前記少なくとも１組の候補符号化パラメータから、前記マクロブロックの符号化のために必要な目標符号化パラメータを決定するステップが、
前記マクロブロックのタイプが非第１のタイプであることに応答して、最小の前記ＲＤＯコスト値に対応する１組の候補符号化パラメータを、前記マクロブロックの目標符号化パラメータとして選択するステップを含む請求項２または３に記載のビデオのトランスコード方法。
前記マクロブロックのタイプが第２のタイプであり、かつ前記最小の前記ＲＤＯコスト値が予め設定された閾値よりも大きいことに応答して、前記符号化器のネイティブＲＤＯアルゴリズムを呼び出して、前記マクロブロックのネイティブＲＤＯコスト値とネイティブ符号化パラメータとを取得するステップであって、前記第２のタイプはマクロブロックと前記透かし情報を搬送するマクロブロックとの間に依存関係が存在することを指示するステップと、
前記最小の前記ＲＤＯコスト値が前記ネイティブＲＤＯコスト値以下である場合、前記最小の前記ＲＤＯコスト値に対応する１組の候補符号化パラメータを、前記マクロブロックの目標符号化パラメータとするステップと、
前記最小の前記ＲＤＯコスト値が前記ネイティブＲＤＯコスト値より大きい場合、前記ネイティブ符号化パラメータを前記マクロブロックの目標符号化パラメータとするステップと、を含む請求項２または３に記載のビデオのトランスコード方法。
前記マクロブロックのタイプが前記第１のタイプであることに応答して、前記符号化器のネイティブＲＤＯアルゴリズムを呼び出して、前記マクロブロックのネイティブ符号化パラメータを生成し、前記ネイティブ符号化パラメータを前記マクロブロックの目標符号化パラメータとして決定するステップを含む請求項４に記載のビデオのトランスコード方法。
前記各マクロブロックの前記目標符号化パラメータに基づいてマクロブロック符号化を行って、符号化された目標ビデオストリームを生成するステップが、
前記マクロブロックの目標符号化パラメータに基づいて、前記マクロブロックに対してマクロブロック符号化を行って、前記第２のビデオフレームに対応する目標符号化データを生成し、各フレームの前記目標符号化データに基づいて、前記目標ビデオストリームを生成するステップを含む請求項１から３のいずれか一項に記載のビデオのトランスコード方法。
前記透かし情報と前記復号化情報とに基づいて、前記第２のビデオフレームにおけるマクロブロックのタイプを決定するステップが、
前記第２のビデオフレームに前記透かし情報が挿入された場合に修正されたピクセルを取得し、前記修正されたピクセルを含むマクロブロックのタイプを第１のタイプとして決定するステップと、
残りのいずれか１つのマクロブロックに対して、前記いずれか１つのマクロブロックの復号化情報に基づいて、前記いずれか１つのマクロブロックが前記第１のタイプのマクロブロックに依存するか否かを決定するステップと、
前記第１のタイプのマクロブロックに依存する前記いずれか１つのマクロブロックのタイプを、第２のタイプとして決定し、前記第１のタイプのマクロブロックに依存しない前記いずれか１つのマクロブロックのタイプを、第３のタイプとして決定するステップと、
を含む請求項１に記載のビデオのトランスコード方法。
前記各マクロブロックの前記目標符号化パラメータに基づいてマクロブロック符号化を行う前に、
前記目標ビデオの符号化データと前記ソースビデオの符号化データのサイズが一致しないことに応答して、前記マクロブロックのタイプに基づいて、前記マクロブロックの量子化値を調整するための優先順位を決定するステップと、
前記優先順位に従って、各タイプのマクロブロックの量子化値を順次に調整し、調整された量子化値に基づいて前記マクロブロックを量子化するステップと、
を含む請求項１に記載のビデオのトランスコード方法。
ソースビデオストリームを復号化して、第１のビデオフレームと復号化情報とを取得し、前記第１のビデオフレームに透かし情報を挿入して、第２のビデオフレームを生成するための復号化モジュールと、
前記透かし情報と前記復号化情報とに基づいて、前記第２のビデオフレームにおけるマクロブロックのタイプを決定するためのマクロブロックタイプ取得モジュールと、
各マクロブロックに対して、前記マクロブロックのタイプとレート歪み最適化（ＲＤＯ）アルゴリズムとに基づいて、前記マクロブロックの符号化のために必要な目標符号化パラメータを決定するためのパラメータ取得モジュールと、
各マクロブロックの前記目標符号化パラメータに基づいてマクロブロック符号化を行って、トランスコードされた目標ビデオストリームを生成するための符号化モジュールと、
を備える、ビデオのトランスコード装置。
前記パラメータ取得モジュールが、
前記マクロブロックのタイプに基づいて、前記マクロブロックの参照符号化ピクセルを決定するための符号化ピクセル取得モジュールと、
前記マクロブロックの復号化情報及び前記参照符号化ピクセルに対してＲＤＯアルゴリズム処理を行って、前記マクロブロックの少なくとも１組の候補符号化パラメータ及び各組の候補符号化パラメータに対応するＲＤＯコスト値を生成するための予備パラメータ取得モジュールと、
前記ＲＤＯコスト値に基づいて、前記少なくとも１組の候補符号化パラメータから、前記マクロブロックの符号化のために必要な目標符号化パラメータを決定するための目標パラメータ取得モジュールと、
を備える請求項１０に記載のビデオのトランスコード装置。
前記符号化ピクセル取得モジュールが、
非第１のタイプのマクロブロックに対して、復号化器のデブロッキングフィルタリング前の再構成ピクセルを、前記参照符号化ピクセルとし、
第１のタイプのマクロブロックに対して、前記第１のタイプのマクロブロックにおけるピクセルが前記透かし情報で修正されていない第１の領域と修正された第２の領域とを決定し、前記第１の領域の参照符号化ピクセルは前記復号化器のデブロッキングフィルタリング前の再構成ピクセルであり、前記第２の領域の参照符号化ピクセルは符号化器によって現在入力されているピクセルであり、前記現在入力されているピクセルは前記透かし情報で修正されたピクセルであり、
前記第１のタイプのマクロブロックが、前記透かし情報に関連することを指示する
請求項１１に記載のビデオのトランスコード装置。
前記パラメータ取得モジュールが、
前記マクロブロックのタイプが非第１のタイプであることに応答して、最小の前記ＲＤＯコスト値に対応する１組の候補符号化パラメータを、前記マクロブロックの目標符号化パラメータとして選択する請求項１１または１２に記載のビデオのトランスコード装置。
前記目標パラメータ取得モジュールが、
前記マクロブロックのタイプが第２のタイプであり、かつ前記最小の前記ＲＤＯコスト値が予め設定された閾値より大きいことに応答して、前記符号化器のネイティブＲＤＯアルゴリズムを呼び出して、前記マクロブロックのネイティブＲＤＯコスト値とネイティブ符号化パラメータとを取得し、前記第２のタイプはマクロブロックと前記透かし情報を搬送するマクロブロックとの間に依存関係が存在することを指示し、
前記最小の前記ＲＤＯコスト値が前記ネイティブＲＤＯコスト値以下である場合、前記最小の前記ＲＤＯコスト値に対応する１組の候補符号化パラメータを、前記マクロブロックの目標符号化パラメータとし、
前記最小の前記ＲＤＯコスト値が前記ネイティブＲＤＯコスト値よりも大きい場合、前記ネイティブ符号化パラメータを前記マクロブロックの目標符号化パラメータとする請求項１１または１２に記載のビデオのトランスコード装置。
前記目標パラメータ取得モジュールが、
前記マクロブロックのタイプが前記第１のタイプであることに応答して、前記符号化器のネイティブＲＤＯアルゴリズムを呼び出して、前記マクロブロックのネイティブ符号化パラメータを生成し、前記ネイティブ符号化パラメータを前記マクロブロックの目標符号化パラメータとして決定する請求項１３に記載のビデオのトランスコード装置。
前記符号化モジュールが、
前記マクロブロックの目標符号化パラメータに基づいて、前記マクロブロックに対してマクロブロック符号化を行って、前記第２のビデオフレームに対応する目標符号化データを生成し、各フレームの前記目標符号化データに基づいて、前記目標ビデオストリームを生成する請求項１０から１２のいずれか一項に記載のビデオのトランスコード装置。
前記マクロブロックタイプ取得モジュールが、
前記第２のビデオフレームに前記透かし情報が挿入された場合に修正されたピクセルを取得し、前記修正されたピクセルを含むマクロブロックのタイプを第１のタイプとして決定し、
残りのいずれか１つのマクロブロックに対して、前記いずれか１つのマクロブロックの復号化情報に基づいて、前記いずれか１つのマクロブロックが前記第１のタイプのマクロブロックに依存するか否かを決定し、
前記第１のタイプのマクロブロックに依存する前記いずれか１つのマクロブロックのタイプを、第２のタイプとして決定し、前記第１のタイプのマクロブロックに依存しない前記いずれか１つのマクロブロックのタイプを、第３のタイプとして決定する請求項１０に記載のビデオのトランスコード装置。
前記符号化モジュールが、
前記目標ビデオの符号化データと前記ソースビデオの符号化データのサイズが一致しないことに応答して、前記マクロブロックのタイプに基づいて、前記マクロブロックの量子化値を調整するための優先順位を決定し、
前記優先順位に従って、各タイプのマクロブロックの量子化値を順次に調整し、調整された量子化値に基づいて前記マクロブロックを量子化する請求項１０に記載のビデオのトランスコード装置。
少なくとも１つのプロセッサと、
該少なくとも１つのプロセッサと通信可能に接続されるメモリと、
を備え、
前記メモリには、前記少なくとも１つのプロセッサによって実行可能な命令が記憶され、前記命令は、前記少なくとも１つのプロセッサが請求項１から９のいずれか一項に記載の方法を実行できるように、前記少なくとも１つのプロセッサによって実行される電子機器。
コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体であって、
前記コンピュータ命令が、コンピュータに請求項１から９のいずれか一項に記載の方法を実行させる非一時的なコンピュータ読み取り可能な記憶媒体。
コンピュータプログラムが含まれるコンピュータプログラム製品であって、
前記コンピュータプログラムがプロセッサによって実行される場合、請求項１から９のいずれか一項に記載の方法が実現されるコンピュータプログラム製品。