JP7446468B2 - ビデオ特殊効果の処理方法、装置、電子機器及びコンピュータプログラム - Google Patents
ビデオ特殊効果の処理方法、装置、電子機器及びコンピュータプログラム Download PDFInfo
- Publication number
- JP7446468B2 JP7446468B2 JP2022555878A JP2022555878A JP7446468B2 JP 7446468 B2 JP7446468 B2 JP 7446468B2 JP 2022555878 A JP2022555878 A JP 2022555878A JP 2022555878 A JP2022555878 A JP 2022555878A JP 7446468 B2 JP7446468 B2 JP 7446468B2
- Authority
- JP
- Japan
- Prior art keywords
- time
- special effect
- video
- target
- original
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000000694 effects Effects 0.000 title claims description 516
- 238000004590 computer program Methods 0.000 title claims description 4
- 238000003672 processing method Methods 0.000 title description 31
- 238000000034 method Methods 0.000 claims description 162
- 230000008602 contraction Effects 0.000 claims description 155
- 230000008569 process Effects 0.000 claims description 116
- 238000012545 processing Methods 0.000 claims description 68
- 238000009877 rendering Methods 0.000 claims description 54
- 238000004364 calculation method Methods 0.000 claims description 38
- 230000015654 memory Effects 0.000 claims description 24
- 238000013507 mapping Methods 0.000 claims description 20
- 230000002441 reversible effect Effects 0.000 claims description 10
- 238000007906 compression Methods 0.000 claims description 8
- 230000006835 compression Effects 0.000 claims description 7
- 238000004806 packaging method and process Methods 0.000 claims description 5
- 239000000284 extract Substances 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 26
- 230000003442 weekly effect Effects 0.000 description 15
- 238000003860 storage Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000004044 response Effects 0.000 description 8
- 230000007704 transition Effects 0.000 description 8
- 238000013461 design Methods 0.000 description 7
- 238000011161 development Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000003993 interaction Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000000737 periodic effect Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
- H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4781—Games
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Processing Or Creating Images (AREA)
Description
本願は、出願番号が202010599847.1であって、出願日が2020年06月28日の中国特許出願に基づいてなされたものであり、当該中国特許出願の優先権を主張し、その内容の全てが参照によって本願に組み込まれる。
本願は、デジタルマルチメディア技術に関し、特にビデオ特殊効果の処理方法、装置、電子機器及びコンピュータ読み取り可能な記憶媒体に関する。
ビデオ特殊効果ファイルを取得し、かつ前記ビデオ特殊効果ファイルから時間伸縮ポリシーを抽出するステップと、
前記ビデオ特殊効果ファイルを設計シーンに適用する際に実現すべき目標再生時間を取得するステップであって、前記目標再生時間は前記ビデオ特殊効果ファイルのオリジナル再生時間と異なるものであるステップと、
前記時間伸縮ポリシーに基づいて、前記ビデオ特殊効果ファイルにおいて目標時間軸に対応する特殊効果フレームを決定するステップであって、前記目標時間軸の長さは前記目標再生時間と一致するものであるステップと、
前記目標時間軸に対応する特殊効果フレームに基づいてレンダリングすることで、前記目標再生時間に応じた目標ビデオ特殊効果を取得するステップと、を含むビデオ特殊効果の処理方法を提供する。
2)ビデオ特殊効果ファイル、特殊効果コンテンツを担持したバイナリファイル、例えばPAGファイルは、バイナリファイルフォーマットで記憶されたステッカー動画である。
3)オリジナル時間軸:ビデオ特殊効果ファイルの全体に対応する時間軸、又はビデオ特殊効果サブファイルに対応する特殊効果部分を再生する際に対応する時間軸。
4)目標時間軸:ビデオ特殊効果ファイルにおける完全な特殊効果オブジェクトを伸縮処理した後に再生する際に対応する時間軸、又はビデオ特殊効果サブファイルに対応する特殊効果オブジェクトの一部を伸縮処理した後に再生する際に対応する時間軸。
以下、本願の実施例によるビデオ特殊効果の処理方法の適用について、異なる適用シーンに関連して説明する。
図3Aを参照すると、図3Aは、本願の実施例によるビデオ特殊効果の処理方法のフロー模式図であり、図3Aに示されるステップを参照して説明する。
ステップ101では、端末はビデオ特殊効果ファイルを取得し、ビデオ特殊効果ファイルから時間伸縮ポリシーを抽出する。
時間伸縮区間の数が複数である場合、各ビデオ特殊効果サブファイルに対して、ビデオ特殊効果サブファイルの時間軸から特殊効果オブジェクトに対応するオリジナル時間軸、即ちサブファイルの時間軸のうち特殊効果オブジェクトが現れる一部の時間軸を取得するステップ、及びオリジナル時間軸のフレームレートを維持したまま、オリジナル時間軸を時間伸縮処理することで、目標再生時間に対応する目標時間軸を取得するステップを実行し、
時間伸縮区間の数が1つである場合、ビデオ特殊効果ファイルに対して、ビデオ特殊効果ファイルから特殊効果オブジェクトに対応するオリジナル時間軸を取得するステップ、及びオリジナル時間軸のフレームレートを維持したまま、オリジナル時間軸を時間伸縮処理することで、目標再生時間に対応する目標時間軸を取得するステップを実行するという技術案を実行してもよい。
時間伸縮区間に基づいて、オリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプを決定するステップ、オリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプがオリジナル特殊効果フレームのタイムスタンプのいずれかと重なった場合、重なったオリジナル特殊効果フレームのタイムスタンプに対応する特殊効果フレームを目標タイムスタンプに対応する特殊効果フレームとして決定するステップ、及びオリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプがオリジナル特殊効果フレームのタイムスタンプのいずれとも重ならない場合、オリジナルタイムスタンプとの距離が最も小さいオリジナル特殊効果フレームのタイムスタンプを決定し、かつ当該距離が最も小さいオリジナル特殊効果フレームのタイムスタンプに対応する特殊効果フレームを目標タイムスタンプに対応する特殊効果フレームとして決定するステップを実行するという技術案によって実現されてもよい。
時間伸縮種類が時間線形伸縮種類である場合、目標再生時間とオリジナル再生時間との第2差分値を伸縮長さとして決定し、かつ伸縮長さと時間伸縮区間の長さとの加算処理を行い、
時間伸縮区間の長さと加算処理の結果との比の値算出処理を行うことで、伸縮係数を取得し、
目標タイムスタンプと開始タイムスタンプとの第3差分値を決定し、第3差分値と伸縮係数との乗算処理を行い、
乗算処理の結果及び開始タイムスタンプに対して加算処理を行い、対応するオリジナルタイムスタンプを取得するという技術案によって実現されてもよい。
時間伸縮種類が時間反復種類である場合、目標タイムスタンプと開始タイムスタンプとの第4差分値を決定し、第4差分値及び時間伸縮区間の長さに対して剰余算出処理を行い、
剰余算出処理の結果と開始タイムスタンプとの加算処理を行い、対応するオリジナルタイムスタンプを取得するという技術案によって実現されてもよい。
時間伸縮種類が時間逆順反復種類である場合、目標タイムスタンプと開始タイムスタンプとの第5差分値を決定し、
第5差分値及び時間伸縮区間の長さに対して剰余算出処理を行い、剰余算出処理の結果を取得し、前記第5差分値と前記時間伸縮区間との比の値算出処理を行うことで、比の値結果を取得し、
比の値結果に対して小数点以下切り捨て処理を行うことで、小数点以下切り捨て結果を取得し、
小数点以下切り捨て結果が偶数である場合、剰余算出処理の結果と開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得し、
小数点以下切り捨て結果が奇数である場合、時間伸縮区間の長さと剰余算出処理の結果との第6差分値を決定し、第6差分値及び開始タイムスタンプに対して加算処理を行い、対応するオリジナルタイムスタンプを取得するという技術案によって実現されてもよい。
本願の実施例によるビデオ特殊効果の処理方法は、ゲーム週戦報ビデオに広く適用されており、図4を参照すると、図4は、本願の実施例によるビデオ特殊効果の処理方法の、ゲーム週戦報ビデオのシーンにおける適用効果の模式図であり、端末がプレゼンテーションする必要があるのは、中間領域の横方向ビデオ(ネイティブビデオ)及び上下領域のステッカー動画(ビデオ特殊効果ファイルに対応する特殊効果オブジェクト)であり、PAGステッカー動画によって上下領域のステッカー動画を実現し、これは縦方向画面の動画であり、ビデオの上下エッジ領域にプレゼンテーションされ、周期的な動画効果を伴い、他の適用シーンでは、ステッカー動画のタイトル及びテールが固定し、中間部分のコンテンツがニーズに応じて時間伸長を行う場合もあり、ニーズは目標再生時間であってもよく、目標再生時間は横方向ビデオの時間(ネイティブビデオの時間)であってもよく、図4における適用効果模式図は、クライアントがサーバに毎週戦報ビデオの配信を要求する配信ロジックをトリガすることで、サーバがクライアントに毎週戦報ビデオを配信し、クライアントがサーバから返信された毎週戦報ビデオ(ネイティブビデオ)及び対応するビデオ特殊効果ファイルを受信したことに応答して、毎週戦報ビデオの時間を目標再生時間として取得し、かつ目標再生時間に基づいてビデオ特殊効果ファイルを復号して相応な時間伸縮処理を実行することで、時間伸縮処理を経た特殊効果オブジェクトを毎週戦報ビデオの時間に適合させ、最後に当該特殊効果オブジェクトをレンダリングして毎週戦報ビデオと同時に表示し、表示した効果が特殊効果オブジェクト付きの毎週戦報ビデオであるステップによって実現されてもよい。
時間伸縮区間の数が複数である場合、ビデオ特殊効果ファイルを数に一致する複数のビデオ特殊効果サブファイルに分割し、各ビデオ特殊効果サブファイルに対する目標再生時間をそれぞれ取得し、
時間伸縮区間の数が1つである場合、ビデオ特殊効果ファイルの全体に対する目標再生時間を取得する。
時間伸縮区間の数が複数である場合、各ビデオ特殊効果サブファイルに対して、
ビデオ特殊効果サブファイルから特殊効果オブジェクトに対応するオリジナル時間軸を取得する処理、及びオリジナル時間軸のフレームレートを維持したまま、オリジナル時間軸を時間伸縮処理することで、目標再生時間に対応する目標時間軸を取得する処理を実行し、
時間伸縮区間の数が1つである場合、ビデオ特殊効果ファイルに対して、
ビデオ特殊効果ファイルから特殊効果オブジェクトに対応するオリジナル時間軸を取得する処理、及びオリジナル時間軸のフレームレートを維持したまま、オリジナル時間軸を時間伸縮処理することで、目標再生時間に対応する目標時間軸を取得する処理を実行する。
ビデオ特殊効果サブファイルから特殊効果オブジェクトを含む複数の特殊効果フレーム、及びオリジナル時間軸において各特殊効果フレームの対応するタイムスタンプを取得し、かつ各特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプとするステップ、及び
時間伸縮区間、及び各特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプに基づいて、複数の特殊効果フレームのうち目標時間軸での各タイムスタンプに対応する特殊効果フレームを決定するステップを実行する。
ビデオ特殊効果ファイルから特殊効果オブジェクトを含む複数の特殊効果フレーム、及びオリジナル時間軸において各特殊効果フレームの対応するタイムスタンプを取得し、各特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプとし、
時間伸縮区間、及び各特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプに基づいて、複数の特殊効果フレームのうち目標時間軸での各タイムスタンプに対応する特殊効果フレームを決定する。
時間伸縮区間に基づいて、オリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプを決定する処理、
オリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプがオリジナル特殊効果フレームのタイムスタンプのいずれかと重なった場合、重なったオリジナル特殊効果フレームのタイムスタンプに対応する特殊効果フレームを目標タイムスタンプに対応する特殊効果フレームとして決定する処理、及び
オリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプがオリジナル特殊効果フレームのタイムスタンプのいずれとも重ならない場合、オリジナルタイムスタンプとの距離が最も小さいオリジナル特殊効果フレームのタイムスタンプを決定し、かつ当該距離が最も小さいオリジナル特殊効果フレームのタイムスタンプに対応する特殊効果フレームを目標タイムスタンプに対応する特殊効果フレームとして決定する処理を実行する。
目標タイムスタンプが時間伸縮区間の開始タイムスタンプ以下である場合、目標タイムスタンプをオリジナル時間軸において対応するオリジナルタイムスタンプとして決定するステップ、
目標タイムスタンプが時間伸縮区間の開始タイムスタンプよりも大きく、かつ時間伸縮区間の終了タイムスタンプよりも小さい場合、目標タイムスタンプに対して時間伸縮種類に基づくマッピング処理を行うことで、対応するオリジナルタイムスタンプを取得するステップ、及び
目標タイムスタンプが終了タイムスタンプ以上であり、かつ目標再生時間よりも小さい場合、オリジナル再生時間と目標再生時間との第1差分値を決定し、第1差分値と目標タイムスタンプとの加算処理を行い、加算処理の結果をオリジナル時間軸における目標タイムスタンプの対応するオリジナルタイムスタンプとして決定するステップを実行する。
時間伸縮種類が時間線形伸縮種類である場合、目標再生時間とオリジナル再生時間との第2差分値を伸縮長さとして決定し、かつ伸縮長さと時間伸縮区間の長さとの加算処理を行い、
時間伸縮区間の長さと加算処理の結果との比の値算出処理を行うことで、伸縮係数を取得し、
目標タイムスタンプと開始タイムスタンプとの第3差分値を決定し、第3差分値と伸縮係数との乗算処理を行い、
乗算処理の結果と開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得する。
時間伸縮種類が時間反復種類である場合、目標タイムスタンプと開始タイムスタンプとの第4差分値を決定し、第4差分値及び時間伸縮区間の長さに対して剰余算出処理を行い、
剰余算出処理の結果と開始タイムスタンプとの加算処理を行い、対応するオリジナルタイムスタンプを取得する。
時間伸縮種類が時間逆順反復種類である場合、目標タイムスタンプと開始タイムスタンプとの第5差分値を決定し、
第5差分値及び時間伸縮区間の長さに対して剰余算出処理を行い、剰余算出処理の結果を取得し、前記第5差分値と前記時間伸縮区間の長さとの比の値算出処理を行うことで、比の値結果を取得し、
比の値結果に対して小数点以下切り捨て処理を行うことで、小数点以下切り捨て結果を取得し、
小数点以下切り捨て結果が偶数である場合、剰余算出処理の結果と開始タイムスタンプとの加算処理を行い、対応するオリジナルタイムスタンプを取得し、
小数点以下切り捨て結果が奇数である場合、時間伸縮区間の長さと剰余算出処理の結果との第6差分値を決定し、第6差分値と開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得する。
300 ネットワーク
400 端末
410 プロセッサ
420 (有線又は無線)ネットワークインタフェース
420 ネットワークインタフェース
430 ユーザインタフェース
431 出力装置
432 入力装置
440 バスシステム
450 メモリ
451 オペレーティングシステム
452 ネットワーク通信モジュール
453 プレゼンテーションモジュール
454 入力処理モジュール
455 処理装置
500 端末
600 データベース
601 配置ポータル
602 配置ポータル
603 配置ポータル
4551 ファイル取得モジュール
4552 時間取得モジュール
4553 特殊効果フレーム決定モジュール
4554 レンダリングモジュール
Claims (15)
- 電子機器が実行するビデオ特殊効果の処理方法であって、
ビデオ特殊効果ファイルを取得し、前記ビデオ特殊効果ファイルから時間伸縮ポリシーを抽出するステップと、
前記ビデオ特殊効果ファイルを設計シーンに適用する際に実現すべき目標再生時間を取得するステップであって、前記目標再生時間は、前記ビデオ特殊効果ファイルのオリジナル再生時間と異なるものであるステップと、
前記時間伸縮ポリシーに基づいて、前記ビデオ特殊効果ファイルにおいて目標時間軸に対応する特殊効果フレームを決定するステップであって、前記目標時間軸の長さは、前記目標再生時間と一致するものであるステップと、
前記目標時間軸に対応する特殊効果フレームに基づいてレンダリングすることで、前記目標再生時間に応じた目標ビデオ特殊効果を取得するステップと、を含む、
ビデオ特殊効果の処理方法。 - ビデオ特殊効果ファイルを取得する前記ステップは、
特殊効果オブジェクトの複数のレイヤ構造を符号化処理することで、前記特殊効果オブジェクトに対応する符号化エクスポートファイルを取得する処理、
前記特殊効果オブジェクトの複数の特殊効果フレームを符号化処理することで、前記特殊効果オブジェクトに対応する符号化エクスポートファイルを取得する処理、
前記特殊効果オブジェクトの複数の特殊効果フレームをビデオフォーマット圧縮処理し、取得されたビデオフォーマット圧縮処理の結果を符号化処理することで、前記特殊効果オブジェクトに対応する符号化エクスポートファイルを取得する処理、及び
時間伸縮種類及び時間伸縮区間を前記符号化エクスポートファイルにパッケージし、前記特殊効果オブジェクトに対応するビデオ特殊効果ファイルを取得する処理のうちいずれかを実行するステップを含む、
請求項1に記載の方法。 - 前記時間伸縮ポリシーは、時間伸縮区間及び対応する時間伸縮種類を含み、
前記ビデオ特殊効果ファイルから時間伸縮ポリシーを抽出する前記ステップは、
前記ビデオ特殊効果ファイルを復号処理することで、前記ビデオ特殊効果ファイルに対応する少なくとも1つの時間伸縮区間及び対応する時間伸縮種類を取得するステップであって、前記時間伸縮種類は、時間線形伸縮種類、時間反復種類、時間逆順反復種類のいずれかを含むものであるステップを含む、
請求項1に記載の方法。 - 前記ビデオ特殊効果ファイルを設計シーンに適用する際に実現すべき目標再生時間を取得する前記ステップは、
前記時間伸縮区間の数が複数である場合、前記ビデオ特殊効果ファイルを前記数に一致する複数のビデオ特殊効果サブファイルに分割し、各前記ビデオ特殊効果サブファイルに対する目標再生時間をそれぞれ取得するステップと、
前記時間伸縮区間の数が1つである場合、前記ビデオ特殊効果ファイルの全体に対する目標再生時間を取得するステップと、を含む、
請求項3に記載の方法。 - 前記ビデオ特殊効果ファイルを設計シーンに適用する際に実現すべき目標再生時間を取得する前記ステップの後、
前記時間伸縮区間の数が複数である場合、各前記ビデオ特殊効果サブファイルに対して、
前記ビデオ特殊効果サブファイルから特殊効果オブジェクトに対応するオリジナル時間軸を取得する処理、及び
前記オリジナル時間軸のフレームレートを維持したまま、前記オリジナル時間軸を時間伸縮処理することで、前記目標再生時間に対応する目標時間軸を取得するステップを実行する処理と、
を実行し、
前記時間伸縮区間の数が1つである場合、前記ビデオ特殊効果ファイルに対して、
前記ビデオ特殊効果ファイルから特殊効果オブジェクトに対応するオリジナル時間軸を取得する処理、及び
前記オリジナル時間軸のフレームレートを維持したまま、前記オリジナル時間軸を時間伸縮処理することで、前記目標再生時間に対応する目標時間軸を取得するステップを実行する処理と、
を実行するステップをさらに含む、
請求項4に記載の方法。 - 前記時間伸縮区間の数が複数である場合、前記時間伸縮ポリシーに基づいて、前記ビデオ特殊効果ファイルにおいて目標時間軸に対応する特殊効果フレームを決定する前記ステップは、
各時間伸縮区間に対して、
前記ビデオ特殊効果サブファイルから前記特殊効果オブジェクトを含む複数の特殊効果フレーム、及び前記オリジナル時間軸において各前記特殊効果フレームの対応するタイムスタンプを取得して、各前記特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプとする処理、及び
時間伸縮区間、及び各前記特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプに基づいて、前記複数の特殊効果フレームのうち前記目標時間軸での各タイムスタンプに対応する特殊効果フレームを決定する処理を実行するステップを含む、
請求項5に記載の方法。 - 前記時間伸縮区間の数が1つである場合、前記時間伸縮ポリシーに基づいて、前記ビデオ特殊効果ファイルにおいて目標時間軸に対応する特殊効果フレームを決定する前記ステップは、
前記ビデオ特殊効果ファイルから前記特殊効果オブジェクトを含む複数の特殊効果フレーム、及び前記オリジナル時間軸において各前記特殊効果フレームの対応するタイムスタンプを取得して、各前記特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプとするステップと、
時間伸縮区間、及び各前記特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプに基づいて、前記複数の特殊効果フレームのうち前記目標時間軸での各タイムスタンプに対応する特殊効果フレームを決定するステップと、を含む、
請求項5に記載の方法。 - 時間伸縮区間、及び各前記特殊効果フレームのオリジナル特殊効果フレームのタイムスタンプに基づいて、前記複数の特殊効果フレームのうち前記目標時間軸での各タイムスタンプに対応する特殊効果フレームを決定する前記ステップは、
順に前記目標時間軸での各タイムスタンプを目標タイムスタンプとし、かつ
時間伸縮区間に基づいて、前記オリジナル時間軸において前記目標タイムスタンプの対応するオリジナルタイムスタンプを決定する処理、
前記オリジナル時間軸において前記目標タイムスタンプの対応するオリジナルタイムスタンプが前記オリジナル特殊効果フレームのタイムスタンプのいずれかと重なった場合、重なった前記オリジナル特殊効果フレームのタイムスタンプに対応する特殊効果フレームを、前記目標タイムスタンプに対応する特殊効果フレームとして決定する処理、及び
前記オリジナル時間軸において前記目標タイムスタンプの対応するオリジナルタイムスタンプが前記オリジナル特殊効果フレームのタイムスタンプのいずれとも重ならない場合、前記オリジナルタイムスタンプとの距離が最も小さい前記オリジナル特殊効果フレームのタイムスタンプを決定し、当該距離が最も小さい前記オリジナル特殊効果フレームのタイムスタンプに対応する特殊効果フレームを、前記目標タイムスタンプに対応する特殊効果フレームとして決定する処理を実行するステップを含む、
請求項6又は7に記載の方法。 - 時間伸縮区間に基づいて、前記オリジナル時間軸において前記目標タイムスタンプの対応するオリジナルタイムスタンプを決定することは、
各前記時間伸縮区間に対して、
前記目標タイムスタンプが前記時間伸縮区間の開始タイムスタンプ以下である場合、前記目標タイムスタンプを前記オリジナル時間軸において対応するオリジナルタイムスタンプとして決定する処理、
前記目標タイムスタンプが前記時間伸縮区間の開始タイムスタンプよりも大きく、かつ前記時間伸縮区間の終了タイムスタンプよりも小さい場合、前記目標タイムスタンプに対して前記時間伸縮種類に基づくマッピング処理を行うことで、対応するオリジナルタイムスタンプを取得する処理、及び
前記目標タイムスタンプが前記終了タイムスタンプ以上であり、かつ前記目標再生時間よりも小さい場合、前記オリジナル再生時間と前記目標再生時間との第1差分値を決定し、前記第1差分値と前記目標タイムスタンプとの加算処理を行い、加算処理の結果を前記オリジナル時間軸において前記目標タイムスタンプの対応するオリジナルタイムスタンプとして決定する処理を実行するステップを含む、
請求項8に記載の方法。 - 前記目標タイムスタンプに対して前記時間伸縮種類に基づくマッピング処理を行うことで、対応するオリジナルタイムスタンプを取得する前記ステップは、
前記時間伸縮種類が前記時間線形伸縮種類である場合、前記目標再生時間と前記オリジナル再生時間との第2差分値を伸縮長さとして決定し、前記伸縮長さと前記時間伸縮区間の長さとの加算処理を行うステップと、
前記時間伸縮区間の長さと加算処理の結果との比の値算出処理を行うことで、伸縮係数を取得するステップと、
前記目標タイムスタンプと前記開始タイムスタンプとの第3差分値を決定し、前記第3差分値と前記伸縮係数との乗算処理を行うステップと、
乗算処理の結果と前記開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得するステップと、を含む、
請求項9に記載の方法。 - 前記目標タイムスタンプに対して前記時間伸縮種類に基づくマッピング処理を行うことで、対応するオリジナルタイムスタンプを取得する前記ステップは、
前記時間伸縮種類が前記時間反復種類である場合、前記目標タイムスタンプと前記開始タイムスタンプとの第4差分値を決定し、前記第4差分値と前記時間伸縮区間の長さとの剰余算出処理を行うステップと、
剰余算出処理の結果と前記開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得するステップと、を含む、
請求項9に記載の方法。 - 前記目標タイムスタンプに対して前記時間伸縮種類に基づくマッピング処理を行うことで、対応するオリジナルタイムスタンプを取得する前記ステップは、
前記時間伸縮種類が前記時間逆順反復種類である場合、前記目標タイムスタンプと前記開始タイムスタンプとの第5差分値を決定するステップと、
前記第5差分値と前記時間伸縮区間の長さとの剰余算出処理を行うことで、剰余算出処理の結果を取得し、前記第5差分値と前記時間伸縮区間の長さとの比の値算出処理を行うことで、比の値結果を取得するステップと、
前記比の値結果に対して小数点以下切り捨て処理を行うことで、小数点以下切り捨て結果を取得するステップと、
前記小数点以下切り捨て結果が偶数である場合、前記剰余算出処理の結果と前記開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得するステップと、
前記小数点以下切り捨て結果が奇数である場合、前記時間伸縮区間の長さと前記剰余算出処理の結果との第6差分値を決定し、前記第6差分値と前記開始タイムスタンプとの加算処理を行うことで、対応するオリジナルタイムスタンプを取得するステップと、を含む、
請求項9に記載の方法。 - ビデオ特殊効果の処理装置であって、
ビデオ特殊効果ファイルを取得し、前記ビデオ特殊効果ファイルから時間伸縮ポリシーを抽出するファイル取得モジュールと、
前記ビデオ特殊効果ファイルを設計シーンに適用する際に実現すべき目標再生時間を取得する時間取得モジュールであって、前記目標再生時間は、前記ビデオ特殊効果ファイルのオリジナル再生時間と異なるものである時間取得モジュールと、
前記時間伸縮ポリシーに基づいて、前記ビデオ特殊効果ファイルにおいて目標時間軸に対応する特殊効果フレームを決定する特殊効果フレーム決定モジュールであって、前記目標時間軸の長さは前記目標再生時間と一致するものである特殊効果フレーム決定モジュールと、
前記目標時間軸に対応する特殊効果フレームに基づいてレンダリングすることで、前記目標再生時間に応じた目標ビデオ特殊効果を取得するレンダリングモジュールと、を含む、
ビデオ特殊効果の処理装置。 - 電子機器であって、
実行可能な命令を記憶するメモリと、
前記メモリに記憶された実行可能な命令を実行すると、請求項1~12のいずれか一項に記載のビデオ特殊効果の処理方法を実現するプロセッサと、を含む、
電子機器。 - プロセッサによって実行されると、コンピュータに請求項1~12のいずれか一項に記載のビデオ特殊効果の処理方法を行わせる、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010599847.1 | 2020-06-28 | ||
CN202010599847.1A CN111669623B (zh) | 2020-06-28 | 2020-06-28 | 视频特效的处理方法、装置以及电子设备 |
PCT/CN2021/095994 WO2022001508A1 (zh) | 2020-06-28 | 2021-05-26 | 视频特效的处理方法、装置以及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023518388A JP2023518388A (ja) | 2023-05-01 |
JP7446468B2 true JP7446468B2 (ja) | 2024-03-08 |
Family
ID=72390053
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022555878A Active JP7446468B2 (ja) | 2020-06-28 | 2021-05-26 | ビデオ特殊効果の処理方法、装置、電子機器及びコンピュータプログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US12041372B2 (ja) |
EP (1) | EP4044604A4 (ja) |
JP (1) | JP7446468B2 (ja) |
CN (1) | CN111669623B (ja) |
WO (1) | WO2022001508A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111669623B (zh) * | 2020-06-28 | 2023-10-13 | 腾讯科技(深圳)有限公司 | 视频特效的处理方法、装置以及电子设备 |
CN112202751B (zh) * | 2020-09-25 | 2022-06-07 | 腾讯科技(深圳)有限公司 | 动画的处理方法、装置、电子设备及存储介质 |
CN112702656A (zh) * | 2020-12-21 | 2021-04-23 | 北京达佳互联信息技术有限公司 | 视频编辑方法和视频编辑装置 |
CN115209215B (zh) * | 2021-04-09 | 2024-07-12 | 北京字跳网络技术有限公司 | 视频处理方法、装置及设备 |
CN113556576B (zh) * | 2021-07-21 | 2024-03-19 | 北京达佳互联信息技术有限公司 | 视频生成方法及设备 |
CN115842815A (zh) * | 2021-09-02 | 2023-03-24 | 微软技术许可有限责任公司 | 基于Web的视频效果添加 |
CN114419198A (zh) * | 2021-12-21 | 2022-04-29 | 北京达佳互联信息技术有限公司 | 一种帧序列处理方法、装置、电子设备及存储介质 |
CN114630181B (zh) * | 2022-02-24 | 2023-03-24 | 深圳亿幕信息科技有限公司 | 一种视频处理方法、系统、电子设备及介质 |
CN114664331B (zh) * | 2022-03-29 | 2023-08-11 | 深圳万兴软件有限公司 | 一种周期可调的变速特效渲染方法、系统及其相关组件 |
CN117714767A (zh) * | 2022-12-08 | 2024-03-15 | 北京冰封互娱科技有限公司 | 动画播放方法及装置 |
CN117372583B (zh) * | 2023-12-08 | 2024-04-09 | 广东咏声动漫股份有限公司 | 一种动画文件处理方法、系统、电子设备及存储介质 |
CN117714774B (zh) * | 2024-02-06 | 2024-04-19 | 北京美摄网络科技有限公司 | 视频特效封面的制作方法、装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060008247A1 (en) | 2004-07-08 | 2006-01-12 | Miyuki Minami | Editing apparatus and control method thereof, and program and recording medium |
US20080253735A1 (en) | 2007-04-16 | 2008-10-16 | Adobe Systems Incorporated | Changing video playback rate |
JP2012054619A (ja) | 2009-03-19 | 2012-03-15 | Grass Valley Co Ltd | 編集装置、編集方法、編集プログラム及びデータ構造 |
CN110677713A (zh) | 2019-10-15 | 2020-01-10 | 广州酷狗计算机科技有限公司 | 视频图像处理方法及装置、存储介质 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0899666B1 (en) * | 1997-08-25 | 2003-07-09 | Sharp Kabushiki Kaisha | Image processing apparatus displaying a catalog of different types of data in different manner |
JP2004152132A (ja) * | 2002-10-31 | 2004-05-27 | Sharp Corp | 画像出力方法、画像出力装置、画像出力プログラムおよびコンピュータ読取可能な記録媒体 |
JP2007065928A (ja) * | 2005-08-30 | 2007-03-15 | Toshiba Corp | 情報記憶媒体、情報処理方法、情報転送方法、情報再生方法、情報再生装置、情報記録方法、情報記録装置、及びプログラム |
AU2011202182B1 (en) * | 2011-05-11 | 2011-10-13 | Frequency Ip Holdings, Llc | Creation and presentation of selective digital content feeds |
WO2014089345A1 (en) * | 2012-12-05 | 2014-06-12 | Frequency Ip Holdings, Llc | Automatic selection of digital service feed |
EP2763401A1 (de) * | 2013-02-02 | 2014-08-06 | Novomatic AG | Eingebettetes System zur Videoverarbeitung mit Hardware-Mitteln |
US9170707B1 (en) * | 2014-09-30 | 2015-10-27 | Google Inc. | Method and system for generating a smart time-lapse video clip |
CN106060581B (zh) * | 2016-07-05 | 2019-05-07 | 广州华多网络科技有限公司 | 一种视频实时传输数据处理方法、装置及系统 |
JP6623977B2 (ja) * | 2016-08-26 | 2019-12-25 | 富士電機株式会社 | 時間軸伸縮装置、バッチプロセス監視装置、時間軸伸縮システム及びプログラム |
JP6218296B1 (ja) * | 2016-12-26 | 2017-10-25 | 株式会社ユニコーン | 動画再生装置、動画再生方法、そのプログラム及び記録媒体 |
CN108632540B (zh) * | 2017-03-23 | 2020-07-03 | 北京小唱科技有限公司 | 视频处理方法和装置 |
CN107124624B (zh) * | 2017-04-21 | 2022-09-23 | 腾讯科技(深圳)有限公司 | 视频数据生成的方法和装置 |
KR20190075672A (ko) * | 2017-12-21 | 2019-07-01 | 박행운 | 동영상과 동기화된 부가 정보 제공 방법 및 이를 실행하는 시스템 |
CN110213504B (zh) * | 2018-04-12 | 2021-10-08 | 腾讯科技(深圳)有限公司 | 一种视频处理方法、信息发送方法及相关设备 |
CN112150587A (zh) * | 2019-06-11 | 2020-12-29 | 腾讯科技(深圳)有限公司 | 动画数据编码、解码方法、装置、存储介质和计算机设备 |
CN110445992A (zh) * | 2019-08-16 | 2019-11-12 | 深圳特蓝图科技有限公司 | 一种基于xml的视频剪辑合成方法 |
CN110674341B (zh) * | 2019-09-11 | 2023-07-25 | 广州方硅信息技术有限公司 | 特效处理方法、装置、电子设备及存储介质 |
CN110708596A (zh) * | 2019-09-29 | 2020-01-17 | 北京达佳互联信息技术有限公司 | 生成视频的方法、装置、电子设备及可读存储介质 |
CN110769313B (zh) * | 2019-11-19 | 2022-02-22 | 广州酷狗计算机科技有限公司 | 视频处理方法及装置、存储介质 |
CN111050203B (zh) * | 2019-12-06 | 2022-06-14 | 腾讯科技(深圳)有限公司 | 一种视频处理方法、装置、视频处理设备及存储介质 |
CN113038149A (zh) * | 2019-12-09 | 2021-06-25 | 上海幻电信息科技有限公司 | 直播视频互动方法、装置以及计算机设备 |
CN111031393A (zh) * | 2019-12-26 | 2020-04-17 | 广州酷狗计算机科技有限公司 | 视频播放方法、装置、终端及存储介质 |
CN111193876B (zh) * | 2020-01-08 | 2021-09-07 | 腾讯科技(深圳)有限公司 | 视频中添加特效的方法及装置 |
CN111258526B (zh) * | 2020-05-06 | 2020-08-28 | 上海幻电信息科技有限公司 | 投屏方法和系统 |
CN111669623B (zh) * | 2020-06-28 | 2023-10-13 | 腾讯科技(深圳)有限公司 | 视频特效的处理方法、装置以及电子设备 |
-
2020
- 2020-06-28 CN CN202010599847.1A patent/CN111669623B/zh active Active
-
2021
- 2021-05-26 JP JP2022555878A patent/JP7446468B2/ja active Active
- 2021-05-26 WO PCT/CN2021/095994 patent/WO2022001508A1/zh unknown
- 2021-05-26 EP EP21834318.4A patent/EP4044604A4/en active Pending
-
2022
- 2022-04-26 US US17/730,050 patent/US12041372B2/en active Active
-
2024
- 2024-06-05 US US18/735,059 patent/US20240323308A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060008247A1 (en) | 2004-07-08 | 2006-01-12 | Miyuki Minami | Editing apparatus and control method thereof, and program and recording medium |
US20080253735A1 (en) | 2007-04-16 | 2008-10-16 | Adobe Systems Incorporated | Changing video playback rate |
JP2012054619A (ja) | 2009-03-19 | 2012-03-15 | Grass Valley Co Ltd | 編集装置、編集方法、編集プログラム及びデータ構造 |
CN110677713A (zh) | 2019-10-15 | 2020-01-10 | 广州酷狗计算机科技有限公司 | 视频图像处理方法及装置、存储介质 |
Non-Patent Citations (1)
Title |
---|
糸曽賢志, 山口良介, 月足直人 著,"Adobe After Effects CC/CS6 スーパーテクニック",第1版,株式会社ソーテック社,2014年01月31日,pp.44-64 |
Also Published As
Publication number | Publication date |
---|---|
US20240323308A1 (en) | 2024-09-26 |
CN111669623A (zh) | 2020-09-15 |
CN111669623B (zh) | 2023-10-13 |
EP4044604A1 (en) | 2022-08-17 |
WO2022001508A1 (zh) | 2022-01-06 |
JP2023518388A (ja) | 2023-05-01 |
EP4044604A4 (en) | 2023-01-18 |
US20220264029A1 (en) | 2022-08-18 |
US12041372B2 (en) | 2024-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7446468B2 (ja) | ビデオ特殊効果の処理方法、装置、電子機器及びコンピュータプログラム | |
EP3329682B1 (en) | A system for compositing video with interactive, dynamically rendered visual aids | |
US7039643B2 (en) | System, method and apparatus for converting and integrating media files | |
CN101193250B (zh) | 产生运动图像的帧信息的系统和方法 | |
US20160358367A1 (en) | Animation based on Content Presentation Structures | |
CN113891113A (zh) | 视频剪辑合成方法及电子设备 | |
JP2009501388A (ja) | アニメーション間の滑らかな遷移 | |
JP2004287595A (ja) | 複合メディアコンテンツの変換装置及び変換方法並びに複合メディアコンテンツ変換プログラム | |
WO2020220773A1 (zh) | 图片预览信息的显示方法、装置、电子设备及计算机可读存储介质 | |
CN114450966A (zh) | 用于异构沉浸式媒体的表示和流式传输的数据模型 | |
CN111327941B (zh) | 一种离线视频播放方法、装置、设备及介质 | |
CN116437153A (zh) | 虚拟模型的预览方法、装置、电子设备及存储介质 | |
CN114866801B (zh) | 视频数据的处理方法、装置、设备及计算机可读存储介质 | |
CN116233561A (zh) | 一种虚拟礼物生成方法、装置、设备及介质 | |
CN115934974A (zh) | 一种多媒体数据的处理方法、装置、设备及介质 | |
CN115065866B (zh) | 一种视频生成方法、装置、设备及存储介质 | |
CN112348928A (zh) | 动画合成方法、动画合成装置、电子设备及介质 | |
US20020073221A1 (en) | Method for the transmission and synchronization of multimedia data through computer networks | |
CN115442639B (zh) | 一种特效配置文件的生成方法、装置、设备及介质 | |
CN113114955B (zh) | 一种视频的生成方法、装置及电子设备 | |
CN111107425B (zh) | 基于渲染组件元素获取计算资源的方法、系统和存储介质 | |
CN118504522A (zh) | 报告生成方法、系统、电子设备及存储介质 | |
CN115134658A (zh) | 视频处理方法、装置、设备及存储介质 | |
CN116980690A (zh) | 多媒体数据的处理方法、装置、存储介质及计算机设备 | |
Gorgan et al. | Remote visualization of 3D graphical models |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220915 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220915 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231012 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231030 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240130 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7446468 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |