JP7466763B2 - マルチメディアデータの処理方法、生成方法及び関連機器 - Google Patents

マルチメディアデータの処理方法、生成方法及び関連機器 Download PDF

Info

Publication number
JP7466763B2
JP7466763B2 JP2023514968A JP2023514968A JP7466763B2 JP 7466763 B2 JP7466763 B2 JP 7466763B2 JP 2023514968 A JP2023514968 A JP 2023514968A JP 2023514968 A JP2023514968 A JP 2023514968A JP 7466763 B2 JP7466763 B2 JP 7466763B2
Authority
JP
Japan
Prior art keywords
data
material data
target
multimedia data
editing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023514968A
Other languages
English (en)
Other versions
JP2023541569A (ja
Inventor
凡 伍
逍然 ▲張▼
▲ちぉん▼ ▲単▼
▲シン▼ 李
文海 ▲張▼
▲錦▼敏 李
▲龍▼▲凱▼ 文
立峰 曾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Publication of JP2023541569A publication Critical patent/JP2023541569A/ja
Application granted granted Critical
Publication of JP7466763B2 publication Critical patent/JP7466763B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036Insert-editing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/186Templates
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

(関連出願の相互参照)
本出願は2020年09月04日に出願した出願番号202010924421.9、発明名称「マルチメディアデータの処理方法、生成方法及び関連機器」の中国特許出願の優先権を主張し、該出願の全ての内容は参照によって本出願に組み込まれる。
本開示はコンピュータの技術分野に関し、具体的には、本開示はマルチメディアデータの処理方法、生成方法及び関連機器に関する。
現在、市場には複数のビデオ編集ツールがあり、様々なビデオ編集機能を提供し、異なるユーザの編集ニーズを満たすことができる。しかしながら、従来のビデオ編集の技術的ハードルが高く、端末処理に対する要求も高く、ビデオ編集の効率が非常に低いため、多くのユーザをビデオ編集から遠ざけてしまう。
当該発明の概要部分は、後の具体的な実施形態で詳細に説明される構想を簡潔な形で伝えるために提供される。当該発明内容は、保護を主張する技術的解決手段の重要な特徴又は必要な特徴を特定することを目指すものではなく、保護を主張する技術的解決手段の範囲を限定することを目指すものでもない。
本開示は、第1側面において、マルチメディアデータを取得するステップと、前記マルチメディアデータにおける素材データが表示されている編集ページを表示するステップと、少なくとも1セグメントの素材データに対するマーキング操作に応答して、前記少なくとも1セグメントの素材データをマーキングするステップと、テンプレート生成命令に応答して、前記マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップとを含む、マルチメディアデータの処理方法を提供する。
本開示は、第2側面において、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するステップと、前記テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示するステップと、導入された目標素材データを受信するステップと、生成命令に応答して、前記目標素材データ及び前記テンプレートを基に目標マルチメディアデータを生成するステップとを含む、マルチメディアデータの生成方法を提供する。
本開示は、第3側面において、マルチメディアデータを取得するための第1取得モジュールと、前記マルチメディアデータにおける素材データが表示されている編集ページを表示するための第1表示モジュールと、少なくとも1セグメントの素材データに対するマーキング操作に応答して、少なくとも1セグメントの素材データをマーキングするためのマーキングモジュールと、テンプレート生成命令に応答して、前記マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するための第1生成モジュールとを含む、マルチメディアデータの処理装置を提供する。
本開示は、第4側面において、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するための第2取得モジュールと、前記テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示するための第2表示モジュールと、導入された目標素材データを受信するための受信モジュールと、生成命令に応答して、前記目標素材データ及び前記テンプレートを基に目標マルチメディアデータを生成するための第2生成モジュールとを含む、マルチメディアデータの生成装置を提供する。
本開示は、第5側面において、コンピュータプログラムが記憶されているメモリ、及びコンピュータプログラムが実行されると、第1側面又は第2側面の方法を実行するためのプロセッサを含む、電子機器を提供する。
本開示は、第6側面において、コンピュータプログラムが記憶されており、前記コンピュータプログラムがプロセッサによって実行されると、第1側面又は第2側面の方法が実行される、コンピュータ可読媒体を提供する。
本開示が提供する技術的解決手段による有益な効果は、以下を含んでもよい。
(1)本開示が提供するマルチメディアデータの処理方法及び関連機器では、マルチメディアデータを取得した後、マルチメディアデータにおける素材データが表示されている編集ページを表示し、ユーザは当該編集ページで素材データをマーキングしてもよく、さらに、テンプレート生成命令がトリガされると、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成する。本開示の実施例では、直接取得されたマルチメディアデータにおける素材データに基づいてマーキングし、且つマーキングされた素材データを除去した後、テンプレートを生成し、これにより、ユーザがテンプレートを作成する操作ステップを減少させ、テンプレートの作成効率を向上させ、また、端末のマルチメディアデータに対する処理要求の低減に寄与し、ユーザの様々なニーズに適応して、様々なテンプレートを生成し且つテンプレートの変換率を向上させることにさらに寄与する。
(2)本開示が提供するマルチメディアデータの生成方法及び関連機器では、現在閲覧しているマルチメディアデータに対応するテンプレートを取得した後、テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示し、ユーザは当該素材導入ページで目標素材データを導入することができ、さらに、生成命令がトリガされると、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成する。本開示の実施例は、直接マルチメディアデータに対応するテンプレート及び導入された目標素材データに基づいて目標マルチメディアデータを生成することができ、これにより、ユーザが目標マルチメディアデータを作成する操作ステップを減少させ、目標マルチメディアデータの作成効率を向上させ、ユーザの操作を容易にし、また、端末のマルチメディアデータに対する処理要求を低減し、テンプレートを基に目標マルチメディアデータを編集する効率及び数を増加させることにも寄与し、ユーザの操作体験が向上する。
図面と合わせて以下の具体的な実施形態を参照すると、本開示の各実施例の上記及び他の特徴、利点及び側面はより明確になる。図面全体を通じて、同一又は類似の符号は同一又は類似の要素を表す。図面は例示的なものであり、現物及び要素は必ずしも比例して描かれていないことを理解すべきである。
本開示の実施例で提供されるマルチメディアデータの処理方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの処理方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの処理方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの処理方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの生成方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの生成方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの生成方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの生成方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの生成方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの生成方法のフローチャートである。 本開示の実施例で提供されるマルチメディアデータの処理方法における第1編集ページの模式図である。 本開示の実施例で提供されるマルチメディアデータの処理方法における第2編集ページの模式図である。 本開示の実施例で提供されるマルチメディアデータの生成方法における第1素材導入ページの模式図である。 本開示の実施例で提供されるマルチメディアデータの生成方法におけるプレビューページの模式図である。 本開示の実施例で提供されるマルチメディアデータの生成方法における別のプレビューページの模式図である。 本開示の実施例で提供されるマルチメディアデータの生成方法における目標マルチメディアデータを閲覧するページの模式図である。 本開示の実施例で提供されるマルチメディアデータの生成方法における第3機能入口に対するタッチ操作に応答して表示されるページの模式図である。 本開示の実施例で提供されるマルチメディアデータの生成方法における第3機能入口に対するタッチ操作に応答して表示されるページの別の模式図である。 本開示の実施例で提供されるマルチメディアデータの処理方法及び生成方法の応用環境の模式図である。 本開示の実施例で提供されるマルチメディアデータの処理装置の構成図である。 本開示の実施例で提供されるマルチメディアデータの生成装置の構成図である。 本開示の実施例で提供される電子機器の構成図である。
以下において、図面を参照しながら本開示の実施例をより詳細に説明する。本開示のいくつかの実施例を図面に示しているが、本開示は種々の形態で実現でき、ここで説明される実施例に限定されるものとして解釈されるべきではなく、逆に、これらの実施例は本開示をより明確且つ完全に理解するために提供されることを理解すべきである。本開示の図面及び実施例は、例示的なものに過ぎず、本開示の保護範囲を限定するためのものではないことを理解すべきである。
本開示の方法の実施形態に記載された各ステップは、異なる順序で実行されてもよく、及び/又は並行して実行されてもよいことを理解すべきである。また、方法の実施形態は、追加のステップを含んでもよく、及び/又は示されたステップの実行を省略してもよい。本開示の範囲はこの点で限定されない。
本明細書で使用される「含む」という技術用語及びその変形は、開放的な包含であり、即ち「含むがそれに限定されない」との意味である。「基づく」という技術用語は、「少なくとも部分的に基づく」との意味である。「一実施例」という技術用語は、「少なくとも1つの実施例」を表し、「別の実施例」という技術用語は、「少なくとも1つの別の実施例」を表し、「いくつかの実施例」という技術用語は、「少なくともいくつかの実施例」を表す。その他の用語の関連する定義は、後文で説明される。
なお、本開示で言及される「第1」、「第2」等の概念は、装置、モジュール又はユニットを区別するためのものに過ぎず、これらの装置、モジュール又はユニットを必ず異なる装置、モジュール又はユニットとして限定するためのものではなく、これらの装置、モジュール又はユニットによって実行される機能の順序又は相互依存関係を限定するためのものでもないことに注意する必要がある。
なお、本開示で言及される「1つ」、「複数」という修飾語は、限定的なものではなく、例示的なものであり、当業者であれば、文脈において別段の明示的な指摘がない限り、「1つ又は複数」と理解されるべきであることを理解すべきであることに注意する必要がある。
本開示の実施形態における複数の装置の間でインタラクションするメッセージ又は情報の名称は、説明するためのものに過ぎず、これらのメッセージ又は情報の範囲を限定するためのものではない。
本開示の目的、技術的解決手段及び利点をより明確にするために、以下において、図面を参照しながら本開示の実施形態をさらに詳細に説明する。
以下において、本開示の技術的解決手段及び本開示の技術的解決手段が上記の技術的問題をどのように解決するかについては、具体的な実施例により詳細に説明する。以下のいくつかの具体的な実施例は相互に組み合わせてもよく、同一又は類似の定義又はプロセスについて再度詳細に説明しない実施例がある。以下において、図面を参照しながら本開示の実施例を説明する。
本開示はマルチメディアデータの処理方法を提供し、該方法は、具体的には、本開示の実施例に係る電子機器によって実行可能であり、具体的には、該電子機器は、携帯端末、PC端末(personal computer,パーソナルコンピュータ)等のインタフェース対話をサポートする任意の機器であってもよい。ユーザは電子機器を使用してwebクライアント又はアプリケーションクライアントにログインし、さらにマルチメディアデータの処理を実現する。マルチメディアデータは、複数セグメントの素材データ(例えば、ビデオデータ、画像データ、テキストデータ、オーディオデータ等の1つ又は複数を組み合わせた素材データ)によって組み合わせたものであってもよく、マルチメディアデータはさらに、素材データに関連する編集情報を含んでもよく、本開示の実施例において、テンプレート、目標マルチメディアデータはいずれもマルチメディアデータのうちの1つに属する。具体的には、図1に示すように、本開示は、下記のステップS101-S104を含む。
S101では、マルチメディアデータを取得する。
選択的に、取得されたマルチメディアデータは、端末やサーバに事前に記憶されているデータ、又は端末やサーバを経由して様々な編集操作を行って得られたデータを含んでもよく、ユーザが編集したマルチメディアデータをさらに含んでもよい。
一実施例において、ユーザは、マルチメディアデータを編集して生成した後、該マルチメディアデータを端末に記憶するか又は配信することができる以外、さらにテンプレート生成命令により、現在編集しているマルチメディアデータを、テンプレートを生成するためのマルチメディアデータに変換してもよい。
S102では、マルチメディアデータにおける素材データが表示されている編集ページを表示する。
選択的に、現在取得されたマルチメディアデータに基づいて編集ページを表示するステップは、具体的には、マルチメディアデータにおける1セグメント又は複数セグメントの素材データを編集ページに表示するステップを含む。該編集ページで、ユーザは表示されている素材データをマーキングすることができる。
選択的に、各セグメントの素材データは、マルチメディアデータにおけるビデオ、テキスト情報、オーディオ、画像等のうちの少なくとも1種のデータを含む。
S103では、少なくとも1セグメントの素材データに対するマーキング操作に応答して、少なくとも1セグメントの素材データをマーキングする。
選択的に、ユーザは少なくとも1セグメントの素材データを選択してマーキングすることができ、マーキングされた素材データはマーキング状態となり、マーキング状態にある素材データは置き換え可能な素材データであり、該マルチメディアデータに基づいて生成されたテンプレートが目標マルチメディアデータの編集を行う場合、マーキングされた素材データは空であり、素材データを再導入する必要がある。
選択的に、編集ページを表示する際に、さらに全ての素材データをデフォルトでマーキング状態にしてもよく、ユーザは任意の素材データに対するマーキングを取り消すことができ、つまり、編集ページに表示されている全ての素材データは置き換え可能な素材データとしてマーキングされる場合、ユーザが任意の素材データに対するマーキングを取り消すと、該素材データに対するマーキングは取り消され、ユーザが次のステップを実行する操作をトリガすることは、現在の素材データのマーキング状態を確定することに相当する。
S104では、テンプレート生成命令に応答して、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成する。
選択的に、テンプレート生成命令を受信する際に、ユーザがマルチメディアデータに対する調整を完了したことを特徴づけ、この時、マルチメディアデータからステップS103におけるマーキング状態にある素材データを除去し、且つマーキングされた素材データを除去したマルチメディアデータに基づいてテンプレートを生成する。具体的には、ステップS103で、ユーザは対話層(UI層)により素材データをマーキングし、ステップS104でテンプレートを生成する際に、論理層ではマルチメディアデータからマーキングされた素材データを除去する。
選択的に、本開示の実施例において、除去は、素材データの初期属性の削除、変更のうちの少なくとも1つの操作を含み、それは異なるタイプの素材データに応じて異なる操作を採用することができる。
本開示の実施例において、提供されたマルチメディアデータの処理方法は主に、ユーザがテンプレートを作成するシーンに応用される。ユーザにテンプレートを作成するルート(機能)を提供することにより、テンプレートの数を大幅に増加させ、テンプレートのスタイルを豊富にすることができ、さらに、ユーザのビデオ編集の様々なニーズに対応し、テンプレートの変換率及びユーザ体験を向上させることに寄与する。
図2、図11a及び図11bに示すように、ステップS102で編集ページを表示するステップは、以下のS201-S202のうちの少なくとも1つを含む。
S201では、マルチメディアデータがビデオ、オーディオ、及び/又は画像に対応する素材データを含む場合、素材データを表示するための第1表示領域及び素材データをマーキングするための機能ウィジェット(図11aに示す)を含む第1編集ページを表示する。
選択的に、マルチメディアデータに含まれるビデオ、オーディオ及び/又は画像に対応する素材データを同一のページに表示し、第1編集ページに表示する必要がある素材データが1セグメントよりも多い場合、第1表示領域では素材データを順次表示し、例えば、2セグメントのビデオデータと1セグメントのオーディオデータを含む場合、マルチメディアデータにおける素材データの再生時間の順位に基づき、順次表示する。
選択的に、ユーザの素材データに対する確認及びマーキングを容易にするために、1セグメントの素材データに対応する1つの機能ウィジェットを設定することができ、マルチメディアデータに2セグメントの素材データが含まれる場合、2つの機能ウィジェットに対応する。一実施例において、素材データをマーキングするための機能ウィジェットを第1表示領域の下方に表示し、機能ウィジェットはさらに他の位置に設定されてもよく、本開示の実施例はこれを限定しない。
一実施例において、素材データをマーキングするための機能ウィジェットには、さらに素材データの編集情報が表示されてもよく、編集情報はユーザによる該素材データの編集結果を特徴づける(例えば、ビデオデータに対して変速処理を行い、ビデオデータを初期再生速度をベースとして二倍速に調整して再生することにより、該素材データの時間長さが短縮される)。例えば、素材データがビデオデータを含む場合、機能ウィジェットには、マルチメディアデータにおける対応するビデオデータの再生時間も表示されている。
S202では、マルチメディアデータがテキスト情報に対応する素材データを含む場合、テキスト情報に対応する素材データをマーキングするための機能ウィジェット(図11bに示す)を含む第2編集ページを表示する。
選択的に、マルチメディアデータがテキスト情報に対応する素材データを含む場合、独立するページ、即ち、第2編集ページを採用して表示することができる。第2編集ページには、素材データをマーキングするための機能ウィジェットが含まれ、該機能ウィジェットには、素材データのテキスト情報が表示されてもよい。具体的には、ユーザの素材データに対する確認及びマーキングを容易にするために、1セグメントのテキスト情報に対応する1つの機能ウィジェットを設定することができる。各機能ウィジェットについて、対応する各セグメントのテキスト情報を表示する方式は、(1)該セグメントのテキスト情報に含まれる文字数が設定された文字数以下である場合、テキスト情報における全ての文字を機能ウィジェットに表示する(例えば、テキスト情報が「はい」であり、文字数を5つに設定する場合、「はい」を機能ウィジェットに直接表示する)方式と、(2)該セグメントのテキスト情報に含まれる文字数が設定された文字数を超える場合、テキスト情報における先頭に順序付けられた文字を機能ウィジェットに表示する(例えば、テキスト情報が「雨の日に傘をさしてもいい」であり、文字数を5つに設定する場合、「可」を機能ウィジェットに表示する)方式とのうちの少なくとも1つを含む。また、テキスト情報はさらに、同一の時間ノードで再生されたビデオフレームと重畳して表示することができる。本開示は具体的な表示方式を限定しない。
選択的に、第2編集ページはさらに第1表示領域を含んでもよく、この時、第1表示領域は、テキスト情報と同一の時間ノードで再生された他の素材データを表示するために用いられ、例えば、時間ノードの第2sに対応する素材データがテキスト情報及び第1セグメントのビデオデータを含む場合、第2編集ページにおける第1表示領域に第1セグメントのビデオデータとテキスト情報との重畳データを表示する。
一実施例において、マルチメディアデータに含まれるビデオ、オーディオ、画像及び/又はテキスト情報に対応する素材データは同一のページに表示されてもよく、つまり、編集ページには、第1表示領域、様々な素材データをマーキングするための機能ウィジェットが含まれる。
選択的に、図11a及び図11bに示すように、機能ウィジェットの対話方式は、以下の(1)~(3)のうちの少なくとも1つを含んでもよい。
(1)四角形領域の任意の位置(機能ウィジェットは四角形で表示される)にタッチすることにより、対応する素材データをマーキングすると共に、該四角形領域内の円形領域にマーキング情報を表示する。
(2)四角形領域内の円形領域(機能ウィジェットは円形で表示される)にタッチすることにより、対応する素材データをマーキングすると共に、該円形領域にマーキング情報を表示する。
(3)全選択機能に対応する円形領域(全ての素材データをマーキングするための機能ウィジェットは円形で表示される)にタッチすることにより、全ての素材データをマーキングすると共に、全ての円形領域にマーキング情報を表示する。
円形領域にマーキング情報を表示することは、円形領域に記号「√」を表示することであってもよいし、所定の色で円形領域を充填することであってもよく、本開示はこれを限定しない。
選択的に、図3に示すように、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップS104は、
マーキングされた素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、マルチメディアデータからマーキングされた素材データを除去し、且つマルチメディアデータにおけるマーキングされた素材データの対応する編集情報を確定するステップS301と、
マーキングされた素材データを除去したマルチメディアデータ及び編集情報に基づいてテンプレートを生成するステップS302と、を含む。
具体的には、ステップS103においてユーザが対話層(UI層)で素材データをマーキングした後、ステップS104においてテンプレートを生成する際に、論理層ではマルチメディアデータからマーキングされた素材データを除去し、且つマーキングされた素材データに対応する情報をテンプレートに対応する記述ファイルに書き込み、例えば、マーキングされた素材データを配列の形でテンプレートに対応する記述ファイルに書き込む。
選択的に、編集情報は、素材データの属性を特徴づけ、具体的には、素材データの時間長さ、順序付け位置、サイズ、解像度、オーディオ属性のうちの少なくとも1つの情報を含んでもよい。時間の長さはマルチメディアデータにおける素材データの再生時間であり、順序付け位置はマルチメディアデータにおける素材データの再生順序であり、サイズは素材データの表示時のサイズであり、解像度は素材データをマルチメディアデータに編集する時に適合する解像度であり、オーディオ属性は、素材データをマルチメディアデータに編集する時にバックグラウンド音楽が存在するか否かの情報、及びバックグラウンド音楽の音量レベルの情報を含む。編集情報はさらに、ユーザがマルチメディアデータを編集する際の編集結果を特徴づけることができ、例えば、初期に導入して編集するビデオデータの時間長さが3秒であり、ユーザの編集を経てマルチメディアデータを形成した場合、該ビデオデータの時間長さは1.2秒となり、つまり、該ビデオデータの編集情報には、時間長さが1.2秒であることを特徴づける情報が含まれる。選択的に、テンプレートでは、マルチメディアデータに対して、マーキングされた素材データが欠いているが、マーキングされた素材データに対応する編集情報が保持されている。
一実施例において、編集情報は、素材データに基づいて編集する時に採用される関連機能を特徴づける情報をさらに含み、関連機能は、特殊効果、ステッカ、フィルタ、ピクチャインピクチャ、遷移等を含むが、それらに限定されない。一例として、あるセグメントの素材データに名称「幻」の特殊効果が加えられている場合、編集情報は、該特殊効果の名称の情報をさらに含む。
選択的に、ステップS301における除去操作は、削除操作として理解してもよい。
一実施例において、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップS104は、マーキングされた素材データがテキスト情報に対応する素材データを含む場合、テキスト情報に対応する素材データを編集可能なデータとして設定するステップと、編集可能なデータを設定したマルチメディアデータに基づいてテンプレートを生成するステップと、を含む。
選択的に、マーキングされた素材データがテキスト情報に対応する素材データを含む場合、テキスト情報がマルチメディアデータの旨を表現することに寄与するため、マルチメディアデータを調整する際に、テキスト情報に対応する素材データを、削除することではなく、編集可能なデータとして設定し、後段階でユーザはテンプレートを基に目標マルチメディアデータの編集を行う際に、既存のテキスト情報を編集することができ、つまり、テンプレートはマーキングされたテキスト情報に対応する素材データを含むが、該素材データは編集可能なデータとして設定される。
選択的に、素材データを編集可能なデータとして設定することは、除去操作における素材データの初期属性を変更する操作と理解することができる。
選択的に、図4に示すように、本開示の方法は、ステップS401-S403をさらに含む。
S401では、マルチメディアデータにおけるいずれかの画像フレームに対するマーキング操作に応答して、マルチメディアデータを表示する際の表紙画像として画像フレームを設定する。
具体的には、マルチメディアデータに対する処理は、マルチメディアデータの表示時の表紙画像の設定をさらに含み、該表紙画像は、マルチメディアデータにおけるいずれかの画像フレームであってもよく、ユーザによる選択でマーキング又はデフォルトマーキングを行う。
一実施例において、図4に示すように、マルチメディアデータを表示する際の表紙画像として画像フレームを設定するステップS401の後に、ステップS402とステップS403をさらに含む。
S402では、目標テキストデータを取得し、且つ目標テキストデータを表紙画像に重畳して表示する。
S403では、重畳された表紙画像に基づいてマルチメディアデータを更新する。
選択的に、マルチメディアデータは、マルチメディアデータに対応するテンプレートを紹介するために、提示時に表紙に表示される目標テキストデータを設定することができ、これにより、ユーザがマルチメディアデータを閲覧する際に、該マルチメディアデータに対応するテンプレートの特徴を知り、ユーザのマルチメディアデータに対応するテンプレートの利用量を向上させ、さらにテンプレートの変換率を向上させることに寄与する。
一実施例において、取得された目標テキストデータはさらにフローティングの形態でマルチメディアデータと共に表示され、つまり、マルチメディアデータを再生すると同時に、目標テキストデータを表示することができる。ユーザはマルチメディアデータを見ながら、該マルチメディアデータの効果、特徴等の情報を把握することができ、これによりユーザが該マルチメディアデータに対応するテンプレートを採用して目標マルチメディアデータの作成を行う意欲を向上させる。
選択的に、マルチメディアデータを取得するステップは、以下の第1項及び第2項のうちのいずれかを含む。
第1項では、現在撮影された素材データ及び事前に記憶された素材データのうちの少なくとも1つに基づき、且つ編集操作により生成されたマルチメディアデータを取得する。
具体的には、取得されたマルチメディアデータは、ユーザが初期の素材データに基づいて編集したデータであってもよく、例えば、ユーザは、現在撮影されたビデオデータを導入することにより、ビデオデータに対してクリッピングを行い(例えば、再生速度を調整し、マスクを増加させ、クロマキーイング処理を行う等)、及び/又はビデオデータを基に特殊効果、ステッカ、フィルタ、ピクチャインピクチャ、遷移、テキスト情報、画像情報、バックグラウンド音楽等を加えて生成されたマルチメディアデータである。
第2項では、特定のテンプレートを基に編集して生成されたマルチメディアデータを取得する。
具体的には、ユーザがマルチメディアデータを作成する効率を向上させるために、ユーザはさらに、現在取得された特定のテンプレートによって編集してマルチメディアデータを生成することができる(この時、ユーザは、素材データを導入できるだけでなく、さらに素材データに対し、再生速度の調整、フィルタの増加等の編集を行い、マルチメディアデータの多様性を豊富化することもできる)。
選択的に、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップS104の後に、さらに、
マルチメディアデータ及びテンプレートを保存及び/又は配信するステップを含み、マルチメディアデータ及びテンプレートを配信するステップは、マルチメディアデータ及びテンプレートをサーバにアップロードするステップを含む。
具体的には、マルチメディアデータが配信された後、サーバによるプッシュを経て、ユーザは端末で該マルチメディアデータを閲覧することができる。これに対応して、ユーザが現在閲覧しているマルチメディアデータに基づいて対応するテンプレートを取得して、目標マルチメディアデータの編集を行う際に、サーバによって該テンプレートを送信する。
本開示が提供するマルチメディアデータの処理方法において、マルチメディアデータを取得した後、マルチメディアデータにおける素材データが表示されている編集ページを表示し、ユーザは該編集ページで素材データをマーキングすることができる。さらにテンプレート生成命令を受信すると、端末機器はマルチメディアデータからマーキングされた素材データを除去してテンプレートを生成することができる。本開示の実施例は、直接取得されたマルチメディアデータに基づき、マーキングを行い、且つマーキングされた素材データを除去して、テンプレートを生成し、これによりユーザがテンプレートを作成する操作ステップを減少させ、テンプレートの作成効率を向上させ、また、端末機器のマルチメディアデータに対する処理要求の低減に寄与し、さらに、ユーザの様々なニーズに適応して、テンプレートの変換率を向上させることに寄与する。
同一の発明構想に基づき、図5に示すように、本開示の実施例はマルチメディアデータの生成方法を提供し、テンプレートを基に目標マルチメディアデータを作成する応用シーンに応用され、具体的には、以下のステップS501-S504を含む。
S501では、現在閲覧しているマルチメディアデータに対応するテンプレートを取得する。
選択的に、サーバは記憶されているマルチメディアデータをクライアントにプッシュし、サーバによってプッシュされたマルチメディアデータを表示する際に、マルチメディアデータを1つのテンプレートユニットとして表示してもよいし、マルチメディアデータのコンテンツ特徴に基づき、異なるコンテンツのマルチメディアデータを異なるタイプのマルチメディアデータとして定義し、且つ異なるタイプのテンプレートユニットに表示してもよい(例えば、グルメ、ペット、旅行等のタイプのテンプレートユニット)。ユーザは、自分のマルチメディアデータ編集のニーズに応じて、異なるタイプのテンプレートユニットのマルチメディアデータを選択して閲覧することができる。ユーザがあるマルチメディアデータに対してトリガされた編集命令を受信すると、端末機器は現在閲覧しているマルチメディアデータに基づいて対応するテンプレートを取得する。対応するテンプレートを取得するステップは、マルチメディアデータに基づいて、対応するテンプレートを取得する要求をサーバに送信し、サーバによって対応するテンプレートをクライアントに送信するステップを含んでもよい。
S502では、テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示する。
具体的には、素材導入ページに導入対象の素材データの編集情報が表示されており、導入対象の素材データの編集情報は、テンプレートを作成するユーザがテンプレートを配信する前に置き換え可能にマーキングされた素材データに対応する編集情報である。選択的に、編集情報は、特徴づけられた導入対象の素材データの時間長さ、順序付け位置、サイズ、解像度、オーディオ属性のうちの少なくとも1つの情報を含む。
選択的に、上記のマルチメディアデータの処理方法を参照すると、導入対象の素材データの編集情報は、マルチメディアデータに基づく処理方法においてマルチメディアデータから除去されたマーキングされた素材データに対応する編集情報である。
S503では、導入された目標素材データを受信する。
選択的に、編集情報の表示は、導入された目標素材データへのユーザの選択を案内することに寄与し、例えば、現在の導入対象の素材データがビデオデータである場合、表示される編集情報は、各セグメントのビデオデータの時間長さ及び順序付け位置を含む。ユーザは、編集情報に基づいて事前に記憶された素材データから素材データを選択して導入するか、編集情報に基づいて素材データを撮影して導入することができる。
選択的に、導入された目標素材データの数及び順序は、テンプレート内の導入対象の素材データの数及び再生順序と一致し、導入された目標素材データの数がテンプレート内の導入対象の素材データの数と一致しない場合、提示情報を送信し、ユーザの調整を容易にし、テンプレートに対応するマルチメディアデータが提示できる効果によりフィットすることができる。
S504では、生成命令に応答して、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成する。
選択的に、生成命令に応答して、目標素材データとテンプレートを合成して、目標マルチメディアデータを取得し、これは、現在導入された目標素材データで、現在閲覧しているマルチメディアデータにおける対応する位置の素材データを置き換え、現在閲覧しているマルチメディアデータの提示効果に類似する目標マルチメディアデータを取得すると理解することができる。
具体的には、ユーザは選択したテンプレートを採用して目標マルチメディアデータを作成する時に、ユーザが目標素材データを導入した後、端末は、目標素材データの識別子及び記述ファイルにおけるマーキングされた素材データに対応する配列内の識別子に基づき、目標素材データを該テンプレートの記述ファイルにバックフィルし、完全なファイルの復元を行って、ユーザが導入した目標素材データとテンプレートの効果を融合させて目標マルチメディアデータを生成する。
本開示の実施例で提供されるマルチメディアデータの生成方法は、主にユーザがテンプレートを基に目標マルチメディアデータの編集を行うシーンに応用され、該方法では、目標素材データを導入することにより、現在閲覧しているマルチメディアデータに対応するテンプレートと組み合わせて、現在閲覧しているマルチメディアデータの提示効果に類似する目標マルチメディアデータを生成することができ、該方法は、ユーザが目標マルチメディアデータ編集を行う技術的ハードルを低減し、ユーザが目標マルチメディアデータを配信する数及び効率を増加させることに寄与し、ユーザの操作体験を向上させることにも寄与する。
選択的に、図6に示すように、素材導入ページを表示するステップS502は、以下のS601及びS602のうちの少なくとも1つを含む。
S601では、導入対象の素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、事前に記憶された素材データを表示するための第2表示領域、編集情報を表示するための第3表示領域、及び撮影機器を起動させるための第1機能入口を含む第1素材導入ページを表示する。
選択的に、図12に示すように、導入対象の素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、つまり、ユーザが現在導入する必要のある素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、事前に記憶された素材データを表示するための第2表示領域、編集情報を表示するための第3表示領域、及び撮影機器を起動させるための第1機能入口を含む第1素材導入ページを表示する。第2表示領域のコンテンツについて、現在導入する必要のある素材データのタイプに応じて、現在端末に記憶されている対応するタイプの素材データを呼び出して表示する。現在導入する必要のある素材データがビデオデータである場合、現在端末に記憶されているビデオデータを呼び出して表示する。選択的に、端末がビデオデータを記憶する時間に基づき、ビデオデータを時間の降順で表示し、これにより、ユーザが導入しようとする素材データを迅速に選択することができる。第3表示領域について、目標素材データが導入されていない場合、第3表示領域には編集情報(例えば、素材の時間長さ情報であり、1.2秒及び2.3秒)が表示され、目標素材データが導入された後、第3表示領域には、目標素材データが導入された表紙データ、又は目標素材データが導入された表紙データ及び編集情報が表示される(表示される表紙データは、いずれかの画像フレームであってもよい)。第1機能入口は、撮影機器を起動させて素材データを撮影して導入を行うために用いてもよい。
図12に示すように、第2表示領域には、事前に記憶された素材データをマーキングするための複数の機能ウィジェットが含まれ、1つの機能ウィジェットは1セグメントの事前に記憶された素材データに対応し、具体的には、該機能ウィジェットの対話方式は図11a及び図11bにおける機能ウィジェットの対話方式を参照してもよく、ここでは詳細な説明を省略する。
S602では、導入対象の素材データがテキスト情報に対応する素材データを含む場合、テキスト情報を編集するための編集領域を含む第2素材導入ページを表示する。
選択的に、第2素材導入ページに表示される編集情報は、編集可能なデータとして設定されたテキスト情報であり、ユーザは編集領域でテキスト情報を編集することができる。
以下において、図7を参照しながら、生成命令に応答して、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成するステップS504の操作を説明する。ステップS504は、ステップS701-S703を含む。
S701では、編集情報に基づいて目標素材データを調整する。
選択的に、現在導入された目標素材データが導入対象の素材データの設定に直接適応しにくいことを考慮すると、本開示の実施例において、ユーザが任意の目標素材データを導入した後、端末は編集情報に基づいて目標素材データを調整して、目標素材データを導入対象の素材データの設定に適応させるように調整する。本開示の実施例は、ユーザがテンプレートを基に目標マルチメディアデータの編集を行う利便性を向上させることに寄与する。
S702では、調整された目標素材データとテンプレートを合成して、目標マルチメディアデータを取得する。
S703では、目標マルチメディアデータを再生する。
選択的に、調整された目標素材データとテンプレートを合成して目標マルチメディアデータを取得した後、該目標マルチメディアデータが再生可能になり、これにより、ユーザは最初に合成された目標マルチメディアデータに対してプレビュー及び調整を容易に行うことができる。
一実施例において、編集情報は、導入対象の素材データの時間長さ、オーディオ属性及び解像度のうちの少なくとも1つを含む。
選択的に、目標素材データが目標ビデオデータを含む場合、編集情報に基づいて目標素材データを調整するステップは、以下のS1-S4のうちの少なくとも1つを含む。
S1では、導入対象の素材データの時間長さに基づき、目標ビデオデータから対応する時間長さのコンテンツを切り出す。
具体的には、導入対象の素材データの時間長さが目標素材データにおける目標ビデオデータの時間長さよりも大きい場合、導入対象の素材データの時間長さを基準にし、目標ビデオデータから対応する時間長さのコンテンツを切り出す。一例として、導入対象の素材データの時間長さが3sであり、目標素材データにおける目標ビデオデータの時間長さが8sであると仮定すると、目標ビデオデータから時間間隔が3sであるコンテンツ(例えば、0~3sのコンテンツ)を切り出すか、又は3sのコンテンツをランダムに切り出す。
S2では、目標ビデオデータの再生時間を導入対象の素材データの時間長さに適応させるように、目標ビデオデータの再生速度を調整する。
具体的には、目標ビデオデータの再生時間が導入対象の素材データの時間長さと異なる場合、目標ビデオデータの再生速度を調整(例えば、加速又は減速)して目標ビデオデータの再生時間を調整することにより、目標ビデオデータの再生時間を導入対象の素材データの時間長さと同じようにする。一例として、導入対象の素材データの時間長さが3sであり、現在導入された目標ビデオデータの再生時間が5sであると仮定すると、変速又は曲線変速で目標ビデオデータの再生速度を調整し、さらに目標ビデオデータに対応する再生時間を3sに調整することができる。
S3では、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータを調整し、オーディオデータに対する調整は、目標ビデオデータにおけるオーディオデータの削除、目標ビデオデータにおけるオーディオデータの再生音量の調整を含むが、それらに限定されない。
具体的には、テンプレートに対応するマルチメディアデータには、一般的にバックグラウンド音楽が設定されているが、ユーザが導入した目標ビデオデータは一般的にユーザが自らで撮影して形成され、ユーザが目標ビデオデータを撮影する時に、いくつかの環境騒音が混雑するか、又は撮影の需要により撮影すると同時に音楽を再生することがあるため、導入された目標ビデオデータは、複数フレームの連続した画像データを含むだけでなく、さらにオーディオデータを含み、これにより、ユーザが導入した目標ビデオデータに含まれるバックグラウンド音楽とテンプレートに含まれるバックグラウンド音楽は再生時に衝突し、該技術的問題を解決するために、編集情報において特徴づけられたオーディオ属性に応じて、目標ビデオデータにおけるオーディオデータを処理することができる。選択的に、編集情報において特徴づけられたオーディオ属性が空(例えば、null)である場合、目標ビデオデータにおけるオーディオデータを削除し、編集情報において特徴づけられたオーディオ属性が具体的な音量値である場合、該音量値を基準にし、目標ビデオデータにおけるオーディオデータの再生音量を調整する(例えば、最高音量値が100デシベル(dB)であり、編集情報によって特徴づけられた具体的な音量値が37デシベルであると仮定すると、オーディオデータの初期再生音量値が100デシベルである場合、オーディオデータの再生音量値を37デシベルに低減する)。
S4では、目標ビデオデータの解像度を導入対象の素材データの解像度に適応させるように調整する。
具体的には、通常、異なる機器が撮影したビデオの解像度は異なり、表示効果の一致性を維持するために、編集情報において特徴づけられた解像度を基準にし、目標ビデオデータの解像度を調整することができる。一般的には、目標ビデオデータの解像度が高すぎる場合、目標ビデオデータの解像度が圧縮される。
一実施例において、編集情報は、導入対象の素材データのサイズ、解像度のうちの少なくとも1つを含む。
選択的に、目標素材データが目標画像データを含む場合、編集情報に基づいて目標素材データを調整するステップは、以下のA1-A2のうちの少なくとも1つを含む。
A1では、導入対象の素材データのサイズに基づき、目標画像データのサイズを調整する。
具体的には、目標画像データのサイズに対する調整は、クロッピング又はスケーリングを含むが、それらに限定されない。一例として、目標素材データの目標画像サイズが540mmx360mmであると仮定すると、導入対象の素材データの編集情報は、現在導入する必要のある画像素材データのサイズが455mmx322mmであることが表示される場合、編集情報に基づいて目標素材データに対してクロッピング又は縮小を行い、つまり、目標素材データのサイズを、サイズ455mmx322mmに一致させるか、又はサイズ455mmx322mmの比例に一致させるように調整する。
A2では、目標画像データの解像度を導入対象の素材データの解像度に適応させるように調整する。
具体的には、通常、異なる機器が撮影した画像の解像度は異なり、表示効果の一致性を維持するために、編集情報において特徴づけられた解像度を基準にし、目標画像データの解像度を調整することができる。一般的には、目標画像データの解像度が高すぎる場合、目標画像データの解像度が圧縮される。
選択的に、図8に示すように、目標マルチメディアデータを再生するステップS703の前に、第4表示領域を含むプレビューページを表示するステップS801を含み、目標マルチメディアデータを再生するステップS703は、目標マルチメディアデータを第4表示領域で再生するステップS802を含む。
具体的には、図13a及び図13bに示すように、第4表示領域は目標マルチメディアデータを再生するために用いられ、プレビュー中に、ユーザは一時停止機能ウィジェットを随時トリガして目標マルチメディアデータの再生を一時停止することができる。
選択的に、図13a及び図13bに示すようなプレビューページは、目標マルチメディアデータに含まれる目標素材データを編集するための第2機能入口をさらに含む。
選択的に、第2機能入口は、目標マルチメディアデータの再生時の再生進捗に追従して対応する目標素材データが存在する領域にジャンプし、対応する目標素材データの機能入口を表示することができ、例えば、目標マルチメディアデータが第3sに第2セグメントのビデオデータを表示する場合、第2機能入口は第2セグメントのビデオデータが存在する領域にジャンプして、第2セグメントのビデオデータを編集する機能入口をユーザに提供することができる。別の実施例において、ユーザの第2機能入口に対するタッチ操作に応答して、目標マルチメディアデータの再生進捗は対応する目標素材データにジャンプして第4表示領域で再生される。例えば、第2機能入口は3つがあり、それぞれ3セグメントの目標素材データA1、A2及びA3に対応する場合、ユーザは、第2セグメントの目標素材データA2に対応する第2機能入口でタッチ操作(長押し、シングルクリック、ダブルクリック、スライド等であってもよい)を開始すると、再生中の目標マルチメディアデータは、第2セグメントの目標素材データA2が存在する位置にジャンプして再生を行う。
図8に示すように、プレビューページを表示するステップS801の後に、ステップS803-S804をさらに含む。
S803では、第2機能入口に対するタッチ操作に応答して、素材編集ページを表示する。
具体的には、ステップS803は、以下の2つの場合のうちの少なくとも1つを含む。
第1の場合において、目標マルチメディアデータがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、プレビューページに二次機能入口を表示し、二次機能入口に対するタッチ操作を受信すると、ページジャンプを行い且つ素材編集ページを表示する。
第2の場合において、目標マルチメディアデータがテンプレート内の編集可能に設定されたテキスト情報に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、ページジャンプを行い且つ素材編集ページを表示する。
S804では、素材編集ページでの目標マルチメディアデータに含まれる目標素材データに対する編集操作に応答して、目標マルチメディアデータを更新する。
選択的に、目標素材データに対する編集操作は、素材データの置き換え、置き換えられた素材データの削除を含むが、それらに限定されない。
選択的に、目標素材データに対する編集が狭範囲の編集に属することを考慮すると、マルチメディアデータの生成効率を向上させるために、直接編集された目標素材データに基づいて既存のマルチメディアデータをリアルタイムに更新することができる。
一実施例において、図8に示すように、ステップS802及びステップS803-S804の実行順序は限定されず、ステップS801-S802-S803-S804の順で実行してもよいし、ステップS801-S803-S804の順で実行してもよい(図8での点線)。
選択的に、図9に示すように、第2機能入口に対するタッチ操作に応答して、素材編集ページを表示するステップS803は、以下のS901-S902のうちの少なくとも1つを含む。
S901では、目標マルチメディアデータがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、二次機能入口を表示し、且つ、二次機能入口に対するタッチ操作に応答して、対応する素材編集ページを表示し、二次機能入口は、素材データの撮影、素材データの置き換え、素材データのクロッピング、及び素材データの音量調整のうちの少なくとも1つの機能入口を含む。
選択的に、図13aに示すように、第2機能入口に対するタッチ操作に応答して、二次機能入口を表示する。一例として、目標素材データが3セグメントのビデオデータを含む場合、各セグメントのビデオデータの再生順序に応じて第2機能入口を各セグメントのビデオデータが存在する領域に順次表示し、ユーザの該第2機能入口に対するトリガに応答して、二次機能入口を表示し、且つ二次機能入口は第1セグメントのビデオデータに対応する第2機能入口の上方に表示される。また、ユーザの第2機能入口に対するタッチ操作に応答して、さらに目標マルチメディアデータの再生進捗を対応する目標素材データにジャンプして第4表示領域で再生することができる。図13aを例として、第2機能入口は3つがあり、それぞれ3セグメントの目標素材データA1、A2及びA3に対応する場合、ユーザが第2セグメントの目標素材データA2に対応する第2機能入口でタッチ操作(長押し、シングルクリック、ダブルクリック、スライド等であってもよい)を開始すると、第4表示領域で第2セグメントの目標素材A2を再生する。
S902では、目標マルチメディアデータに含まれる目標素材データがテンプレート内の編集可能なデータとして設定されたテキスト情報に対応する素材データである場合、第2機能入口に対するタッチ操作に応答して、テキスト情報を含む素材編集ページを表示する。
選択的に、図13bを参照しながら例を挙げて説明し、つまり、第2機能入口に対するタッチ操作に応答する前に、プレビューページには、第4表示領域及び3セグメントのテキスト情報に対応する素材データの各々に対応する第2機能入口が表示されており、第4表示領域には、第1セグメントのテキスト情報に対応する素材データ及び同一再生時点で再生される他の素材データが表示されており、第2機能入口に対するタッチ操作に応答する場合、ページジャンプを行い且つテキスト情報を含む素材編集ページを表示する。
選択的に、図10に示すように、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するステップS501の前に、ステップS1001-S1002をさらに含む。
S1001では、現在マルチメディアデータを閲覧しているページでの、表示されているマルチメディアデータの第3機能入口に対するタッチ操作に応答して、マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示する。
選択的に、図14に示すように、現在閲覧しているマルチメディアデータを表示すると同時に、第3機能入口を表示し、例えば、マルチメディアデータを表示するページの上に透明度の高いフローティングを採用して第3機能入口を表示することができる。選択的に、現在閲覧しているマルチメディアデータを表示すると同時に、さらに目標テキストデータを表示してもよく、該目標テキストデータは、テンプレート作成時に設定された、マルチメディアデータの表紙に表示されてテンプレート機能を説明するためのテキスト情報である。ユーザがマルチメディアデータを閲覧する全プロセスにおいて、目標テキストデータ及び/又は第3機能入口を表示することができる。
選択的に、図15a及び図15bに示すように、第3機能入口に対するタッチ操作に応答して、現在閲覧しているマルチメディアデータを生成するための初期素材データ及び初期編集情報を表示する。
S1002では、初期素材データに対するタッチ操作に応答して、初期素材データを第1表示状態から第2表示状態に変換して表示する。
選択的に、第1表示状態は、初期素材データを縮小表示状態にすることであり、第2表示状態は、初期素材データを通常表示状態又は拡大表示状態にすることである。初期素材を第2表示状態に変換して表示する際に、第2表示状態にある初期素材データをポップアップウィンドウ又はフローティングの形態で表示することができる。
選択的に、さらに第1表示状態にある初期素材データに対する保存命令に応答して、初期素材データを保存し、及び/又は第2表示状態にある初期素材データに対する保存命令に応答して、初期素材データを保存することができる。選択的に、初期素材データが第1表示状態にあるか、第2表示状態にあるかにかかわらず、ユーザは、いずれも保存命令をトリガすることにより、対応する初期素材データを取得して記憶することができる。
一実施例において、表示されている初期素材データは、テンプレート作成時にマーキングされた素材データに対応する。
選択的に、マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示するステップS1001は、以下のステップB1-B2を含む。
B1では、再生時間順序に基づいて初期素材データを表示する。
選択的に、ユーザが初期素材データを容易に確認できるように、初期素材データをマルチメディアデータにおける初期素材データの再生時間順序に基づいて順次表示する。図15a及び図15bに示すように、初期素材データの表示領域はテンプレート素材が存在する領域に対応し、各セグメントの初期素材データは再生時間順序に基づいて左から右へ順次表示される。
B2では、所定の機能表示ポリシーに従って初期編集情報に含まれる編集機能データ及び関連するビデオファイルを表示し、該ビデオファイルは、該編集機能データに関連するチュートリアルデータを含んでもよい。
マルチメディアデータの構成が複数の編集機能に関連する可能性があることを考慮すると、編集機能をユーザに表示することにより、ユーザは該テンプレートに採用される編集情報を明確に把握することができる。また、ユーザ体験を向上させ、初期編集情報の表示によるユーザへの邪魔を低減し、各最適推薦プロモーション編集機能の露出率を向上させるために、所定の機能表示ポリシーに従って初期編集情報を表示することができる。
選択的に、所定の機能表示ポリシーにおける編集機能の所定の優先順位及び所定の表示数に基づき、所定の表示数の初期編集情報に含まれる編集機能データ及び対応するチュートリアルデータを順に表示する。
選択的に、所定の機能表示ポリシーには、各編集機能に対して設定された優先順位が含まれ、一例として、初期編集情報にフリーズ及び特殊効果の2つの編集機能データが含まれ、且つフリーズの優先順位が特殊効果よりも高いと仮定する。これにより、図15bに示すように、フリーズを表示する時に、さらにフリーズに対応するチュートリアル名称、アイコン(Icon)及び関連チュートリアルデータを同時に表示することができ、特殊効果を表示する時に、さらに特殊効果に対応するチュートリアル名称、Icon及び関連チュートリアルデータを同時に表示することができる(図15bにおいて、ユーザは、ページをスクロールアップすることにより、特殊効果に関連するチュートリアルデータを閲覧することができる)。
選択的に、初期編集情報に複数の編集機能データが含まれることを考慮すると、編集機能データ及び対応するチュートリアルデータの過剰な表示によるユーザへの邪魔を避けるために、所定の表示数を、例えば2つに設定し、且つ所定の表示数に応じて編集機能データ及び対応するチュートリアルデータを表示してもよく、例えば、編集機能データ及び対応するチュートリアルデータを表示する際に、優先順位が前の2つである編集機能データ及び対応するチュートリアルデータのみを表示する。
編集機能データは、編集機能名称及び/又は対応するIconを含んでもよい。チュートリアルビデオに関連するデータは、チュートリアルタイトル、チュートリアル作成者、チュートリアル作成者のレベル、チュートリアルの時間長さ、チュートリアルの再生回数、チュートリアルビデオのうちの少なくとも1つのデータを含んでもよい。
選択的に、チュートリアルデータを表示する場合、同一機能が複数のチュートリアルに関連する可能性があるため、所定の表示数に応じて、表示されるチュートリアルデータの数を設定することができ、例えば、数が2つである場合、1つの編集機能データを表示する際に、対応するチュートリアルデータを最大で2つ対応して表示する。選択的に、さらにチュートリアルデータにおけるチュートリアルビデオの再生回数に基づいてチュートリアルデータの表示優先度を設定し、再生回数の多いチュートリアルビデオを優先的に表示することができる。
選択的に、ユーザ体験を向上させるために、表示されるチュートリアルデータにはさらに既読フィルタリング操作が設定され、関連するチュートリアルビデオが既読状態になると、次の再生回数の最も多いチュートリアルビデオを表示する。
選択的に、ユーザがいずれかのチュートリアルデータをクリックすると、対応するチュートリアル詳細ページにジャンプして、対応するチュートリアルビデオを表示する。
選択的に、スクロールアップページ(図15に示す)、スクロールダウンページ、フローティング、ポップアップウィンドウのうちのいずれかの形態を採用して、マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示する。スクロールアップページ又はスクロールダウンページの形態を採用する場合、ページのサイズは、一般的に表示インタフェースのサイズの3分の2に設定されるか、又は実際の状況に応じて設定され、一般的にページのサイズは表示インタフェースのサイズよりも小さい。フローティング又はポップアップウィンドウの形態を採用する場合、実際の状況に応じて透明度を設定して、マルチメディアデータの表示に影響を与えずに初期素材データ及び初期編集情報を確認し、つまり、初期素材データ及び初期編集情報を表示しながら、現在閲覧しているマルチメディアデータを一時停止することなく再生することができる。
一実施例において、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成した後、さらに目標マルチメディアデータに対して保存及び/又は配信を行うことができる。
本開示が提供するマルチメディアデータの生成方法及び関連機器では、現在閲覧しているマルチメディアデータに対応するテンプレートを取得した後、テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示し、ユーザは該素材導入ページで目標素材データを導入することができ、さらに、生成命令がトリガされると、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成する。本開示の実施例は、直接マルチメディアデータに対応するテンプレート及び導入された目標素材データに基づいて目標マルチメディアデータを生成することができ、これにより、ユーザが目標マルチメディアデータを作成する操作ステップを減少させ、目標マルチメディアデータの作成効率を向上させ、ユーザの操作を容易にし、また、端末のマルチメディアデータに対する処理要求を低減し、テンプレートを基に目標マルチメディアデータを編集する効率及び数を増加させることにも寄与し、ユーザの操作体験が向上する。
一実施例において、図16に示すように、第1クライアント100とサーバ200との組み合わせにより、マルチメディアデータに基づいて処理してテンプレートを生成する方法に応用される実行環境を形成し、第2クライアント300とサーバ200との組み合わせにより、テンプレートを基に処理して目標マルチメディアデータを生成する方法に応用される実行環境を形成する。応用環境全体において、第1クライアント100はマルチメディアデータ及びテンプレートを配信してサーバ200にアップロードし、第2クライアント300は、サーバ200によってプッシュされたマルチメディアデータに基づいて対応するテンプレートを取得した後、マルチメディアデータに基づいて編集して新たな目標マルチメディアデータを形成してから配信する。選択的に、第1クライアント100及び第2クライアント300の役割は交換可能であり、つまり、テンプレートを配信する第1クライアント100は、サーバ200によってプッシュされたマルチメディアデータに基づいて対応するテンプレートを取得した後、テンプレートを基に編集して新たな目標マルチメディアデータを形成してから配信することもでき、第2クライアント300はマルチメディアデータ及びテンプレートを配信してからサーバ200にアップロードすることもできる。
同一の発明構想に基づき、本開示の一実施例で提供されるマルチメディアデータの処理装置の構成図である図17を参照すると、本開示の実施例に係るマルチメディアデータの処理装置1700は、第1取得モジュール1701、第1表示モジュール1702、マーキングモジュール1703、第1生成モジュール1704を含んでもよい。
第1取得モジュール1701は、マルチメディアデータを取得するために用いられ、第1表示モジュール1702は、マルチメディアデータにおける素材データが表示されている編集ページを表示するために用いられ、マーキングモジュール1703は、少なくとも1セグメントの素材データに対するマーキング操作に応答して、少なくとも1セグメントの素材データをマーキングするために用いられ、第1生成モジュール1704は、テンプレート生成命令に応答して、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するために用いられる。
選択的に、第1表示モジュール1702は第1表示ユニット及び/又は第2表示ユニットを含み、第1表示ユニットは、マルチメディアデータがビデオ、オーディオ、及び/又は画像に対応する素材データを含む場合、第1編集ページを表示するために用いられ、第1編集ページは、素材データを表示するための第1表示領域及び素材データをマーキングするための機能ウィジェットを含み、第2表示ユニットは、マルチメディアデータがテキスト情報に対応する素材データを含む場合、第2編集ページを表示するために用いられ、第2編集ページは、テキスト情報に対応する素材データをマーキングするための機能ウィジェットを含む。
選択的に、第1生成モジュール1704は第1生成ユニット及び/又は第2生成ユニットを含み、第1生成ユニットは、マーキングされた素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、マルチメディアデータからマーキングされた素材データを除去し、且つマルチメディアデータにおけるマーキングされた素材データの対応する編集情報を確定し、マーキングされた素材データを除去したマルチメディアデータ及び編集情報に基づいてテンプレートを生成するために用いられ、第2生成ユニットは、マーキングされた素材データがテキスト情報に対応する素材データを含む場合、テキスト情報に対応する素材データを編集可能なデータとして設定し、編集可能なデータを設定したマルチメディアデータに基づいてテンプレートを生成するために用いられる。
選択的に、本開示の実施例に係る装置1700は、マルチメディアデータにおけるいずれかの画像フレームに対するマーキング操作に応答して、マルチメディアデータを表示する際の表紙画像として画像フレームを設定するための表紙設定モジュールをさらに含む。
選択的に、表紙設定モジュールはさらに、目標テキストデータを取得し、且つ目標テキストデータを表紙画像に重畳して表示すること、及び重畳された表紙画像に基づいてマルチメディアデータを更新するために用いられる。
選択的に、第1取得モジュール1701は、特定のテンプレートを基に編集して生成されたマルチメディアデータを取得するための第1取得ユニットと、現在撮影された素材データ及び事前に記憶された素材データのうちの少なくとも1つに基づき、且つ編集操作により生成されたマルチメディアデータを取得するための第2取得ユニットと、のうちのいずれかを含む。
選択的に、第1生成モジュール1703はさらに、テンプレートを生成した後、マルチメディアデータ及びテンプレートを保存及び/又は配信するために用いられ、マルチメディアデータ及びテンプレートを配信するステップは、マルチメディアデータ及びテンプレートをサーバにアップロードするステップを含む。
本開示の実施例に係るマルチメディアデータの処理装置は、本開示の実施例で提供されるマルチメディアデータの処理方法を実行することができ、その実現原理は類似し、本開示の各実施例におけるマルチメディアデータの処理装置内の各モジュールによって実行される動作は、本開示の各実施例におけるマルチメディアデータの処理方法のステップに対応し、マルチメディアデータの処理装置の各モジュールの機能についての詳細な説明は、具体的には、上述した対応するマルチメディアデータの処理方法における説明を参照してもよく、ここでは詳細な説明を省略する。
同一の発明構想に基づき、本開示の一実施例で提供されるマルチメディアデータの生成装置の構成図である図18を参照すると、本開示の実施例に係るマルチメディアデータの生成装置1800は、第2取得モジュール1801、第2表示モジュール1802、受信モジュール1803、第2生成モジュール1804を含んでもよい。
第2取得モジュール1801は、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するために用いられ、第2表示モジュール1802は、テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示するために用いられ、受信モジュール1803は、導入された目標素材データを受信するために用いられ、第2生成モジュール1804は、生成命令に応答して、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成するために用いられる。
選択的に、第2表示モジュール1802は第3表示ユニット及び/又は第4表示ユニットを含み、第3表示ユニットは、導入対象の素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第1素材導入ページを表示するために用いられ、第1素材導入ページは、事前に記憶された素材データを表示するための第2表示領域、編集情報を表示するための第3表示領域、及び撮影機器を呼び出すための第1機能入口を含み、第4表示ユニットは、導入対象の素材データがテキスト情報に対応する素材データを含む場合、第2素材導入ページを表示するために用いられ、第2素材導入ページはテキスト情報を編集するための編集領域を含む。
選択的に、第2生成モジュール1804は、編集情報に基づいて目標素材データを調整するための調整ユニットと、調整された目標素材データとテンプレートを合成して、目標マルチメディアデータを取得するための合成ユニットと、目標マルチメディアデータを再生するための再生ユニットとを含む。
選択的に、調整ユニットは、第1調整サブユニット及び/又は第2調整サブユニットを含む。
編集情報は、導入対象の素材データの時間長さ、オーディオ属性及び解像度のうちの少なくとも1つを含み、第1調整サブユニットは、目標素材データが目標ビデオ素材データを含む場合、導入対象素材データの時間長さに基づき、目標ビデオデータから対応する時間長さのコンテンツを切り出すステップと、目標ビデオデータの再生時間を導入対象の素材データの時間長さに適応させるように、目標ビデオデータの再生速度を調整するステップと、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータを削除するステップと、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータの再生音量を調整するステップと、目標ビデオデータの解像度を導入対象の素材データの解像度に適応させるように調整するステップと、のうちの少なくとも1つを実行するために用いられる。
編集情報は、導入対象の素材データのサイズ、解像度のうちの少なくとも1つを含み、第2調整サブユニットは、目標素材データが目標画像データを含む場合、導入対象の素材データのサイズに基づき、目標画像データのサイズを調整するステップと、目標画像データの解像度を導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを実行するために用いられる。
選択的に、第2生成モジュール1804は、第4表示領域を含むプレビューページを表示するためのプレビューユニットをさらに含む。再生ユニットは、さらに目標マルチメディアデータを第4表示領域で再生するために用いられる。
選択的に、プレビューページは、目標マルチメディアデータに含まれる目標素材データを編集するための第2機能入口をさらに含み、第2生成モジュール1804は、第2機能入口に対するタッチ操作に応答して、素材編集ページを表示するための第1応答ユニットと、素材編集ページでの目標マルチメディアデータに含まれる目標素材データに対する編集操作に応答して、目標マルチメディアデータを更新するための第2応答ユニットとをさらに含む。
選択的に、第1応答ユニットはさらに、目標マルチメディアデータがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、二次機能入口を表示し、且つ、二次機能入口に対するタッチ操作に応答して、対応する素材編集ページを表示するために用いられ、二次機能入口は、素材データの撮影、素材データの置き換え、素材データのクロッピング、及び素材データの音量調整のうちの少なくとも1つの機能入口を含む。
一実施例において、第1応答ユニットはさらに、目標マルチメディアデータがテンプレート内の編集可能なデータとして設定されたテキスト情報に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、テキスト情報を含む素材編集ページを表示するために用いられる。
選択的に、本開示の実施例で提供される装置1800は、現在目標マルチメディアデータを閲覧しているページでのマルチメディアデータを表示する第3機能入口に対するタッチ操作に応答して、目標マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示するための第3表示モジュールをさらに含む。
選択的に、第3表示モジュールは、初期素材データに対するタッチ操作に応答して、初期素材データを第1表示状態から第2表示状態に変換して表示するための変換ユニットを含む。
選択的に、第3表示モジュールは、再生時間順序に基づいて初期素材データを表示するための素材表示ユニットと、対応する所定の編集機能の優先度に基づいて順序付け、所定の表示数の初期編集情報を順に表示するための順序付け表示ユニットとを含む。
本開示の実施例に係るマルチメディアデータの生成装置は本開示の実施例で提供されるマルチメディアデータの生成方法を実行することができ、その実現原理は類似し、本開示の各実施例におけるマルチメディアデータの生成装置内の各モジュールによって実行される動作は、本開示の各実施例におけるマルチメディアデータの生成方法のステップに対応し、マルチメディアデータの生成装置の各モジュールの機能についての詳細な説明は、具体的には、上述した対応するマルチメディアデータの生成方法における説明を参照してもよく、ここでは詳細な説明を省略する。
以下において、本開示の実施例を実現することに適合する電子機器1900の構成図を示す図19を参照する。本開示の実施例における電子機器は、コンピュータ等の機器を含んでもよいが、これらに限定されない。図19に示された電子機器は一例に過ぎず、本開示の実施例の機能及び使用範囲を何ら制限するものではない。
電子機器は、上記の各方法実施例に記載の方法を実行するプログラムを記憶するためのメモリと、メモリに記憶されたプログラムを実行するように配置されるプロセッサとを含む。ここでのプロセッサは、下述した処理装置1901と呼んでもよく、メモリは、下述した読み出し専用メモリ(ROM)1902、ランダムアクセスメモリ(RAM)1903及び記憶装置1908のうちの少なくとも1つを含んでもよく、具体的には以下のとおりである。
図19に示すように、電子機器1900は処理装置(例えば、中央処理ユニット、画像プロセッサ等)1901を含んでもよく、それは読み出し専用メモリ(ROM)1902に記憶されたプログラム又は記憶装置1908からランダムアクセスメモリ(RAM)1903にロードされたプログラムによって各種の適切な動作及び処理を実行することができる。RAM 1903には、電子機器1900の動作に必要な各種のプログラムやデータがさらに格納されている。処理装置1901、ROM 1902及びRAM 1903はバス1904を介して相互に接続される。入力/出力(I/O)インタフェース1905もバス1904に接続される。
一般的には、例えばタッチスクリーン、タッチパネル、キーボード、マウス、カメラ、マイクロホン、加速度計、ジャイロ等を含む入力装置1906と、例えば液晶ディスプレイー(LCD)、スピーカー、発振器等を含む出力装置1907と、例えば磁気テープ、ハードディスク等を含む記憶装置1908と、通信装置1909とがI/Oインタフェース1905に接続されてもよい。通信装置1909は電子機器1900が他のデバイスと無線又は有線通信してデータを交換することを可能にする。図19に各種装置を備えた電子機器1900が示されているが、示された装置の全てを実施又は備えることが要求されていないことを理解されたい。代替的に、より多く又はより少ない装置を実施又は備えることが可能である。
特に、本開示の実施例によれば、フローチャートを参照しながら上述したプロセスはコンピュータソフトウェアプログラムとして実現できる。例えば、本開示の実施例は、非一時的コンピュータ可読媒体に担持されたコンピュータプログラムを含むコンピュータプログラム製品を含み、該コンピュータプログラムはフローチャートに示す方法を実行するためのプログラムコードを含む。このような実施例では、該コンピュータプログラムは、通信装置1909を介してネットワークからダウンロードしてインストールされてもよいし、記憶装置1908からインストールされてもよいし、ROM 1902からインストールされてもよい。該コンピュータプログラムが処理装置1901によって実行されると、本開示の実施例の方法で限定された上記機能は実行される。
説明すべきことは、本開示における上記のコンピュータ可読媒体は、コンピュータ可読信号媒体又はコンピュータ可読媒体又は上記の二者の任意の組み合わせであってもよい点である。コンピュータ可読媒体は、例えば、電気、磁気、光、電磁、赤外線、又は半導体のシステム、装置又はデバイス或いはそれらの任意の組み合わせであってもよいが、それらに限定されない。コンピュータ可読媒体のさらに具体的な例としては、1つ又は複数の導線を有する電気接続、携帯型コンピュータ磁気ディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、消去可能プログラマブル読み出し専用メモリ(EPROM又はフラッシュメモリ)、光ファイバ、ポータブルコンパクトディスク読み出し専用メモリ(CD-ROM)、光学記憶装置、磁気記憶装置又はそれらの任意の適切な組み合わせを含んでもよいが、それらに限定されない。本開示において、コンピュータ可読媒体は、プログラムを含むか記憶するいかなる有形媒体であってもよく、該プログラムは、命令実行システム、装置又はデバイスに使用されるか、それらと組み合わせて使用されることが可能である。本開示において、コンピュータ可読信号媒体はベースバンド内で又は搬送波の一部として伝播されるデータ信号を含んでよく、その中にコンピュータ可読プログラムコードが搭載される。このように伝播されるデータ信号は多種の形式を採用してよく、電磁信号、光信号又はそれらの任意の適切な組合を含むが、それらに限定されない。コンピュータ可読信号媒体は更にコンピュータ可読記憶媒体以外の任意のコンピュータ可読媒体であってもよく、このコンピュータ可読媒体は命令実行システム、装置又はデバイスに使用されるかそれらと組み合わせて使用されるプログラムを送信、伝播又は伝送することができる。コンピュータ可読媒体に含まれるプログラムコードは任意の適切な媒体で伝送可能であり、電線、光ケーブル、ラジオ周波数(RF)等又はそれらの任意の適切な組合を含んでよいが、それらに限定されない。
いくつかの実施形態では、クライアント、サーバはHTTP(HyperText Transfer Protocol,ハイパーテキスト転送プロトコル)のような現在既知又は将来研究開発される任意のネットワークプロトコルを利用して通信することができ、且つ任意の形式又は媒体のデジタルデータ通信(例えば、通信ネットワーク)と相互接続することができる。通信ネットワークの例として、ローカルエリアネットワーク(「LAN」)、広域ネットワーク(「WAN」)、インターネット(例えば、相互接続ネットワーク)、ピアツーピアネットワーク(例えば、ad hocピアツーピアネットワーク)、及び現在既知又は将来研究開発される任意のネットワークを含む。
上記のコンピュータ可読媒体は、上記電子機器に含まれるものであってもよいし、該電子機器に実装されずに、単独して存在するものであってもよい。
上記のコンピュータ可読媒体には1つ又は複数のプログラムが搭載されており、上記1つ又は複数のプログラムが該電子機器によって実行されると、該電子機器は上記マルチメディアデータの処理方法又はマルチメディアデータの生成方法のステップを実行する。
本開示の操作を実行するためのコンピュータプログラムコードは1種又は多種のプログラミング言語又はそれらの組み合わせで書くことが可能であり、前記プログラミング言語はオブジェクト指向のプログラミング言語、例えばJava、Smalltalk、C++を含むが、これらに限定されず、更に一般の手続き型プログラミング言語、例えば「C」言語又は類似的なプログラミング言語を含む。プログラムコードは完全にユーザコンピュータで実行したり、部分的にユーザコンピュータで実行したり、独立したソフトウェアパッケージとして実行したり、一部をユーザコンピュータで一部をリモートコンピュータで実行したり、完全にリモートコンピュータ又はサーバで実行したりすることができる。リモートコンピュータの場合に、リモートコンピュータはローカルエリアネットワーク(LAN)又は広域ネットワーク(WAN)を含む任意のネットワークによってユーザコンピュータに接続でき、又は、外部コンピュータに接続できる(例えばインターネットサービスプロバイダーを用いてインターネット経由で接続する)。
図面のうちフローチャート及びブロック図は本開示の様々な実施例に係るシステム、方法及びコンピュータプログラム製品の実現可能なシステムアーキテクチャ、機能及び動作を示す。この点では、フローチャートまたはブロック図における各ブロックは一つのモジュール、プログラムセグメントまたはコードの一部分を代表することができ、このモジュール、プログラムセグメントまたはコードの一部分は指定された論理機能を実現するための一つ又は複数の実行可能命令を含む。いくつかの置き換えとしての実現では、ブロックに表記される機能は図面に付したものと異なる順序で実現してもよいことにも注意すべきである。例えば、二つの連続的なブロックは実質的に同時に実行してもよく、また、係る機能によって、それらは逆な順序で実行してもよい場合がある。なお、ブロック図及び/またはフローチャートにおける各ブロック、及びブロック図及び/またはフローチャートにおけるブロックの組み合わせは、指定される機能または動作を実行するハードウェアに基づく専用システムによって実現してもよいし、または専用ハードウェアとコンピュータ命令との組み合わせによって実現してもよいことに注意すべきである。
本開示の実施例の説明に係るモジュール又はユニットは、ソフトウェアの方式で実現されてもよいし、ハードウェアの方式で実現されてもよい。モジュール又はユニットの名称は、このユニット自体を限定するものではない場合があり、例えば、受信モジュールは、「導入された目標素材データを受信するモジュール」として記載されてもよい。
本明細書において上述した機能は、少なくとも部分的に1つ又は複数のハードウェア論理装置によって実行することができる。例えば、非限定的に使用できる例示的なハードウェア論理装置は、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)、特定用途向け標準製品(ASSP)、システムオンチップ(SOC)、コンプレックスプログラマブルロジックデバイス(CPLD)等を含む。
本開示のコンテキストでは、機械可読媒体は有形媒体であってもよく、それは命令実行システム、装置又はデバイスに使用されるか、それらと組み合わせて使用されるプログラムを含むか又は記憶することができる。機械可読媒体は、機械可読信号媒体又は機械可読記憶媒体であってもよい。機械可読媒体は、例えば、電気、磁気、光、電磁、赤外線又は半導体のシステム、装置又はデバイス或いはそれらの任意の適切な組み合わせであってよいが、それらに限定されない。機械可読記憶媒体のさらに具体的な例としては、1つ又は複数の線に基づいた電気接続、携帯型コンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、読み出し専用メモリ(ROM)、消去可能プログラマブル読み出し専用メモリ(EPROM又はフラッシュメモリ)、光ファイバ、ポータブルコンパクトディスク読み出し専用メモリ(CD-ROM)、光学記憶機器、磁気記憶機器、又はそれらの任意の適切な組み合わせを含む。
本開示の1つ又は複数の実施例によれば、マルチメディアデータを取得するステップと、マルチメディアデータにおける素材データが表示されている編集ページを表示するステップと、少なくとも1セグメントの素材データに対するマーキング操作に応答して、少なくとも1セグメントの素材データをマーキングするステップと、テンプレート生成命令に応答して、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップと、を含むマルチメディアデータの処理方法を提供する。
選択的に、編集ページを表示するステップは、マルチメディアデータがビデオ、オーディオ、及び/又は画像に対応する素材データを含む場合、素材データを表示するための第1表示領域及び素材データをマーキングするための機能ウィジェットを含む第1編集ページを表示するステップと、マルチメディアデータがテキスト情報に対応する素材データを含む場合、テキスト情報に対応する素材データをマーキングするための機能ウィジェットを含む第2編集ページを表示するステップとのうちの少なくとも1つを含む。
選択的に、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップは、マーキングされた素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、マルチメディアデータからマーキングされた素材データを除去し、且つマルチメディアデータにおけるマーキングされた素材データの対応する編集情報を確定するステップと、マーキングされた素材データを除去したマルチメディアデータ及び編集情報に基づいてテンプレートを生成するステップとを含む。
選択的に、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップは、マーキングされた素材データがテキスト情報に対応する素材データを含む場合、テキスト情報に対応する素材データを編集可能なデータとして設定するステップと、編集可能なデータを設定したマルチメディアデータに基づいてテンプレートを生成するステップとを含む。
選択的に、該処理方法は、マルチメディアデータにおけるいずれかの画像フレームに対するマーキング操作に応答して、マルチメディアデータを表示する際の表紙画像として画像フレームを設定するステップをさらに含む。
選択的に、マルチメディアデータを表示する際の表紙画像として画像フレームを設定するステップは、目標テキストデータを取得し、且つ目標テキストデータを表紙画像に重畳して表示するステップと、重畳された表紙画像に基づいてマルチメディアデータを更新するステップとをさらに含む。
選択的に、マルチメディアデータを取得するステップは、特定のテンプレートを基に編集して生成されたマルチメディアデータを取得するステップと、現在撮影された素材データ及び事前に記憶された素材データのうちの少なくとも1つに基づき、且つ編集操作により生成されたマルチメディアデータを取得するステップとのうちのいずれか1つを含む。
選択的に、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップの後に、マルチメディアデータ及びテンプレートを保存及び/又は配信するステップをさらに含み、マルチメディアデータ及びテンプレートを配信するステップは、マルチメディアデータ及びテンプレートをサーバにアップロードするステップを含む。
本開示の1つ又は複数の実施例によれば、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するステップと、テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示するステップと、導入された目標素材データを受信するステップと、生成命令に応答して、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成するステップと、を含むマルチメディアデータの生成方法を提供する。
選択的に、素材導入ページを表示するステップは、導入対象の素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、事前に記憶された素材データを表示するための第2表示領域、編集情報を表示するための第3表示領域、及び撮影機器を起動させるための第1機能入口を含む第1素材導入ページを表示するステップと、導入対象の素材データがテキスト情報に対応する素材データを含む場合、テキスト情報を編集するための編集領域を含む第2素材導入ページを表示するステップとのうちの少なくとも1つを含む。
選択的に、生成命令に応答して、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成するステップは、編集情報に基づいて目標素材データを調整するステップと、調整された目標素材データとテンプレートを合成して、目標マルチメディアデータを取得するステップと、目標マルチメディアデータを再生するステップと、を含む。
選択的に、編集情報は、導入対象の素材データの時間長さ、オーディオ属性及び解像度のうちの少なくとも1つを含み、目標素材データが目標ビデオデータを含む場合、編集情報に基づいて目標素材データを調整するステップは、導入対象の素材データの時間長さに基づき、目標ビデオデータから対応する時間長さのコンテンツを切り出すステップと、目標ビデオデータの再生時間を導入対象の素材データの時間長さに適応させるように、目標ビデオデータの再生速度を調整するステップと、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータを削除するステップと、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータの再生音量を調整するステップと、目標ビデオデータの解像度を導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを含む。
選択的に、編集情報は、導入対象の素材データのサイズ、解像度のうちの少なくとも1つを含み、目標素材データが目標画像データを含む場合、編集情報に基づいて目標素材データを調整するステップは、導入対象の素材データのサイズに基づき、目標画像データのサイズを調整するステップと、目標画像データの解像度を導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを含む。
選択的に、目標マルチメディアデータを再生するステップは、目標マルチメディアデータを表示するための第4表示領域、及び目標マルチメディアデータに含まれる目標素材データを編集するための第2機能入口を含むプレビューページを表示し且つ目標マルチメディアデータを再生するステップと、第2機能入口に対するタッチ操作に応答して、素材編集ページを表示するステップと、素材編集ページで目標マルチメディアデータに含まれる目標素材データを編集するステップと、編集された目標素材データに基づいて目標マルチメディアデータを更新するステップとを含む。
選択的に、第2機能入口に対するタッチ操作に応答して、素材編集ページを表示するステップは、以下の少なくとも1つを含む。
目標マルチメディアデータがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、二次機能入口を表示し、且つ、二次機能入口に対するタッチ操作に応答して、対応する素材編集ページを表示し、二次機能入口は、素材データの撮影、素材データの置き換え、素材データのクロッピング、及び素材データの音量調整のうちの少なくとも1つの機能入口を含む。
目標マルチメディアデータがテンプレート内の編集可能に設定されたテキスト情報に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、テキスト情報を含む素材編集ページを表示する。
選択的に、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するステップの前に、現在マルチメディアデータを閲覧しているページでの、表示されているマルチメディアデータの第3機能入口に対するタッチ操作に応答して、マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示するステップと、初期素材データに対するタッチ操作に応答して、初期素材データを第1表示状態から第2表示状態に変換して表示するステップと、をさらに含む。
選択的に、マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示するステップは、再生時間順序に基づいて初期素材データを表示するステップと、対応する所定の編集機能の優先度に基づいて順序付け、所定の表示数の初期編集情報を順に表示するステップと、を含む。
本開示の1つ又は複数の実施例によれば、マルチメディアデータを取得するための第1取得モジュールと、マルチメディアデータにおける素材データが表示されている編集ページを表示するための第1表示モジュールと、少なくとも1セグメントの素材データに対するマーキング操作に応答して、少なくとも1セグメントの素材データをマーキングするためのマーキングモジュールと、テンプレート生成命令に応答して、マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するための第1生成モジュールと、を含むマルチメディアデータの処理装置を提供する。
選択的に、第1表示モジュールは第1表示ユニット及び/又は第2表示ユニットを含み、第1表示ユニットは、マルチメディアデータがビデオ、オーディオ、及び/又は画像に対応する素材データを含む場合、第1編集ページを表示するために用いられ、第1編集ページは、素材データを表示するための第1表示領域及び素材データをマーキングするための機能ウィジェットを含み、第2表示ユニットは、マルチメディアデータがテキスト情報に対応する素材データを含む場合、第2編集ページを表示するために用いられ、第2編集ページはテキスト情報に対応する素材データをマーキングするための機能ウィジェットを含む。
選択的に、第1生成モジュールは第1生成ユニット及び/又は第2生成ユニットを含み、第1生成ユニットは、マーキングされた素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、マルチメディアデータからマーキングされた素材データを除去し、且つマルチメディアデータにおけるマーキングされた素材データの対応する編集情報を確定し、マーキングされた素材データを除去したマルチメディアデータ及び編集情報に基づいてテンプレートを生成するために用いられ、第2生成ユニットは、マーキングされた素材データがテキスト情報に対応する素材データを含む場合、テキスト情報に対応する素材データを編集可能なデータとして設定し、編集可能なデータを設定したマルチメディアデータに基づいてテンプレートを生成するために用いられる。
選択的に、本開示の実施例に係る装置は、マルチメディアデータにおけるいずれかの画像フレームに対するマーキング操作に応答して、マルチメディアデータを表示する際の表紙画像として画像フレームを設定するための表紙設定モジュールをさらに含む。
選択的に、表紙設定モジュールはさらに、目標テキストデータを取得し、且つ目標テキストデータを表紙画像に重畳して表示すること、及び重畳された表紙画像に基づいてマルチメディアデータを更新するために用いられる。
選択的に、第1取得モジュールは、特定のテンプレートを基に編集して生成されたマルチメディアデータを取得するための第1取得ユニットと、現在撮影された素材データ及び事前に記憶された素材データのうちの少なくとも1つに基づき、且つ編集操作により生成されたマルチメディアデータを取得するための第2取得ユニットとのうちのいずれかのユニットを含む。
選択的に、第1生成モジュールはさらに、テンプレートを生成した後、マルチメディアデータ及びテンプレートを保存及び/又は配信するために用いられ、マルチメディアデータ及びテンプレートを配信するステップは、マルチメディアデータ及びテンプレートをサーバにアップロードするステップを含む。
本開示の1つ又は複数の実施例によれば、現在閲覧しているマルチメディアデータに対応するテンプレートを取得するための第2取得モジュールと、テンプレートにおける導入対象の素材データの編集情報が表示されている素材導入ページを表示するための第2表示モジュールと、導入された目標素材データを受信するための受信モジュールと、生成命令に応答して、目標素材データ及びテンプレートを基に目標マルチメディアデータを生成するための第2生成モジュールと、を含むマルチメディアデータの生成装置を提供する。
選択的に、第2表示モジュールは第3表示ユニット及び/又は第4表示ユニットを含み、第3表示ユニットは、導入対象の素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第1素材導入ページを表示するために用いられ、第1素材導入ページは、事前に記憶された素材データを表示するための第2表示領域、編集情報を表示するための第3表示領域、撮影機器を呼び出すための第1機能入口を含み、第4表示ユニットは、導入対象の素材データがテキスト情報に対応する素材データを含む場合、第2素材導入ページを表示するために用いられ、第2素材導入ページはテキスト情報を編集するための編集領域を含む。
選択的に、第2生成モジュールは、編集情報に基づいて目標素材データを調整するための調整ユニットと、調整された目標素材データとテンプレートを合成して、目標マルチメディアデータを取得するための合成ユニットと、目標マルチメディアデータを再生するための再生ユニットと、を含む。
選択的に、調整ユニットは、第1調整サブユニット及び/又は第2調整サブユニットを含む。
編集情報は、導入対象の素材データの時間長さ、オーディオ属性及び解像度のうちの少なくとも1つを含み、第1調整サブユニットは、目標素材データが目標ビデオ素材データを含む場合、導入対象の素材データの時間長さに基づき、目標ビデオデータから対応する時間長さのコンテンツを切り出すステップと、目標ビデオデータの再生時間を導入対象の素材データの時間長さに適応させるように、目標ビデオデータの再生速度を調整するステップと、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータを削除するステップと、オーディオ属性に基づき、目標ビデオデータにおけるオーディオデータの再生音量を調整するステップと、目標ビデオデータの解像度を導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを実行するために用いられる。
編集情報は、導入対象の素材データのサイズ、解像度のうちの少なくとも1つを含み、第2調整サブユニットは、目標素材データが目標画像データを含む場合、導入対象の素材データのサイズに基づき、目標画像データのサイズを調整するステップと、目標画像データの解像度を導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを実行するために用いられる。
選択的に、第2生成モジュールは、第4表示領域を含むプレビューページを表示するためのプレビューユニットと、さらに目標マルチメディアデータを第4表示領域で再生するための再生ユニットと、をさらに含む。
選択的に、プレビューページは、目標マルチメディアデータに含まれる目標素材データを編集するための第2機能入口をさらに含み、第2生成モジュール1804は、第2機能入口に対するタッチ操作に応答して、素材編集ページを表示するための第1応答ユニットと、素材編集ページでの目標マルチメディアデータに含まれる目標素材データに対する編集操作に応答して、目標マルチメディアデータを更新するための第2応答ユニットとをさらに含む。
選択的に、第1応答ユニットはさらに、目標マルチメディアデータがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、二次機能入口を表示し、且つ、二次機能入口に対するタッチ操作に応答して、対応する素材編集ページを表示するために用いられ、二次機能入口は、素材データの撮影、素材データの置き換え、素材データのクロッピング、及び素材データの音量調整のうちの少なくとも1つの機能入口を含む。
一実施例において、第1応答ユニットはさらに、マルチメディアデータがテンプレート内の編集可能なデータとして設定されたテキスト情報に対応する素材データを含む場合、第2機能入口に対するタッチ操作に応答して、テキスト情報を含む素材編集ページを表示するために用いられる。
選択的に、本開示の実施例で提供される装置は、現在目標マルチメディアデータを閲覧しているページでのマルチメディアデータを表示する第3機能入口に対するタッチ操作に応答して、目標マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示するための第3表示モジュールをさらに含む。
選択的に、第3表示モジュールは、初期素材データに対するタッチ操作に応答して、初期素材データを第1表示状態から第2表示状態に変換して表示するための変換ユニットを含む。
選択的に、第3表示モジュールは、再生時間順序に基づいて初期素材データを表示するための素材表示ユニットと、対応する所定の編集機能の優先度に基づいて順序付け、所定の表示数の初期編集情報を順に表示するための順序付け表示ユニットとを含む。
以上は本開示の好ましい実施例及び適用する技術原理の説明に過ぎない。本開示に係る発明範囲は、上記技術特徴の特定の組み合わせによる技術手段に限定されず、上記発明構想を逸脱することなく上記技術特徴又はそれと同等な特徴を任意に組み合わせて形成した他の技術手段をも含むべきであることが当業者に自明である。例えば、上記特徴と本願の開示(それに限定されない)による類似的な機能を有する技術特徴を互いに取り替えて形成した技術手段をも含む。
また、特定の順番で各操作を説明したが、これらの操作を、示される特定の順番又は順次実行することが求められるものとして理解されるべきではない。ある環境において、マルチタスク及び並行処理が有利になる可能性がある。同様に、上記説明に様々な具体的な実現の詳細が含まれているが、これらは本開示の範囲を限定するものとして解釈してはない。単一な実施例の文脈に説明されているいくつかの特徴は、単一な実施例において組み合わせて実現されてもよい。逆に、単一な実施例の文脈で説明されている様々な特徴も、別個に、又は適切な任意の部分的組合せで複数の実施例に実現されてもよい。構成特徴及び/又は方法論理動作に特定された言語を採用して本主題を説明したが、添付される特許請求の範囲に限定された主題は、上記に説明された特定特徴又は動作に限られないことを理解すべきである。むしろ、上記に記載された特定特徴と動作は、特許請求の範囲を実現する例示的な形式に過ぎない。

Claims (15)

  1. マルチメディアデータを取得するステップであって、前記マルチメディアデータは、複数セグメントの素材データと前記複数セグメントの素材データに関連する編集情報とを含み、前記複数セグメントの素材データは、ビデオデータ、画像データ、テキストデータ、及びオーディオデータ、のうちの少なくとも1つを含み、前記編集情報は、各セグメントの素材データの時間の長さと順序付け位置とを含み、前記時間の長さは、前記マルチメディアデータにおける前記素材データの再生時間長であり、前記順序付け位置は前記マルチメディアデータにおける前記素材データの再生順序を示す、ステップと、
    前記マルチメディアデータにおける前記素材データが表示されている編集ページを表示するステップであって、前記各セグメントの素材データは、前記マルチメディアデータにおける前記素材データの再生時間に基づき順次表示される、ステップと、
    少なくとも1セグメントの素材データに対するマーキング操作に応答して、前記少なくとも1セグメントの素材データをマーキングするステップと、
    テンプレート生成命令に応答して、前記マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップとを含むことを特徴とする、マルチメディアデータの処理方法。
  2. 編集ページを表示する前記ステップは、
    前記マルチメディアデータがビデオ、オーディオ、及び/又は画像に対応する素材データを含む場合、前記素材データを表示するための第1表示領域及び前記素材データをマーキングするための機能ウィジェットを含む第1編集ページを表示するステップと、
    前記マルチメディアデータがテキスト情報に対応する素材データを含む場合、前記テキスト情報に対応する素材データをマーキングするための機能ウィジェットを含む第2編集ページを表示するステップとのうちの少なくとも1つを含むことを特徴とする、請求項1に記載の方法。
  3. 前記マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成する前記ステップは、
    マーキングされた素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、前記マルチメディアデータから前記マーキングされた素材データを除去し、且つ前記マルチメディアデータにおける前記マーキングされた素材データの対応する編集情報を確定するステップと、
    マーキングされた素材データを除去したマルチメディアデータ及び前記編集情報に基づいて前記テンプレートを生成するステップとを含み、または、
    前記マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成する前記ステップは、
    前記マーキングされた素材データがテキスト情報に対応する素材データを含む場合、前記テキスト情報に対応する素材データを編集可能なデータとして設定するステップと、
    前記編集可能なデータを設定したマルチメディアデータに基づいて前記テンプレートを生成するステップとを含むことを特徴とする、請求項1に記載の方法。
  4. 前記マルチメディアデータにおけるいずれかの画像フレームに対するマーキング操作に応答して、前記マルチメディアデータを表示する際の表紙画像として前記画像フレームを設定するステップをさらに含むことを特徴とする、請求項1に記載の方法。
  5. 前記マルチメディアデータを表示する際の表紙画像として前記画像フレームを設定する前記ステップの後に、さらに、
    目標テキストデータを取得し、且つ前記目標テキストデータを前記表紙画像に重畳して表示するステップと、
    重畳された表紙画像に基づいて前記マルチメディアデータを更新するステップとを含むことを特徴とする、請求項4に記載の方法。
  6. マルチメディアデータを取得する前記ステップは、
    特定のテンプレートを基に編集して生成されたマルチメディアデータを取得するステップと、
    現在撮影された素材データ及び事前に記憶された素材データのうちの少なくとも1つに基づき、且つ編集操作により生成されたマルチメディアデータを取得するステップとのうちのいずれか1つを含むことを特徴とする、請求項1に記載の方法。
  7. 現在閲覧しているマルチメディアデータに対応するビデオテンプレートを取得するステップであって、前記マルチメディアデータは、複数セグメントの素材データと前記複数セグメントの素材データに関連する編集情報とを含み、前記複数セグメントの素材データは、ビデオデータ、画像データ、テキストデータ、及びオーディオデータ、のうちの少なくとも1つを含み、前記編集情報は、各セグメントの素材データの時間の長さと順序付け位置とを含み、前記時間の長さは、前記マルチメディアデータにおける前記素材データの再生時間長であり、前記順序付け位置は前記マルチメディアデータにおける前記素材データの再生順序を示す、ステップと、
    前記ビデオテンプレートにおける導入対象の前記素材データの前記編集情報が表示されている素材導入ページを表示するステップと、
    導入された目標素材データを受信するステップと、
    生成命令に応答して、前記目標素材データ及び前記ビデオテンプレートにおける前記マルチメディアデータにおける前記素材データの再生時間を基に目標マルチメディアデータを生成するステップとを含むことを特徴とする、マルチメディアデータの生成方法。
  8. 素材導入ページを表示する前記ステップは、
    前記導入対象の素材データがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、事前に記憶された素材データを表示するための第2表示領域、前記編集情報を表示するための第3表示領域、及び撮影機器を起動させるための第1機能入口を含む第1素材導入ページを表示するステップと、
    前記導入対象の素材データがテキスト情報に対応する素材データを含む場合、前記テキスト情報を編集するための編集領域を含む第2素材導入ページを表示するステップとのうちの少なくとも1つを含むことを特徴とする、請求項7に記載の方法。
  9. 生成命令に応答して、前記目標素材データ及び前記ビデオテンプレートを基に目標マルチメディアデータを生成する前記ステップは、
    前記編集情報に基づいて前記目標素材データを調整するステップと、
    調整された目標素材データと前記ビデオテンプレートを合成して、前記目標マルチメディアデータを取得するステップと、
    前記目標マルチメディアデータを再生するステップとを含むことを特徴とする、請求項7に記載の方法。
  10. 前記編集情報は、導入対象の素材データの時間長さ、オーディオ属性及び解像度のうちの少なくとも1つを含み、
    前記目標素材データが目標ビデオデータを含む場合、前記編集情報に基づいて前記目標素材データを調整するステップは、
    前記導入対象の素材データの時間長さに基づき、前記目標ビデオデータから対応する時間長さのコンテンツを切り出すステップと、
    前記目標ビデオデータの再生時間を前記導入対象の素材データの時間長さに適応させるように、前記目標ビデオデータの再生速度を調整するステップと、
    前記オーディオ属性に基づき、前記目標ビデオデータにおけるオーディオデータを削除するステップと、
    前記オーディオ属性に基づき、前記目標ビデオデータにおけるオーディオデータの再生音量を調整するステップと、
    前記目標ビデオデータの解像度を前記導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを含み、または、
    前記編集情報は、導入対象の素材データのサイズ、解像度のうちの少なくとも1つを含み、
    前記目標素材データが目標画像データを含む場合、前記編集情報に基づいて前記目標素材データを調整するステップは、
    前記導入対象の素材データのサイズに基づき、前記目標画像データのサイズを調整するステップと、
    前記目標画像データの解像度を前記導入対象の素材データの解像度に適応させるように調整するステップとのうちの少なくとも1つを含むことを特徴とする、請求項9に記載の方法。
  11. 前記目標マルチメディアデータを再生する前記ステップの前に、第4表示領域を含むプレビューページを表示するステップをさらに含み、
    前記目標マルチメディアデータを再生する前記ステップは、前記第4表示領域で前記目標マルチメディアデータを再生するステップを含むことを特徴とする、請求項9に記載の方法。
  12. 前記プレビューページは、前記目標マルチメディアデータに含まれる目標素材データを編集するための第2機能入口をさらに含み、プレビューページを表示する前記ステップの後に、さらに、
    前記第2機能入口に対するタッチ操作に応答して、素材編集ページを表示するステップと、
    前記素材編集ページでの前記目標マルチメディアデータに含まれる目標素材データに対する編集操作に応答して、前記目標マルチメディアデータを更新するステップとをさらに含み、
    前記第2機能入口に対するタッチ操作に応答して、素材編集ページを表示する前記ステップは、
    前記目標マルチメディアデータがビデオ、オーディオ及び/又は画像に対応する素材データを含む場合、前記第2機能入口に対するタッチ操作に応答して、素材データの撮影、素材データの置き換え、素材データのクロッピング、及び素材データの音量調整のうちの少なくとも1つの機能入口を含む二次機能入口を表示し、且つ、前記二次機能入口に対するタッチ操作に応答して、対応する素材編集ページを表示するステップと、
    前記目標マルチメディアデータが前記ビデオテンプレート内の編集可能に設定されたテキスト情報に対応する素材データを含む場合、前記第2機能入口に対するタッチ操作に応答して、前記テキスト情報を含む素材編集ページを表示するステップとのうちの少なくとも1つを含むことを特徴とする、請求項11に記載の方法。
  13. 現在閲覧しているマルチメディアデータに対応するテンプレートを取得する前記ステップの前に、さらに、
    現在マルチメディアデータを閲覧しているページでの、表示されているマルチメディアデータの第3機能入口に対するタッチ操作に応答して、前記マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示するステップと、
    前記初期素材データに対するタッチ操作に応答して、前記初期素材データを第1表示状態から第2表示状態に変換して表示するステップと、をさらに含み、
    前記マルチメディアデータを生成するための初期素材データ及び初期編集情報を表示する前記ステップは、
    再生時間順序に基づいて前記初期素材データを表示するステップと、
    対応する所定の編集機能の優先度に基づいて順序付け、所定の表示数の前記初期編集情報を順に表示するステップとを含むことを特徴とする、請求項7に記載の方法。
  14. マルチメディアデータの処理装置であって、
    少なくとも1つのプロセッサと、少なくとも1つのメモリとを含み、
    前記少なくとも1つのメモリが、前記少なくとも1つのプロセッサに通信結合され、命令を記憶し、
    前記命令は、前記少なくとも1つのプロセッサによって実行されるとき、
    マルチメディアデータを取得するステップであって、前記マルチメディアデータは、複数セグメントの素材データと前記複数セグメントの素材データに関連する編集情報とを含み、前記複数セグメントの素材データは、ビデオデータ、画像データ、テキストデータ、及びオーディオデータ、のうちの少なくとも1つを含み、前記編集情報は、各セグメントの素材データの時間の長さと順序付け位置とを含み、前記時間の長さは、前記マルチメディアデータにおける前記素材データの再生時間長であり、前記順序付け位置は前記マルチメディアデータにおける前記素材データの再生順序を示す、ステップと、
    前記マルチメディアデータにおける前記素材データが表示されている編集ページを表示するステップであって、前記各セグメントの素材データは、前記マルチメディアデータにおける前記素材データの再生時間に基づき順次表示される、ステップと、
    少なくとも1セグメントの素材データに対するマーキング操作に応答して、少なくとも1セグメントの素材データをマーキングするステップと、
    テンプレート生成命令に応答して、前記マルチメディアデータからマーキングされた素材データを除去してテンプレートを生成するステップと、をマルチメディアデータの処理装置に実行させることを特徴とする、マルチメディアデータの処理装置。
  15. コンピュータプログラムが記憶されているコンピュータ可読媒体であって、前記コンピュータプログラムがプロセッサによって実行されると、請求項1-6及び/又は7-13のいずれか1項に記載の方法が実現されることを特徴とする、コンピュータ可読媒体。
JP2023514968A 2020-09-04 2021-08-25 マルチメディアデータの処理方法、生成方法及び関連機器 Active JP7466763B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202010924421.9A CN112073649B (zh) 2020-09-04 2020-09-04 多媒体数据的处理方法、生成方法及相关设备
CN202010924421.9 2020-09-04
PCT/CN2021/114502 WO2022048478A1 (zh) 2020-09-04 2021-08-25 多媒体数据的处理方法、生成方法及相关设备

Publications (2)

Publication Number Publication Date
JP2023541569A JP2023541569A (ja) 2023-10-03
JP7466763B2 true JP7466763B2 (ja) 2024-04-12

Family

ID=73666537

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023514968A Active JP7466763B2 (ja) 2020-09-04 2021-08-25 マルチメディアデータの処理方法、生成方法及び関連機器

Country Status (7)

Country Link
US (1) US11887630B2 (ja)
EP (1) EP4195654A4 (ja)
JP (1) JP7466763B2 (ja)
KR (1) KR20230042523A (ja)
CN (1) CN112073649B (ja)
BR (1) BR112023004077A2 (ja)
WO (1) WO2022048478A1 (ja)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112073649B (zh) 2020-09-04 2022-12-13 北京字节跳动网络技术有限公司 多媒体数据的处理方法、生成方法及相关设备
WO2022126664A1 (zh) * 2020-12-18 2022-06-23 深圳市大疆创新科技有限公司 视频编辑方法、终端设备及计算机可读存储介质
CN114692033A (zh) * 2020-12-29 2022-07-01 北京字跳网络技术有限公司 基于教程的多媒体资源编辑方法、装置、设备及存储介质
CN112866798B (zh) * 2020-12-31 2023-05-05 北京字跳网络技术有限公司 视频生成方法、装置、设备及存储介质
CN113079405B (zh) * 2021-03-26 2023-02-17 北京字跳网络技术有限公司 一种多媒体资源剪辑方法、装置、设备及存储介质
CN113111195A (zh) * 2021-03-31 2021-07-13 北京达佳互联信息技术有限公司 多媒体信息编辑方法及相关装置
CN113411517B (zh) * 2021-05-28 2023-04-07 北京达佳互联信息技术有限公司 视频模板的生成方法、装置、电子设备及存储介质
CN113473204B (zh) * 2021-05-31 2023-10-13 北京达佳互联信息技术有限公司 一种信息展示方法、装置、电子设备及存储介质
CN113542621A (zh) * 2021-07-14 2021-10-22 上海艾麒信息科技股份有限公司 移动平台基于模板的修图方法及系统
CN113626632B (zh) * 2021-07-30 2023-10-31 北京达佳互联信息技术有限公司 影集素材的显示方法、装置及电子设备
CN113704593B (zh) * 2021-08-31 2024-03-01 北京达佳互联信息技术有限公司 一种运营数据处理方法及相关装置
CN113794930B (zh) * 2021-09-10 2023-11-24 中国联合网络通信集团有限公司 视频生成方法、装置、设备及存储介质
CN113891151A (zh) * 2021-09-28 2022-01-04 北京字跳网络技术有限公司 一种音频处理方法、装置、电子设备和存储介质
CN115994005A (zh) * 2021-10-19 2023-04-21 北京字跳网络技术有限公司 页面处理方法、装置、设备及存储介质
CN114428899A (zh) * 2021-12-17 2022-05-03 北京达佳互联信息技术有限公司 多媒体资源推送方法、装置、电子设备及存储介质
CN116939284A (zh) * 2022-03-29 2023-10-24 北京字跳网络技术有限公司 素材包的生成方法、视频编辑方法、装置、设备及介质
CN115017345A (zh) * 2022-06-28 2022-09-06 上海哔哩哔哩科技有限公司 多媒体内容处理方法、装置、计算设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140095978A1 (en) 2012-09-28 2014-04-03 Electronics And Telecommunications Research Institute Mash-up authoring device using templates and method thereof
CN109801347A (zh) 2019-01-25 2019-05-24 北京字节跳动网络技术有限公司 一种可编辑图像模板的生成方法、装置、设备和介质
CN111357277A (zh) 2018-11-28 2020-06-30 深圳市大疆创新科技有限公司 视频剪辑控制方法、终端设备和系统

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3763300B2 (ja) * 2002-03-25 2006-04-05 ヤマハ株式会社 テンプレートファイル編集装置及び編集プログラム
US8010579B2 (en) * 2003-11-17 2011-08-30 Nokia Corporation Bookmarking and annotating in a media diary application
TWI282926B (en) * 2005-10-06 2007-06-21 Fashionow Co Ltd Template-based multimedia editor and editing method thereof
EP2005324A4 (en) * 2006-04-10 2009-09-23 Yahoo Inc CUSTOMER SIDE EDITION APPLICATION FOR OPTIMIZING THE EDITING OF MULTIMEDIA CONTENT FROM THE CUSTOMER AND A SERVER
US8934717B2 (en) 2007-06-05 2015-01-13 Intellectual Ventures Fund 83 Llc Automatic story creation using semantic classifiers for digital assets and associated metadata
US11747972B2 (en) * 2011-02-16 2023-09-05 Apple Inc. Media-editing application with novel editing tools
US10319409B2 (en) * 2011-05-03 2019-06-11 Idomoo Ltd System and method for generating videos
DE102013204308A1 (de) 2013-03-13 2014-09-18 Volkswagen Ag Bipolarplatte für eine Brennstoffzelle, Brennstoffzelle und Verfahren zur Herstellung der Bipolarplatte
US9508385B2 (en) * 2013-11-21 2016-11-29 Microsoft Technology Licensing, Llc Audio-visual project generator
WO2016128984A1 (en) * 2015-02-15 2016-08-18 Moviemation Ltd. Customized, personalized, template based online video editing
US9329762B1 (en) * 2015-06-02 2016-05-03 Interactive Memories, Inc. Methods and systems for reversing editing operations in media-rich projects
US10019415B1 (en) * 2015-08-28 2018-07-10 Animoto Inc. System and method for consistent cross-platform text layout
EP3998610A1 (en) 2015-09-30 2022-05-18 Apple Inc. Synchronizing audio and video components of an automatically generated audio/video presentation
US20180130496A1 (en) * 2016-11-08 2018-05-10 Yen4Ken, Inc. Method and system for auto-generation of sketch notes-based visual summary of multimedia content
TWI657341B (zh) 2017-10-25 2019-04-21 梁佳榆 資料處理方法及資料處理系統
WO2019092506A1 (en) * 2017-11-13 2019-05-16 Wetransfer B.V. Semantic slide autolayouts
US10726874B1 (en) * 2019-07-12 2020-07-28 Smule, Inc. Template-based excerpting and rendering of multimedia performance
CN110502734A (zh) * 2019-07-30 2019-11-26 苏州闻道网络科技股份有限公司 一种文本生成方法和装置
CN110825912B (zh) * 2019-10-30 2022-04-22 北京达佳互联信息技术有限公司 视频生成方法、装置、电子设备及存储介质
CN111243632B (zh) * 2020-01-02 2022-06-24 北京达佳互联信息技术有限公司 多媒体资源的生成方法、装置、设备及存储介质
CN111460183B (zh) * 2020-03-30 2024-02-13 北京金堤科技有限公司 多媒体文件生成方法和装置、存储介质、电子设备
CN112073649B (zh) * 2020-09-04 2022-12-13 北京字节跳动网络技术有限公司 多媒体数据的处理方法、生成方法及相关设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140095978A1 (en) 2012-09-28 2014-04-03 Electronics And Telecommunications Research Institute Mash-up authoring device using templates and method thereof
CN111357277A (zh) 2018-11-28 2020-06-30 深圳市大疆创新科技有限公司 视频剪辑控制方法、终端设备和系统
CN109801347A (zh) 2019-01-25 2019-05-24 北京字节跳动网络技术有限公司 一种可编辑图像模板的生成方法、装置、设备和介质

Also Published As

Publication number Publication date
KR20230042523A (ko) 2023-03-28
CN112073649B (zh) 2022-12-13
JP2023541569A (ja) 2023-10-03
WO2022048478A1 (zh) 2022-03-10
US20230144094A1 (en) 2023-05-11
US11887630B2 (en) 2024-01-30
EP4195654A4 (en) 2024-04-24
CN112073649A (zh) 2020-12-11
BR112023004077A2 (pt) 2023-04-04
EP4195654A1 (en) 2023-06-14

Similar Documents

Publication Publication Date Title
JP7466763B2 (ja) マルチメディアデータの処理方法、生成方法及び関連機器
US11049522B2 (en) Digital media editing
CN105190511B (zh) 图像处理方法、图像处理装置和图像处理程序
US20190208230A1 (en) Live video broadcast method, live broadcast device and storage medium
US11670339B2 (en) Video acquisition method and device, terminal and medium
CN112911379B (zh) 视频生成方法、装置、电子设备和存储介质
CN112165632B (zh) 视频处理方法、装置及设备
CN112866796A (zh) 视频生成方法、装置、电子设备和存储介质
CN111970571B (zh) 视频制作方法、装置、设备及存储介质
WO2020220773A1 (zh) 图片预览信息的显示方法、装置、电子设备及计算机可读存储介质
CN113613068A (zh) 视频的处理方法、装置、电子设备和存储介质
EP4345647A1 (en) Information publishing method and apparatus, information display method and apparatus, electronic device, and medium
EP2662786A2 (en) Electronic device with multimedia content function
CN113992926B (zh) 界面显示方法、装置、电子设备和存储介质
WO2021089002A1 (zh) 多媒体信息处理方法、装置、电子设备及介质
WO2022218109A1 (zh) 交互方法, 装置, 电子设备及计算机可读存储介质
CN113891108A (zh) 字幕优化方法、装置、电子设备和存储介质
CN115442639B (zh) 一种特效配置文件的生成方法、装置、设备及介质
US20240121469A1 (en) Video editing method and apparatus, electronic device, and storage medium
CN116506654A (zh) 媒体内容发布方法、装置、设备及存储介质
CN117692699A (zh) 视频生成方法、装置、设备、存储介质和程序产品
CN117376635A (zh) 多媒体数据处理方法、装置、设备、存储介质和程序产品
CN110674624A (zh) 一种用于图文编辑的方法和系统
CN116459508A (zh) 特效道具的生成方法、画面的处理方法、装置和电子设备
CN118018812A (zh) 视频编辑方法、装置、设备及介质

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230421

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230421

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20230421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240402

R150 Certificate of patent or registration of utility model

Ref document number: 7466763

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150