JP7252362B2 - 動画を自動編集する方法及びポータブル型端末 - Google Patents

動画を自動編集する方法及びポータブル型端末 Download PDF

Info

Publication number
JP7252362B2
JP7252362B2 JP2021549369A JP2021549369A JP7252362B2 JP 7252362 B2 JP7252362 B2 JP 7252362B2 JP 2021549369 A JP2021549369 A JP 2021549369A JP 2021549369 A JP2021549369 A JP 2021549369A JP 7252362 B2 JP7252362 B2 JP 7252362B2
Authority
JP
Japan
Prior art keywords
video
preset
editing
type
shot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021549369A
Other languages
English (en)
Other versions
JP2022521929A (ja
Inventor
文▲傑▼ 姜
▲錦▼霖 蔡
靖康 ▲劉▼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Arashi Vision Inc
Original Assignee
Arashi Vision Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Arashi Vision Inc filed Critical Arashi Vision Inc
Publication of JP2022521929A publication Critical patent/JP2022521929A/ja
Application granted granted Critical
Publication of JP7252362B2 publication Critical patent/JP7252362B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036—Insert-editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/98—Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993—Evaluation of the quality of the acquired pattern
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/49—Segmenting video sequences, i.e. computational techniques such as parsing or cutting the sequence, low-level clustering or determining units such as shots or scenes
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H04N21/4545—Input to filtering algorithms, e.g. filtering a region of the image
    • H04N21/45457—Input to filtering algorithms, e.g. filtering a region of the image applied to a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4662—Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms
    • H04N21/4665—Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms involving classification methods, e.g. Decision trees
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113—Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07—Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Quality & Reliability (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Studio Circuits (AREA)

Description

本発明は、動画分野に属し、特に、動画を自動編集する方法及びポータブル型端末に関する。
マルチメディア技術の発展に伴い、さまざまな画像・音声・動画が人々の生活に多くの楽しみを加えている。映画、ドラマ又は撮影した短編映画などの動画ファイルを見る際には、通常、興味があるクリップを選択するが、これらのクリップを精確に見つけることは困難となる。特に、携帯端末を使って動画を見るのに慣れているユーザーは、基本的には、指を使ってタッチスクリーンのプログレスバーで関連操作を行うので、見るのがとても不便となる。
従来の動画編集では、主に、編集する各動画を人工でプレビューし、ゲームのハイライトを自分で判断して編集する人工による方法が採用されている。この方法は、動画の編集効率が低くなるとともに、人間の操作エラーのために動画編集の精度も低くなる。
本発明は、動画を自動編集する方法、コンピュータ読み取り可能な記憶媒体及びポータブル型端末を提供し、人的要因によって引き起こされる低い編集効率および低い精度の問題を回避し、動画を自動編集する効果を実現することを目的としている。
本発明の第１の態様は、
編集する動画を取得するステップと、
編集する動画のキーフレームを抽出するステップと、
キーフレームを事前トレーニングシーン分類法及び事前トレーニングターゲット検出方法に入力して、キーフレームのシーンタイプラベル及びターゲットオブジェクトラベルをそれぞれ得るステップと、
編集する動画から、事前設定された編集ルールを満たす複数の動画セグメントをスクリーニングするステップと、
事前トレーニング画質スコアリング法により複数の動画セグメントの平均スコアをそれぞれ算出するステップと、
各ショットのタイプにおいて平均スコアが最も高い動画セグメントをそれぞれ取得してスティッチングするステップと、を含む動画を自動編集する方法を提供する。
本発明の第２の態様は、プロセッサによって実行されると、第１の態様に記載の動画を自動編集する方法のステップを実現するコンピュータプログラムを記憶したコンピュータ読み取り可能な記憶媒体を提供する。
本発明第３の態様は、
１つ又は複数のプロセッサと、
メモリと、
メモリに格納され、前記１つ又は複数のプロセッサによって実行されると、第１の態様に記載の３Ｄ小惑星ダイナミックマップの生成方法のステップを実現するように構成される１つ又は複数のコンピュータプログラムと、を含むポータブル型端末を提供する。
本発明では、事前トレーニングシーン分類法と画質スコアリング法により、編集ルールとフローを生成することにより、動画を自動編集する効果が実現される。本発明の技術案は、人的要因によって引き起こされる低い編集効率および低い精度の問題を回避し、動画編集の効率を改善することができる。
図１は、本発明の実施例１によって提供される動画を自動編集する方法のフローチャートである。 図２は、本発明の実施例１によって提供される事前設定された編集ルールを満たす動画セグメントをスクリーニングするフローチャートである。 図３は、本発明の実施例３によって提供されるポータブル型端末の概略的な構造図である。
本発明の目的、技術案および有益な効果をより明確にするために、以下、添付した図面および実施例を参照して本発明を詳細に説明する。本明細書に記載の特定の実施形態は、本発明を説明するためのものであり、本発明を限定するものではないことを理解されたい。
本発明の技術案を説明するために、以下、特定の実施例により説明する。
図１を参照して、本発明の実施例１によって提供される動画を自動編集する方法は以下のステップを含む。
Ｓ１０１では、編集する動画を取得する。
Figure 0007252362000001
なお、本発明の実施例では、前記編集する動画は、映画、ドラマ又はユーザ自身が撮影した短編映画などの動画であってもよいし、他のタイプ又は由来の動画、若しくはｍｐ４、Ｉｎｓｖなどの一般的な形式の動画であってもよいが、これらに限定されない。
Ｓ１０２では、編集する動画のキーフレームを抽出する。
前記編集する動画のキーフレームを抽出するには、サードパーティライブラリであるｆｆｍｐｅｇを使用してキーフレームを抽出してもよいが、これらに限定されない。
なお、キーフレームには画像の背景や動く被写体の情報が記述されているため、キーフレームの画像データを読み取ることで動画の画像内容を取得できる。動画ファイルのパッケージ形式には、キーフレームリストが示されている。例えば、ｍｐ４形式の動画では、ｓｔｓｓ ｂｏｘはキーフレームリストを示す情報であり、各キーフレームの動画時刻と動画ファイルのアドレス偏差を含み、ｓｔｓｓ ｂｏｘの情報を読み取ることにより、編集する動画の各キーフレームの画像を取得できる。
Ｓ１０３では、事前トレーニングシーン分類法及び事前トレーニングターゲット検出方法により、キーフレームに対してシーンタイプのラベル及びターゲットオブジェクトのラベルをそれぞれ抽出する。
Figure 0007252362000002
Figure 0007252362000003
なお、事前トレーニングシーン分類法は、深い畳み込みネットワークに基づく事前トレーニングされたシーン分類アルゴリズムであり、画像のシーンタイプを判断でき、事前トレーニングターゲット検出方法は、深い畳み込みネットワークに基づく事前トレーニングされたターゲット検出アルゴリズムであり、画像に事前設定されたターゲットオブジェクトがあるかどうかを検出できる。
Ｓ１０４では、編集する動画から、事前設定された編集ルールを満たす複数の動画セグメントをスクリーニングする。
事前設定された編集ルールは、事前設定されたショットのタイプと、事前設定された各ショットのタイプが対応する編集する動画セグメントのキーフレーム数を含む。
事前設定された編集ルールの事前設定されたショットのタイプは、シーンタイプとターゲットオブジェクトによって決まり、即ち、１つの事前設定されたショットのタイプは、１つの事前設定されたシーンタイプと１つ又は複数のターゲットオブジェクトによって決定される。事前設定されたショットのタイプは、仕事、旅行、ショッピング、風景、スポーツなどの日常シーンを含むが、これらに限定されない。例えば、事前設定されたショットのタイプが仕事であるシーンタイプは、オフィス又は会議室であってもよく、および／又はターゲットオブジェクトは、コンピュータ、机、キーボードおよび／又はマウスなどであってもよい。
図２を参照して、事前設定された編集ルールを満たす動画セグメントをスクリーニングすることは、具体的には、以下のステップを含む。
Figure 0007252362000004
Ｓ１０４２では、各キーフレームのショットのタイプが現在検出されているショットのタイプであるかどうかを順番に判断する。
Figure 0007252362000005
Ｓ１０４３では、動画セグメントを編集し、前記編集された動画セグメントのショットのタイプが現在検出されているショットのタイプを満たすかどうかを順番に判断する。
Figure 0007252362000006
Ｓ１０４４では、各ショットのタイプを満たす動画セグメントをそれぞれ取得する。
Figure 0007252362000007
Ｓ１０５では、事前トレーニング画質スコアリング法により複数の動画セグメントの平均スコアをそれぞれ算出する。
事前設定された編集ルールを満たす複数の動画セグメントの平均スコアをそれぞれ算出することは、具体的には、以下のとおりである。
Figure 0007252362000008
Figure 0007252362000009
Ｓ１０６では、各ショットのタイプにおいて平均スコアが最も高い動画セグメントをそれぞれ取得してスティッチングする。
各ショットのタイプにおいて平均スコアが最も高い動画セグメントをそれぞれ取得してスティッチングして、新しい動画ファイルを生成することは、具体的には次のとおりである。
Figure 0007252362000010
スティッチングが完了した後、事前設定されたバックグラウンドミュージックを追加してもよい。事前設定されたバックグラウンドミュージックは、複数あってもよく、通常の音楽および音声ファイルを含むが、これらに限定されない。
本発明では、事前トレーニングシーン分類法と画質スコアリング法により、編集ルールとフローを生成することにより、動画を自動編集する効果が実現される。本発明の技術案は、人的要因によって引き起こされる低い編集効率および低い精度の問題を回避し、動画編集の効率を改善することができる。
本発明の実施例２は、プロセッサによって実行されると、本発明の実施例１に提供される動画を自動編集する方法のステップを実現するコンピュータプログラムを記憶したコンピュータ読み取り可能な記憶媒体を提供し、前記コンピュータ読み取り可能な記憶媒体は、非一時的なコンピュータ読み取り可能な記憶媒体であってもよい。
図３は、本発明の実施例３に提供されるポータブル型端末の特定の構造ブロック図を示している。ポータブル型端末１００は、１つ又は複数のプロセッサ１０１と、メモリ１０２と、１つ又は複数のコンピュータプログラムと、を含み、前記プロセッサ１０１と前記メモリ１０２とは、バスによって接続され、前記１つ又は複数のコンピュータプログラムは、前記メモリ１０２に格納され、前記１つ又は複数のプロセッサ１０１によって実行されると、本発明の実施例１に提供される動画を自動編集する方法のステップを実現するように構成される。
当業者であれば分かるように、本発明の実施例において、上記の実施例に係る方法のステップの全部又は一部は、プログラムにより関連するハードウェアを指示することで実現されてもよい。前記プログラムは、コンピュータ読み取り可能な記憶媒体に記憶されてもよい。前記記憶媒体は、例えば、ＲＯＭ／ＲＡＭ、磁気ディスク、光ディスクなどである。
上記は、本発明の好ましい実施例にすぎず、本発明を限定するものではない。本発明の精神および原理の範囲内で行われる変更、同等の置換および改善は、すべて本発明の保護範囲に含まれるべきである。

Claims (9)

  1. 動画を自動編集する方法であって、
    編集する動画を取得するステップと、
    編集する動画のキーフレームを抽出するステップと、
    前記キーフレームを事前トレーニングシーン分類法及び事前トレーニングターゲット検出方法に入力して、前記キーフレームのシーンタイプラベル及びターゲットオブジェクトラベルをそれぞれ得るステップと、
    前記編集する動画から、事前設定された編集ルールを満たす複数の動画セグメントをスクリーニングするステップであって、前記事前設定された編集ルールは、事前設定されたショットのタイプと、事前設定されたショットのタイプが対応する編集する動画セグメントのキーフレーム数を含み、前記ショットのタイプは、シーンタイプとターゲットオブジェクトによって決定され、前記事前設定された編集ルールでは、各ショットのタイプが対応する編集する動画セグメントの連続するキーフレームの数が所定値以上であると事前設定される、スクリーニングするステップと、
    事前トレーニング画質スコアリング法により前記複数の動画セグメントの平均スコアをそれぞれ算出するステップと、
    各ショットのタイプにおいて平均スコアが最も高い動画セグメントを取得してスティッチングするステップと、を含む、
    ことを特徴とする動画を自動編集する方法。
  2. Figure 0007252362000011
  3. Figure 0007252362000012
  4. Figure 0007252362000013
  5. Figure 0007252362000014
  6. 各ショットのタイプにおいて平均スコアが最も高い動画セグメントをそれぞれ取得してスティッチングする、
    ことを特徴とする請求項１に記載の動画を自動編集する方法。
  7. スティッチングが完了した後、事前設定されたバックグラウンドミュージックを追加する、
    ことを特徴とする請求項１に記載の動画を自動編集する方法。
  8. コンピュータ読み取り可能な記憶媒体であって、プロセッサによって実行されると、請求項１～７のいずれか１項に記載の動画を自動編集する方法のステップを実現するコンピュータプログラムを記憶し、非一時的なコンピュータ読み取り可能な記憶媒体である、
    ことを特徴とするコンピュータ読み取り可能な記憶媒体。
  9. ポータブル型端末であって、
    １つ又は複数のプロセッサと、
    メモリと、
    メモリに格納され、前記１つ又は複数のプロセッサによって実行されると、請求項１～７のいずれか１項に記載の動画を自動編集する方法のステップを実現するように構成される１つ又は複数のコンピュータプログラムと、を含む、
    ことを特徴とするポータブル型端末。
JP2021549369A 2019-02-22 2020-04-22 動画を自動編集する方法及びポータブル型端末 Active JP7252362B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201910132043.8 2019-02-22
CN201910132043.8A CN109819338B (zh) 2019-02-22 2019-02-22 一种视频自动剪辑方法、装置及便携式终端
PCT/CN2020/086188 WO2020169121A2 (zh) 2019-02-22 2020-04-22 一种视频自动剪辑方法及便携式终端

Publications (2)

Publication Number Publication Date
JP2022521929A JP2022521929A (ja) 2022-04-13
JP7252362B2 true JP7252362B2 (ja) 2023-04-04

Family

ID=66607274

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021549369A Active JP7252362B2 (ja) 2019-02-22 2020-04-22 動画を自動編集する方法及びポータブル型端末

Country Status (5)

Country Link
US (1) US11955143B2 (ja)
EP (1) EP3920542A4 (ja)
JP (1) JP7252362B2 (ja)
CN (1) CN109819338B (ja)
WO (1) WO2020169121A2 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109819338B (zh) 2019-02-22 2021-09-14 影石创新科技股份有限公司 一种视频自动剪辑方法、装置及便携式终端
CN110430443B (zh) * 2019-07-11 2022-01-25 平安科技（深圳）有限公司 视频镜头剪切的方法、装置、计算机设备及存储介质
WO2021056353A1 (zh) * 2019-09-26 2021-04-01 深圳市大疆创新科技有限公司 视频剪辑方法及终端设备
CN111191522A (zh) * 2019-12-11 2020-05-22 武汉光庭信息技术股份有限公司 图像场景信息存储方法及系统
CN113259601A (zh) * 2020-02-11 2021-08-13 北京字节跳动网络技术有限公司 视频处理方法、装置、可读介质和电子设备
CN113938751B (zh) * 2020-06-29 2023-12-22 抖音视界有限公司 视频转场类型确定方法、设备及存储介质
CN111914102A (zh) * 2020-08-27 2020-11-10 上海掌门科技有限公司 编辑多媒体数据的方法、电子设备和计算机存储介质
CN112261425B (zh) * 2020-10-20 2022-07-12 成都中科大旗软件股份有限公司 一种视频直播和录像播放方法及系统
CN113139415A (zh) * 2020-10-22 2021-07-20 西安天和防务技术股份有限公司 视频关键帧提取方法、计算机设备和存储介质
CN112399251B (zh) * 2020-12-02 2023-04-07 武汉四牧传媒有限公司 一种基于互联网云大数据视频剪辑方法及装置
CN112689200B (zh) * 2020-12-15 2022-11-11 万兴科技集团股份有限公司 视频编辑方法、电子设备及存储介质
CN112770061A (zh) * 2020-12-16 2021-05-07 影石创新科技股份有限公司 视频剪辑方法、系统、电子设备及存储介质
CN114697700A (zh) * 2020-12-28 2022-07-01 北京小米移动软件有限公司 视频剪辑方法、视频剪辑装置及存储介质
CN112911281B (zh) * 2021-02-09 2022-07-15 北京三快在线科技有限公司 一种视频质量评价方法及装置
CN113709384A (zh) * 2021-03-04 2021-11-26 腾讯科技（深圳）有限公司 基于深度学习的视频剪辑方法、相关设备及存储介质
CN113301385B (zh) * 2021-05-21 2023-02-28 北京大米科技有限公司 视频数据处理方法、装置、电子设备和可读存储介质
CN115734032A (zh) * 2021-08-31 2023-03-03 华为技术有限公司 视频剪辑方法、电子设备及存储介质
CN114697761B (zh) * 2022-04-07 2024-02-13 脸萌有限公司 一种处理方法、装置、终端设备及介质
CN115278355B (zh) * 2022-06-20 2024-02-13 北京字跳网络技术有限公司 视频剪辑方法、装置、设备、计算机可读存储介质及产品
CN115734007B (zh) * 2022-09-22 2023-09-01 北京国际云转播科技有限公司 视频剪辑方法、装置、介质及视频处理系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000040011A1 (fr) 1998-12-28 2000-07-06 Sony Corporation Procede et dispositif permettant d'editer des informations video
JP2005323276A (ja) 2004-05-11 2005-11-17 Olympus Corp 録画装置、撮像装置および録画方法
JP2012010265A (ja) 2010-06-28 2012-01-12 Nippon Hoso Kyokai <Nhk> 要約映像生成装置及び要約映像生成プログラム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6807361B1 (en) * 2000-07-18 2004-10-19 Fuji Xerox Co., Ltd. Interactive custom video creation system
JP3667262B2 (ja) * 2000-08-19 2005-07-06 エルジー電子株式会社 ビデオスキミング方法及び装置
US9020966B2 (en) * 2006-07-31 2015-04-28 Ricoh Co., Ltd. Client device for interacting with a mixed media reality recognition system
US20090083790A1 (en) * 2007-09-26 2009-03-26 Tao Wang Video scene segmentation and categorization
WO2010006334A1 (en) * 2008-07-11 2010-01-14 Videosurf, Inc. Apparatus and software system for and method of performing a visual-relevance-rank subsequent search
US8195038B2 (en) * 2008-10-24 2012-06-05 At&T Intellectual Property I, L.P. Brief and high-interest video summary generation
CN101464893B (zh) * 2008-12-31 2010-09-08 清华大学 一种提取视频摘要的方法及装置
CN101599179B (zh) 2009-07-17 2011-06-01 北京邮电大学 场地运动精彩镜头集锦自动生成方法
JP2011124979A (ja) * 2009-11-13 2011-06-23 Jvc Kenwood Holdings Inc 映像処理装置、映像処理方法、および映像処理プログラム
CN101807198A (zh) 2010-01-08 2010-08-18 中国科学院软件研究所 一种基于草图的视频摘要生成方法
EP2641401B1 (en) * 2010-11-15 2017-04-05 Huawei Technologies Co., Ltd. Method and system for video summarization
CN102819528B (zh) 2011-06-10 2016-06-29 中国电信股份有限公司 生成视频摘要的方法和装置
CN104978364A (zh) * 2014-04-14 2015-10-14 上海京知信息科技有限公司 一种基于关键帧的网络视频格式文件摘要提取方法
CN113766161B (zh) * 2014-12-14 2023-06-20 深圳市大疆创新科技有限公司 视频处理的方法和系统
CN107251014A (zh) * 2015-04-21 2017-10-13 深圳市大疆创新科技有限公司 一种媒体编辑方法、媒体编辑器及媒体计算机
US10157638B2 (en) * 2016-06-24 2018-12-18 Google Llc Collage of interesting moments in a video
CN107223344A (zh) * 2017-01-24 2017-09-29 深圳大学 一种静态视频摘要的生成方法及装置
CN107222795B (zh) * 2017-06-23 2020-07-31 南京理工大学 一种多特征融合的视频摘要生成方法
CN107566907B (zh) * 2017-09-20 2019-08-30 Oppo广东移动通信有限公司 视频剪辑方法、装置、存储介质及终端
US10902616B2 (en) * 2018-08-13 2021-01-26 Nvidia Corporation Scene embedding for visual navigation
CN109819338B (zh) * 2019-02-22 2021-09-14 影石创新科技股份有限公司 一种视频自动剪辑方法、装置及便携式终端
US11636385B2 (en) * 2019-11-04 2023-04-25 International Business Machines Corporation Training an object detector using raw and unlabeled videos and extracted speech
US11568655B2 (en) * 2020-03-26 2023-01-31 Intel Corporation Methods and devices for triggering vehicular actions based on passenger actions

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000040011A1 (fr) 1998-12-28 2000-07-06 Sony Corporation Procede et dispositif permettant d'editer des informations video
JP2005323276A (ja) 2004-05-11 2005-11-17 Olympus Corp 録画装置、撮像装置および録画方法
JP2012010265A (ja) 2010-06-28 2012-01-12 Nippon Hoso Kyokai <Nhk> 要約映像生成装置及び要約映像生成プログラム

Also Published As

Publication number Publication date
US20220199121A1 (en) 2022-06-23
JP2022521929A (ja) 2022-04-13
CN109819338A (zh) 2019-05-28
WO2020169121A2 (zh) 2020-08-27
EP3920542A2 (en) 2021-12-08
CN109819338B (zh) 2021-09-14
US11955143B2 (en) 2024-04-09
WO2020169121A3 (zh) 2020-10-08
EP3920542A4 (en) 2022-10-26

Similar Documents

Publication Publication Date Title
JP7252362B2 (ja) 動画を自動編集する方法及びポータブル型端末
Truong et al. Video abstraction: A systematic review and classification
US9570107B2 (en) System and method for semi-automatic video editing
US9554111B2 (en) System and method for semi-automatic video editing
CN107852399B (zh) 流媒体呈现系统
US9002175B1 (en) Automated video trailer creation
CN112584086A (zh) 视频会议中的实时视频变换
KR20160098949A (ko) 동영상 생성 방법, 장치 및 컴퓨터 프로그램
US9779306B2 (en) Content playback system, server, mobile terminal, content playback method, and recording medium
US11243995B2 (en) Method for atomically tracking and storing video segments in multi-segment audio-video compositions
Soe et al. A content-aware tool for converting videos to narrower aspect ratios
US10474743B2 (en) Method for presenting notifications when annotations are received from a remote device
US20230419997A1 (en) Automatic Non-Linear Editing Style Transfer
KR102462297B1 (ko) 개인미디어 크리에이터를 위한 클라우드 기반 스튜디오 플랫폼 제공 시스템
WO2016203469A1 (en) A digital media reviewing system and methods thereof
KR20190060027A (ko) 주요 등장인물의 감성에 기반한 비디오 자동 편집 방법 및 장치
CN108882023B (zh) 视频处理方法及相关产品
Lawson Facebook a Metaverse: Instagram
CN105684429A (zh) 一种视频会议的开会讨论方法及系统
Andronov et al. Movie abstraction and content understanding tool based on shot boundary key frame selection
Uribe et al. New usability evaluation model for a personalized adaptive media search engine based on interface complexity metrics
JP2016072787A (ja) 映像編集装置および映像編集方法
KR20140075902A (ko) 소셜 네트워크 서비스 아카이브를 이용한 동영상 생성방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210823

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210820

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220909

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230307

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230323

R150 Certificate of patent or registration of utility model

Ref document number: 7252362

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150