RU2565601C1 - Method for automatic editing of video content - Google Patents
Method for automatic editing of video content Download PDFInfo
- Publication number
- RU2565601C1 RU2565601C1 RU2014133750/08A RU2014133750A RU2565601C1 RU 2565601 C1 RU2565601 C1 RU 2565601C1 RU 2014133750/08 A RU2014133750/08 A RU 2014133750/08A RU 2014133750 A RU2014133750 A RU 2014133750A RU 2565601 C1 RU2565601 C1 RU 2565601C1
- Authority
- RU
- Russia
- Prior art keywords
- fragments
- editing
- fragment
- parts
- video content
- Prior art date
Links
Images
Abstract
Description
Настоящее изобретение относится к редактированию видеоизображения.The present invention relates to video editing.
Цифровые видеокамеры становятся все более и более распространенными среди широких масс населения. Многие мобильные устройства оборудованы видеокамерами, предлагающими пользователям возможности снимать видеофрагменты и пересылать их по беспроводным сетям.Digital video cameras are becoming more and more common among the general public. Many mobile devices are equipped with video cameras, offering users the ability to shoot video clips and send them over wireless networks.
Чтобы обеспечивать возможность пользователям производить качественные видеоизображения на их терминалах, необходимо обеспечивать возможности редактирования видеофрагментов в электронных устройствах, таких как мобильные телефоны, смартфоны, карманные коммуникационные устройства и ПЦА (персональные цифровые ассистенты), которые оборудованы видеокамерой. Редактирование видеофрагментов представляет собой процесс модифицирования имеющихся в наличии последовательностей видеоданных в новую последовательность видеоданных, включая возможность удаления некачественных или нежелательных фрагментов с сохранением остальных фрагментов. Инструментальные средства редактирования видеофрагментов дают возможность пользователям применять набор эффектов к их видеофрагментам, стремясь произвести функционально и эстетически лучшее их представление (см. RU №2370906, H04N 7/24, G11B 27/031, G06T 5/00, 2006). Чтобы применять эффекты редактирования видеофрагментов, используют серийно выпускаемую программную продукцию, которая нацелена главным образом на платформы ПК (персональных компьютеров).In order to enable users to produce high-quality video images at their terminals, it is necessary to provide the ability to edit video clips in electronic devices such as mobile phones, smartphones, handheld communication devices and OCA (personal digital assistants) that are equipped with a video camera. Editing video fragments is the process of modifying the available sequences of video data into a new sequence of video data, including the ability to remove low-quality or unwanted fragments while preserving the remaining fragments. Video editing tools enable users to apply a set of effects to their video clips, striving to produce a functional and aesthetically better presentation of them (see RU No. 2370906,
Методы, используемые в такой программной продукции редактирования видеофрагментов, производят операции с последовательностями видеоданных главным образом в их необработанных форматах в пространственной области. Другими словами, сжатые видеоданные сначала декодируются, затем в пространственной области вводятся эффекты редактирования, и, наконец, видеоданные кодируются снова. Это известно как операции редактирования видеофрагментов в пространственной области.The methods used in such video editing software products perform operations with sequences of video data mainly in their raw formats in the spatial domain. In other words, the compressed video data is first decoded, then editing effects are introduced in the spatial domain, and finally the video data is encoded again. This is known as spatial editing of video clips.
Такая схема не может применяться на мобильных телефонах со сравнительно невысокими ресурсами в вычислительной мощности, пространстве памяти, имеющейся свободной памяти и энергии аккумуляторной батареи. Декодирование последовательности видеоданных и ее повторное кодирование представляют собой дорогостоящие операции, которые занимают много времени и потребляют много энергии аккумуляторной батареи. Кроме того, известное решение не обеспечивает возможность сокращения объема видеоматериала за счет удаления фрагментов, не удовлетворяющих пользователя.Such a scheme cannot be used on mobile phones with relatively low resources in computing power, memory space, available free memory and battery power. Decoding a sequence of video data and re-encoding it is a costly operation that is time consuming and consumes a lot of battery power. In addition, the known solution does not provide the possibility of reducing the volume of video material by removing fragments that do not satisfy the user.
Известен также способ автоматического редактирования видеоконтента, включающий демонстрацию пользователю его отдельных фрагментов, оценку фрагментов контента пользователем в соответствии со своими предпочтениями во время их демонстрации и управление системой монтажа, редактирующей видеоконтент с использованием настроек, созданных на основе оценок пользователя (см. US №8290334, G11B 27/034; H04N 21/4532; H04N 21/4756; H04N 21/854; H04N 7/163, 2005).There is also known a method for automatically editing video content, including demonstrating to the user its individual fragments, evaluating fragments of content by the user in accordance with their preferences during their demonstration, and controlling the editing system editing video content using settings created based on user ratings (see US No. 8290334, G11B 27/034; H04N 21/4532; H04N 21/4756; H04N 21/854; H04N 7/163, 2005).
Недостаток известного способа - пользователь производит оценку только избраных кадров видеоматериалов, далее система редактирования, используемая при реализации способа, сама принимает решения, используя алгоритмы, интерполирующие оценку избранных участков видеоматериала, что придает принимаемым ею монтажным решениям вероятностный характер, не всегда достаточно адекватный. Это не позволяет обеспечить высокое качество редактирования видеоконтента. Кроме того, избранные кадры выделяются из видеоконтента по косвенным признакам: разрыв в таймкоде, разрыв в аудио, изменения содержания видео и т.п., что не дает гарантии того, что избранный кадр является характерным, т.е. в полной мере демонстрирует пользователю содержание видеоконтента в областях, прилегающих к избранному кадру, что значительно повышает вероятность ошибочной оценки пользователя и, как следствие, критического снижения качества монтажа, при котором в отредактированное видео попадают фрагменты исходного видеоконтента не соответствующие предпочтениям пользователя или, напротив, не попадают фрагменты, соответствующие предпочтениям пользователя.The disadvantage of this method is that the user evaluates only selected frames of video materials, then the editing system used in the implementation of the method itself makes decisions using algorithms that interpolate the evaluation of selected sections of the video material, which makes the editing decisions made by it probabilistic in nature, not always adequate enough. This does not allow for high quality editing of video content. In addition, the selected frames are extracted from the video content by indirect signs: a gap in the timecode, a gap in the audio, changes in the content of the video, etc., which does not guarantee that the selected frame is characteristic, i.e. fully demonstrates to the user the content of video content in areas adjacent to the selected frame, which significantly increases the likelihood of a user’s erroneous assessment and, as a result, a critical decrease in editing quality, in which fragments of the original video content that do not correspond to the user's preferences or, conversely, do not fall into the edited video fragments matching the user's preferences fall.
Задача, на решение которой направлено заявленное решение, обеспечение высокого качества редактирования видеоконтента (полное соответствие содержания видеоматериалов предпочтениям пользователя) непосредственно на мобильных электронных устройствах.The task to which the stated solution is directed is to ensure high quality editing of video content (full compliance of the content of the video materials to the user's preferences) directly on mobile electronic devices.
Технический результат, получаемый при решении поставленной технической задачи, выражается в обеспечении возможности редактирования видеоматериалов непосредственно на мобильных электронных устройствах, в т.ч. непосредственно после формирования таких видеоматериалов посредством видеокамер, которыми оснащены упомянутые устройства.The technical result obtained by solving the technical problem is expressed in providing the ability to edit video directly on mobile electronic devices, including immediately after the formation of such video materials by means of video cameras with which the said devices are equipped.
Для решения поставленной задачи способ автоматического редактирования видеоконтента, включающий демонстрацию пользователю его отдельных фрагментов, оценку фрагментов контента пользователем в соответствии со своими предпочтениями во время их демонстрации и управление системой монтажа, редактирующей видеоконтент с использованием настроек, созданных на основе оценок пользователя, отличается тем, что видеоконтент делят на фрагменты, продолжительность которых на первом этапе редактирования устанавливают из выраженияTo solve this problem, a method for automatically editing video content, including demonstrating to the user its individual fragments, evaluating fragments of content by the user in accordance with their preferences during their demonstration, and controlling the editing system that edits video content using settings created based on user ratings, is characterized in that video content is divided into fragments, the duration of which at the first stage of editing is established from the expression
F=Lmin·S·(1/К)i, сек,F = L min · S · (1 / K) i , sec,
где F - продолжительность фрагментов контента на первом этапе редактирования, сек;where F is the duration of the pieces of content at the first stage of editing, sec;
Lmin - минимальная длина монтажного кадра, сек;L min - the minimum length of the mounting frame, sec;
S - принятое число частей, на которые может быть разделен фрагмент;S is the accepted number of parts into which the fragment can be divided;
К - коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования;K is the coefficient for reducing the length of fragments at each subsequent editing stage;
i - планируемое число этапов редактирования, i is the planned number of editing steps,
после чего пользователь последовательно просматривает все фрагменты, по каждому из которых принимает решение оставить или удалить весь фрагмент или его части, первоначально принятое число которых составляет от 2 до 10, затем система монтажа удаляет намеченные к удалению фрагменты и/или их части и объединяет оставленные фрагменты и части фрагментов в новый видеоконтент, после чего процедуры подготовки к просмотру и просмотра видеоконтента повторяют с повторением при необходимости процедуры оценки фрагментов видеоконтента и/или их частей и с последующим удалением фрагментов и/или их частей, отнесенных к удаляемым, до полного исчерпания таких видеофрагментов и/или их частей, кроме того, продолжительность фрагментов на каждом последующем этапе редактирования уменьшают по сравнению с продолжительностью фрагмента на предшествующем этапе, для чего коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования принимают в пределах 0,3-0,95, кроме того, если длина части фрагмента, получаемая при разбиении последнего на принятое число часте, получается менее минимальной продолжительности монтажного кадра, исходное число частей, на которые делят фрагмент, уменьшают на единицу и повторяют эту процедуру до получения величины длины части фрагмента, не меньшей минимальной длины монтажного кадра, или принятия числа частей, на которые может быть разделен фрагмент, равным 1. Кроме того, продолжительность фрагментов на первом этапе редактирования принимают в пределах 9-18 секунд. Кроме того, планируемое число этапов редактирования принимают в пределах 2-5. Кроме того, первоначально принятое число частей, на которые может быть разделен фрагмент, равно 3. Кроме того, просмотр видеоконтента осуществляют в режиме ускоренного просмотра, по меньшей мере, на первых этапах редактирования.after which the user sequentially looks through all the fragments, for each of which decides to leave or delete the whole fragment or its parts, the initial number of which is from 2 to 10, then the installation system deletes the fragments and / or their parts intended for deletion and combines the left fragments and parts of fragments into new video content, after which the procedures for preparing for viewing and viewing video content are repeated, repeating, if necessary, the procedure for evaluating fragments of video content and / or their part and with the subsequent removal of the fragments and / or their parts, referred to as deleted, until the video clips and / or their parts are completely exhausted, in addition, the duration of the fragments at each subsequent editing stage is reduced compared to the duration of the fragment at the previous stage, for which the coefficient reducing the length of the fragments at each subsequent editing step is taken within 0.3-0.95, in addition, if the length of the fragment fragment obtained by dividing the latter into the accepted number of fragments is less than the minimum duration of the installation frame, the initial number of parts into which the fragment is divided is reduced by one and repeat this procedure until the length of the fragment part is not less than the minimum length of the installation frame or the number of parts into which the fragment can be divided is equal to 1. In addition, the duration of the fragments in the first stage of editing is taken within 9-18 seconds. In addition, the planned number of editing steps is taken within 2-5. In addition, the initially accepted number of parts into which a fragment can be divided is 3. In addition, video content is viewed in accelerated viewing mode, at least in the first stages of editing.
Сопоставительный анализ признаков заявленного решения с признаками прототипа и аналогов свидетельствует о соответствии заявленного решения критерию "новизна".A comparative analysis of the features of the claimed solution with the features of the prototype and analogues indicates the conformity of the claimed solution to the criterion of "novelty."
Признаки отличительной части формулы изобретения решают следующие функциональные задачи:The features of the characterizing part of the claims solve the following functional tasks:
Признаки…" видеоконтент делят на фрагменты, продолжительность которых на первом этапе редактирования устанавливают из выраженияSigns ... "video content is divided into fragments, the duration of which at the first stage of editing is established from the expression
F=Lmin·S·(1/К)i, сек,F = L min · S · (1 / K) i , sec,
где F - продолжительность фрагментов контента на первом этапе редактирования, сек;where F is the duration of the pieces of content at the first stage of editing, sec;
Lmin - минимальная длина монтажного кадра, сек;L min - the minimum length of the mounting frame, sec;
S - принятое число частей, на которые может быть разделен фрагмент;S is the accepted number of parts into which the fragment can be divided;
К - коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования;K is the coefficient for reducing the length of fragments at each subsequent editing stage;
i - планируемое число этапов редактирования», i - the planned number of editing steps ",
позволяют разбить весь видеоряд на фрагменты, продолжительность которых с одной стороны достаточна для надежной однозначной их оценки (с позиций оставлять фрагмент или удалять), а с другой позволяет при необходимости провести несколько этапов редактирования с возможностью варьирования продолжительности видеофрагментов от этапа к этапу и тем самым варьирования местоположения границ видеофрагментов на этапах редактирования. При этом возможность дробления фрагментов на отдельные части позволяет ускоренно редактировать видеоматериал, удаляя «бракованные» части на более ранних этапах редактирования.they allow you to split the entire video sequence into fragments whose duration, on the one hand, is sufficient for reliable unambiguous assessment (leave a fragment or delete from the standpoint), and on the other hand allows you to carry out several editing steps, if necessary, with the possibility of varying the duration of video clips from stage to stage and thereby varying locations of the borders of video fragments at the editing stages. Moreover, the possibility of fragmentation of fragments into separate parts allows you to quickly edit the video material, removing the "defective" parts at earlier stages of editing.
Признаки, указывающие, что «пользователь последовательно просматривает все фрагменты, по каждому из которых принимает решение оставить или удалить весь фрагмент или его части», обеспечивают возможность достижения высокого качества редактирования видеоконтента - его полное соответствие предпочтениям пользователя. При этом возможность дробления фрагментов на отдельные части позволяет ускоренно редактировать видеоматериал, удаляя «бракованные» части на более ранних этапах редактирования.Signs indicating that "the user sequentially looks through all the fragments, for each of which decides to leave or delete the entire fragment or its parts", provide the ability to achieve high quality editing of video content - its full compliance with the user's preferences. Moreover, the possibility of fragmentation of fragments into separate parts allows you to quickly edit the video material, removing the "defective" parts at earlier stages of editing.
Признаки, указывающие, что «первоначально принятое число частей, на которые делят фрагмент, составляет от 2 до 10», позволяют при необходимости варьировать возможность настройки системы редактирования на разную степень «избирательности» более точного соответствия длины удаляемых частей фрагмента длине «бракованных» участков контента.Signs indicating that “the initially accepted number of parts into which the fragment is divided is from 2 to 10”, if necessary, you can vary the ability to configure the editing system to a different degree of “selectivity” to more closely match the length of deleted parts of the fragment to the length of “defective” sections of content .
Признаки, указывающие, что после разбраковки фрагментов «система монтажа удаляет намеченные к удалению фрагменты и/или их части и объединяет оставленные фрагменты и части фрагментов в новый видеоконтент», позволяют подготовить ко второму этапу редактирования видеоконтент, доля продолжительности «удовлетворительных» участков которого повысилась по сравнению с исходной.The signs indicating that after the fragment is sorted “the editing system removes the fragments and / or their parts intended for deletion and combines the left fragments and fragments of the fragments into new video content”, allows preparing video content for the second stage of editing, the fraction of the duration of “satisfactory” sections of which increased compared to the original.
Признаки, указывающие, что после формирования нового видеоконтента «процедуры подготовки к просмотру и просмотра видеоконтента повторяют с повторением при необходимости процедуры оценки фрагментов видеоконтента и/или их частей и с последующим удалением фрагментов и/или их частей, отнесенных к удаляемым, до полного исчерпания таких видеофрагментов и/или их частей», обеспечивают возможность последовательного проведения нескольких этапов редактирования и избавление видеоматериала от непригодных фрагментов.Signs indicating that after the formation of new video content, “the procedures for preparing for viewing and viewing video content are repeated, repeating, if necessary, the procedure for evaluating fragments of video content and / or their parts and then deleting fragments and / or their parts classified as deleted, until such resources are exhausted video fragments and / or their parts ”, provide the possibility of sequentially carrying out several stages of editing and rid the video material of unusable fragments.
Признаки, указывающие, что «продолжительность фрагментов на каждом последующем этапе редактирования уменьшают по сравнению с продолжительностью фрагмента на предшествующем этапе, для чего коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования принимают в пределах 0,3-0,95», обеспечивают возможность «перемещения границ видеофрагментов» по длине видеоматериала от одного этапа редактирования к другому и тем самым варьирования содержимого этих фрагментов, при этом заданный диапазон изменения коэффициента уменьшения длины фрагментов на каждом последующем этапе редактирования обеспечивает возможность варьирования продолжительности процедуры редактирования. Кроме того, уменьшение продолжительности фрагмента и соответственно его частей позволяет все более точно устанавливать границы непригодных фрагментов за счет сокращения расстояния между границами частей видеофрагмента.Signs indicating that "the duration of the fragments at each subsequent editing step is reduced compared with the duration of the fragment at the previous stage, for which the coefficient of decreasing the length of the fragments at each subsequent editing step is taken within 0.3-0.95", provide the ability to "move the boundaries of video fragments ”along the length of the video material from one editing stage to another and thereby varying the contents of these fragments, while the specified range of variation of the mind coefficient Decreasing the length of fragments at each subsequent editing step provides the possibility of varying the duration of the editing procedure. In addition, reducing the duration of the fragment and, accordingly, its parts allows more and more accurately establish the boundaries of unsuitable fragments by reducing the distance between the boundaries of the parts of the video fragment.
Признаки, указывающие, что «если длина части фрагмента, получаемая при разбиении последнего на принятое число частей, получается менее минимальной продолжительности монтажного кадра, исходное число частей, на которые делят фрагмент, уменьшают на единицу и повторяют эту процедуру до получения величины длины части фрагмента, не меньшей минимальной длины монтажного кадра, или принятия числа частей, на которые может быть разделен фрагмент, равным 1», обеспечивают поддержание длины фрагмента не меньшей продолжительности, при которой сохраняется целостность его восприятия (при которой он не воспринимается «нарезкой» отдельных не связанных друг с другом логически кадров, когда органы чувств и сознание человека в состоянии уловить продемонстрированное изображение и осознать его содержание.Signs indicating that “if the length of the fragment part obtained by dividing the latter into the accepted number of parts is less than the minimum length of the installation frame, the initial number of parts into which the fragment is divided is reduced by one and repeat this procedure until the length of the fragment part is obtained, not less than the minimum length of the installation frame, or the adoption of the number of parts into which the fragment can be divided equal to 1 ", ensure that the length of the fragment is not less than the duration at which the integrity of his perception is maintained (in which he is not perceived by “slicing” separate logical frames that are not connected with each other, when the senses and the human mind are able to capture the displayed image and realize its content.
Признаки, указывающие, что «продолжительность фрагментов на первом этапе редактирования принимают в пределах 9-18 секунд», задает длину фрагмента, оптимальную с позиций продолжительности процедуры редактирования. Признаки, указывающие, что «планируемое число этапов редактирования принимают в пределах 2-5», определяют общую продолжительность процедуры редактирования.Signs indicating that “the duration of the fragments at the first editing stage is accepted within 9-18 seconds”, sets the length of the fragment, optimal from the standpoint of the duration of the editing procedure. Signs indicating that "the planned number of editing steps are taken within 2-5", determine the total duration of the editing procedure.
Признаки, указывающие, что «первоначально принятое число частей, на которые может быть разделен фрагмент, равно 3», оптимальны с позиций скорости редактирования.Signs indicating that “the initially accepted number of parts into which the fragment can be divided is 3” are optimal from the standpoint of editing speed.
Признаки, указывающие, что «просмотр видеоконтента осуществляют в режиме ускоренного просмотра, по меньшей мере, на первых этапах редактирования», позволяют уменьшить продолжительность процедуры редактирования.Signs indicating that “viewing video content is carried out in accelerated viewing mode, at least in the first stages of editing”, can reduce the duration of the editing procedure.
На фиг. 1-7 показана схема, поясняющая процедуры способа; на фиг. 1 показан исходный видеоконтент; на фиг. 2 показан вид исходного видеоконтента после операции оценки его фрагментов и удаления забракованных; на фиг. 3 показан вид нового видеоконтента после первого этапа редактирования; на фиг. 4 показан вид нового видеоконтента после операции оценки его фрагментов и удаления забракованных; на фиг. 5 показан вид второго нового видеоконтента (после второго этапа редактирования); на фиг. 6 показан вид второго нового видеоконтента на третьем этапе редактирования; на фиг. 7 показан вид отредактированного видеоконтента.In FIG. 1-7 is a diagram explaining the procedures of the method; in FIG. 1 shows source video content; in FIG. 2 shows a view of the original video content after the operation of evaluating its fragments and removing rejected ones; in FIG. 3 shows a view of the new video content after the first editing step; in FIG. 4 shows a view of new video content after the operation of evaluating its fragments and removing rejected ones; in FIG. 5 shows a view of the second new video content (after the second editing step); in FIG. 6 shows a view of a second new video content in a third editing step; in FIG. 7 shows a view of the edited video content.
На чертежах показаны 1 - фрагменты, на которые делится контент на первом этапе редактирования, 2 - первый бракованный участок, 3 - второй бракованный участок, 4 - границы участков, на которые может быть разделен фрагмент, 5 - фрагмент контента на втором этапе редактирования, 6 - фрагмент контента на третьем этапе редактирования, 7 - отредактированный видеоконтент.The drawings show 1 — fragments into which the content is divided in the first editing stage, 2 — the first defective section, 3 — the second defective section, 4 — the boundaries of the sections into which the fragment can be divided, 5 — the content fragment in the second editing stage, 6 - a piece of content in the third stage of editing, 7 - edited video content.
Заявленный способ автоматического редактирования видеоконтента предназначен для использования в мобильных электронных устройствах, таких как мобильные телефоны (далее по тексту упоминаются только они, хотя это не исключает возможность использования карманных коммуникационных устройств и ПЦА). Способ реализуется посредством программного обеспечения, устанавливаемого на эти устройства, обеспечивающего выполнение нижеперечисленных операций.The claimed method for automatic editing of video content is intended for use in mobile electronic devices, such as mobile phones (hereinafter referred to only they are, although this does not exclude the possibility of using handheld communication devices and OCA). The method is implemented by software installed on these devices, providing the following operations.
Способ реализуется следующим образом. В исходном положении видеоконтент известным образом «закачен» готовым или снят на видеокамеру мобильного телефона.The method is implemented as follows. In the initial position, the video content in a known manner is “uploaded” ready-made or captured on the camcorder of a mobile phone.
Вначале программным путем вычисляют продолжительность фрагментов 1 контента (F) на первом этапе его редактирования при задаваемых пользователем значениях параметров, используемых в заявленном математическом выражении F=Lmin·S·(1/К)i,First, programmatically calculate the duration of
где F - продолжительность фрагментов контента на первом этапе редактирования;where F is the duration of the pieces of content at the first editing stage;
Lmin - минимальная длина монтажного кадра, сек;L min - the minimum length of the mounting frame, sec;
S - принятое число частей, на которые может быть разделен фрагмент;S is the accepted number of parts into which the fragment can be divided;
К - коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования;K is the coefficient for reducing the length of fragments at each subsequent editing stage;
i - планируемое число этапов редактирования.i is the planned number of editing steps.
Если при этом учесть тот факт, что Lmin - минимальная длина монтажного кадра (продолжительность демонстрации кадра, которую органы чувств человека способны воспринять как цельную картину), составляет порядка 1-2 секунд, задать коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования (К=0,3-0,95, предпочтительно порядка 0,7), принятое число частей, на которые может быть разделен фрагмент (S=2-10, предпочтительно 3), и планируемое число этапов редактирования (i=2-5, предпочтительно 3), то F должно составить 9-18 секунд.If we take into account the fact that L min is the minimum length of the installation frame (the duration of the demonstration of the frame, which the human senses can perceive as a whole picture), is about 1-2 seconds, set the reduction factor for the length of fragments at each subsequent editing stage (K = 0.3-0.95, preferably of the order of 0.7), the accepted number of parts into which the fragment can be divided (S = 2-10, preferably 3), and the planned number of editing steps (i = 2-5, preferably 3), then F should be 9-18 seconds.
Далее известным образом на дисплее мобильного телефона пользователь просматривает последовательно все видеофрагменты видеоконтента, подлежащего редактированию. При этом во время их демонстрации пользователь выполняет оценку фрагментов 1 контента в соответствии со своими предпочтениями и управляет системой монтажа, редактирующей видеоконтент (принимает формальное решение оставить данный фрагмент или его часть или же удалить), сообщая устройству свое решение любым применимым для этого способом: нажимая соответствующие кнопки (виртуальные - выводимые на дисплей) или реальные кнопки управления телефоном, голосовыми командами, жестами, мимикой и т.п. Причем если длина неудачного фрагмента полностью перекрывает длину фрагмента, то подлежит удалению весь фрагмент целиком. Если длина неудачного фрагмента перекрывает только часть длины фрагмента, но полностью перекрывает длину участка, на который этот фрагмент может быть разделен, то подлежит удалению весь такой участок целиком.Further, in a known manner, on a mobile phone display, a user views sequentially all video fragments of video content to be edited. At the same time, during their demonstration, the user evaluates
В результате (см. фиг. 1) можно удалить среднюю часть забракованного участка 2, последнюю часть третьего (считая слева) фрагмента, составляющую часть бракованного участка 3, и полностью последний слева фрагмент на бракованном участке 3. Затем система монтажа удаляет забракованный фрагмент и участки фрагментов и объединяет оставленные фрагменты в новый видеоконтент. В данном случае из четырех исходных фрагментов остается два с половиной. Их и объединяют в новый видеоконтент.As a result (see Fig. 1), it is possible to remove the middle part of the rejected
После этого повторяют процедуру разбиения видеоконтента на фрагменты (но уже фрагменты 5). Эту процедуру реализуют программным путем, при этом продолжительность фрагментов 5, используемых на втором этапе редактирования, будет 13 сек - меньше по сравнению с продолжительностью фрагмента 1 на первом этапе (18 сек).After this, the procedure for breaking video content into fragments (but already fragments 5) is repeated. This procedure is implemented programmatically, while the duration of
Далее, также как и на первом этапе редактирования, на дисплее мобильного телефона пользователь просматривает последовательно все видеофрагменты 5 нового видеоконтента, подлежащего редактированию. При этом во время их демонстрации пользователь также, как и ранее, выполняет оценку фрагментов 5 контента в соответствии со своими предпочтениями и управляет системой монтажа, редактирующей видеоконтент (принимает формальное решение оставлять данный фрагмент или его часть или же удалять). При этом уменьшение продолжительности фрагмента на этом этапе позволит удалить бракованные вторую и третью части второго (слева) видеофрагмента (остаток первого бракованного участка), а также последнюю часть последнего (слева) видеофрагмента (остаток второго бракованного участка). Затем система монтажа также, как и ранее, удаляет забракованные участки и объединяет оставленный видеоматериал во второй новый видеоконтент.Further, as well as at the first stage of editing, on the display of the mobile phone, the user views sequentially all
Далее процедуры подготовки к просмотру (разбиения на фрагменты 6) и просмотра видеоконтента повторяют с повторением при необходимости процедуры оценки фрагментов видеоконтента и последующим удалением забракованных фрагментов до полного исчерпания бракуемых видеофрагментов. Продолжительность фрагмента 6 на этом этапе редактирования будет 9 сек - меньше по сравнению с продолжительностью фрагмента 5 на втором этапе (13 сек).Further, the procedures for preparing for viewing (splitting into fragments 6) and viewing video content are repeated, repeating, if necessary, the procedure for evaluating fragments of video content and then removing the rejected fragments until the defective video fragments are completely exhausted. The duration of
Кроме того, если длина части фрагмента, получаемая при разбиении последнего на принятое число (S) частей, получается менее минимальной продолжительности монтажного кадра (1-2 сек), исходное число частей, на которые делят фрагмент, уменьшают на единицу и повторяют эту процедуру до получения величины длины (продолжительности) части фрагмента, не меньшей минимальной длины монтажного кадра, или принятия числа частей, на которые может быть разделен фрагмент, равным 1. Т.е. для примера, показанного на фиг. 1 - фиг. 7 (исходное S=3), если бы возникла описанная ситуация, вначале приняли бы S равной 2, а затем, если бы длина (продолжительность) части фрагмента после его разбиения оказалась бы меньше минимальной длины монтажного кадра, пришлось бы принять S равной 1 (отказаться от разбиения фрагмента на части).In addition, if the length of the fragment part obtained by dividing the latter into the accepted number (S) of parts is less than the minimum installation frame duration (1-2 sec), the initial number of parts into which the fragment is divided is reduced by one and this procedure is repeated to obtaining the length (duration) of the part of the fragment, not less than the minimum length of the mounting frame, or accepting the number of parts into which the fragment can be divided equal to 1. That is for the example shown in FIG. 1 - FIG. 7 (initial S = 3), if the described situation would arise, first they would take S equal to 2, and then, if the length (duration) of the fragment after it split would be less than the minimum length of the installation frame, we would have to take S equal to 1 ( refuse to split the fragment into parts).
Фактически уже после третьего этапа редактирования видеоконтент 7 лишается участков, не удовлетворяющих пользователя.In fact, after the third stage of editing,
Как показывает опыт реализации способа, для оптимизации видеоконтента (завершения его редактирования), как правило, достаточны 2-3 итерации (этапа редактирования). При этом просмотр видеоконтента в режиме ускоренного просмотра, по меньшей мере, на первых этапах редактирования позволяет дополнительно сократить процедуру редактирования.As experience in the implementation of the method shows, for iteration of video content (completion of its editing), as a rule, 2-3 iterations (editing stages) are sufficient. At the same time, viewing video content in the accelerated viewing mode, at least in the first stages of editing, can further reduce the editing procedure.
Claims (5)
F=Lmin·S·(1/K)i, сек,
где F - продолжительность фрагментов контента на первом этапе редактирования, сек;
Lmin - минимальная длина монтажного кадра, сек;
S - принятое число частей, на которые может быть разделен фрагмент;
К - коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования;
i - планируемое число этапов редактирования,
после чего пользователь последовательно просматривает все фрагменты, по каждому из которых принимает решение оставить или удалить весь фрагмент или его части, первоначально принятое число которых составляет от 2 до 10, затем система монтажа удаляет намеченные к удалению фрагменты и/или их части и объединяет оставленные фрагменты и части фрагментов в новый видеоконтент, после чего процедуры подготовки к просмотру и просмотра видеоконтента повторяют с повторением при необходимости процедуры оценки фрагментов видеоконтента и/или их частей и с последующим удалением фрагментов и/или их частей, отнесенных к удаляемым, до полного исчерпания таких видеофрагментов и/или их частей, кроме того, продолжительность фрагментов на каждом последующем этапе редактирования уменьшают по сравнению с продолжительностью фрагмента на предшествующем этапе, для чего коэффициент уменьшения длины фрагментов на каждом последующем этапе редактирования принимают в пределах 0,3-0,95, кроме того, если длина части фрагмента, получаемая при разбиении последнего на принятое число частей, получается менее минимальной продолжительности монтажного кадра, исходное число частей, на которые делят фрагмент, уменьшают на единицу и повторяют эту процедуру до получения величины длины части фрагмента, не меньшей минимальной длины монтажного кадра, или принятия числа частей, на которые может быть разделен фрагмент, равным 1.1. A method for automatically editing video content, including demonstrating to the user its individual fragments, evaluating fragments of content by the user in accordance with their preferences during their demonstration, and controlling an editing system that edits video content using settings created based on user ratings, characterized in that the video content is divided fragments, the duration of which at the first stage of editing is established from the expression
F = L min · S · (1 / K) i , sec,
where F is the duration of the pieces of content at the first stage of editing, sec;
L min - the minimum length of the mounting frame, sec;
S is the accepted number of parts into which the fragment can be divided;
K is the coefficient for reducing the length of fragments at each subsequent editing stage;
i is the planned number of editing steps,
after which the user sequentially looks through all the fragments, for each of which decides to leave or delete the whole fragment or its parts, the initial number of which is from 2 to 10, then the installation system deletes the fragments and / or their parts intended for deletion and combines the left fragments and parts of fragments into new video content, after which the procedures for preparing for viewing and viewing video content are repeated, repeating, if necessary, the procedure for evaluating fragments of video content and / or their part and with the subsequent removal of the fragments and / or their parts, referred to as deleted, until the video clips and / or their parts are completely exhausted, in addition, the duration of the fragments at each subsequent editing stage is reduced compared to the duration of the fragment at the previous stage, for which the coefficient reducing the length of the fragments at each subsequent editing step is taken within 0.3-0.95, in addition, if the length of the fragment obtained by dividing the latter into the accepted number of parts, it turns out e the minimum duration of the installation frame, the initial number of parts into which the fragment is divided is reduced by one and repeat this procedure until the length of the fragment part is not less than the minimum length of the installation frame or the number of parts into which the fragment can be divided is equal to 1 .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2014133750/08A RU2565601C1 (en) | 2014-08-15 | 2014-08-15 | Method for automatic editing of video content |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2014133750/08A RU2565601C1 (en) | 2014-08-15 | 2014-08-15 | Method for automatic editing of video content |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2565601C1 true RU2565601C1 (en) | 2015-10-20 |
Family
ID=54327252
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2014133750/08A RU2565601C1 (en) | 2014-08-15 | 2014-08-15 | Method for automatic editing of video content |
Country Status (1)
| Country | Link |
|---|---|
| RU (1) | RU2565601C1 (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2682274C1 (en) * | 2018-06-04 | 2019-03-19 | Общество с ограниченной ответственностью "ПРОЕКТ ВИДЕОСЕРВИС" (ООО "ПРОЕКТ ВИДЕОСЕРВИС") | Method of automatic separation of video into assembly frames |
| RU2813229C1 (en) * | 2020-06-03 | 2024-02-08 | Долби Лэборетериз Лайсенсинг Корпорейшн | Computing dynamic metadata for editing hdr content |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5101364A (en) * | 1990-02-09 | 1992-03-31 | Massachusetts Institute Of Technology | Method and facility for dynamic video composition and viewing |
| RU2095858C1 (en) * | 1996-08-22 | 1997-11-10 | Валерий Борисович Яковлев | Method for editing video films, video recorder and display |
| RU2173479C1 (en) * | 2001-02-13 | 2001-09-10 | Донской Артур Валентинович | Image generation process |
| US20020175917A1 (en) * | 2001-04-10 | 2002-11-28 | Dipto Chakravarty | Method and system for streaming media manager |
| WO2004057609A1 (en) * | 2002-12-20 | 2004-07-08 | Koninklijke Philips Electronics N.V. | Creating edit effects on mpeg-2 compressed video |
| RU76762U1 (en) * | 2008-04-28 | 2008-09-27 | Алексей Эдуардович Ковалев | AUTO TOUCH PHOTO VIDEO STATION |
-
2014
- 2014-08-15 RU RU2014133750/08A patent/RU2565601C1/en not_active IP Right Cessation
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5101364A (en) * | 1990-02-09 | 1992-03-31 | Massachusetts Institute Of Technology | Method and facility for dynamic video composition and viewing |
| RU2095858C1 (en) * | 1996-08-22 | 1997-11-10 | Валерий Борисович Яковлев | Method for editing video films, video recorder and display |
| RU2173479C1 (en) * | 2001-02-13 | 2001-09-10 | Донской Артур Валентинович | Image generation process |
| US20020175917A1 (en) * | 2001-04-10 | 2002-11-28 | Dipto Chakravarty | Method and system for streaming media manager |
| WO2004057609A1 (en) * | 2002-12-20 | 2004-07-08 | Koninklijke Philips Electronics N.V. | Creating edit effects on mpeg-2 compressed video |
| RU76762U1 (en) * | 2008-04-28 | 2008-09-27 | Алексей Эдуардович Ковалев | AUTO TOUCH PHOTO VIDEO STATION |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| RU2682274C1 (en) * | 2018-06-04 | 2019-03-19 | Общество с ограниченной ответственностью "ПРОЕКТ ВИДЕОСЕРВИС" (ООО "ПРОЕКТ ВИДЕОСЕРВИС") | Method of automatic separation of video into assembly frames |
| RU2813229C1 (en) * | 2020-06-03 | 2024-02-08 | Долби Лэборетериз Лайсенсинг Корпорейшн | Computing dynamic metadata for editing hdr content |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2936796B1 (en) | Recommending transformations for photography | |
| US20160203386A1 (en) | Method and apparatus for generating photo-story based on visual context analysis of digital content | |
| WO2020107297A1 (en) | Video clipping control method, terminal device, system | |
| CN107613235A (en) | video recording method and device | |
| CN111263234B (en) | Video clipping method, related device, equipment and storage medium | |
| KR102045575B1 (en) | Smart mirror display device | |
| CN1794798A (en) | Video playback apparatus | |
| US20190364211A1 (en) | System and method for editing video contents automatically technical field | |
| US9953224B1 (en) | Systems and methods for generating a video summary | |
| WO2017157135A1 (en) | Media information processing method, media information processing device and storage medium | |
| CN104918120A (en) | Playing progress adjustment method and electronic apparatus | |
| CN108958592B (en) | Video processing method and related product | |
| WO2021248835A1 (en) | Video processing method and apparatus, and electronic device, storage medium and computer program | |
| CN104320670A (en) | Summary information extracting method and system for network video | |
| US11393134B2 (en) | Customizing soundtracks and hairstyles in modifiable videos of multimedia messaging application | |
| CN113676671A (en) | Video editing method and device, electronic equipment and storage medium | |
| RU2565601C1 (en) | Method for automatic editing of video content | |
| RU2565774C1 (en) | Method for automatic editing of video content | |
| US10262694B2 (en) | Multimedia content duration manipulation | |
| US9734869B2 (en) | Method and system for automatic learning of parameters for automatic video and photo editing based on user's satisfaction | |
| JP5096259B2 (en) | Summary content generation apparatus and summary content generation program | |
| WO2017143846A1 (en) | Picture backup method and apparatus, and electronic device | |
| CN113542909A (en) | Video processing method and device, electronic equipment and computer storage medium | |
| WO2023115859A1 (en) | Compressed image restoration method and apparatus, electronic device, storage medium, and program product | |
| CN109361814A (en) | A kind of control method and electronic equipment |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20170816 |