CN117750112A - 一种视频处理方法、装置、设备及存储介质 - Google Patents

一种视频处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN117750112A
CN117750112A CN202311827397.7A CN202311827397A CN117750112A CN 117750112 A CN117750112 A CN 117750112A CN 202311827397 A CN202311827397 A CN 202311827397A CN 117750112 A CN117750112 A CN 117750112A
Authority
CN
China
Prior art keywords
video
track
processed
editing window
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311827397.7A
Other languages
English (en)
Inventor
何彦
谭志远
麦汉鑫
玉绍祖
曹堃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zitiao Network Technology Co Ltd
Original Assignee
Beijing Zitiao Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zitiao Network Technology Co Ltd filed Critical Beijing Zitiao Network Technology Co Ltd
Priority to CN202311827397.7A priority Critical patent/CN117750112A/zh
Publication of CN117750112A publication Critical patent/CN117750112A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4398—Processing of audio elementary streams involving reformatting operations of audio signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Software Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

本公开提供了一种视频处理方法、装置、设备及存储介质，所述方法包括：当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道。然后，基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。可见，本公开实施例提供的视频处理方法，能够在编辑参考轨道移出视频编辑窗口时，以蒙层的形式重新显示编辑参考轨道，降低对用户处理视频的影响，提高用户体验。

Description

一种视频处理方法、装置、设备及存储介质
技术领域
本公开涉及数据处理领域，尤其涉及一种视频处理方法、装置、设备及存储介质。
背景技术
随着视频处理技术的不断发展，对视频处理的功能也更加多样化。例如，对视频的剪辑不仅为用户提供添加音乐、特效等声音的功能，还为用户提供了在视频画面中添加贴纸、文本等的功能，丰富了用户处理视频的体验。
但是，随着视频处理功能的多样化，视频处理界面上的交互功能越来越繁杂，导致用户在视频处理过程中的操作不便，进而影响了用户的视频处理体验。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种视频处理方法、装置、设备及存储介质，在编辑参考轨道移出视频编辑窗口时，以蒙层的形式重新显示编辑参考轨道，降低对用户处理视频的影响，提高用户体验。
第一方面，本公开提供了一种视频处理方法，所述方法包括：
当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道；
基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
一种可选的实施方式中，所述方法还包括：
当检测到移出所述视频编辑窗口的所述编辑参考轨道重新移入到所述视频编辑窗口时，隐藏所述蒙层以及所述蒙层上显示的所述编辑参考轨道。
一种可选的实施方式中，所述基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道，包括：
基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道。
一种可选的实施方式中，所述基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道之前，还包括：
确定所述待处理视频的音频轨道上存在目标音频数据的时间点；所述目标音频数据包括音乐类型的音频数据或音效类型的音频数据；
基于所述存在目标音频数据的时间点，为所述待处理视频的音频轨道生成目标音频可视线；其中，所述目标音频可视线用于可视化所述目标音频数据在所述待处理视频中的播放位置；
相应的，所述基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道，包括：
基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述目标音频可视线。
一种可选的实施方式中，所述待处理视频的音频轨道包括第一音频轨道和第二音频轨道，所述确定所述待处理视频的音频轨道中存在目标音频数据的时间点，包括：
分别确定所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点；
将所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点合并，得到合并后时间点；
相应的，所述基于所述存在目标音频数据的时间点，为所述待处理视频的音频轨道生成目标音频可视线，包括：
基于所述合并后时间点，为所述待处理视频生成目标音频可视线。
一种可选的实施方式中，所述目标音频数据包括音乐类型的音频数据；所述基于所述视频编辑窗口上的时间轴，在所述蒙层上显示目标音频可视线之前，还包括：
在所述目标音频可视线上标记音乐踩点。
一种可选的实施方式中，所述目标音频数据包括音效类型的音频数据。
第二方面，本公开提供了一种视频处理装置，所述装置包括：
第一显示模块，用于在检测到待处理视频的视频轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；
第二显示模块，用于基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，所述编辑参考轨道包括视频轨道和/或音频轨道，所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
第三方面，本公开提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备实现上述的方法。
第四方面，本公开提供了一种设备，包括：存储器，处理器，及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时，实现上述的方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点：
本公开实施例提供了一种视频处理方法，当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道。然后，基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。可见，本公开实施例提供的视频处理方法，能够在编辑参考轨道移出视频编辑窗口时，以蒙层的形式重新显示编辑参考轨道，降低对用户处理视频的影响，提高用户体验。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的一种视频处理方法的流程图；
图2为本公开实施例提供的一种视频编辑窗口的效果示意图；
图3为本公开实施例提供的一种多条音频轨道上的目标音频数据叠合并的示意图；
图4为本公开实施例提供的另一种视频编辑窗口的效果示意图；
图5为本公开实施例提供的一种视频处理装置的结构示意图；
图6为本公开实施例提供的一种视频处理设备的结构示意图。
具体实施方式
为了能够更清楚地理解本公开的上述目的、特征和优点，下面将对本公开的方案进行进一步描述。需要说明的是，在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本公开，但本公开还可以采用其他不同于在此描述的方式来实施；显然，说明书中的实施例只是本公开的一部分实施例，而不是全部的实施例。
随着视频处理功能的多样化，视频编辑窗口上的编辑功能越来越繁杂，用户在视频处理过程中可能存在操作不便等情况，影响了用户的使用体验。
实际应用场景中，视频编辑窗口可以通过滚动条的方式显示越来越多的视频编辑功能，但是，基于滚动条的滚动可能导致视频轨道或者音频轨道等用于辅助用户进行视频编辑的轨道，不再显示于视频编辑窗口中，从而影响了用户的视频编辑体验。
为此，本公开提供了一种视频处理方法，具体的，当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道。然后，基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
可见，本公开实施例提供的视频处理方法，能够在编辑参考轨道移出视频编辑窗口时，以蒙层的形式重新显示编辑参考轨道，降低对用户处理视频的影响，提升用户体验。
基于此，本公开实施例提供了一种视频处理方法，参考图1，为本公开实施例提供的一种视频处理方法的流程图，该方法包括：
S101：当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道。
本公开实施例提供的视频处理方法可以应用于视频剪辑等功能中。
实际应用中，视频轨道和音频轨道在用户视频处理的过程中起到一定的辅助作用，因此，在用户对待处理视频进行处理的过程中，在视频编辑窗口上应该尽量显示有待处理视频的视频轨道和音频轨道，以提升用户的视频处理体验。
为此，本公开实施例在检测到待处理视频的编辑参考轨道移出视频编辑窗口时，以蒙层的形式对移出视频编辑窗口的编辑参考轨道进行显示，以降低对用户视频处理的影响。
一种可选的实施方式中，用户在对视频进行处理的过程中，可能需要对视频编辑窗口进行上下滚动，而在上下滚动的过程中，可能导致视频编辑窗口中的编辑参考轨道移出视频编辑窗口，即不再显示于视频编辑窗口中。为了降低对用户视频处理的影响，本公开实施例在视频编辑窗口的底部区域显示蒙层，并在蒙层上重新显示编辑参考轨道。
其中，视频编辑窗口的底部区域可以为基于视频编辑窗口的底部边界确定的显示区域。在底部区域显示的蒙层具有一定的透明度，在蒙层上显示编辑参考轨道的同时，不影响被蒙层覆盖的下层区域的内容显示以及操作控制。例如，被蒙层覆盖的下层区域会随着视频编辑窗口的上下滚动而更新显示内容。
一种可选的实施方式中，当检测到待处理视频的视频轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层。或者，当检测到待处理视频的音频轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层。或者，当检测到待处理视频的视频轨道和音频轨道均移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层。其中，视频轨道可以包括主视频轨道，或者视频轨道可以包括主视频轨道和画中画轨道。
S102：基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
本公开实施例中，视频编辑窗口上显示有时间轴，基于该时间轴在蒙层上显示待处理视频的编辑参考轨道，使得蒙层上显示的编辑参考轨道与视频编辑窗口中显示的时间轴一致，便于用户对待处理视频进行编辑。
一种可选的实施方式中，在编辑参考轨道移出视频编辑窗口之后，位于视频编辑窗口底部区域的蒙层上始终显示有编辑参考轨道，以便于用户对视频的编辑。而在检测到移出视频编辑窗口的编辑参考轨道重新移入到视频编辑窗口时，可以隐藏蒙层以及蒙层上显示的编辑参考轨道，避免对编辑参考轨道的冗余显示。此时，用户可以基于重新移入视频编辑窗口的编辑参考轨道，对待处理视频进行编辑。
本公开实施例提供的视频处理方法中，当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道。然后，基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。可见，本公开实施例提供的视频处理方法，能够在编辑参考轨道移出视频编辑窗口时，以蒙层的形式重新显示编辑参考轨道，降低对用户处理视频的影响，提高用户体验。
实际应用中，对于编辑参考轨道包括音频轨道的情况，在蒙层上可以以预设形式显示待处理视频的音频轨道。
一种可选的实施方式中，可以以可视线的形式显示待处理视频的音频轨道。具体的，首先确定待处理视频的音频轨道中存在目标音频数据的时间点，然后，基于所述存在目标音频数据的时间点，为所述待处理视频的音频轨道生成目标音频可视线。其中，所述目标音频可视线用于可视化所述待处理视频中所述目标音频数据的播放位置。也就是说，通过目标音频可视线可以确定待处理视频中哪些位置存在目标音频数据，例如确定待处理视频中背景音乐的播放位置。
如图2所示，为本公开实施例提供的一种视频编辑窗口的效果示意图，其中，在视频编辑窗口的底部区域显示有蒙层，在蒙层上同时显示有视频轨道和目标音频可视线。其中，目标音频可视线可以包括至少一条线段，而视频轨道可以包括主视频轨道和画中画轨道。
当然，在一些实施方式中，在视频编辑窗口的底部区域的蒙层上可以仅显示视频轨道，也可以仅显示目标音频可视线，对于此本公开实施例不做限制。
另外，本公开实施例中的目标音频数据可以包括音乐类型的音频数据，和/或，音效类型的音频数据。
具体的，音乐类型的音频数据通常为电子音乐，如歌曲、轻音乐等，本公开实施例中的确定待处理视频的音频轨道中存在目标音频数据的时间点，可以包括确定待处理视频的音频轨道中存在音乐类型的音频数据的时间点。其中，音频轨道可以包括至少一条音乐类型的音频轨道。
而音效类型的音频数据通常为特效音频、配音、文本朗读等，如类似猫叫的特效音频“喵～”。本公开实施例中的确定待处理视频的音频轨道中存在目标音频数据的时间点，可以包括确定待处理视频的音频轨道中存在音效类型的音频数据的时间点。其中，音频轨道可以包括至少一条音效类型的音频轨道。
一种可选的实施方式中，如果待处理视频中存在目标音频数据的音频轨道仅有一条，则将该音频轨道上存在目标音频数据的时间点确定为待处理视频的音频轨道中存在目标音频数据的时间点即可。
另一种可选的实施方式中，如果待处理视频中存在目标音频数据的音频轨道包括至少两条音频轨道，以下以第一音频轨道和第二音频轨道为例，则确定所述待处理视频的音频轨道中存在目标音频数据的时间点，具体包括：
首先，分别确定所述第一音频轨道和所述第二音频轨道中存在目标音频数据的时间点；然后，将所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点合并，得到合并后时间点，最终基于合并后时间点，为所述待处理视频生成目标音频可视线。
如图3所示，为本公开实施例提供的一种多条音频轨道上存在目标音频数据的时间点合并的示意图，其中，第一音频轨道包括音频数据A和音频数据B，第二音频轨道包括音频数据C，基于时间轴将音频数据A、音频数据B和音频数据C分别对应的时间点进行合并后，得到合并后时间点，即存在音频数据A、音频数据B或音频数据C的时间点。其中，对音频数据A、音频数据B和音频数据C分别对应的时间点进行合并，具体是将待处理视频中存在音频数据A、音频数据B和音频数据C中至少一个的时间点保留，用于构成目标音频可视线。
一种可选的实施方式中，目标音频数据可以包括音乐类型的音频数据和音效类型的音频数据，因此，本公开实施例可以分别为音乐类型的音频数据和音效类型的音频数据生成对应的可视线。具体的，基于待处理视频的音频轨道上存在音乐类型的音频数据的时间点，生成音乐音频可视线，同时，基于待处理视频的音频轨道上存在音效类型的音频数据的时间点，生成音效音频可视线。
如图4所示，为本公开实施例提供的另一种视频编辑窗口的效果示意图。其中，在视频编辑窗口的蒙层上，基于同一时间轴显示有主视频轨道、画中画轨道、音乐类型的音频可视线L1和音效类型的音频可视线L2。
本公开实施例提供的视频处理方法，能够以可视线的形式为用户展示音频轨道中存在目标音频数据的时间点，在不影响视频处理的前提下，优化视频编辑窗口的显示效果，便于用户操作，提升用户使用体验。
实际应用中，对视频进行处理的过程中，音乐踩点是其中的一个重要参考因素，因此，本公开实施例在基于视频编辑窗口上的时间轴，在蒙层上显示目标音频可视线之前，还需要确定待处理视频的音乐踩点，然后对音乐踩点进行展示，便于用户对视频的处理，提升用户体验。
具体的，目标音频数据为音乐类型的音频数据时，从待处理视频的音频轨道上存在目标音频数据的时间点中确定音乐踩点，然后，在音乐类型的音频可视线上标记音乐踩点。
其中，音乐踩点用于标识音乐中的节奏、旋律等。音乐踩点可以为预先自动生成的，也可以为用户手动确定的，在此不做限定。
一种可选的实施方式中，如果待处理视频中存在音乐类型的音频数据的音频轨道仅有一条，则将该音频轨道上的音乐踩点，确定为待处理视频的音乐踩点。
另一种可选的实施方式中，如果待处理视频中存在音乐类型的音频数据的音频轨道包括至少两条音频轨道，以下以第三音频轨道和第四音频轨道为例，则可以基于时间轴将第三音频轨道和第四音频轨道上的音乐踩点进行叠加，确定待处理视频中的音乐踩点。如图4所示，音乐类型的音频轨道上已标记出音乐踩点。
本公开实施例提供的视频处理方法中，在蒙层上不仅为用户展示目标音频可视线，还为用户展示音乐踩点，能够在不影响视频处理的前提下，优化视频编辑窗口的显示效果，便于用户操作，提升用户使用体验。
与上述方法实施例基于同一个发明构思，本公开还提供了一种视频处理装置，参考图5，为本公开实施例提供的一种视频处理装置的结构示意图，所述装置包括：
第一显示模块501，用于在检测到待处理视频的视频轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；
第二显示模块502，用于基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，所述编辑参考轨道包括视频轨道和/或音频轨道，所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
一种可选的实施方式中，所述装置还包括：
隐藏模块，用于在检测到移出所述视频编辑窗口的所述编辑参考轨道重新移入到所述视频编辑窗口时，隐藏所述蒙层以及所述蒙层上显示的所述编辑参考轨道。
一种可选的实施方式中，所述第二显示模块，具体用于：
基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道。
一种可选的实施方式中，所述装置还包括：
第一确定模块，用于确定所述待处理视频的音频轨道上存在目标音频数据的时间点；所述目标音频数据包括音乐类型的音频数据或音效类型的音频数据；
生成模块，用于基于所述存在目标音频数据的时间点，为所述待处理视频的音频轨道生成目标音频可视线；其中，所述目标音频可视线用于可视化所述目标音频数据在所述待处理视频中的播放位置；
相应的，所述第二显示模块，具体用于：
基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述目标音频可视线。
一种可选的实施方式中，所述待处理视频的音频轨道包括第一音频轨道和第二音频轨道，所述第一确定模块，包括：
第一确定子模块，用于分别确定所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点；
合并子模块，用于将所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点合并，得到合并后时间点；
相应的，所述生成模块，具体用于：
基于所述合并后时间点，为所述待处理视频生成目标音频可视线。
一种可选的实施方式中，所述目标音频数据包括音乐类型的音频数据；所述装置还包括：
标记模块，用于在所述目标音频可视线上标记音乐踩点。
一种可选的实施方式中，所述目标音频数据包括音效类型的音频数据。
本公开实施例提供的视频处理装置中，当检测到待处理视频的编辑参考轨道移出视频编辑窗口时，在所述视频编辑窗口的底部区域显示蒙层；所述编辑参考轨道包括视频轨道和/或音频轨道。然后，基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，在所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。可见，本公开实施例提供的视频处理装置，能够在编辑参考轨道移出视频编辑窗口时，以蒙层的形式重新显示编辑参考轨道，降低对用户处理视频的影响，提高用户体验。
除了上述方法和装置以外，本公开实施例还提供了一种计算机可读存储介质，计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备实现本公开实施例所述的视频处理方法。
另外，本公开实施例还提供了一种视频处理设备，参见图6所示，可以包括：
处理器601、存储器602、输入装置603和输出装置604。视频处理设备中的处理器601的数量可以一个或多个，图6中以一个处理器为例。在本公开的一些实施例中，处理器601、存储器602、输入装置603和输出装置604可通过总线或其它方式连接，其中，图6中以通过总线连接为例。
存储器602可用于存储软件程序以及模块，处理器601通过运行存储在存储器602的软件程序以及模块，从而执行视频处理设备的各种功能应用以及数据处理。存储器602可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等。此外，存储器602可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。输入装置603可用于接收输入的数字或字符信息，以及产生与视频处理设备的用户设置以及功能控制有关的信号输入。
具体在本实施例中，处理器601会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器602中，并由处理器601来运行存储在存储器602中的应用程序，从而实现上述视频处理设备的各种功能。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本公开的具体实施方式，使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下，在其它实施例中实现。因此，本公开将不会被限制于本文所述的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (11)

1.一种视频处理方法，其特征在于，所述方法包括：
在视频编辑窗口中显示待处理视频的编辑参考轨道；所述编辑参考轨道包括视频轨道和/或音频轨道；
当检测到所述编辑参考轨道移出所述视频编辑窗口时，在所述视频编辑窗口的底部区域增加显示蒙层，并在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，所述蒙层上的所述编辑参考轨道采用所述视频编辑窗口上的时间轴，所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
响应于针对所述视频编辑窗口的滚动操作，控制所述视频编辑窗口滚动，以使得所述视频编辑窗口中显示的编辑轨道跟随所述滚动操作移动。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当检测到移出所述视频编辑窗口的所述编辑参考轨道重新移入到所述视频编辑窗口时，隐藏所述蒙层以及所述蒙层上显示的所述编辑参考轨道。
4.根据权利要求1所述的方法，其特征在于，所述基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述待处理视频的编辑参考轨道，包括：
基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道。
5.根据权利要求4所述的方法，其特征在于，所述基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道之前，还包括：
确定所述待处理视频的音频轨道上存在目标音频数据的时间点；所述目标音频数据包括音乐类型的音频数据或音效类型的音频数据；
基于所述存在目标音频数据的时间点，为所述待处理视频的音频轨道生成目标音频可视线；其中，所述目标音频可视线用于可视化所述目标音频数据在所述待处理视频中的播放位置；
相应的，所述基于所述视频编辑窗口上的时间轴，在所述蒙层上以预设形式显示所述待处理视频的音频轨道，包括：
基于所述视频编辑窗口上的时间轴，在所述蒙层上显示所述目标音频可视线。
6.根据权利要求5所述的方法，其特征在于，所述待处理视频的音频轨道包括第一音频轨道和第二音频轨道，所述确定所述待处理视频的音频轨道中存在目标音频数据的时间点，包括：
分别确定所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点；
将所述第一音频轨道和所述第二音频轨道上存在目标音频数据的时间点合并，得到合并后时间点；
相应的，所述基于所述存在目标音频数据的时间点，为所述待处理视频的音频轨道生成目标音频可视线，包括：
基于所述合并后时间点，为所述待处理视频生成目标音频可视线。
7.根据权利要求5或6所述的方法，其特征在于，所述目标音频数据包括音乐类型的音频数据；所述基于所述视频编辑窗口上的时间轴，在所述蒙层上显示目标音频可视线之前，还包括：
在所述目标音频可视线上标记音乐踩点。
8.根据权利要求5或6所述的方法，其特征在于，所述目标音频数据包括音效类型的音频数据。
9.一种视频处理装置，其特征在于，所述装置包括：
轨道显示模块，用于在视频编辑窗口中显示待处理视频的编辑参考轨道；所述编辑参考轨道包括视频轨道和/或音频轨道；
第一显示模块，用于在检测到所述编辑参考轨道移出所述视频编辑窗口时，在所述视频编辑窗口的底部区域增加显示蒙层，并在所述蒙层上显示所述待处理视频的编辑参考轨道；其中，所述蒙层上的所述编辑参考轨道采用所述视频编辑窗口上的时间轴，所述蒙层上显示的所述编辑参考轨道用于辅助用户在所述视频编辑窗口中对所述待处理视频进行编辑。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述指令在终端设备上运行时，使得所述终端设备实现如权利要求1-7任一项所述的方法。
11.一种视频处理设备，其特征在于，包括：存储器，处理器，及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时，实现如权利要求1-7任一项所述的方法。
CN202311827397.7A 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质 Pending CN117750112A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311827397.7A CN117750112A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202311827397.7A CN117750112A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质
CN202011329694.5A CN112468864A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202011329694.5A Division CN112468864A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN117750112A true CN117750112A (zh) 2024-03-22

Family

ID=74798573

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202011329694.5A Pending CN112468864A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质
CN202311827397.7A Pending CN117750112A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202011329694.5A Pending CN112468864A (zh) 2020-11-24 2020-11-24 一种视频处理方法、装置、设备及存储介质

Country Status (5)

Country Link
US (2) US11871072B2 (zh)
EP (1) EP4240020A4 (zh)
JP (1) JP2023550187A (zh)
CN (2) CN112468864A (zh)
WO (1) WO2022111392A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112468864A (zh) * 2020-11-24 2021-03-09 北京字跳网络技术有限公司 一种视频处理方法、装置、设备及存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5668639A (en) * 1995-03-21 1997-09-16 Comunicacion Integral Method for video editing
US8591332B1 (en) * 2008-05-05 2013-11-26 Activision Publishing, Inc. Video game video editor
US20100042682A1 (en) * 2008-08-15 2010-02-18 Evan John Kaye Digital Rights Management for Music Video Soundtracks
US9223771B2 (en) * 2008-09-30 2015-12-29 Apple Inc. Locking spreadsheet cells
US8655854B2 (en) * 2010-07-27 2014-02-18 Avid Technology, Inc. Hierarchical multimedia program composition
CN102842325B (zh) * 2012-08-28 2015-11-18 深圳万兴信息科技股份有限公司 一种音视频编辑轨道的管理方法和装置
US9124857B2 (en) * 2013-02-06 2015-09-01 Adobe Systems Incorporated Method and apparatus for context-aware automatic zooming of a video sequence
CN106937021B (zh) * 2015-12-31 2019-12-13 上海励丰创意展示有限公司 基于时间轴多轨回放技术的演出集成控制方法
CN110971957B (zh) * 2018-09-30 2022-04-15 阿里巴巴集团控股有限公司 一种视频编辑方法、装置以及移动终端
CN110602562A (zh) * 2019-08-30 2019-12-20 杭州影笑科技有限责任公司 一种基于视频编辑的多素材轨道显示方法
CN111757013B (zh) * 2020-07-23 2022-04-29 北京字节跳动网络技术有限公司 一种视频处理方法、装置、设备及存储介质
CN112468864A (zh) * 2020-11-24 2021-03-09 北京字跳网络技术有限公司 一种视频处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
JP2023550187A (ja) 2023-11-30
EP4240020A4 (en) 2024-06-19
US20230308710A1 (en) 2023-09-28
US20240098328A1 (en) 2024-03-21
WO2022111392A1 (zh) 2022-06-02
EP4240020A1 (en) 2023-09-06
US11871072B2 (en) 2024-01-09
CN112468864A (zh) 2021-03-09

Similar Documents

Publication Publication Date Title
US8788963B2 (en) Scrollable preview of content
CN110134479B (zh) 内容页面交互方法、生成方法、介质、装置和计算设备
WO2022068478A1 (zh) 基于视频的交互、视频处理方法、装置、设备及存储介质
JP2008219920A (ja) テレビジョン・ニュース用オーディオビジュアル作業および対応するテキストのための編集システム
WO2016144550A1 (en) Generating motion data stories
JP2008136213A (ja) 動画のフレーム情報を生成する方法、それを利用したシステム及び記録媒体
KR20230157473A (ko) 멀티미디어 리소스 클리핑 방법 및 장치, 디바이스 및 저장 매체
US20230129509A1 (en) Previewing method and apparatus for effect application, and device, and storage medium
US20240098328A1 (en) Video processing method and apparatus, and device and storage medium
US9076489B1 (en) Circular timeline for video trimming
KR20160106970A (ko) 디지털 사이니지의 최적 템플릿 생성 방법 및 그 장치
CN106155507A (zh) 一种页面内容显示方法及电子设备
US7376332B2 (en) Information processing method and information processing apparatus
CN116194903A (zh) 漫画播放系统、漫画播放方法、漫画播放计算机软件程序以及它们所使用的漫画数据
CN113556576B (zh) 视频生成方法及设备
CN112988018B (zh) 多媒体文件输出方法、装置、设备及计算机可读存储介质
JP5141710B2 (ja) カラオケ装置、プログラム
KR20200022995A (ko) 콘텐츠 제작 시스템
JP6964918B1 (ja) コンテンツ作成支援システム、コンテンツ作成支援方法及びプログラム
US20140289606A1 (en) Systems and Methods For Attribute Indication and Accessibility in Electronics Documents
US20240244287A1 (en) Video editing using transcript text stylization and layout
JPH08115335A (ja) マルチメディア処理装置
CN118105694A (zh) 一种动画处理方法及装置
CN115543156A (zh) 对象编辑方法、装置、计算机设备和存储介质
CN117152307A (zh) 动画处理方法、装置、电子设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination