CN114666667A - 视频关键点的生成方法、装置、电子设备及存储介质 - Google Patents

视频关键点的生成方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114666667A
CN114666667A CN202210203618.2A CN202210203618A CN114666667A CN 114666667 A CN114666667 A CN 114666667A CN 202210203618 A CN202210203618 A CN 202210203618A CN 114666667 A CN114666667 A CN 114666667A
Authority
CN
China
Prior art keywords
key point
time
frame image
video
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210203618.2A
Other languages
English (en)
Other versions
CN114666667B (zh
Inventor
陈聪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Haining Yisiwei Computing Technology Co ltd
Beijing Eswin Computing Technology Co Ltd
Original Assignee
Beijing Eswin Computing Technology Co Ltd
Haining Eswin IC Design Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Eswin Computing Technology Co Ltd, Haining Eswin IC Design Co Ltd filed Critical Beijing Eswin Computing Technology Co Ltd
Priority to CN202210203618.2A priority Critical patent/CN114666667B/zh
Publication of CN114666667A publication Critical patent/CN114666667A/zh
Application granted granted Critical
Publication of CN114666667B publication Critical patent/CN114666667B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请实施例提供了一种视频关键点的生成方法、装置、电子设备及存储介质，涉及计算机技术领域。该方法包括：响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻，然后从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像，不同的视频场景基于帧图像之间的相似度确定；进而对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。本申请实施例通过自定义设置视频关键点，并自动基于图像帧的播放时刻对关键点进行调整，使得后续观看过程中可以基于关键点进行跳转播放，提升用户播放录制文件的灵活性。

Description

视频关键点的生成方法、装置、电子设备及存储介质
技术领域
本申请涉及计算机技术领域，具体而言，本申请涉及一种视频关键点的生成方法、装置、电子设备及存储介质。
背景技术
EPG(Electronic Program Guide，电子节目指南)是IPTV(Internet ProtocolTelevision，交互式网络电视)的一个门户系统，包含各类供用户浏览的动态或静态的多媒体内容，提供各类菜单、按钮、链接等可供用户选择节目时直接点击的组件，用户可以通过EPG录制并保存电视节目的视频文件。
视频关键点是指视频文件中标记出来的特定播放节点，用户可以直接跳转至视频关键点播放视频文件。目前为视频文件添加视频关键点的技术，一般是指为网络平台中播放的视频文件添加视频关键点，并且这种技术中的视频关键点是网络平台预先设置好的，针对电视机中播放的电视节目，难以根据不同用户的实际需求，自定义设置视频关键点。
发明内容
本申请实施例的目的旨在能解决目前难以自定义设置电视机中录制文件的视频关键点的问题。
根据本申请实施例的一个方面，提供了一种视频关键点的生成方法，该方法包括：
响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻；
从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于图像帧之间的相似度确定；
对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
可选地，对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息之后，方法包括：
响应于用户针对关键点信息的确认指令，将关键点信息存储至录制文件的关键点列表；
将关键点信息中的缩略图像存储至电视机的本地磁盘，将目标时刻和缩略图像的存储位置信息存储至电视机的本地数据库；
在显示设备中显示关键点信息存储完成的提示信息。
可选地，在显示设备中显示所述关键点信息存储完成的提示信息之后，方法包括：
响应于针对关键点信息的播放指令，将关键点信息对应的目标时刻确定为当前播放时刻，播放录制文件。
可选地，方法还包括：
响应于针对录制文件的预设I帧图像列表中，任一I帧图像的关键点选择指令，将I帧图像的播放时刻作为目标时刻；预设I帧图像列表基于对录制文件中的I帧图像筛选得到。
可选地，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻，包括：
响应于针对电视机的投屏指令，在与电视机匹配的终端设备上显示录制文件；
响应于基于终端设备触发的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
可选地，对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息，包括：
响应于针对目标时刻输入的关键点名称，根据缩略图像、目标时刻和关键点名称，生成关键点信息。
可选地，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻之前，方法包括：
响应于针对录制文件的播放指令，在显示设备中打开录制文件；录制文件为基于电子节目指南EPG的录制功能，生成并存储在电视机本地的视频文件。
根据本申请实施例的另一个方面，提供了一种视频关键点的生成装置，该装置包括：
第一确定模块，用于响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻；
第二确定模块，用于从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于图像帧之间的相似度确定；
生成模块，用于对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
可选地，装置还包括：
第一存储模块，用于响应于用户针对关键点信息的确认指令，将关键点信息存储至录制文件的关键点列表；
第二存储模块，用于将关键点信息中的缩略图像存储至电视机的本地磁盘，将目标时刻和缩略图像的存储位置信息存储至电视机的本地数据库；
显示模块，用于在显示设备中显示关键点信息存储完成的提示信息。
可选地，装置还包括：
播放模块，用于响应于针对关键点信息的播放指令，将关键点信息对应的目标时刻确定为当前播放时刻，播放录制文件。
可选地，装置还包括：
第三确定模块，用于响应于针对录制文件的预设I帧图像列表中，任一I帧图像的关键点选择指令，将I帧图像的播放时刻作为目标时刻；预设I帧图像列表基于对录制文件中的I帧图像筛选得到。
可选地，第一确定模块具体用于：
响应于针对电视机的投屏指令，在与电视机匹配的终端设备上显示录制文件；
响应于基于终端设备触发的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
可选地，生成模块具体用于：
响应于针对目标时刻输入的关键点名称，根据缩略图像、目标时刻和关键点名称，生成关键点信息。
可选地，装置还包括：
打开模块，用于响应于针对录制文件的播放指令，在显示设备中打开录制文件；录制文件为基于电子节目指南EPG的录制功能，生成并存储在电视机本地的视频文件。
根据本申请实施例的另一个方面，提供了一种电子设备，该电子设备包括存储器、处理器及存储在存储器上的计算机程序，处理器执行计算机程序以实现上述任一个方面的视频关键点的生成方法的步骤。
根据本申请实施例的再一个方面，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任一个方面的视频关键点的生成方法的步骤。
本申请实施例提供的技术方案带来的有益效果是：
通过自定义设置视频关键点，并自动基于图像帧的播放时刻对关键点进行调整，使得后续观看过程中可以基于关键点进行跳转播放，提升用户播放录制文件的灵活性。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的一种视频关键点的生成方法的流程示意图之一；
图2为本申请实施例提供的一种视频关键点的生成方法的流程示意图之二；
图3为本申请实施例提供的一种视频关键点的生成方法的应用场景图；
图4为本申请实施例提供的一种视频关键点的生成方法的系统架构图；
图5为本申请实施例提供的一种视频关键点的生成装置的结构示意图；
图6为本申请实施例提供的一种视频关键点的生成的电子设备的结构示意图。
具体实施方式
下面结合本申请中的附图描述本申请的实施例。应理解，下面结合附图所阐述的实施方式，是用于解释本申请实施例的技术方案的示例性描述，对本申请实施例的技术方案不构成限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请实施例所使用的术语“包括”以及“包含”是指相应特征可以实现为所呈现的特征、信息、数据、步骤、操作、元件和/或组件，但不排除实现为本技术领域所支持其他特征、信息、数据、步骤、操作、元件、组件和/或它们的组合等。应该理解，当我们称一个元件被“连接”或“耦接”到另一元件时，该一个元件可以直接连接或耦接到另一元件，也可以指该一个元件和另一元件通过中间元件建立连接关系。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的术语“和/或”指示该术语所限定的项目中的至少一个，例如“A和/或B”可以实现为“A”，或者实现为“B”，或者实现为“A和B”。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
下面通过对几个示例性实施方式的描述，对本申请实施例的技术方案以及本申请的技术方案产生的技术效果进行说明。需要指出的是，下述实施方式之间可以相互参考、借鉴或结合，对于不同实施方式中相同的术语、相似的特征以及相似的实施步骤等，不再重复描述。
本申请实施例中提供了一种视频关键点的生成方法，如图1所示，包括：
步骤S101，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
录制文件为预先录制并保存在电视机本地的电视节目视频文件。录制文件基于EPG的录制功能录制得到，EPG向用户预告在目标时间段内即将播放的电视节目，然后用户使用录制功能设置电视机自动录制目标时间段内的电视节目的视频文件，得到录制文件。
用户在电视机的预设位置打开录制文件列表，选择其中想要自定义设置视频关键点的录制文件，触发针对该录制文件的关键点生成指令。其中，用户打开录制文件列表，打开录制文件，以及触发关键点生成指令，均可以通过电视机遥控器实现，或者通过与电视机预先匹配的终端设备实现，对应的显示设备可以为电视机屏幕，或者终端设备屏幕。
例如，用户使用电视机遥控器控制电视机访问预设位置的录制文件列表，选择其中一个录制文件，在电视机屏幕中自动打开并播放，当播放到用户感兴趣的视频位置时，使用电视遥控器发出关键点生成指令。另一种应用场景下，用户基于蓝牙连接等方式将终端设备与电视机进行匹配，使得终端设备与电视机之间建立控制关系，然后使用终端设备对电视机进行控制操作，具体的控制操作不再一一赘述。播放录制文件时，可以以正常速度播放，也可以基于快进、快退等操作倍速播放，对此不做限制。
电视机内置有电视机用户交互模块、电视机录制文件处理服务和数据存储服务。电视机基于电视机用户交互模块，响应于用户针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
步骤S102，从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于图像帧之间的相似度确定。
图像帧是组成视频的最小单位，视频可以理解为一系列图像帧以预设频率播放得到，视频的每一时刻都对应有一帧图像帧。I帧图像是一个全帧压缩的编码帧，解码时仅用I帧图像的数据就可以重构完整图像，不需要参考其他画面而生成，一般而言，I帧图像为各个视频场景对应的第一帧图像帧。
例如，一个大的视频场景为人物在教室活动，下一个大的视频场景跳转至人物在操场活动，那么人物在教室活动的视频场景下，第一帧图像为I帧图像，人物在操场活动的视频场景下，第一帧图像也为I帧图像。另一种情况下，一个大的视频场景分为若干个小的视频场景，人物始终在教室活动，视频场景也会存在区别，不同的视频场景基于图像帧之间的相似度确定，每一个小的视频场景的第一帧图像均为I帧图像。
电视机基于电视机用户交互模块确定初始时刻之后，调用电视机录制文件处理服务，将初始时刻发送至电视机录制文件处理服务进行处理。从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻。
具体而言，用户确定的初始时刻随机性较强，实际生成视频关键点时需要进行优化处理。例如，从播放到用户感兴趣的视频位置，到用户触发关键点生成指令之间，客观存在反应时间差，那么需要基于反应时间差从录制文件的当前播放时刻，向起始播放时刻适当调整视频关键点的对应时刻；并且基于关键点生成指令确定的初始时刻，所对应的图像帧分辨率可能较低，不利于后续的图像帧压缩处理，那么需要调整视频关键点的对应时刻，将I帧图像的对应时刻作为视频关键点的对应时刻；同时，将I帧图像的对应时刻作为视频关键点的对应时刻，使得用户基于视频关键点跳转播放录制文件时，可以从完整的视频场景开始播放，保证用户的观看体验。
步骤S103，对所述I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
电视机录制文件处理服务确定初始时刻之前的第一个I帧图像，以及I帧图像对应的目标时刻之后，启动标记任务，对I帧图像进行压缩处理，得到缩略图像，根据缩略图像和目标时刻生成关键点信息。其中，关键点信息包括I帧图像对应的缩略图像和目标时刻。
电视机录制文件处理服务与数据存储服务进行交互，生成缩略图像的本地存储位置信息，将缩略图像存储至电视机的本地磁盘，然后将缩略图像的本地存储位置信息和目标时刻存储至电视机的本地数据库。
用户可以在显示设备中查看关键点列表，关键点列表包括至少一个关键点的缩略图像和目标时刻。响应于用户触发的针对关键点的播放指令，在电视机的显示设备中跳转至目标时刻进行播放。
应用本申请实施例提供的视频关键点的生成方法，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻；从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像，不同的视频场景基于帧图像之间的相似度确定；对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
本申请实施例通过自定义设置视频关键点，并自动基于图像帧的播放时刻对关键点进行调整，使得后续观看过程中可以基于关键点进行跳转播放，提升用户播放录制文件的灵活性。
本申请实施例中提供了一种视频关键点的生成方法，如图2所示，包括：
步骤S201，响应于针对录制文件的播放指令，在显示设备中打开录制文件；录制文件为基于电子节目指南EPG的录制功能，生成并存储在电视机本地的视频文件。
录制文件为预先录制并保存在电视机本地的电视节目视频文件。录制文件基于EPG(Electronic Program Guide，电子节目指南)的录制功能录制得到，EPG向用户预告在目标时间段内即将播放的电视节目，然后用户使用录制功能设置电视机自动录制目标时间段内的电视节目的视频文件，得到录制文件。
如图3所示的应用场景图，用户使用电视机遥控器，或者与电视机预先匹配的终端设备，在电视机的预设位置打开录制文件列表，选择其中一个录制文件，触发针对该录制文件的播放指令。
如图4所示的系统架构图，电视机内置有电视机用户交互模块，电视机用户交互模块响应于用户针对录制文件的播放指令，在显示设备中打开录制文件。其中，显示设备可以为电视机屏幕，或者终端设备屏幕。
例如，用户使用电视机遥控器控制电视机访问预设位置的录制文件列表，选择其中一个录制文件，在电视机屏幕中自动打开并播放。用户基于蓝牙连接等方式将终端设备与电视机进行匹配，使得终端设备与电视机之间建立控制关系，然后使用终端设备对电视机进行控制操作，具体的控制操作不再一一赘述。播放录制文件时，可以以正常速度播放，也可以基于快进、快退等操作倍速播放，对此不做限制。
步骤S202，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
用户打开并播放录制文件，当播放到用户感兴趣的视频位置时，可以使用电视机遥控器，触发针对该录制文件的关键点生成指令。
相应的，电视机用户交互模块响应于用户针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
本申请一种优选实施例中，步骤S202，包括：
响应于针对电视机的投屏指令，在与电视机匹配的终端设备上显示录制文件；
响应于基于终端设备触发的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
使用与电视机预先匹配的终端设备对电视机进行控制操作时，响应于终端设备针对电视机的投屏指令，在终端设备屏幕上显示录制文件，然后响应于基于终端设备触发的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
步骤S203，从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于图像帧之间的相似度确定。
图像帧是组成视频的最小单位，视频可以理解为一系列图像帧以预设频率播放得到，视频的每一时刻都对应有一帧图像帧。I帧图像是一个全帧压缩的编码帧，解码时仅用I帧图像的数据就可以重构完整图像，不需要参考其他画面而生成，一般而言，I帧图像为各个视频场景对应的第一帧图像帧。
例如，一个大的视频场景为人物在教室活动，下一个大的视频场景跳转至人物在操场活动，那么人物在教室活动的视频场景下，第一帧图像为I帧图像，人物在操场活动的视频场景下，第一帧图像也为I帧图像。另一种情况下，一个大的视频场景分为若干个小的视频场景，人物始终在教室活动，视频场景也会存在区别，不同的视频场景基于图像帧之间的相似度确定，每一个小的视频场景的第一帧图像均为I帧图像。
确定连续的I帧图像之间的相似度，当相似度低于预设的第一相似度阈值时，确定后一帧I帧图像为本申请实施例中视频场景对应的第一帧图像帧，第一相似度阈值可以为40％，对此不做限制。
电视机基于电视机用户交互模块确定初始时刻之后，调用电视机录制文件处理服务，将初始时刻发送至电视机录制文件处理服务进行处理。从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻。
具体而言，用户确定的初始时刻随机性较强，实际生成视频关键点时需要进行优化处理。例如，从播放到用户感兴趣的视频位置，到用户触发关键点生成指令之间，客观存在反应时间差，那么需要基于反应时间差从录制文件的当前播放时刻，向起始播放时刻适当调整视频关键点的对应时刻；并且基于关键点生成指令确定的初始时刻，所对应的图像帧分辨率可能较低，不利于后续的图像帧压缩处理，那么需要调整视频关键点的对应时刻，将I帧图像的对应时刻作为视频关键点的对应时刻；同时，将I帧图像的对应时刻作为视频关键点的对应时刻，使得用户基于视频关键点跳转播放录制文件时，可以从完整的视频场景开始播放，保证用户的观看体验。
本申请一种优选实施例中，步骤S202，包括：
响应于针对录制文件的预设I帧图像列表中，任一I帧图像的关键点选择指令，将I帧图像的播放时刻作为目标时刻；预设I帧图像列表基于对录制文件中的I帧图像筛选得到。
除了可以在播放录制文件的同时触发关键点生成指令之外，还可以基于预设的I帧图像列表触发关键点选择指令。具体而言，预先确定录制文件中不同的视频场景对应的第一帧图像帧，即I帧图像，生成录制文件的I帧图像列表。当用户打开录制文件时，在电视机的显示设备上显示预设I帧图像列表，进一步的，响应于用户针对任一I帧图像的关键点选择指令，将用户选择的I帧图像的播放时刻作为目标时刻。
预设I帧图像列表中的I帧图像不是录制文件中的全部I帧图像，而是基于对录制文件中的I帧图像筛选得到。例如，只将每一个大的视频场景的第一帧I帧图像存储至预设I帧列表，或者当连续的I帧图像之间的相似度低于预设的第二相似度阈值时，将后一帧I帧图像存储至预设I帧列表，第二相似度阈值低于第一相似度阈值，具体数值不做限制。
步骤S204，对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
电视机录制文件处理服务确定目标时刻之后，启动标记任务，对I帧图像进行压缩处理，得到缩略图像，根据缩略图像和目标时刻生成关键点信息。其中，关键点信息包括I帧图像对应的缩略图像和目标时刻。
本申请一种优选实施例中，步骤S204，包括：
响应于针对目标时刻输入的关键点名称，根据缩略图像、目标时刻和关键点名称，生成关键点信息。
响应于用户使用电视机遥控器，或者与电视机预先匹配的终端设备，针对关键点信息中的目标时刻，输入的关键点名称，根据缩略图像、目标时刻和关键点名称，生成关键点信息。换言之，关键点信息除了缩略图像和目标时刻以外，还可以包括用户自定义的关键点名称。
步骤S205，响应于用户针对关键点信息的确认指令，将关键点信息存储至录制文件的关键点列表。
电视机录制文件处理服务生成关键点信息之后，在电视机的显示设备上显示确认控件，进一步的，响应于用户针对确认控件的确认指令，将关键点信息存储至录制文件的关键点列表；响应于用户针对确认控件的取消指令，终止该关键点信息的生成步骤。
每一个录制文件都可以设置一个关键点列表，关键点列表中包括至少一个关键点信息。用户可以基于电视机录制文件处理服务，生成或者删除关键点信息。
步骤S206，将关键点信息中的缩略图像存储至电视机的本地磁盘，将目标时刻和缩略图像的存储位置信息存储至电视机的本地数据库。
电视机录制文件处理服务与数据存储服务进行交互，生成缩略图像的本地存储位置信息，将缩略图像存储至电视机的本地磁盘，然后将缩略图像的本地存储位置信息和目标时刻存储至电视机的本地数据库。
步骤S207，在显示设备中显示关键点信息存储完成的提示信息。
关键点信息成功存储完成后，在电视机的显示设备中显示该关键点信息存储完成的提示信息。
步骤S208，响应于针对关键点信息的播放指令，将关键点信息对应的目标时刻确定为当前播放时刻，播放录制文件。
用户可以在显示设备中查看录制文件的关键点列表，响应于用户触发的针对关键点的播放指令，在电视机的显示设备中跳转至目标时刻进行播放。
应用本申请实施例提供的视频关键点的生成方法，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻；从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像，不同的视频场景基于帧图像之间的相似度确定；对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
本申请实施例通过自定义设置视频关键点，并自动基于图像帧的播放时刻对关键点进行调整，使得后续观看过程中可以基于关键点进行跳转播放，提升用户播放录制文件的灵活性。
本申请实施例中提供了一种视频关键点的生成装置，如图5所示，包括：
第一确定模块501，用于响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻；
第二确定模块502，用于从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于图像帧之间的相似度确定；
生成模块503，用于对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
本申请一种优选实施例中，装置还包括：
第一存储模块，用于响应于用户针对关键点信息的确认指令，将关键点信息存储至录制文件的关键点列表；
第二存储模块，用于将关键点信息中的缩略图像存储至电视机的本地磁盘，将目标时刻和缩略图像的存储位置信息存储至电视机的本地数据库；
显示模块，用于在显示设备中显示关键点信息存储完成的提示信息。
本申请一种优选实施例中，装置还包括：
播放模块，用于响应于针对关键点信息的播放指令，将关键点信息对应的目标时刻确定为当前播放时刻，播放录制文件。
本申请一种优选实施例中，装置还包括：
第三确定模块，用于响应于针对录制文件的预设I帧图像列表中，任一I帧图像的关键点选择指令，将I帧图像的播放时刻作为目标时刻；预设I帧图像列表基于对录制文件中的I帧图像筛选得到。
本申请一种优选实施例中，第一确定模块501具体用于：
响应于针对电视机的投屏指令，在与电视机匹配的终端设备上显示录制文件；
响应于基于终端设备触发的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻。
本申请一种优选实施例中，生成模块503具体用于：
响应于针对目标时刻输入的关键点名称，根据缩略图像、目标时刻和关键点名称，生成关键点信息。
本申请一种优选实施例中，装置还包括：
打开模块，用于响应于针对录制文件的播放指令，在显示设备中打开录制文件；录制文件为基于电子节目指南EPG的录制功能，生成并存储在电视机本地的视频文件。
应用本申请实施例提供的视频关键点的生成装置，响应于针对录制文件的关键点生成指令，将录制文件的当前播放时刻确定为初始时刻；从初始时刻对应时刻之前的第一个I帧图像，将I帧图像的播放时刻作为目标时刻；I帧图像为各个视频场景对应的第一帧图像，不同的视频场景基于帧图像之间的相似度确定；对I帧图像进行压缩得到缩略图像，根据缩略图像和目标时刻，生成目标时刻的关键点信息。
本申请实施例通过自定义设置视频关键点，并自动基于图像帧的播放时刻对关键点进行调整，使得后续观看过程中可以基于关键点进行跳转播放，提升用户播放录制文件的灵活性。
本申请实施例中提供了一种电子设备(计算机装置/设备/系统)，包括存储器、处理器及存储在存储器上的计算机程序，该处理器执行上述计算机程序以实现视频关键点的生成方法的步骤，与相关技术相比可实现：通过自定义设置视频关键点，并自动基于图像帧的播放时刻对关键点进行调整，使得后续观看过程中可以基于关键点进行跳转播放，提升用户播放录制文件的灵活性。
在一个可选实施例中提供了一种电子设备，如图6所示，图6所示的电子设备6000包括：处理器6001和存储器6003。其中，处理器6001和存储器6003相连，如通过总线6002相连。可选地，电子设备6000还可以包括收发器6004，收发器6004可以用于该电子设备与其他电子设备之间的数据交互，如数据的发送和/或数据的接收等。需要说明的是，实际应用中收发器6004不限于一个，该电子设备6000的结构并不构成对本申请实施例的限定。
处理器6001可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器6001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线6002可包括一通路，在上述组件之间传送信息。总线6002可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线6002可以分为地址总线、数据总线、控制总线等。为便于表示，图6中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器6003可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质、其他磁存储设备、或者能够用于携带或存储计算机程序并能够由计算机读取的任何其他介质，在此不做限定。
存储器6003用于存储执行本申请实施例的计算机程序，并由处理器6001来控制执行。处理器6001用于执行存储器6003中存储的计算机程序，以实现前述方法实施例所示的步骤。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时可实现前述方法实施例的步骤及相应内容。
本申请实施例还提供了一种计算机程序产品，包括计算机程序，计算机程序被处理器执行时可实现前述方法实施例的步骤及相应内容。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”、“1”、“2”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除图示或文字描述以外的顺序实施。
应该理解的是，虽然本申请实施例的流程图中通过箭头指示各个操作步骤，但是这些步骤的实施顺序并不受限于箭头所指示的顺序。除非本文中有明确的说明，否则在本申请实施例的一些实施场景中，各流程图中的实施步骤可以按照需求以其他的顺序执行。此外，各流程图中的部分或全部步骤基于实际的实施场景，可以包括多个子步骤或者多个阶段。这些子步骤或者阶段中的部分或全部可以在同一时刻被执行，这些子步骤或者阶段中的每个子步骤或者阶段也可以分别在不同的时刻被执行。在执行时刻不同的场景下，这些子步骤或者阶段的执行顺序可以根据需求灵活配置，本申请实施例对此不限制。
以上所述仅是本申请部分实施场景的可选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请的方案技术构思的前提下，采用基于本申请技术思想的其他类似实施手段，同样属于本申请实施例的保护范畴。

Claims (10)

1.一种视频关键点的生成方法，其特征在于，包括：
响应于针对录制文件的关键点生成指令，将所述录制文件的当前播放时刻确定为初始时刻；
从所述初始时刻对应时刻之前的第一个I帧图像，将所述I帧图像的播放时刻作为目标时刻；所述I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于所述图像帧之间的相似度确定；
对所述I帧图像进行压缩得到缩略图像，根据所述缩略图像和所述目标时刻，生成所述目标时刻的关键点信息。
2.根据权利要求1所述的视频关键点的生成方法，其特征在于，所述对所述I帧图像进行压缩得到缩略图像，根据所述缩略图像和所述目标时刻，生成所述目标时刻的关键点信息之后，所述方法包括：
响应于用户针对所述关键点信息的确认指令，将所述关键点信息存储至所述录制文件的关键点列表；
将所述关键点信息中的缩略图像存储至电视机的本地磁盘，将所述目标时刻和所述缩略图像的存储位置信息存储至所述电视机的本地数据库；
在显示设备中显示所述关键点信息存储完成的提示信息。
3.根据权利要求2所述的视频关键点的生成方法，其特征在于，所述在显示设备中显示所述关键点信息存储完成的提示信息之后，所述方法包括：
响应于针对所述关键点信息的播放指令，将所述关键点信息对应的目标时刻确定为当前播放时刻，播放所述录制文件。
4.根据权利要求1所述的视频关键点的生成方法，其特征在于，所述方法还包括：
响应于针对所述录制文件的预设I帧图像列表中，任一I帧图像的关键点选择指令，将所述I帧图像的播放时刻作为目标时刻；所述预设I帧图像列表基于对所述录制文件中的I帧图像筛选得到。
5.根据权利要求1所述的视频关键点的生成方法，其特征在于，所述响应于针对录制文件的关键点生成指令，将所述录制文件的当前播放时刻确定为初始时刻，包括：
响应于针对所述电视机的投屏指令，在与所述电视机匹配的终端设备上显示所述录制文件；
响应于基于所述终端设备触发的关键点生成指令，将所述录制文件的当前播放时刻确定为初始时刻。
6.根据权利要求1所述的视频关键点的生成方法，其特征在于，所述对所述I帧图像进行压缩得到缩略图像，根据所述缩略图像和所述目标时刻，生成所述目标时刻的关键点信息，包括：
响应于针对所述目标时刻输入的关键点名称，根据所述缩略图像、所述目标时刻和所述关键点名称，生成所述关键点信息。
7.根据权利要求1所述的视频关键点的生成方法，其特征在于，所述响应于针对录制文件的关键点生成指令，将所述录制文件的当前播放时刻确定为初始时刻之前，所述方法包括：
响应于针对所述录制文件的播放指令，在显示设备中打开所述录制文件；所述录制文件为基于电子节目指南EPG的录制功能，生成并存储在电视机本地的视频文件。
8.一种视频关键点的生成装置，其特征在于，包括：
第一确定模块，用于响应于针对录制文件的关键点生成指令，将所述录制文件的当前播放时刻确定为初始时刻；
第二确定模块，用于从所述初始时刻对应时刻之前的第一个I帧图像，将所述I帧图像的播放时刻作为目标时刻；所述I帧图像为各个视频场景对应的第一帧图像帧，不同的视频场景基于所述图像帧之间的相似度确定；
生成模块，用于对所述I帧图像进行压缩得到缩略图像，根据所述缩略图像和所述目标时刻，生成所述目标时刻的关键点信息。
9.一种电子设备，其特征在于，所述电子设备包括：
一个或多个处理器；
存储器；
一个或多个应用程序，其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于：执行根据权利要求1至7任一项所述的视频关键点的生成方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7任一项所述的视频关键点的生成方法。
CN202210203618.2A 2022-03-03 2022-03-03 视频关键点的生成方法、装置、电子设备及存储介质 Active CN114666667B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210203618.2A CN114666667B (zh) 2022-03-03 2022-03-03 视频关键点的生成方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210203618.2A CN114666667B (zh) 2022-03-03 2022-03-03 视频关键点的生成方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN114666667A true CN114666667A (zh) 2022-06-24
CN114666667B CN114666667B (zh) 2024-07-26

Family

ID=82027862

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210203618.2A Active CN114666667B (zh) 2022-03-03 2022-03-03 视频关键点的生成方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114666667B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140072284A1 (en) * 2012-09-12 2014-03-13 Intel Corporation Techniques for indexing video files
WO2018016812A1 (ko) * 2016-07-22 2018-01-25 오제호 휴대용 영상 콘텐츠 재생 장치 및 그 동작 방법
WO2018095302A1 (zh) * 2016-11-22 2018-05-31 深圳创维数字技术有限公司 机顶盒的录制视频文件的显示方法及系统
CN109905782A (zh) * 2019-03-31 2019-06-18 联想(北京)有限公司 一种控制方法及装置
US20190318169A1 (en) * 2016-10-31 2019-10-17 Huawei Technologies Co., Ltd. Method for Generating Video Thumbnail on Electronic Device, and Electronic Device
CN111581433A (zh) * 2020-05-18 2020-08-25 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备及计算机可读介质
CN113556492A (zh) * 2021-07-09 2021-10-26 深圳传音控股股份有限公司 缩略图生成方法、移动终端及可读存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140072284A1 (en) * 2012-09-12 2014-03-13 Intel Corporation Techniques for indexing video files
WO2018016812A1 (ko) * 2016-07-22 2018-01-25 오제호 휴대용 영상 콘텐츠 재생 장치 및 그 동작 방법
US20190318169A1 (en) * 2016-10-31 2019-10-17 Huawei Technologies Co., Ltd. Method for Generating Video Thumbnail on Electronic Device, and Electronic Device
WO2018095302A1 (zh) * 2016-11-22 2018-05-31 深圳创维数字技术有限公司 机顶盒的录制视频文件的显示方法及系统
CN109905782A (zh) * 2019-03-31 2019-06-18 联想(北京)有限公司 一种控制方法及装置
CN111581433A (zh) * 2020-05-18 2020-08-25 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备及计算机可读介质
WO2021232978A1 (zh) * 2020-05-18 2021-11-25 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备及计算机可读介质
CN113556492A (zh) * 2021-07-09 2021-10-26 深圳传音控股股份有限公司 缩略图生成方法、移动终端及可读存储介质

Also Published As

Publication number Publication date
CN114666667B (zh) 2024-07-26

Similar Documents

Publication Publication Date Title
CN108650555B (zh) 视频界面的展示、交互信息的生成方法、播放器及服务器
CN108495185B (zh) 一种视频标题生成方法和装置
CN101267522B (zh) 信息处理装置、成像装置、图像显示控制方法
RU2628108C2 (ru) Способ обеспечения выбора эпизода видеоматериала и устройство для этого
US11438510B2 (en) System and method for editing video contents automatically technical field
CN108989609A (zh) 视频封面生成方法、装置、终端设备及计算机存储介质
CN111095939B (zh) 识别媒体项目的先前流传输部分以避免重复重放
CN112738633B (zh) 视频播放的方法、装置、设备及可读存储介质
US20190349650A1 (en) Method, apparatus, and device for generating an essence video and storage medium
CN111444415B (zh) 弹幕处理方法、服务器、客户端、电子设备及存储介质
CN111209437A (zh) 一种标签处理方法、装置、存储介质和电子设备
US20170168660A1 (en) Voice bullet screen generation method and electronic device
CN106470353B (zh) 一种多媒体数据处理方法及其装置、电子设备
CN111800668A (zh) 弹幕的处理方法、装置、设备及存储介质
CN112601127A (zh) 视频显示方法及装置、电子设备、计算机可读存储介质
WO2024153191A1 (zh) 视频生成方法、装置、电子设备及介质
JP7058795B2 (ja) ビデオ処理方法、装置、端末及び記憶媒体
CN114666667B (zh) 视频关键点的生成方法、装置、电子设备及存储介质
CN114610261A (zh) 终端投屏方法、装置、设备及介质
CN112689165B (zh) 视频播放方法及装置
CN111083497B (zh) 一种视频截图方法及装置
CN109040823B (zh) 一种书签展示的方法及装置
CN112423099A (zh) 视频加载方法、装置和电子设备
WO2007145281A1 (ja) 映像再生装置、映像再生方法および映像再生プログラム
US20230199258A1 (en) Key event trick-play operation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Room 263, block B, science and technology innovation center, 128 Shuanglian Road, Haining Economic Development Zone, Haining City, Jiaxing City, Zhejiang Province, 314400

Applicant after: Haining yisiwei IC Design Co.,Ltd.

Applicant after: Beijing ESWIN Computing Technology Co.,Ltd.

Address before: Room 263, block B, science and technology innovation center, 128 Shuanglian Road, Haining Economic Development Zone, Haining City, Jiaxing City, Zhejiang Province, 314400

Applicant before: Haining yisiwei IC Design Co.,Ltd.

Applicant before: Beijing yisiwei Computing Technology Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 314499 Building 1, Juanhu Science and Technology Innovation Park, No. 500 Shuiyueting East Road, Xiashi Street, Haining City, Jiaxing City, Zhejiang Province (self declared)

Patentee after: Haining Yisiwei Computing Technology Co.,Ltd.

Country or region after: China

Patentee after: Beijing ESWIN Computing Technology Co.,Ltd.

Address before: Room 263, block B, science and technology innovation center, 128 Shuanglian Road, Haining Economic Development Zone, Haining City, Jiaxing City, Zhejiang Province, 314400

Patentee before: Haining yisiwei IC Design Co.,Ltd.

Country or region before: China

Patentee before: Beijing ESWIN Computing Technology Co.,Ltd.