CN108616775A - 视频播放时智能截图的方法、装置、存储介质及智能终端 - Google Patents

视频播放时智能截图的方法、装置、存储介质及智能终端 Download PDF

Info

Publication number
CN108616775A
CN108616775A CN201810306084.XA CN201810306084A CN108616775A CN 108616775 A CN108616775 A CN 108616775A CN 201810306084 A CN201810306084 A CN 201810306084A CN 108616775 A CN108616775 A CN 108616775A
Authority
CN
China
Prior art keywords
sectional drawing
user action
user
video
time point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810306084.XA
Other languages
English (en)
Other versions
CN108616775B (zh
Inventor
曾鸿坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810306084.XA priority Critical patent/CN108616775B/zh
Publication of CN108616775A publication Critical patent/CN108616775A/zh
Application granted granted Critical
Publication of CN108616775B publication Critical patent/CN108616775B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Ophthalmology & Optometry (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种视频播放时智能截图的方法、装置、存储介质及智能终端。该方法包括：在视频应用运行时，检测用户在观看所述视频应用时的用户动作；在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点；对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。采用上述技术方案，解决相关技术的视频截图过程中操作繁琐、智能程度不高的问题，实现对用户感兴趣的视频内容自动进行截图，并保存于预设文件夹内的功能，简化了截图流程，提高了截图效率。

Description

视频播放时智能截图的方法、装置、存储介质及智能终端
技术领域
本申请实施例涉及视频处理技术，尤其涉及一种视频播放时智能截图的方法、装置、存储介质及智能终端。
背景技术
目前，智能手机等智能终端的屏幕截图方式主要有两种：按键截图和触摸截图，其中，按键截图是指通过按压一定的快捷键实现对终端屏幕进行截图，目前的按键截图仅能实现对终端进行全屏截图，如具体通过同时按下智能手机的power键(开关键/电源键)和音量上键，实现对智能手机进行全屏截图等；触摸截图是指基于用户手指在触摸屏上的滑动操作，定位出一封闭图形，并将所述封闭图形内的图像区域作为目标截图区域进行截取。
然而，用户在观看电影或电视剧时，若未及时对精彩瞬间或感人画面进行截图，需要重新播放电影或电视剧寻找想要截图的目标画面，存在操作繁琐、不够智能的问题。
发明内容
本申请实施例提供一种视频播放时智能截图的方法、装置、存储介质及智能终端，可以在视频播放过程中实现自动截图。
第一方面，本申请实施例提供了一种视频播放时智能截图的方法，包括：
在视频应用运行时，检测用户在观看所述视频应用时的用户动作；
在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；
对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
第二方面，本申请实施例还提供了一种视频播放时智能截图的装置，该装置包括：
动作检测模块，用于在视频应用运行时，检测用户在观看所述视频应用时的用户动作；
时间点确定模块，用于在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；
图像截取模块，用于对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
第三方面，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述第一方面所述的视频播放时智能截图的方法。
第四方面，本申请实施例还提供了一种智能终端，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的视频播放时智能截图的方法。
本申请实施例提供一种视频播放时智能截图的方案，通过检测用户在观看视频应用时的用户动作；在该用户动作满足预设的截图条件时，确定该用户动作对应的时间点；对该时间点对应的视频内容进行截取，得到截图画面，保存该截图画面，实现根据用户动作自动截图的功能。采用上述技术方案，解决相关技术的视频截图过程中操作繁琐、智能程度不高的问题，实现对用户感兴趣的视频内容自动进行截图，并保存于预设文件夹内的功能，简化了截图流程，提高了截图效率。
附图说明
图1是本申请实施例提供的一种视频播放时智能截图的方法的流程图；
图2是本申请实施例提供的另一种视频播放时智能截图的方法的流程图；
图3是本申请实施例提供的一种视频播放时智能截图的装置；
图4是本申请实施例提供的一种智能终端的结构示意图；
图5是本申请实施例提供的一种智能手机的结构框图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本申请，而非对本申请的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
用户在观看电影或电视剧时，可能存在对精彩瞬间、感人画面或留下深刻印象的场景进行截图的需求。不过，可能由于忘记，或者当前电影或节目太精彩，导致用户忘记去截图。等看完节目，用户可能找不到之前想要截图的画面或者，直接放弃查找之前想要截图的画面。由于需要手动截图，智能程度不高。
图1是本申请实施例提供的一种视频播放时智能截图的方法的流程图，该方法可以由视频播放时智能截图的装置来执行，其中，该装置可由软件和/或硬件实现，一般可集成于智能手机或平板电脑等智能终端中。如图1所示，该方法包括：
步骤110、在视频应用运行时，检测用户在观看所述视频应用时的用户动作。
需要说明的是，获取前台运行的应用程序的应用标识，根据该应用标识判断该应用程序是否为视频应用。其中，前台运行的应用程序可以认为是在智能终端的触摸显示屏中显示的应用。应用标识包括但不限于应用包名及进程名称。
需要说明的是，用户动作包括但不限于视频快进操作、视频倒退操作、瞳孔扩张、流泪或注视视频内容的操作。
示例性的，在视频应用运行时，获取视频界面内进度条的状态信息。可以是获取针对目标视频的播放按键的按下操作，展示目标视频的视频界面，在视频界面的底部显示有进度条。检测进度条对应区域的触摸操作，根据触摸操作确定进度条的状态信息。若状态信息是跳过一定数量的数据帧，显示时间戳晚于当前时间戳的画面，则确定用户动作为视频快进操作。若状态信息时后退一定数量的数据帧，显示时间戳早于当前时间戳的画面，则确定用户动作为视频倒退操作。
可选的，在视频应用运行时，启动前置摄像头按照预设的采样周期采集用户的眼部图像。采用图像处理算法对眼部图像进行处理，提取眼部状态信息，并根据该眼部状态信息确定瞳孔与虹膜的面积比率，和/或瞳孔在眼睛中的位置，据此确定眼部动作。其中，该眼部状态信息包括瞳孔数据、虹膜数据及眼睛轮廓数据。
根据瞳孔数据与虹膜轮廓数据的面积比率。将该面积比率与参考比率进行比较，根据比较结果确定瞳孔是否放大。如果该面积比率超过参考比率，则确定瞳孔放大。其中，参考比率是正常状态下瞳孔与虹膜的面积比。可以在智能终端中添加信息采集功能。在用户启动该功能时，提示用户正视前置摄像头，拍摄一帧眼睛参考图像。提取该眼睛参考图像中的瞳孔尺寸数据与虹膜轮廓数据，根据瞳孔尺寸数据与虹膜轮廓数据计算参考比率。
可选的，前置摄像头按照设定周期拍摄至少一帧面部图像，例如，前置摄像头每隔10秒拍摄至少一帧面部图像，在不进行拍摄时，控制摄像头休眠，以节省智能终端的功耗。根据该面部图像确定用户是否流泪。检测过程可以是：在视频播放10秒后，检测面部图像，识别用户是否流泪，即检测该面部图像中是否具有泪痕。可以采用具有泪痕的面部图像作为研究对象，统计出泪痕与面部像素叠加后的像素值的取值区间。在检测到面部图像后，将面部图像中的像素值与该取值区间进行匹配；若匹配成功，则确定检测到泪痕；若匹配失败，则确定未检测到泪痕。若未检测到泪痕，则休眠10秒，在第11秒拍摄一帧面部图像，并控制前置摄像头休眠，启动计时器计时10秒，在计时器的数值是10秒时，控制计时器清零。识别新拍摄的面部图像，检测用户是否流泪。若是，则确定用户在观看该视频应用时的用户动作为流泪的眼部动作。
可选的，前置摄像头按照设定周期拍摄一帧眼部图像，根据该眼部图像判断用户是否注视视频内容。通过图像处理算法确定瞳孔在眼睛中的相对位置数据，从而，计算出用户所观察的注视点的位置。若该注视点的位置为触摸显示屏中显示的视频内容。在视频播放10秒后，利用前置摄像头拍摄一帧眼部图像，根据该眼部图像确定注视点。若该注视点在触摸显示屏上，则将计数器加1。休眠10秒，在第11秒拍摄一帧眼睛图像，由该眼部图像中重新确定注视点。若该重新确定的注视点仍然在触摸显示屏上，则将计数器累加1。采用相似的方法，连续计算注视点的位置。将计数器的数值与预设阈值进行比较，若该计数器的数值超过预设阈值，则确定用户在注视触摸显示屏内的视频内容。例如，若用户注视视频内容的时间为30秒，则确定用户动作为注视视频内容。可以理解的是，还可以综合检测瞳孔与虹膜的面积比率以及检测注视点的位置，根据检测结果确定用户是否注视触摸显示屏内的视频内容。
可选的，在视频应用运行时，根据该视频应用标识查询历史播放记录，从而确定该视频应用是否为首次播放。若该视频应用非首次播放，则检测用户对进度条的快进操作或倒退操作。由于用户在回看视频时，很可能通过拖动进度条，以将视频内容快进至自己想要观看的视频内容。还可能通过拖动进度条，以将视频内容后退至自己想要观看的视频内容。将快进操作及倒退操作确定为用户动作。
步骤120、在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点。
其中，截图条件包括：在该用户动作分别为快进操作及倒退操作时，该快进操作对应的第一时间区间与倒退操作对应的第二时间区间重叠；和/或在用户动作为眼部动作时，该眼部动作包括瞳孔扩张、流泪、注视视频内容中的至少一种。
需要说明的是，用户动作对应的时间点包括但不限于快进操作或倒退操作的起始点、终止点和/或上述重叠时间对应的时间戳。可选的，用户动作对应的时间点还可包括检测到瞳孔扩张的时间点、流泪的时间点、注视视频内容的时间点等。
示例性的，在用户动作分别为快进操作及倒退操作时，若快进操作对应的第一时间区间与倒退操作对应的第二时间区间重叠，则确定该用户动作满足预设的截图条件。
可选的，在用户动作为眼部动作时，若眼部动作包括瞳孔扩张、流泪、注视视频内容中的至少一种，则确定该用户动作满足预设的截图条件。
在所述用户动作满足预设的截图条件时，若用户动作分别为快进操作及倒退操作，则可以将快进操作或倒退操作的起始点、终止点、停顿点或暂停点确定为用户动作对应的时间点。可选的，在用户动作分别为快进操作及倒退操作时，将该第一时间区间与第二时间区间的重叠区域的端点确定为用户动作对应的时间点。可选的，还可以将该第一时间区间与第二时间区间的重叠区域对应的时间戳确定为用户动作对应的时间点。
可替换的，在所述用户动作满足预设的截图条件时，将检测到瞳孔扩张的时刻确定为用户动作对应的时间点，或者，将检测到流泪的时刻确定为用户动作对应的时间点，或者将检测到注视视频内容的时刻确定为用户动作对应的时间点。
步骤130、对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
示例性的，在视频播放10秒后，检测眼部图像，识别用户的瞳孔是否扩张。若未检测到瞳孔扩张，则休眠10秒，在第11秒拍摄一帧眼睛图像，并控制前置摄像头休眠，启动计时器计时10秒，在计时器的数值是10秒时，控制计时器清零。识别新拍摄的眼睛图像，检测用户的瞳孔是否扩张。由于该瞳孔扩张动作满足预设的截图条件，则将第21(10+11)秒确定为用户流泪的时间点，对视频内容中第21秒的帧数据进行截图处理。再次控制前置摄像头休眠，启动计时器计时10秒，在计时器的数值是10秒时，控制计时器清零。识别新拍摄的眼睛图像，检测用户的瞳孔是否扩张。若用户的瞳孔仍然处于扩张状态，则将第31(10+10+11)秒确定为瞳孔扩张的时间点，对视频内容中第31秒的帧数据进行截图处理，得到新的一帧图像。若用户的瞳孔未再处于扩张状态，则将第21秒对应的截图画面作为最终画面进行保存。存储该截图画面的位置可以是系统默认的，例如，相册中Screenshot文件夹，或者其它用户自行设置的文件夹。可选的，截图画面还可以被上传至云端服务器进行保存。
示例性的，在视频播放10秒后，检测眼部图像，识别用户是否流泪。若未检测到泪痕，则休眠10秒，在第11秒拍摄一帧眼睛图像，并控制前置摄像头休眠，启动计时器计时10秒，在计时器的数值是10秒时，控制计时器清零。识别新拍摄的眼睛图像，检测用户是否流泪。若是，则确定用户动作为流泪。由于该流泪的用户动作满足预设的截图条件，则将第21(10+11)秒确定为用户流泪的时间点，对视频内容中第21秒的帧数据进行截图处理。可选的，若用户流泪的时间较长，则可以按照上述方式截取多帧图像。相似的，采用相似的方式可以在用户动作为注视视频内容时，可以每隔10秒截取一帧图像直至通过前置摄像头检测到用户不在注视视频内容为止。
可替换的，在所述用户动作分别为快进操作及倒退操作时，对快进操作或倒退操作的起始点、终止点、停顿点及暂停点进行截图，得到多帧截图画面，保存该截图画面。可选的，由于快进操作对应的第一时间区间与所述倒退操作对应的第二时间区间重叠，对重叠区域的端点进行截图，保存截图画面。可选的，还可以对整个重叠区域对应的多帧画面进行截图，保存多帧截图画面。
本实施例的技术方案，通过检测用户在观看视频应用时的用户动作；在该用户动作满足预设的截图条件时，确定该用户动作对应的时间点；对该时间点对应的视频内容进行截取，得到截图画面，保存该截图画面，实现根据用户动作自动截图的功能。采用上述技术方案，解决相关技术的视频截图过程中操作繁琐、智能程度不高的问题，实现对用户感兴趣的视频内容自动进行截图，并保存于预设文件夹内的功能，简化了截图流程，提高了截图效率。
图2是本申请实施例提供的另一种视频播放时智能截图的方法的流程图。该方法包括：
步骤201、在视频应用运行时，检测用户在观看所述视频应用时的用户动作。
示例性的，通过前台运行的应用程序的包名(如，com.android.video)检测到前台运行的应用程序是视频应用，确定用户正在使用智能手机播放视频。检测视频应用中播放按键(如Play键)的状态，判断用户是否选择某一视频开始播放。若检测到Play键被点击，则检测被选中的视频内容对应的程序代码，判断该程序代码中是否包含“movie”或者“TVplay”等类似的表示电影或电视剧的关键词，以此判断此时播放的视频内容是否为电影或者电视剧。
若当前播放的视频内容为电影或电视剧，则检测用户在观看视频应用时的用户动作，其中，用户动作可以是快进操作或倒退操作，或者是流泪、瞳孔扩张或注视视频内容等眼部动作，还可以视频回放动作等。
步骤202、判断所述用户动作是否满足预设的截图条件，若是，则执行步骤203，否则，执行步骤205。
在该用户动作分别为快进操作及倒退操作(包括先执行快进操作再执行倒退操作，或者先执行倒退操作后执行快进操作)时，若该快进操作对应的第一时间区间与倒退操作对应的第二时间区间重叠，则确定该用户动作满足预设的截图条件。
若用户动作为瞳孔扩张、流泪、注视视频内容中的至少一种眼部动作，则确定该用户动作满足预设的截图条件。
若用户动作为视频回放动作，且该快进操作对应的第一时间区间与倒退操作对应的第二时间区间重叠，则确定该用户动作满足预设的截图条件。
步骤203、确定所述用户动作对应的参考时间点。
在用户动作为瞳孔扩张时，将检测到瞳孔扩张的时刻确定为参考时间点，如果参考时间点是12分23秒。
步骤204、检测用户对视频内容中进度条的操作。
在检测到眼部动作后，检测用户对视频内容中进度条的操作。
步骤205、确定所述用户动作对应的时间点。
若检测到快进操作，确定快进操作对应的第一时间区间(由快进操作的起始点与终止点构成的时间区间)，判断该第一时间区间是否包含该参考时间点。若是，则判断是否检测到倒退操作。若检测到倒退操作，确定倒退操作对应的第二时间区间(由倒退操作的起始点与终止点构成的时间区间)，判断该第二时间是否包含该参考时间点。若是，则确定12分23秒为用户动作对应的时间点。
可替换的，在用户动作为流泪时，将检测到泪痕的时刻确定为参考时间点。在检测到眼部动作后，检测用户对视频内容中进度条的操作。若检测到快进操作，确定快进操作对应的第一时间区间(由快进操作的起始点与终止点构成的时间区间)，判断该第一时间区间是否包含该参考时间点。若是，则判断是否检测到倒退操作。若检测到倒退操作，确定倒退操作对应的第二时间区间(由倒退操作的起始点与终止点构成的时间区间)，判断该第二时间是否包含该参考时间点。若是，则确定该参考时间点为用户动作对应的时间点。
可替换的，在用户动作为注视视频内容时，将检测到注视操作的时刻确定为参考时间点。在检测到眼部动作后，检测用户对视频内容中进度条的操作。若检测到快进操作，确定快进操作对应的第一时间区间(由快进操作的起始点与终止点构成的时间区间)，判断该第一时间区间是否包含该参考时间点。若是，则判断是否检测到倒退操作。若检测到倒退操作，确定倒退操作对应的第二时间区间(由倒退操作的起始点与终止点构成的时间区间)，判断该第二时间是否包含该参考时间点。若是，则确定该参考时间点为用户动作对应的时间点。
可替换的，检测用户动作为快进操作及倒退操作，若快进操作对应的第一时间区间与倒退操作对应的第二时间区间相重叠，则将重叠区域的端点确定为用户动作对应的时间点。可选的，将重叠区域对应的时间戳确定为用户动作对应的时间点。
可替换的，用户看完视频后，可能马上或过一段时候后再看第二遍，若检测到用户回放该视频，若检测快进操作、倒退操作及眼部动作，采用上述相似的方式确定用户动作对应的时间点。
步骤206、对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
自动将用户动作对应的时间点作为截图时刻，将该时间点对应的画面进行截图处理，得到截图画面，并将截图画面保存于智能终端的相册Screenshot文件夹，并以“感动瞬间”为文件夹命名，以便于用户随时查看自己在看电影或电视剧时，碰到了哪些感人瞬间或特别感兴趣的内容。
步骤207、不执行截图处理。
在该用户动作不满足预设的截图条件时，不进行截图处理。
本实施例的技术方案，通过检测用户在观看视频应用时的用户动作；基于眼部动作确定截图时刻，再检测快进操作及倒退操作，判断快进操作及倒退操作是否均包含该截图时刻，根据该截图时刻对视频内容进行截图操作，得到截图画面。采用上述技术方案综合多种条件确定截图时刻，提高了自动截图功能的准确率。
图3是本申请实施例提供的一种视频播放时智能截图的装置。该装置可以通过软件和/或硬件实现，可被集成于智能手机或平板电脑等智能终端中，用于执行本申请实施例提供的视频播放时智能截图的方法。如图3所示，该装置包括：
动作检测模块310，用于在视频应用运行时，检测用户在观看所述视频应用时的用户动作；
时间点确定模块320，用于在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；
图像截取模块330，用于对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
本实施例的技术方案提供一种视频播放时智能截图的装置，解决相关技术的视频截图过程中操作繁琐、智能程度不高的问题，实现对用户感兴趣的视频内容自动进行截图，并保存于预设文件夹内的功能，简化了截图流程，提高了截图效率。
可选的，动作检测模块310具体用于：
在视频应用运行时，获取视频界面内进度条的状态信息，根据所述状态信息检测用户动作的类型，其中，所述类型包括快进操作及倒退操作。
可选的，动作检测模块310具体用于：
在视频应用运行时，启动前置摄像头按照预设的采样周期采集用户的眼部状态信息；
根据所述眼部状态信息确定眼部动作。
可选的，动作检测模块310具体用于：
在视频应用运行时，根据所述视频应用的应用标识查询历史播放记录，根据查询结果确定所述视频应用是否为首次播放；
若为再次播放，则检测用户输入的快进操作及倒退操作。
可选的，还包括：条件判定模块，用于判断所述用户动作是否满足预设的截图条件；
以及，在存在下述至少一种情况时确定所述用户动作满足预设的截图条件：
在所述用户动作分别为快进操作及倒退操作时，所述快进操作对应的第一时间区间与所述倒退操作对应的第二时间区间重叠；
在所述用户动作为眼部动作时，所述眼部动作包括瞳孔扩张、流泪、注视视频内容中的至少一种。
可选的，时间点确定模块320具体用于：
在所述用户动作分别为快进操作及倒退操作时，将所述第一时间区间与第二时间区间的重叠区域的端点确定为所述用户动作对应的时间点。
可选的，时间点确定模块320具体用于：
在所述用户动作为眼部动作时，将检测到瞳孔扩张的时刻确定为参考时间点，或者，将检测到流泪的时刻确定为参考时间点，或者将检测到注视视频内容的时刻确定为参考时间点；
在所述用户动作分别为快进操作及倒退操作时，判断所述第一时间区间是否包含所述参考时间点；
若是，则判断所述第二时间区间是否包含所述参考时间点；
若是，则确定所述参考时间点为用户动作对应的时间点。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行视频播放时智能截图的方法，该方法包括：
在视频应用运行时，检测用户在观看所述视频应用时的用户动作；
在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；
对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括：安装介质，例如CD-ROM、软盘或磁带装置；计算机系统存储器或随机存取存储器，诸如DRAM、DDR RAM、SRAM、EDO RAM，兰巴斯(Rambus)RAM等；非易失性存储器，诸如闪存、磁介质(例如硬盘或光存储)；寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外，存储介质可以位于程序在其中被执行的第一计算机系统中，或者可以位于不同的第二计算机系统中，第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的视频播放时智能截图的操作，还可以执行本申请任意实施例所提供的视频播放时智能截图的方法中的相关操作。
本申请实施例提供了一种智能终端，该智能终端内具有操作系统，该智能终端中可集成本申请实施例提供的视频播放时智能截图的装置。其中，智能终端可以为智能手机或PAD(平板电脑)等。图4是本申请实施例提供的一种智能终端的结构示意图。如图4所示，该智能终端包括存储器410及处理器420。所述存储器410，用于存储计算机程序、用户动作、截图条件及截图画面等；所述处理器420读取并执行所述存储器410中存储的计算机程序。所述处理器420在执行所述计算机程序时实现以下步骤：在视频应用运行时，检测用户在观看所述视频应用时的用户动作；在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
上述示例中列举的存储器及处理器均为智能终端的部分元器件，所述智能终端还可以包括其它元器件。以智能手机为例，说明上述智能终端可能的结构。图5是本申请实施例提供的一种智能手机的结构框图。如图5所示，该智能手机可以包括：存储器501、中央处理器(Central Processing Unit，CPU)502(又称处理器，以下简称CPU)、外设接口503、RF(Radio Frequency，射频)电路505、音频电路506、扬声器511、触摸显示屏512、电源管理芯片508、输入/输出(I/O)子系统509、其他输入/控制设备510以及外部端口504，这些部件通过一个或多个通信总线或信号线507来通信。
应该理解的是，图示智能手机500仅仅是智能终端的一个范例，并且智能手机500可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的集成有视频播放时智能截图的装置的智能手机进行详细的描述。
存储器501，所述存储器501可以被CPU502、外设接口503等访问，所述存储器501可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。在存储器501中存储计算机程序，还可以存储用户动作、截图条件及截图画面等。
外设接口503，所述外设接口503可以将设备的输入和输出外设连接到CPU502和存储器501。
I/O子系统509，所述I/O子系统509可以将设备上的输入输出外设，例如触摸显示屏512和其他输入/控制设备510，连接到外设接口503。I/O子系统509可以包括显示控制器5091和用于控制其他输入/控制设备510的一个或多个输入控制器5092。其中，一个或多个输入控制器5092从其他输入/控制设备510接收电信号或者向其他输入/控制设备510发送电信号，其他输入/控制设备510可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器5092可以与以下任一个连接：键盘、红外端口、USB接口以及诸如鼠标的指示设备。
触摸显示屏512，所述触摸显示屏512是用户终端与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。
I/O子系统509中的显示控制器5091从触摸显示屏512接收电信号或者向触摸显示屏512发送电信号。触摸显示屏512检测触摸显示屏上的接触，显示控制器5091将检测到的接触转换为与显示在触摸显示屏512上的用户界面对象的交互，即实现人机交互，显示在触摸显示屏512上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸显示屏形成的触摸敏感表面的延伸。
RF电路505，主要用于建立手机与无线网络(即网络侧)的通信，实现手机与无线网络的数据接收和发送。例如收发短信息、电子邮件等。具体地，RF电路505接收并发送RF信号，RF信号也称为电磁信号，RF电路505将电信号转换为电磁信号或将电磁信号转换为电信号，并且通过该电磁信号与通信网络以及其他设备进行通信。RF电路505可以包括用于执行这些功能的已知电路，其包括但不限于天线系统、RF收发机、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(COder-DECoder，编译码器)芯片组、用户标识模块(Subscriber Identity Module，SIM)等等。
音频电路506，主要用于从外设接口503接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器511。
扬声器511，用于将手机通过RF电路505从无线网络接收的语音信号，还原为声音并向用户播放该声音。
电源管理芯片508，用于为CPU502、I/O子系统及外设接口所连接的硬件进行供电及电源管理。
本申请实施例提供的智能终端，可以解决相关技术的视频截图过程中操作繁琐、智能程度不高的问题，实现对用户感兴趣的视频内容自动进行截图，并保存于预设文件夹内的功能，简化了截图流程，提高了截图效率。
上述实施例中提供的视频播放时智能截图的装置、存储介质及智能终端可执行本申请任意实施例所提供的视频播放时智能截图的方法，具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的视频播放时智能截图的方法。
注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。

Claims (10)

1.一种视频播放时智能截图的方法，其特征在于，包括：
在视频应用运行时，检测用户在观看所述视频应用时的用户动作；
在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；
对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
2.根据权利要求1所述的方法，其特征在于，在视频应用运行时，检测用户在观看所述视频应用时的用户动作，包括：
在视频应用运行时，获取视频界面内进度条的状态信息，根据所述状态信息检测用户动作的类型，其中，所述类型包括快进操作及倒退操作。
3.根据权利要求1所述的方法，其特征在于，在视频应用运行时，检测用户在观看所述视频应用时的用户动作，包括：
在视频应用运行时，启动前置摄像头按照预设的采样周期采集用户的眼部状态信息；
根据所述眼部状态信息确定瞳孔与虹膜的面积比率,和/或瞳孔在眼睛中的位置，根据所述面积比率和/或所述位置确定眼部动作。
4.根据权利要求1所述的方法，其特征在于，在视频应用运行时，检测用户在观看所述视频应用时的用户动作，包括：
在视频应用运行时，根据所述视频应用的应用标识查询历史播放记录，根据查询结果确定所述视频应用是否为首次播放；
若为再次播放，则检测用户输入的快进操作及倒退操作。
5.根据权利要求1至4中任一项所述的方法，其特征在于，还包括：判断所述用户动作是否满足预设的截图条件；
以及，在存在下述至少一种情况时确定所述用户动作满足预设的截图条件：
在所述用户动作分别为快进操作及倒退操作时，所述快进操作对应的第一时间区间与所述倒退操作对应的第二时间区间重叠；
在所述用户动作为眼部动作时，所述眼部动作包括瞳孔扩张、流泪、注视视频内容中的至少一种。
6.根据权利要求5所述的方法，其特征在于，确定所述用户动作对应的时间点，包括：
在所述用户动作分别为快进操作及倒退操作时，将所述第一时间区间与第二时间区间的重叠区域的端点确定为所述用户动作对应的时间点。
7.根据权利要求6所述的方法，其特征在于，确定所述用户动作对应的时间点，包括：
在所述用户动作为眼部动作时，将检测到瞳孔扩张的时刻确定为参考时间点，或者，将检测到流泪的时刻确定为参考时间点，或者将检测到注视视频内容的时刻确定为参考时间点；
在所述用户动作分别为快进操作及倒退操作时，判断所述第一时间区间是否包含所述参考时间点；
若是，则判断所述第二时间区间是否包含所述参考时间点；
若是，则确定所述参考时间点为用户动作对应的时间点。
8.一种视频播放时智能截图的装置，其特征在于，包括：
动作检测模块，用于在视频应用运行时，检测用户在观看所述视频应用时的用户动作；
时间点确定模块，用于在所述用户动作满足预设的截图条件时，确定所述用户动作对应的时间点，其中，所述时间点包括所述用户动作的起始点、终止点、停顿点中的至少一种；
图像截取模块，用于对所述时间点对应的视频内容进行截取，得到截图画面，保存所述截图画面。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的视频播放时智能截图的方法。
10.一种智能终端，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的视频播放时智能截图的方法。
CN201810306084.XA 2018-04-08 2018-04-08 视频播放时智能截图的方法、装置、存储介质及智能终端 Active CN108616775B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810306084.XA CN108616775B (zh) 2018-04-08 2018-04-08 视频播放时智能截图的方法、装置、存储介质及智能终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810306084.XA CN108616775B (zh) 2018-04-08 2018-04-08 视频播放时智能截图的方法、装置、存储介质及智能终端

Publications (2)

Publication Number Publication Date
CN108616775A true CN108616775A (zh) 2018-10-02
CN108616775B CN108616775B (zh) 2020-10-13

Family

ID=63659839

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810306084.XA Active CN108616775B (zh) 2018-04-08 2018-04-08 视频播放时智能截图的方法、装置、存储介质及智能终端

Country Status (1)

Country Link
CN (1) CN108616775B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110110138A (zh) * 2019-04-09 2019-08-09 努比亚技术有限公司 保存方法、移动终端及计算机可读存储介质
CN111954087A (zh) * 2020-08-20 2020-11-17 腾讯科技（深圳）有限公司 视频中图像的截取方法和装置、存储介质和电子设备
WO2020228538A1 (zh) * 2019-05-14 2020-11-19 维沃移动通信有限公司 截图的方法和移动终端
CN112203141A (zh) * 2020-10-12 2021-01-08 广州欢网科技有限责任公司 视频点播内容识别方法、装置、设备、系统和智能电视
CN113825023A (zh) * 2021-11-02 2021-12-21 户龙辉 视频文件处理方法、装置、设备及存储介质
CN115379294A (zh) * 2022-08-15 2022-11-22 北京达佳互联信息技术有限公司 图像截取方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105892635A (zh) * 2015-11-18 2016-08-24 乐视网信息技术（北京）股份有限公司 截图实现方法、装置及电子设备
CN106412708A (zh) * 2016-10-21 2017-02-15 上海与德信息技术有限公司 一种视频截图方法及装置
CN106775424A (zh) * 2017-01-13 2017-05-31 维沃移动通信有限公司 一种截屏处理方法及移动终端

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105892635A (zh) * 2015-11-18 2016-08-24 乐视网信息技术（北京）股份有限公司 截图实现方法、装置及电子设备
CN106412708A (zh) * 2016-10-21 2017-02-15 上海与德信息技术有限公司 一种视频截图方法及装置
CN106775424A (zh) * 2017-01-13 2017-05-31 维沃移动通信有限公司 一种截屏处理方法及移动终端

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110110138A (zh) * 2019-04-09 2019-08-09 努比亚技术有限公司 保存方法、移动终端及计算机可读存储介质
CN110110138B (zh) * 2019-04-09 2023-09-19 努比亚技术有限公司 保存方法、移动终端及计算机可读存储介质
WO2020228538A1 (zh) * 2019-05-14 2020-11-19 维沃移动通信有限公司 截图的方法和移动终端
CN111954087A (zh) * 2020-08-20 2020-11-17 腾讯科技（深圳）有限公司 视频中图像的截取方法和装置、存储介质和电子设备
CN111954087B (zh) * 2020-08-20 2021-05-11 腾讯科技（深圳）有限公司 视频中图像的截取方法和装置、存储介质和电子设备
CN112203141A (zh) * 2020-10-12 2021-01-08 广州欢网科技有限责任公司 视频点播内容识别方法、装置、设备、系统和智能电视
CN113825023A (zh) * 2021-11-02 2021-12-21 户龙辉 视频文件处理方法、装置、设备及存储介质
CN113825023B (zh) * 2021-11-02 2023-12-05 户龙辉 视频文件处理方法、装置、设备及存储介质
CN115379294A (zh) * 2022-08-15 2022-11-22 北京达佳互联信息技术有限公司 图像截取方法、装置、电子设备及存储介质
CN115379294B (zh) * 2022-08-15 2023-10-03 北京达佳互联信息技术有限公司 图像截取方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN108616775B (zh) 2020-10-13

Similar Documents

Publication Publication Date Title
CN108616775A (zh) 视频播放时智能截图的方法、装置、存储介质及智能终端
CN107801096B (zh) 视频播放的控制方法、装置、终端设备及存储介质
CN106941625B (zh) 一种移动终端的播放控制方法、装置及移动终端
WO2016045579A1 (zh) 一种应用程序交互控制方法、装置及终端
CN111131884B (zh) 一种视频剪辑的方法、相关装置、设备以及存储介质
US20170192500A1 (en) Method and electronic device for controlling terminal according to eye action
CN108712603B (zh) 一种图像处理方法及移动终端
CN105760102B (zh) 终端交互控制方法、装置及应用程序交互控制方法
CN112104915B (zh) 一种视频数据处理方法、装置及存储介质
CN110557683B (zh) 一种视频播放控制方法及电子设备
CN108521607B (zh) 视频中广告的处理方法、装置、存储介质及智能终端
CN109189986B (zh) 信息推荐方法、装置、电子设备和可读存储介质
CN112004117B (zh) 视频播放方法及装置
CN109005350A (zh) 图像重复拍摄提示方法、装置、存储介质及移动终端
CN112399239B (zh) 视频播放方法及装置
CN109257649B (zh) 一种多媒体文件生成方法及终端设备
CN106776259B (zh) 一种移动终端帧率检测方法、装置及移动终端
CN112532885B (zh) 防抖方法、装置及电子设备
CN105915832A (zh) 一种录制方法和电子设备
CN111988654B (zh) 视频数据对齐方法、装置和电子设备
CN111614990B (zh) 加载时长的获取方法、装置及电子设备
CN111901482B (zh) 功能控制方法、装置、电子设备及可读存储介质
CN112243064B (zh) 音频处理方法及装置
CN108960213A (zh) 目标跟踪方法、装置、存储介质及终端
CN111698532B (zh) 弹幕信息的处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant