CN105792005A - 录像控制的方法及装置 - Google Patents
录像控制的方法及装置 Download PDFInfo
- Publication number
- CN105792005A CN105792005A CN201410808737.6A CN201410808737A CN105792005A CN 105792005 A CN105792005 A CN 105792005A CN 201410808737 A CN201410808737 A CN 201410808737A CN 105792005 A CN105792005 A CN 105792005A
- Authority
- CN
- China
- Prior art keywords
- video
- control instruction
- control command
- gesture
- phonetic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
本发明公开了一种录像控制的方法,该方法用于对录像控制指令的处理,录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;录像控制的方法包括以下步骤:录像过程中,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;录像数据为侦测到控制指令对应时段的录像数据;当录像数据中存在控制指令时,分析侦测到的控制指令与录像数据中的控制指令是否一致;若是,则根据控制指令控制录像执行相应的操作。本发明还公开了一种录像控制的装置。本发明通过手势控制指令和语音控制指令的双重肯定,来确定操作者所要表达的真实意图,使得用户在录像过程中,对录像过程的控制更加方便、快捷。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及录像控制的方法及装置。
背景技术
随着社会的发展,智能电视得到快速的发展,例如智能电视增加了图片采集设备(如,摄像头)和录音设备等。通过摄像头和录音设备的设置,用户可以进行录像、对当前的工作状态进行语音控制、对当前的工作状态进行手势控制等。但当用户开启录像功能时,由于图像采集设备和语音采集设备都被占用,使得用户只能通过遥控器来实现对智能电视当前工作的控制,不利于用户便捷的控制智能电视。
发明内容
本发明的主要目的在于解决在录像过程中不能通过语音或手势来对录像过程进行操作的技术问题。
为实现上述目的,本发明提供的一种录像控制的方法,所述录像控制的方法用于对录像控制指令的处理,所述录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;
所述录像控制的方法包括以下步骤:
录像过程中,当侦测到所述语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;所述录像数据为侦测到控制指令对应时段的录像数据;
当所述录像数据中存在控制指令时,分析侦测到的控制指令与所述录像数据中的控制指令是否一致;
若是,则根据所述控制指令控制所述录像执行相应的操作。
优选地,当侦测到语音控制指令时,获取与所述语音控制指令对应时段的视频帧;
判断所述视频帧中是否存在与所述语音控制指令一致的手势控制指令;
当所述视频帧中存在与所述语音控制指令一致的手势控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
优选地,所述获取与所述语音控制指令对应时段的视频帧的步骤具体包括:
从所述录像数据中获取与所述语音控制指令对应时段的视频信息;
从所述视频信息中按照预设的时间间隔获取所述视频帧;
将所述视频帧存贮至预设的存储目录。
优选地,当侦测到手势控制指令时,获取与所述手势控制指令对应时段的语音信息;
判断所述语音信息中是否存在与所述手势控制指令一致的语音控制指令;
当所述语音信息中存在与所述手势控制指令一致的语音控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
优选地,所述获取与所述手势控制指令对应时段的语音信息的步骤具体包括:
从所述录像数据中获取与所述手势控制指令对应时段的音频信息;
从所述音频信息中获取预设时间长度的语音信息;
将所述语音信息存储至预设的存储目录。
优选地,在所述当侦测到所述语音控制指令和手势控制指令中的一控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据的步骤之前还包括:
交替循环侦测所述语音控制指令和所述手势控制指令
此外,为实现上述目的,本发明还提供一种录像控制的装置,所述录像控制的装置用于对录像控制指令的处理,所述录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;
所述录像控制的装置包括:
获取模块,用于录像过程中,当侦测到所述语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;所述录像数据为侦测到控制指令对应时段的录像数据;
分析模块,用于当所述录像数据中存在控制指令时,分析侦测到的控制指令与所述录像数据中的控制指令是否一致;
执行模块,用于根据所述控制指令控制所述录像执行相应的操作。
优选地,所述获取模块包括:
第一获取单元,用于当侦测到语音控制指令时,获取与所述语音控制指令对应时段的视频帧;
第一判断单元,判断所述视频帧中是否存在与所述语音控制指令一致的手势控制指令;
第一执行单元,用于当所述视频帧中存在与所述语音控制指令一致的手势控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
优选地,所述第一获取单元具体用于,从所述录像数据中获取与所述语音控制指令对应时段的视频信息;从所述视频信息中按照预设的时间间隔获取所述视频帧;将所述视频帧存贮至预设的存储目录。
优选地,所述获取模块还包括:
第二获取单元,用于当侦测到手势控制指令时,获取与所述手势控制指令对应时段的语音信息;
第二判断单元,判断所述语音信息中是否存在与所述手势控制指令一致的语音控制指令;
第二执行单元,当所述语音信息中存在与所述手势控制指令一致的语音控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
优选地,所述第二获取单元具体用于,从所述录像数据中获取与所述手势控制指令对应时段的音频信息;并从所述音频信息中获取预设时间长度的语音信息;且将所述语音信息存储至预设的存储目录。
优选地,所述录像控制的装置还包括:
侦测模块,用于交替循环侦测所述语音控制指令和所述手势控制指令。
本发明通过在录像过程对控制指令进行侦测,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据;当录像数据中存在控制指令时,分析侦测到的控制指令与录像数据中的控制指令是否一致;如果手势控制指令和语音控制指令所表示的一致,则根据控制指令控制录像执行相应的操作,通过手势控制指令和语音控制指令的双重肯定,来确定操作者所要表达的真实意图,录像过程中,在图片采集设备和录音设备都被占用的情况,实现了通过手势控制指令和语音控制指令来控制录像过程,使得用户在录像过程中,对录像过程的控制更加方便、快捷,有利于用户更好的体验智能电视。
附图说明
图1为本发明录像控制的方法第一实施例的流程示意图;
图2为本发明录像控制的方法第二实施例的流程示意图;
图3为本发明录像控制的方法第三实施例的流程示意图;
图4为本发明录像控制的方法第四实施例的流程示意图;
图5为本发明录像控制的装置第一实施例的功能模块示意图;
图6为本发明录像控制的装置第二实施例的功能模块示意图;
图7为本发明录像控制的装置第三实施例的功能模块示意图;
图8为本发明录像控制的装置第四实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种录像控制的方法,参照图1,图1为本发明录像控制的方法第一实施例的流程示意图。
在一实施例中,录像控制的方法用于对录像控制指令的处理,录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;
录像控制的方法包括以下步骤:
S10:录像过程中,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;录像数据为侦测到控制指令对应时段的录像数据;
本实施例中,以智能电视的录像控制为例,开始录像时,智能电视的系统CPU启动相机应用,系统读取摄像头设备,当读取摄像标准为已经连接时,开启录像应用功能,开始录像。摄像头所摄像到的视频数据发送到录像缓存区,系统将录像缓存区的视频数据发送到显示设备,智能电视的显示模块在荧幕上预览显示录像的图像内容。如此便于用户在录像过程中,实时的可以观察到录像的效果,有利于用户及时的根据显示的内容对录像对象进行调整。具体地,比如:TV系统的CPU读取android驱动层设备是否有识别到摄像头USB插入。当TV系统获取到android的相机功能应用APK已经开启,TV系统将摄像头获取的数据按照颜色空间R,G,B的像素格式存储到存储区01中。TV系统将存储区01的数据传送给预览显示录像的模块,预览模块调用android的视频接口播发显示到layout的相机页面上。
智能电视的系统开启语音接收模块,该模块判断USB话筒或者是无线网的音频信息是否连接,当智能电视的系统发现USB话筒连接时,系统将接收到音频信息转化为数字音频信息,并存储。具体地,当系统检测到USB话筒或者无线网的音频信息连接时,接收到语音信息,并将接收到的语音存贮至预置的存储目录,和视频信息共同构成完成的录像信息;当系统没有接收到USB话筒或者无线网的音频信息连接时,关闭语音接收模块。具体地,比如:TV系统读取语音相关设备的数据,一方面,系统查看是否有USBplug插入,系统读取android设备驱动发现标识为true,当前的USB话筒已经接入,系统继续读取音频PCM数字暂存的区域有音频数据,将音频数据作为语音命令的输入。另一方面,系统读取是否有无线网音频数据,有无线网音频数据,系统将无线网音频数据作为语音命令的输入。
上述摄像头设备的检测及开启,与音频设备的检测及开启没有先后顺序,其开启先后顺序,不限制本发明实现。
智能电视的系统内,预置有语音控制指令和手势控制指令的关联表,如表1所示:
表1语音控制指令和手势控制指令的关联表
同一命令同时对应语音控制指令和手势控制指令,即一个命令有语音含义也有手势含义,例如,“暂停”命令,对应语音控制指令“ZT”,同时对应V字形手势,此时,“ZT”和V字形手势对应,表示相同的命令意义命令。
当摄像头设备和音频设备准备就绪后,就可以开始录像,在录像过程中,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据。即,当侦测到手势控制指令时,获取与该手势控制指令同时录制到语音信息,例如,当侦测到V字形手势时,获取与该V字形手势同时录制的语音信息;当侦测到语音控制指令时,获取与该语音控制指令同时录制到视频信息,例如,当侦测到语音控制指令“ZT”时,获取与“ZT”同时录制的视频信息。
S20:当录像数据中存在控制指令时,分析侦测到的控制指令与录像数据中的控制指令是否一致;
当获取的录像数据中存在控制指令时,即当上述实施例中的语音信息中存在语音控制指令时,判断该语音控制指令是否与侦测到的手势控制指令对应,例如,当语音信息中存在语音控制指令时,判断该语音控制指令是否为与V形手势对应的“ZT”;同理,当视频信息中存在手势控制指令时,判断该手势控制指令是否与侦测到的语音控制指令对应。
S30:当分析侦测到的控制指令与录像数据中的控制指令一致时,根据控制指令控制录像执行相应的操作。
当获得的语音控制指令与侦测到的手势控制指令对应时,根据语音控制指令或手势控制指令控制录像过程,例如,获得的语音控制指令为“ZT”时,与侦测到的手势控制指令V字形手势对应,此时,对录像进行暂停操作;当获得的手势控制指令与侦测到的语音控制指令对应时,根据语音控制指令或手势控制指令控制录像过程,例如,获得的手势控制指令为V字形手势时,与侦测到的语音控制指令“ZT”对应,此时,对录像进行暂停操作。
本实施例中,通过在录像过程对控制指令进行侦测,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据;当录像数据中存在控制指令时,分析侦测到的控制指令与录像数据中的控制指令是否一致;如果手势控制指令和语音控制指令所表示一致,则根据控制指令控制录像执行相应的操作,通过手势控制指令和语音控制指令的双重肯定,来确定操作者所要表达的真实意图,录像过程中,在图片采集设备和录音设备都被占用的情况,实现了通过手势控制指令和语音控制指令来控制录像过程,使得用户在录像过程中,对录像过程的控制更加方便、快捷,有利于用户更好的体验智能电视。当然,在其它实施例中,用户也可以通过语音控制指令和手势控制指令来控制智能电视的一些功能。
参照图2,图2为本发明录像控制的方法第二实施例的流程示意图。上述实施的基础上,在步骤S10之前还包括步骤:
S40:周期循环侦测语音控制指令和手势控制指令;
手势控制指令和语音控制指令周期交替侦测,本实施例中,周期优选为10s,即当侦测手势控制指令时,侦测语音控制指令的语音控制模块休眠,若在周期10s内,没有侦测到手势控制指令,那么,在10s后,侦测手势控制指令的视频控制模块休眠,语音控制模块开始工作;若在周期10s内,侦测到手势控制指令,则唤醒语音控制模块,语音控制模块判断录像数据中是否存在与手势控制指令对应的语音控制指令。若在周期10s内,没有侦测到语音控制指令,那么视频控制模块再次开始工作,语音控制模块开始休眠。
参照图3,图3为本发明录像控制的方法第三实施例的流程示意图。在上述实施例的基础上,下面具体介绍,当侦测到语音控制指令时,如何通过语音控制指令和手势控制指令来控制录像过程。
S11:当侦测到语音控制指令时,获取与语音控制指令对应时段的视频帧;
可以理解的是,获取与语音控制指令对应时段的视频帧的具体步骤包括:从录像数据中获取与语音控制指令对应时段的视频信息;从视频信息中按照预设的时间间隔获取视频帧;将视频帧存贮至预设的存储目录。
具体地,下面以暂停命令为例,语音控制模块在周期10s内侦测到语音控制指令“ZT”时,唤醒视频控制模块,视频控制模块到缓存区内截取录制“ZT”时段的视频信息,并对截取的视频信息进行取帧处理,具体的处理过程如下:
从视频信息中每间隔二分之一秒中去取视频信息的第一幅(第一帧)和中间一幅图片(第三十帧)和最后一幅(第六十帧),并将获取的视频帧存贮至指定的位置,具体地,将获取的第一帧和第六十帧存储至预设的第一存储区,将获取的第三十帧存贮至预设的第二存储区。在与手势控制指令对应的视频帧手势比对前,先将所获得的视频帧进行筛选,具体的筛选方式为,将相邻的两幅视频帧作比较,当比较出的差别在允许的误差范围内时,将比较后的视频帧与预置的视频帧手势进行比对。当然,在其它实施例中,取视频帧的频率可以设置为每隔一秒取一次,或者其它频率。
具体的唤醒过程如下:系统接收到语音控制指令暂停“ZT”后,系统发送持续100ms的低电平给手势控制模块,手势控制模块接收到持续100ms的底电平后被开启。
S21:判断语音信息中是否存在与手势控制指令一致的语音控制指令;
视频帧获取后,系统将获取到的视频帧与预存在数据库中、与手势控制指对应的手势进行比较,本实施例中,将获取的视频帧与表1中,与“ZT”对应的手势进行比对,即将视频帧与V字形手势进行比对。
S31:当所述语音信息中存在与所述手势控制指令一致的语音控制指令时,根据所述语音控制指令控制所述录像执行相应的操作;当语音信息中不存在与所述手势控制指令一致的语音控制指令时,停止控制指令读取,不对录像执行任何操作。
具体地,将获取的视频与手势控制指令比对,如比较发现,获取的视频帧有与手势控制指令手势相同的图片,智能电视的系统则执行语音控制指令“ZT”或对应的手势控制控制指令,即对录像过程进行暂停操作。
参照图4,图4为本发明录像控制的方法第四实施例的流程示意图。在上述实施例的基础上,下面具体介绍,当侦测到手势控制指令时,如何通过手势控制指令和语音控制指令来控制录像过程。
S12:当侦测到手势控制指令时,从录像数据中获取与手势控制指令对应时段的音频信息;
可以理解的是,从录像数据中获取与手势控制指令对应时段的音频信息具体包括:从音频信息中获取预设时间长度的语音信息;将语音信息存储至预设的存储目录。
具体地,下面以暂停命令为例,手势控制模块在周期10s内侦测到手势控制指令V字形手势时,唤醒语音控制模块,语音控制模块到缓存区内截取录制V字形手势时段的语音信息,并对截取的语音信息进行分析处理,具体的处理过程如下:
智能电视系统发送中断信号(命令)唤醒语音控制模块后,语音控制模块将邻近按照中断收到的时间开始,往后持续2s的音频信息从音频缓冲区域读取,即从录像过程中所录制的音频信息中,从对应侦测到V字形手势的时刻开始,将往后2s的音频信息读取出来,并将读取的语音信息存贮,同时发送到语音分析模块进行分析。
具体的唤醒过程,举例如下,当手势控制模块搜寻图片V字形手势表示当前为暂停后,发送持续500ms的高电平给语音控制系统,语音控制系统接收到持续500ms的高电平后,语音系统将语音控制模块开启,语音控制模块将20500ms的语音信息读取出来。
S22:判断语音信息中是否存在与手势控制指令一致的语音控制指令;
首先要读取的语音信息进行分析,再判断语音信息中是否包含与所侦测到的手势控制指令对应的语音控制指令,判断的方式为将获取的语音信息与语音控制指令进行比对。具体地,分析语音信息,先将读取的语音信息通过分析模块进行分析;根据分析结果判断语音信息中是否包含语音控制指令;当语音信息中包含语音控制指令时,系统将获取到的语音信息与语音控制指令进行比较,本实施例中,将读取的语音信息表1中,与V字形手势对应的语音控制指令进行比对,即将语音信息与“ZT”进行比对。
S32:当语音信息中存在与所述手势控制指令一致的语音控制指令时,根据语音控制指令控制录像执行相应的操作,当语音信息中不存在与所述手势控制指令一致的语音控制指令时,结束控制指令的判断,不对录像过程进行操作。
具体地,将获取的语音信箱与语音控制指令比对,如比较发现,获取的语音信息有与语音控制指令相同,智能电视的系统则执行语音控制指令“ZT”或对应的手势控制指令,即对录像过程进行暂停操作。
本发明提供一种录像控制的装置,参照图5,图5为本发明录像控制的装置第一实施例的结构示意图。
在一实施例中,录像控制的方法用于对录像控制指令的处理,录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;
录像控制的方法包括以下步骤:
获取模块10,用于录像过程中,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;录像数据为侦测到控制指令对应时段的录像数据;
本实施例中,以智能电视的录像控制为例,开始录像时,智能电视的系统CPU启动相机应用,系统读取摄像头设备,当读取摄像标准为已经连接时,开启录像应用功能,开始录像。摄像头所摄像到的视频数据发送到录像缓存区,系统将录像缓存区的视频数据发送到显示设备,智能电视的显示模块在荧幕上预览显示录像的图像内容。如此便于用户在录像过程中,实时的可以观察到录像的效果,有利于用户及时的根据显示的内容对录像对象进行调整。具体地,比如:TV系统的CPU读取android驱动层设备是否有识别到摄像头USB插入。当TV系统获取到android的相机功能应用APK已经开启,TV系统将摄像头获取的数据按照颜色空间R,G,B的像素格式存储到存储区01中。TV系统将存储区01的数据传送给预览显示录像的模块,预览模块调用android的视频接口播发显示到layout的相机页面上。
智能电视的系统开启语音接收模块,该模块判断USB话筒或者是无线网的音频信息是否连接,当智能电视的系统发现USB话筒连接时,系统将接收到音频信息转化为数字音频信息,并存储。具体地,当系统检测到USB话筒或者无线网的音频信息连接时,接收到语音信息,并将接收到的语音存贮至预置的存储目录,和视频信息共同构成完成的录像信息;当系统没有接收到USB话筒或者无线网的音频信息连接时,关闭语音接收模块。具体地,比如:TV系统读取语音相关设备的数据,一方面,系统查看是否有USBplug插入,系统读取android设备驱动发现标识为true,当前的USB话筒已经接入,系统继续读取音频PCM数字暂存的区域有音频数据,将音频数据作为语音命令的输入。另一方面,系统读取是否有无线网音频数据,有无线网音频数据,系统将无线网音频数据作为语音命令的输入。
上述摄像头设备的检测及开启,与音频设备的检测及开启没有先后顺序,其开启先后顺序,不限制本发明实现。
智能电视的系统内,预置有语音控制指令和手势控制指令的关联表,如表1所示:
表1语音控制指令和手势控制指令的关联表
同一命令同时对应语音控制指令和手势控制指令,即一个命令有语音含义也有手势含义,例如,“暂停”命令,对应语音控制指令“ZT”,同时对应V字形手势,此时,“ZT”和V字形手势对应,表示相同的命令意义命令。
当摄像头设备和音频设备准备就绪后,就可以开始录像,在录像过程中,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据。即,当侦测到手势控制指令时,获取与该手势控制指令同时录制到语音信息,例如,当侦测到V字形手势时,获取与该V字形手势同时录制的语音信息;当侦测到语音控制指令时,获取与该语音控制指令同时录制到视频信息,例如,当侦测到语音控制指令“ZT”时,获取与“ZT”同时录制的视频信息。
分析模块20,用于当录像数据中存在控制指令时,分析侦测到的控制指令与录像数据中的控制指令是否一致;
当获取的录像数据中存在控制指令时,即当上述实施例中的语音信息中存在语音控制指令时,判断该语音控制指令是否与侦测到的手势控制指令对应,例如,当语音信息中存在语音控制指令时,判断该语音控制指令是否为与V形手势对应的“ZT”;同理,当视频信息中存在手势控制指令时,判断该手势控制指令是否与侦测到的语音控制指令对应。
执行模块30,用于当则根据控制指令控制录像执行相应的操作。
当获得的语音控制指令与侦测到的手势控制指令对应时,根据语音控制指令或手势控制指令控制录像过程,例如,获得的语音控制指令为“ZT”时,与侦测到的手势控制指令V字形手势对应,此时,对录像进行暂停操作;当获得的手势控制指令与侦测到的语音控制指令对应时,根据语音控制指令或手势控制指令控制录像过程,例如,获得的手势控制指令为V字形手势时,与侦测到的语音控制指令“ZT”对应,此时,对录像进行暂停操作。
本实施例中,通过在录像过程对控制指令进行侦测,当侦测到语音控制指令和手势控制指令中的一种控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据;当录像数据中存在控制指令时,分析侦测到的控制指令与录像数据中的控制指令是否一致;如果手势控制指令和语音控制指令所表示一致,则根据控制指令控制录像执行相应的操作,通过手势控制指令和语音控制指令的双重肯定,来确定操作者所要表达的真实意图,录像过程中,在图片采集设备和录音设备都被占用的情况,实现了通过手势控制指令和语音控制指令来控制录像过程,使得用户在录像过程中,对录像过程的控制更加方便、快捷,有利于用户更好的体验智能电视。当然,在其它实施例中,用户也可以通过语音控制指令和手势控制指令来控制智能电视的一些功能。
参照图6,图6为本发明录像控制的装置第二实施例的结构示意图。上述实施的基础上,录像控制的装置还包括:
侦测模块40,用于交替循环侦测语音控制指令和手势控制指令;
手势控制指令和语音控制指令周期交替侦测,本实施例中,周期优选为10s,即当侦测手势控制指令时,侦测语音控制指令的语音控制模块休眠,若在周期10s内,没有侦测到手势控制指令,那么,在10s后,侦测手势控制指令的视频控制模块休眠,语音控制模块开始工作;若在周期10s内,侦测到手势控制指令,则唤醒语音控制模块,语音控制模块判断录像数据中是否存在与手势控制指令对应的语音控制指令。若在周期10s内,没有侦测到语音控制指令,那么视频控制模块再次开始工作,语音控制模块开始休眠。
参照图7,图7为本发明录像控制的装置第三实施例的结构示意图。在上述实施例的基础上,下面具体介绍,当侦测到语音控制指令时,如何通过语音控制指令和手势控制指令来控制录像过程。
第一获取单元11,用于当侦测到语音控制指令时,获取与语音控制指令对应时段的视频帧;
可以理解的是,获取与语音控制指令对应时段的视频帧具体地操作方式可以为:从录像数据中获取与语音控制指令对应时段的视频信息;从视频信息中按照预设的时间间隔获取视频帧;将视频帧存贮至预设的存储目录。
具体地,下面以暂停命令为例,语音控制模块在周期10s内侦测到语音控制指令“ZT”时,唤醒视频控制模块,视频控制模块到缓存区内截取录制“ZT”时段的视频信息,并对截取的视频信息进行取帧处理,具体的处理过程如下:
从视频信息中每间隔二分之一秒中去取视频信息的第一幅(第一帧)和中间一幅图片(第三十帧)和最后一幅(第六十帧),并将获取的视频帧存贮至指定的位置,具体地,将获取的第一帧和第六十帧存储至预设的第一存储区,将获取的第三十帧存贮至预设的第二存储区。在与手势控制指令对应的视频帧手势比对前,先将所获得的视频帧进行筛选,具体的筛选方式为,将相邻的两幅视频帧作比较,当比较出的差别在允许的误差范围内时,将比较后的视频帧与预置的视频帧手势进行比对。当然,在其它实施例中,取视频帧的频率可以设置为每隔一秒取一次,或者其它频率。
具体的唤醒过程如下:系统接收到语音控制指令暂停“ZT”后,系统发送持续100ms的低电平给手势控制模块,手势控制模块接收到持续100ms的底电平后被开启。
第一判断单元21,用于判断所述视频帧中是否存在与所述语音控制指令一致的手势控制指令;
视频帧获取后,系统将获取到的视频帧与预存在数据库中、与手势控制指对应的手势进行比较,本实施例中,将获取的视频帧与表1中,与“ZT”对应的手势进行比对,即将视频帧与V字形手势进行比对。
第一执行单元31,用于当所述视频帧中存在与所述语音控制指令一致的手势控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
将获取的视频与手势控制指令比对,如比较发现,获取的视频帧有与手势控制指令手势相同的图片,智能电视的系统则执行语音控制指令“ZT”或对应的手势控制控制指令,即对录像过程进行暂停操作。
参照图8,图8为本发明录像控制的装置第四实施例的结构示意图。在上述实施例的基础上,下面具体介绍,当侦测到手势控制指令时,如何通过手势控制指令和语音控制指令来控制录像过程。
第二获取单元12,用于当侦测到手势控制指令时,获取与所述手势控制指令对应时段的语音信息;
可以理解的是,获取与所述手势控制指令对应时段的语音信息具体地操作方式可以为:从录像数据中获取与手势控制指令对应时段的音频信息;从音频信息中获取预设时间长度的语音信息;将语音信息存储至预设的存储目录。
具体地,下面以暂停命令为例,手势控制模块在周期10s内侦测到手势控制指令V字形手势时,唤醒语音控制模块,语音控制模块到缓存区内截取录制V字形手势时段的语音信息,并对截取的语音信息进行分析处理,具体的处理过程如下:
智能电视系统发送中断信号(命令)唤醒语音控制模块后,语音控制模块将邻近按照中断收到的时间开始,往后持续2s的音频信息从音频缓冲区域读取,即从录像过程中所录制的音频信息中,从对应侦测到V字形手势的时刻开始,将往后2s的音频信息读取出来,并将读取的语音信息存贮,同时发送到语音分析模块进行分析。
具体的唤醒过程,举例如下,当手势控制模块搜寻图片V字形手势表示当前为暂停后,发送持续500ms的高电平给语音控制系统,语音控制系统接收到持续500ms的高电平后,语音系统将语音控制模块开启,语音控制模块将20500ms的语音信息读取出来。
第二判断单元22,用于判断所述语音信息中是否存在与所述手势控制指令一致的语音控制指令;
首先要读取的语音信息进行分析,再判断语音信息中是否包含与所侦测到的手势控制指令对应的语音控制指令,判断的方式为将获取的语音信息与语音控制指令进行比对。具体地,分析语音信息,先将读取的语音信息通过分析模块进行分析;根据分析结果判断语音信息中是否包含语音控制指令;当语音信息中包含语音控制指令时,系统将获取到的语音信息与语音控制指令进行比较,本实施例中,将读取的语音信息表1中,与V字形手势对应的语音控制指令进行比对,即将语音信息与“ZT”进行比对。
第二执行单元32,用于当所述语音信息中存在与所述手势控制指令一致的语音控制指令时,根据语音控制指令控制录像执行相应的操作。
将获取的语音信箱与语音控制指令比对,如比较发现,获取的语音信息有与语音控制指令相同,智能电视的系统则执行语音控制指令“ZT”或对应的手势控制指令,即对录像过程进行暂停操作。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种录像控制的方法,其特征在于,所述录像控制的方法用于对录像控制指令的处理,所述录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;
所述录像控制的方法包括以下步骤:
录像过程中,当侦测到所述语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;所述录像数据为侦测到控制指令对应时段的录像数据;
当所述录像数据中存在控制指令时,分析侦测到的控制指令与所述录像数据中的控制指令是否一致;
若是,则根据所述控制指令控制所述录像执行相应的操作。
2.如权利要求1所述的录像控制的方法,其特征在于,
当侦测到语音控制指令时,获取与所述语音控制指令对应时段的视频帧;
判断所述视频帧中是否存在与所述语音控制指令一致的手势控制指令;
当所述视频帧中存在与所述语音控制指令一致的手势控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
3.如权利要求2所述的录像控制的方法,其特征在于,所述获取与所述语音控制指令对应时段的视频帧的步骤具体包括:
从所述录像数据中获取与所述语音控制指令对应时段的视频信息;
从所述视频信息中按照预设的时间间隔获取所述视频帧;
将所述视频帧存贮至预设的存储目录。
4.如权利要求1所述的录像控制的方法,其特征在于,
当侦测到手势控制指令时,获取与所述手势控制指令对应时段的语音信息;
判断所述语音信息中是否存在与所述手势控制指令一致的语音控制指令;
当所述语音信息中存在与所述手势控制指令一致的语音控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
5.如权利要求1所述的录像控制的方法,其特征在于,在所述当侦测到所述语音控制指令和手势控制指令中的一控制指令时,获取与该控制指令对应时段的、另一控制指令对应的录像数据的步骤之前还包括:
交替循环侦测所述语音控制指令和所述手势控制指令。
6.一种录像控制的装置,其特征在于,所述录像控制的装置用于对录像控制指令的处理,所述录像控制指令包括通过音频输入的语音控制指令和通过视频输入的手势控制指令;
所述录像控制的装置包括:
获取模块,用于录像过程中,当侦测到所述语音控制指令和手势控制指令中的一种控制指令时,获取另一种控制指令对应的录像数据;所述录像数据为侦测到控制指令对应时段的录像数据;
分析模块,用于当所述录像数据中存在控制指令时,分析侦测到的控制指令与所述录像数据中的控制指令是否一致;
执行模块,用于根据所述控制指令控制所述录像执行相应的操作。
7.如权利要求6所述的录像控制的装置,其特征在于,所述获取模块包括:
第一获取单元,用于当侦测到语音控制指令时,获取与所述语音控制指令对应时段的视频帧;
第一判断单元,判断所述视频帧中是否存在与所述语音控制指令一致的手势控制指令;
第一执行单元,用于当所述视频帧中存在与所述语音控制指令一致的手势控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
8.如权利要求7所述的录像控制的装置,其特征在于,所述第一获取单元具体用于,从所述录像数据中获取与所述语音控制指令对应时段的视频信息;从所述视频信息中按照预设的时间间隔获取所述视频帧;将所述视频帧存贮至预设的存储目录。
9.如权利要求6所述的录像控制的装置,其特征在于,所述获取模块还包括:
第二获取单元,用于当侦测到手势控制指令时,获取与所述手势控制指令对应时段的语音信息;
第二判断单元,判断所述语音信息中是否存在与所述手势控制指令一致的语音控制指令;
第二执行单元,当所述语音信息中存在与所述手势控制指令一致的语音控制指令时,根据所述语音控制指令控制所述录像执行相应的操作。
10.如权利要求6所述的录像控制的装置,其特征在于,所述录像控制的装置还包括:
侦测模块,用于交替循环侦测所述语音控制指令和所述手势控制指令。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410808737.6A CN105792005B (zh) | 2014-12-22 | 2014-12-22 | 录像控制的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410808737.6A CN105792005B (zh) | 2014-12-22 | 2014-12-22 | 录像控制的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105792005A true CN105792005A (zh) | 2016-07-20 |
CN105792005B CN105792005B (zh) | 2019-05-14 |
Family
ID=56386489
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410808737.6A Active CN105792005B (zh) | 2014-12-22 | 2014-12-22 | 录像控制的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105792005B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106231196A (zh) * | 2016-08-16 | 2016-12-14 | 北京金山安全软件有限公司 | 一种视频拍摄控制方法、装置及电子设备 |
CN112163974A (zh) * | 2020-08-24 | 2021-01-01 | 南京巨鲨显示科技有限公司 | 一种手术采集学习分享方法及其系统 |
CN116389694A (zh) * | 2023-06-05 | 2023-07-04 | 河北思恒电子科技有限公司 | 一种基于人工智能的视频监控方法和视频监控机器人 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008069519A1 (en) * | 2006-12-04 | 2008-06-12 | Electronics And Telecommunications Research Institute | Gesture/speech integrated recognition system and method |
CN102306051A (zh) * | 2010-06-18 | 2012-01-04 | 微软公司 | 复合姿势-语音命令 |
US20120112995A1 (en) * | 2010-11-09 | 2012-05-10 | Yoshinori Maeda | Information Processing Apparatus, Information Processing Method, and Computer-Readable Storage Medium |
CN102801924A (zh) * | 2012-07-20 | 2012-11-28 | 合肥工业大学 | 一种基于Kinect的电视节目主持互动系统 |
CN103034323A (zh) * | 2011-09-30 | 2013-04-10 | 德信互动科技(北京)有限公司 | 人机互动系统和方法 |
CN103713732A (zh) * | 2012-09-28 | 2014-04-09 | 王潮 | 一种个人随身装置 |
CN103731711A (zh) * | 2013-12-27 | 2014-04-16 | 乐视网信息技术(北京)股份有限公司 | 智能电视对于操作的执行方法和系统 |
-
2014
- 2014-12-22 CN CN201410808737.6A patent/CN105792005B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008069519A1 (en) * | 2006-12-04 | 2008-06-12 | Electronics And Telecommunications Research Institute | Gesture/speech integrated recognition system and method |
CN102306051A (zh) * | 2010-06-18 | 2012-01-04 | 微软公司 | 复合姿势-语音命令 |
US20120112995A1 (en) * | 2010-11-09 | 2012-05-10 | Yoshinori Maeda | Information Processing Apparatus, Information Processing Method, and Computer-Readable Storage Medium |
CN103034323A (zh) * | 2011-09-30 | 2013-04-10 | 德信互动科技(北京)有限公司 | 人机互动系统和方法 |
CN102801924A (zh) * | 2012-07-20 | 2012-11-28 | 合肥工业大学 | 一种基于Kinect的电视节目主持互动系统 |
CN103713732A (zh) * | 2012-09-28 | 2014-04-09 | 王潮 | 一种个人随身装置 |
CN103731711A (zh) * | 2013-12-27 | 2014-04-16 | 乐视网信息技术(北京)股份有限公司 | 智能电视对于操作的执行方法和系统 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106231196A (zh) * | 2016-08-16 | 2016-12-14 | 北京金山安全软件有限公司 | 一种视频拍摄控制方法、装置及电子设备 |
CN112163974A (zh) * | 2020-08-24 | 2021-01-01 | 南京巨鲨显示科技有限公司 | 一种手术采集学习分享方法及其系统 |
CN116389694A (zh) * | 2023-06-05 | 2023-07-04 | 河北思恒电子科技有限公司 | 一种基于人工智能的视频监控方法和视频监控机器人 |
Also Published As
Publication number | Publication date |
---|---|
CN105792005B (zh) | 2019-05-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2757771B1 (en) | Image pickup apparatus, remote control apparatus, and methods of controlling image pickup apparatus and remote control apparatus | |
US20020144259A1 (en) | Method and apparatus for controlling a media player based on user activity | |
CN104519261B (zh) | 一种信息处理方法及电子设备 | |
WO2014106384A1 (zh) | 一种监控录像信息提供方法、装置及视频监控系统 | |
CN105391964B (zh) | 一种视频数据处理方法和装置 | |
US20100066855A1 (en) | Image display apparatus and detection method | |
WO2019218656A1 (zh) | 一种智能电视、其截屏应用方法及存储介质 | |
EP2755395A2 (en) | Method for compressing image data collected by camera and electronic device for supporting the method | |
CN103795923A (zh) | 一种摄像设备的拍摄控制方法和摄像设备 | |
CN113542610A (zh) | 拍摄方法、移动终端及存储介质 | |
CN105792005A (zh) | 录像控制的方法及装置 | |
CN104519351A (zh) | 一种机顶盒自动测试方法 | |
CN104580874A (zh) | 一种摄像设备及其实现拍照的方法 | |
US8363886B2 (en) | Image processing apparatus for providing metadata to captured image and method thereof | |
CN107851129B (zh) | 信息处理装置、信息处理方法和程序 | |
KR101949218B1 (ko) | 휴대 단말기의 이미지 촬영 방법 및 장치 | |
CN113556492A (zh) | 缩略图生成方法、移动终端及可读存储介质 | |
US20160066030A1 (en) | Method and apparatus for requesting data, and method and apparatus for obtaining data | |
US20110279224A1 (en) | Remote control method and apparatus using smartphone | |
CN104837020B (zh) | 播放视频的方法和装置 | |
CN107800943B (zh) | 一种摄像系统及其控制方法 | |
US10013949B2 (en) | Terminal device | |
JP2016009896A (ja) | 映像監視システム及び映像監視システムの映像検索方法 | |
CN103297698A (zh) | 移动终端摄像模式功耗调节方法 | |
CN102572233A (zh) | 电子相机 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |