CN105430316B - 庭审录像自动控制系统及方法 - Google Patents

Abstract

本发明提供了一种庭审录像自动控制系统及方法，该庭审录像自动控制系统包括信息采集子系统、图像识别子系统、声音识别子系统、控制子系统及录像子系统。信息采集子系统用于采集法庭内的图像数据及声音数据；图像识别子系统用于对所述图像数据进行特征识别，输出第一识别结果至控制子系统，声音识别子系统用于对所述声音数据进行特征识别，输出第二识别结果至控制子系统；所述控制子系统用于根据第一识别结果及第二识别结果控制录像子系统的开启或关闭。本发明能够减少因为法庭工作人员不会开启录像设备导致的没有把庭审录像录制下来，或者是庭审结束后，没有结束录制的情况发生，能够减少垃圾视频文件，节约存储空间。

Description

庭审录像自动控制系统及方法

技术领域

本发明属于自动控制领域，特别涉及一种数字法庭庭审系统中图像录制时的自动开启录制和自动结束录制的庭审录像自动控制系统及方法。

背景技术

数字法庭庭审过程中，需要把庭审视频进行录制、备份，作为庭审资料进行存档。但是在实际使用中，由于全国各个地方的法院的书记员的技术水平与能力参差不齐，有些书记员在开庭过程中，常常没有开启录制开关，导致整个庭审过程没有录制下来；甚至有些书记员在开庭后，启动了视频录制，但是在结束庭审时，没有结束录制，导致整个法庭即使没有任何人员也被录制下来了，录制下来的这些垃圾视频文件占用了大量的硬盘空间。

针对上述，如果单独采用运动图像检测技术，判断图像中是否有运动的物体，主要能检测出有运动的物体，则认为是庭审开始，进行开始录像，如果图像没有检测到运动的图像，就停止录像，可以部分解决问题，无法彻底解决此问题，因为这样的方法会发生误判，例如法院的技术维护人员进行法庭，进行维护期间，甚至是清洁人员打扫卫生，也会出现能检测出具有运动的物体，就开始录像，但是这个时候的录像，并不是真正的庭审需要的录像。

发明内容

本发明提供一种庭审录像自动控制系统及方法，以便减少因为法庭工作人员不会开启录像设备导致的没有把庭审录像录制下来，或者是庭审结束后，没有结束录制，导致系统产生了很多的垃圾视频文件占用存储空间。

为了解决上述技术问题，本发明的一技术方案为提供一种庭审录像自动控制系统，包括信息采集子系统、图像识别子系统、声音识别子系统、控制子系统及录像子系统。

信息采集子系统用于采集法庭内的图像数据及声音数据；

图像识别子系统用于对所述图像数据进行特征识别，输出第一识别结果至控制子系统，声音识别子系统用于对所述声音数据进行特征识别，输出第二识别结果至控制子系统；

控制子系统用于根据第一识别结果及第二识别结果控制录像子系统的开启或关闭。

本发明另提供一种庭审录像自动控制方法，该方法包括：

采集法庭内的图像数据及声音数据；

对所述图像数据进行特征识别，输出第一识别结果，对所述声音数据进行特征识别，输出第二识别结果；

根据所述第一识别结果及所述第二识别结果控制录像子系统的开启或关闭。

本发明提供的庭审录像自动控制系统及方法，通过对法庭内的图像数据及声音数据分别进行特征识别，根据特征识别得到的第一识别结果与第二识别结果控制录像子系统的开启或关闭，从而实现庭审录像的自动控制，节省用户的硬盘空间。结合法院的案件排期系统获得相应法庭的庭审排期信息，比较法庭录像子系统开启时间与该法庭庭审排期信息中的开庭时间之间的差异是否在预定范围内，根据比较结果，确定是否标记录制的录像或产生报警，从而最大程度地避免误录、漏录等问题。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明一实施例的庭审录像自动控制系统结构图；

图2为本发明一实施例的庭审录像控制方法流程图；

图3为本发明另一实施例的庭审录像控制方法流程图；

图4为本发明再一实施例的庭审录像控制方法流程图。

具体实施方式

为了使本发明的技术特点及效果更加明显，下面结合附图对本发明的技术方案做进一步说明，本发明也可有其他不同的具体实例来加以说明或实施，任何本领域技术人员在权利要求范围内做的等同变换均属于本发明的保护范畴。

如图1所示，图1为本发明一实施例的庭审录像自动控制系统结构图。本发明提供的庭审录像自动控制系统基于图像数据识别及声音识别，实现了针对法庭图像录制的自动控制。具体的，庭审录像自动控制系统包括：

信息采集子系统101、图像识别子系统102、声音识别子系统103、控制子系统104及录像子系统105。

信息采集子系统101用于采集法庭内的图像数据及声音数据；

图像识别子系统102用于对所述图像数据进行特征识别，输出第一识别结果至控制子系统；声音识别子系统103用于对所述声音数据进行特征识别，输出第二识别结果至控制子系统。

控制子系统104用于根据第一识别结果及第二识别结果控制录像子系统105的开启或关闭。

本实施例中，信息采集子系统包括摄像机(头)和拾音器，摄像机用于采集法庭内的图像数据，拾音器用于采集法庭内的声音数据。图像识别子系统为基于X86平台的服务器，对输入该系统的图像数据进行识别，识别的区域及识别的具体特征可根据实际情况设置。声音识别子系统也为基于X86平台的服务器，对输入该系统的声音数据进行识别，识别的具体特征可根据实际情况设置。

本实施例所述的图像数据及声音数据为编码处理后的数据，本申请所述的信息采集子系统的设备中内置有编码器，用于把采集的法庭内的图像与声音的模拟信号压缩编码成数字信号，适用于网络传输。当然，若采集子系统不具有编码功能，本申请所述的庭审录像自动控制系统还包括编码器，用于对采集的图像数据及声音数据进行编码处理。

本申请一实施例中，图像识别子系统具体用于对图像数据进行识别，识别控制子系统设置的预设特征，若识别出预设特征且识别出的预设特征达到第一阈值，则第一识别结果为开庭，若没有识别出预设特征且预定次数的识别中都没有识别出预设特征，则第一识别结果为闭庭。

声音识别子系统具体用于对声音数据进行识别，识别控制子系统设置的预设词语，若识别出预设词语且识别出的预设词语达到第二阈值，则第二识别结果为开庭，若没有识别出预设词语且预定次数的识别中都没有识别出预设词语，则第二识别结果为闭庭。

本实施例中，根据预定次数的识别结果判断是否闭庭(预定次数可由控制子系统设定)，能够保证识别结果的准确性，避免由于识别误差较早关闭录像子系统的情况发生。根据一次识别结果判断是否开庭，能够及时开启录像子系统，避免漏录庭审内容的情况发生。本发明其他实施例中，为了保证识别的准确性，也可根据多次识别结果判断是否开庭。

本实施例中，上述预设特征可以为人数，即识别出法台区域椅子上坐着的人数，也可以为法台区域穿制服的人数，或者是法台区域人员的制服或制服上的法徽。第一阈值可以为预设特征种类数和/或预设特征个数。上述预设词语可以为法庭纪律中一些出现频率高的文字术语，如“法庭纪律”、“中华人民共和国”、“民事”、“刑事”、“行政”、“法官”、“开庭”等，预设词语可根据实际需求进行设定。第二阈值可以为预设词语个数。本申请其他实施例中，预设特征及预设词语还可以为其他内容，第一阈值及第二阈值可根据设定的预设特征及预设词语进设置，本申请对预设特征、第一阈值、预设词语及第二阈值的具体取值不做限制。

一般情况下获取的法庭内的图像是一个组合起来的画面，该画面包含了多个摄像头的图像内容，例如包含法台区域、原告区域、被告区域、以及旁听席区域的画面内容，图像识别子系统识别的主要为法台区域(即法官所处的区域)，该法台区域为整个法庭图像的一部分，不是整个图像，为了提升图像识别效率，本申请一实施例中，由控制子系统将法台区域在整个图像中的位置参数提取出来设置给图像识别子系统。如果法台区域即为整个图像区域，则也可通过同样的方法把位置参数设置给图像识别子系统。

下面以一具体实施例来说明图像识别子系统的处理过程，本实施例中，控制子系统设定的预定特征为法台区域座椅上穿法袍佩戴法徽的人，第一阈值为法台区域座椅上穿法袍佩戴法徽的人数。图像识别子系统识别过程为：

图像识别子系统先识别法台上的座椅个数N，每识别出一个座椅更新N，具体的，座椅个数可通过N＝N+1，N初始数值为0来计算；

针对每个座椅，通过模糊识别方法，识别该座椅上是否有人脸运动，根据人脸运动的检测，识别座椅上的人员数目，若第i个座椅上识别到人员，设置p(i)＝1，没有识别到人员，p(i)＝0；

然后针对每个检测到的人员，识别该座椅上的人员是否穿着了法袍，若第i个座椅上人员穿着法袍，设置f(i)＝1，否则设置f(i)＝0；

针对第i个座椅上人员,识别完是否穿法袍后，再识别是否佩戴法徽，若佩戴法徽，则设置h(i)＝1，未佩戴法徽，设置h(i)＝0；

本实施例中，为了避免误差，图像识别子系统及声音识别子系统开启后，每10秒钟识别一次，共识别C次，识别次数C是由控制子系统设置的，每次对识别到的结果进行累积，即C次识别中，第i个座椅上只要有一次识别出座椅上人员佩戴有法徽，则设定h(i)＝1。例如第一次第i个座椅上没有识别到人员的，第二次识别到了人员，则设置p(i)＝1；第一次第i个座椅上人员未识别出穿戴法袍，第二次第i个座椅上识别到穿戴了法袍，同样设置f(i)＝1。

进一步的，引入最小识别次数PT概念，PT可以设置的范围为[1,C],以识别座椅上是否有人为例，设置PT＝1,表示任意有一次识别到人，该座椅上就算识别到人；识别PT＝C，则表示C次识别中每次都能识别到座椅上有人，才算该座椅上有人。

判断法庭内法台区域座椅上穿法袍佩戴法徽的人数与第一阈值V1的差异，若则为开庭，若则判断为未开庭。若预定次数的识别中，如30次(识别时间为5分钟，每10s识别一次)，图像识别子系统都没有识别到任何人员，则判断为闭庭。

下面以一具体实施例说明声音识别子系统的处理过程，本实施例中，控制子系统设定的预定词语为“法庭纪律”、“中华人民共和国”、“刑事”、“民事”、“行政”，第二阈值为上述预定词语的个数。声音识别子系统识别过程为：

根据获取的法庭内的声音数据，识别出对应的文字信息，然后从识别出的文字信息中，逐词与上述预定词语匹配，统计匹配词语个数，若匹配出的词语个数与预定词语个数相同，即达到第二阈值，则声音识别系统的第二识别结果为开庭。若预定次数的识别中，如30次(识别时间为5分钟，每10s识别一次)，声音识别子系统声音识别结果为白噪声，则判断为闭庭。

本申请一实施例中，控制子系统根据第一识别结果及第二识别结果控制录像子系统的开启或关闭进一步包括：控制子系统根据第一识别结果及第二识别结果综合确定当前法庭是否真的开庭，当第一识别结果与第二识别结果都为开庭时，控制子系统确定当前法庭是在开庭，如果该法庭的录像子系统还没有开启，控制子系统控制录像子系统开启；当第一识别结果和/或第二识别结果为闭庭时，控制子系统确定当前法庭未开庭或已结束开庭，如果该法庭的录像子系统未关闭，控制子系统控制录像子系统关闭。

本申请一实施例中，控制子系统控制录像子系统开启后还用于：从法庭排期系统获取开启录像子系统的法庭的庭审排期信息，若庭审排期信息获取不成功，则标记录制的录像或产生报警，若庭审排期信息获取成功，则进一步判断录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值是否在预定范围内，如果录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值不在预定范围内，则标记录制的录像或产生报警。

本发明提供的庭审录像自动控制系统，通过对法庭内的图像数据及声音数据分别进行特征识别，根据特征识别得到的第一识别结果与第二识别结果控制录像子系统的开启或关闭，从而实现庭审录像的自动控制，节省用户的硬盘空间。结合法院的案件排期系统获得相应法庭的庭审排期信息，比较相应法庭的录像子系统开启时间与该法庭庭审排期信息中的开庭时间之间的差异是否在预定范围内，根据比较结果，确定是否标记录制的录像或产生报警，从而最大程度地避免误录、漏录等问题。

如图2所示，图2为本发明一实施例的庭审录像自动控制方法流程图，该方法能实现对法庭图像录制的自动控制。具体的，该方法包括：

步骤201：采集法庭内的图像数据及声音数据；

步骤202：对图像数据进行特征识别，输出第一识别结果，对声音数据进行特征识别，输出第二识别结果；

步骤203：根据第一识别结果及第二识别结果控制录像子系统的开启或关闭。

本申请一实施例中，当采集的法庭内的图像数据及声音数据不为数字信号时，采集法庭内的图像数据及声音数据之后还包括：对采集的图像数据及声音数据进行编码处理，以便网络传输。

本申请一实施例中，如图3所示，步骤202进一步包括：

步骤2021：对图像数据识别控制子系统设置的预设特征。若识别出预设特征且识别出的预设特征达到第一阈值，则第一识别结果为开庭，若未识别出预设特征且预定次数的识别中都没有识别出预设特征，则第一识别结果为闭庭；

步骤2022：对声音数据识别控制子系统设置的预设词语。若识别出预设词语且识别出的预设词语达到第二阈值时，则第二识别结果为开庭，若没有识别出预设词语且预设次数中都没有识别出预设词语，则第二识别结果为闭庭。

复请参阅图3，根据第一识别结果及第二识别结果控制录像子系统的开启或关闭(步骤203)进一步包括：

控制子系统根据第一识别结果及第二识别结果综合确定当前法庭是否真的开庭，当第一识别结果与第二识别结果都为开庭时，控制子系统确定当前法庭是在开庭，如果该法庭的录像子系统还没有开启，控制子系统控制录像子系统开启；

当第一识别结果和第二识别结果只要有一个为闭庭时，控制子系统确定当前法庭未开庭或已结束开庭，如果该法庭的录像子系统未关闭，控制子系统控制录像子系统关闭。

本申请一实施例中，控制子系统确定当前法庭是在开庭后，还要判断接收到第一识别结果及第二识别结果的时间是否在工作日期间，如果接收到第一识别结果及第二识别结果的时间在工作日时间，则控制录像子系统开启，如果接收到第一识别结果及第二识别结果的时间不在工作日时间，则不做处理或开启录像子系统并标记录像。

如图4所述，本申请一实施例中，根据所述第一识别结果及所述第二识别结果控制录像子系统的开启之后还包括：

步骤401：从法庭排期系统获取开启录像子系统的法庭的庭审排期信息；

步骤402：确认该法庭的庭审排期信息是否获取成功，若庭审排期信息获取不成功，则转向步骤403，若庭审排期信息获取成功，则转向步骤404；

步骤403：标记录制的录像或产生报警，产生标记主要用于给法院工作人员一个警告作用；

步骤404：判断该法庭录像子系统的开启时间与该法庭的庭审排期信息中的开庭时间之间的差值DT是否在预定范围内(预定范围可设置)，如DT＝30min，开庭时间为T，录像子系统开启时间t，如果录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值不在预定范围内，即则转向步骤405，若果录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值在预定范围内，即t∈[T-DT,T+DT]，则不做任何处理；

步骤405：标记录制的录像或产生报警。

本发明提供的庭审录像自动控制方法，通过对法庭内的图像数据及声音数据分别进行特征识别，根据特征识别得到的第一识别结果与第二识别结果控制录像子系统的开启或关闭，从而实现庭审录像的自动控制，节省用户的硬盘空间。结合法院的案件排期系统获得相应法庭的庭审排期信息，比较相应法庭的录像子系统开启时间与该法庭庭审排期信息中的开庭时间之间的差异是否在预定范围内，根据比较结果，确定是否标记录制的录像或产生报警，从而最大程度地避免误录、漏录等问题。

本申请一实施例中，控制子系统也接收法庭工作人员输入的开始录制指令和结束录制指令，控制子系统将接收到的指令下发给录像子系统，录像子系统响应指令。

本申请一实施例中，控制子系统对开启的录像子系统进行监控，对非控制子系统根据图像及声音识别结果启动的录制任务，核查该录制任务的法庭信息，同时从法院排期系统中获取该法庭对应的法庭排期信息，若没有匹配出该法庭相应的排期信息，则将信息采集子系统获取的图像数据发送给图像识别子系统进行特征识别，将声音数据发送给声音识别子系统进行特征识别，根据识别结果判断是否为开庭，如果正在开庭，控制子系统不予处理，如果识别结果为闭庭状态，则对录像子系统下发停止录制指令。

本实施例能够避免工作人员开启录制子系统后，忘记关闭录制从而导致垃圾视频的产生。

本申请一实施例中，为了准确对开启的录制子系统进行监控，控制子系统每隔一定时间(可根据需求设定)启动一次图像识别子系统和声音识别子系统，重新对是否继续开庭进行判别。

以上所述仅用于说明本申请的技术方案，任何本领域普通技术人员均可在不违背本发明的精神及范畴下，对上述实施例进行修饰与改变。因此，本发明的权利保护范围应视权利要求范围为准。

Claims (8)

1.一种庭审录像自动控制系统，其特征在于，所述系统包括信息采集子系统、图像识别子系统、声音识别子系统、控制子系统及录像子系统，

信息采集子系统用于采集法庭内的图像数据及声音数据；

图像识别子系统用于对所述图像数据进行特征识别，输出第一识别结果至控制子系统，声音识别子系统用于对所述声音数据进行特征识别，输出第二识别结果至控制子系统；

所述控制子系统用于根据第一识别结果及第二识别结果控制录像子系统的开启或关闭；

所述控制子系统控制所述录像子系统开启后还用于，

从法庭排期系统获取开启录像子系统的法庭的庭审排期信息，若庭审排期信息获取不成功，则标记录制的录像或产生报警，若庭审排期信息获取成功，则进一步判断录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值是否在预定范围内，如果录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值不在预定范围内，则标记录制的录像或产生报警。

2.如权利要求1所述的庭审录像自动控制系统，其特征在于，所述图像识别子系统具体用于对图像数据进行识别，识别所述控制子系统设置的预设特征，若识别出预设特征且识别出的预设特征达到第一阈值，则第一识别结果为开庭，若没有识别出预设特征且预定次数的识别中都没有识别出预设特征，则第一识别结果为闭庭；

所述声音识别模块具体用于对声音数据进行识别，识别所述控制子系统设置的预设词语，若识别出预设词语且识别出的预设词语达到第二阈值，则第二识别结果为开庭，若没有识别出预设词语且所述预定次数的识别中都没有识别出预设词语，则第二识别结果为闭庭。

3.如权利要求2所述的庭审录像自动控制系统，其特征在于，所述控制子系统根据第一识别结果及第二识别结果控制录像子系统的开启或关闭进一步包括，

当所述第一识别结果与所述第二识别结果都为开庭时，控制录像子系统开启；

当所述第一识别结果和/或所述第二识别结果为闭庭时，控制录像子系统关闭。

4.如权利要求1所述的庭审录像自动控制系统，其特征在于，所述系统还包括编码器，用于对采集的图像数据及声音数据进行编码处理。

5.一种庭审录像自动控制方法，其特征在于，所述方法包括，

采集法庭内的图像数据及声音数据；

对所述图像数据进行特征识别，输出第一识别结果，对所述声音数据进行特征识别，输出第二识别结果；

根据所述第一识别结果及所述第二识别结果控制录像子系统的开启或关闭；

根据所述第一识别结果及所述第二识别结果控制录像子系统的开启之后还包括，

从法庭排期系统获取开启录像子系统的法庭的庭审排期信息，若庭审排期信息获取不成功，则标记录制的录像或产生报警，若庭审排期信息获取成功，则进一步判断录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值是否在预定范围内，如果录像子系统的开启时间与庭审排期信息中的开庭时间之间的差值不在预定范围内，则标记录制的录像或产生报警。

6.如权利要求5所述的庭审录像自动控制方法，其特征在于，对所述图像数据进行特征识别，输出第一识别结果，对所述声音数据进行特征识别，输出第二识别结果进一步包括，

对图像数据进行识别，识别所述控制子系统设置的预设特征，若识别出预设特征且识别出的预设特征达到第一阈值，则第一识别结果为开庭，若没有识别出预设特征且预定次数的识别中都没有识别出预设特征，则第一识别结果为闭庭；

对声音数据进行识别，识别所述控制子系统设置的预设词语，若识别出预设词语且识别出的预设词语达到第二阈值，则第二识别结果为开庭，若没有识别出预设词语且预定次数的识别中都没有识别出预设词语，则第二识别结果为闭庭。

7.如权利要求6所述的庭审录像自动控制方法，其特征在于，根据所述第一识别结果及所述第二识别结果控制录像子系统的开启或关闭进一步包括，

当所述第一识别结果与所述第二识别结果都为开庭时，控制录像子系统开启；

当所述第一识别结果和/或所述第二识别结果为闭庭时，控制录像子系统关闭。

8.如权利要求5所述的庭审录像自动控制方法，其特征在于，采集法庭内的图像数据及声音数据之后还包括，

对采集的图像数据及声音数据进行编码处理。