CN111083397B - 录播画面切换方法、系统、可读存储介质和设备 - Google Patents

录播画面切换方法、系统、可读存储介质和设备 Download PDF

Info

Publication number
CN111083397B
CN111083397B CN201911280791.7A CN201911280791A CN111083397B CN 111083397 B CN111083397 B CN 111083397B CN 201911280791 A CN201911280791 A CN 201911280791A CN 111083397 B CN111083397 B CN 111083397B
Authority
CN
China
Prior art keywords
picture
recorded broadcast
recorded
broadcast picture
speaker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911280791.7A
Other languages
English (en)
Other versions
CN111083397A (zh
Inventor
张晓慧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN201911280791.7A priority Critical patent/CN111083397B/zh
Publication of CN111083397A publication Critical patent/CN111083397A/zh
Application granted granted Critical
Publication of CN111083397B publication Critical patent/CN111083397B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection

Abstract

本发明涉及一种录播画面切换方法、系统、可读存储介质和设备,属于视频图像处理技术领域,对录播场景进行不同角度的拍摄,获取各个不同角度的录播画面,并轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。

Description

录播画面切换方法、系统、可读存储介质和设备
技术领域
本发明涉及视频图像处理技术领域,特别是涉及一种录播画面切换方法、系统、可读存储介质和设备。
背景技术
在多媒体应用中,人们在使用录播系统时,除了追求更高的视频画面品质及全自动化外,视频播放中更准确的角色切换也是人们不断追求的潜在品质。
传统的录播切换系统分为:人工手动导播和自动切换导播。
人工手动导播是人员手动进行操作,对导播画面进行切换;自动切换导播一般可以通过音视频相结合的检测方法产生视频切换信号,触发导播画面切换。
在实现本发明技术方案的过程中,发明人发现传统技术中存在以下问题:人工手动导播无法实现自动化,将人解脱出来;自动切换导播中,将音视频相结合的方法,在某一资源画面长期占主画面的情况下,难以通过观看导播画面兼顾到其它场景可能存在的情况。在多媒体教学应用场景中,如当教师特写长期占主画面时,这段时间一直难以观察到学生全景。
因此,传统的录播切换系统存在导播的某一画面长时间占主画面时难以观看兼顾其他画面的问题。
发明内容
基于此,有必要针对传统的录播切换系统存在导播的某一画面长时间占主画面时难以观看兼顾其他画面的问题,提供一种录播画面切换方法、系统、可读存储介质和设备。
一种录播画面切换方法,包括以下步骤:
获取录播场景各个不同角度的录播画面,对各录播画面进行轮循显示;
在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
若是,显示待切换的录播画面。
根据上述的录播画面切换方法,其是对录播场景进行不同角度的拍摄,获取各个不同角度的录播画面,并轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;在实际应用中,用户会需要观看某一特定录播画面中的场景,或者某一特定录播画面中出现重要事件,需要着重观察,此时会触发产生对应此录播画面的切换信号,但并不对录播画面立即进行切换,而是根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
在其中一个实施例中,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面的步骤包括以下步骤:
若待切换的录播画面的优先级高于当前显示的录播画面的优先级,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最小显示时间,若是,切换画面;
若待切换的录播画面的优先级低于当前显示的录播画面的优先级,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最大显示时间,若是,切换画面。
在其中一个实施例中,对各录播画面进行轮循显示的步骤包括以下步骤:
获取各录播画面的最大显示时间,根据对应的最大显示时间轮循显示各录播画面;
或者,获取各录播画面的最小显示时间,根据对应的最小显示时间轮循显示各录播画面;
或者,根据预设时间轮循显示各录播画面,预设时间在最小显示时间和最大显示时间之间。
在其中一个实施例中,对各录播画面进行轮循显示的步骤包括以下步骤:
在显示屏幕的主画面轮循显示各录播画面,在显示屏幕的子画面上显示各录播画面,主画面和子画面同时显示在显示屏幕上,子画面的显示比例小于主画面的显示比例。
在其中一个实施例中,各录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种。
在其中一个实施例中,主讲人全景画面、参与人全景画面、主讲人特写画面、参与人特写画面和主讲内容展示画面的优先级依次递增;
对各录播画面进行轮循显示的步骤包括以下步骤:
对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示;
在显示待切换的录播画面的步骤之后,还包括以下步骤:
在待切换的录播画面显示时间达到待切换的录播画面的最大显示时间后,对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示。
在其中一个实施例中,获得主讲人特写画面的切换信号的步骤包括以下步骤:
检测主讲区域画面中是否存在主讲人,若是,采集主讲区域的音频数据,检测音频数据中是否存在目标语音;
若是,生成主讲人特写画面的切换信号。
在其中一个实施例中,检测主讲区域画面中是否存在主讲人的步骤包括以下步骤:
检测主讲区域画面中是否存在人脸,若是,将检测到的人脸与预设的数据库中的人脸进行数据对比,若两者相匹配,确定主讲区域画面中存在主讲人;
检测音频数据中是否存在目标语音的步骤包括以下步骤:
检测音频数据是否对应数据库保存的语句样式,若是,确定音频数据中存在目标语音。
在其中一个实施例中,录播画面切换方法还包括以下步骤:
根据目标人物检测算法在主讲区域画面中识别目标人物,并判断目标人物是否存在人脸;
若是,判断距离目标人物的人脸预设范围内是否存在预设形状的物体;
若是,对目标人物的人脸进行数据采集,并将目标人物的人脸数据存入数据库;
根据音频识别算法在主讲区域的音频数据中识别语句,若语句符合预设规则,将语句的语句样式并存入数据库。
在其中一个实施例中,在将目标人物的人脸数据和语句样式存入数据库的步骤之后,还包括以下步骤:生成主讲人特写画面的切换信号。
一种录播画面切换系统,包括:
画面轮询显示单元,用于获取录播场景各个不同角度的录播画面,对各录播画面进行轮循显示;
画面切换判断单元,用于在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
画面切换执行单元,用于在确定切换画面时,显示待切换的录播画面。
根据上述的录播画面切换系统,其是对录播场景进行不同角度的拍摄,画面轮询显示单元获取各个不同角度的录播画面,并轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;在实际应用中,用户会需要观看某一特定录播画面中的场景,或者某一特定录播画面中出现重要事件,需要着重观察,此时会触发产生对应此录播画面的切换信号,但并不对录播画面立即进行切换,画面切换判断单元根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后,画面切换执行单元才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
在其中一个实施例中,画面切换判断单元还用于在待切换的录播画面的优先级高于当前显示的录播画面的优先级时,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最小显示时间,若是,切换画面;
画面切换判断单元还用于在待切换的录播画面的优先级低于当前显示的录播画面的优先级时,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最大显示时间,若是,切换画面。
在其中一个实施例中,画面轮询显示单元还用于获取各录播画面的最大显示时间,根据对应的最大显示时间轮循显示各录播画面;或者,获取各录播画面的最小显示时间,根据对应的最小显示时间轮循显示各录播画面;或者,根据预设时间轮循显示各录播画面,预设时间在最小显示时间和最大显示时间之间。
在其中一个实施例中,画面轮询显示单元还用于在显示屏幕的主画面轮循显示各录播画面,在显示屏幕的子画面上显示各录播画面,主画面和子画面同时显示在显示屏幕上,子画面的显示比例小于主画面的显示比例。
在其中一个实施例中,各录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种。
在其中一个实施例中,主讲人全景画面、参与人全景画面、主讲人特写画面、参与人特写画面和主讲内容展示画面的优先级依次递增;
画面轮询显示单元还用于对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示;
在画面切换执行单元执行显示待切换的录播画面的操作之后,画面轮询显示单元还用于在待切换的录播画面显示时间达到待切换的录播画面的最大显示时间后,对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示。
在其中一个实施例中,录播画面切换系统还包括切换信号产生单元,用于检测主讲区域画面中是否存在主讲人,若是,采集主讲区域的音频数据,检测音频数据中是否存在目标语音;若是,生成主讲人特写画面的切换信号。
在其中一个实施例中,切换信号产生单元还用于检测主讲区域画面中是否存在人脸,若是,将检测到的人脸与预设的数据库中的人脸进行数据对比,若两者相匹配,确定主讲区域画面中存在主讲人;
切换信号产生单元还用于检测音频数据是否对应数据库保存的语句样式,若是,确定音频数据中存在目标语音。
在其中一个实施例中,录播画面切换系统还包括数据动态获取单元,用于根据目标人物检测算法在主讲区域画面中识别目标人物,并判断目标人物是否存在人脸;若是,判断距离目标人物的人脸预设范围内是否存在预设形状的物体;若是,对目标人物的人脸进行数据采集,并将目标人物的人脸数据存入数据库;
数据动态获取单元还用于根据音频识别算法在主讲区域的音频数据中识别语句,若语句符合预设规则,将语句的语句样式并存入数据库。
在其中一个实施例中,切换信号产生单元还用于在数据动态获取单元将目标人物的人脸数据和语句样式存入数据库之后,生成主讲人特写画面的切换信号。
一种录播画面切换设备,包括多目摄像机、存储器和处理器;
多目摄像机用于对录播场景进行各个不同角度的拍摄;
存储器用于存储机器可执行指令;
处理器用于控制多目摄像机,其中,机器可执行指令的执行使处理器:
获取录播场景各个不同角度的录播画面,对各录播画面进行轮循显示;
在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
若是,显示待切换的录播画面。
根据上述的录播画面切换设备,其包括多目摄像机、存储器和处理器,多目摄像机可以对录播场景进行不同角度的拍摄,处理器调用执行存储器中的机器可执行指令,通过控制多目摄像机获取各个不同角度的录播画面,轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;在实际应用中,用户会需要观看某一特定录播画面中的场景,或者某一特定录播画面中出现重要事件,需要着重观察,此时处理器会触发产生对应此录播画面的切换信号,但并不对录播画面立即进行切换,而是根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
一种可读存储介质,其上存储有可执行程序,可执行程序被处理器执行时实现上述的录播画面切换方法的步骤。
上述可读存储介质,通过其存储的可执行程序,可以轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
附图说明
图1为一个实施例中的录播画面切换方法的应用场景示意图;
图2为一个实施例中的录播画面切换方法的流程示意图;
图3为一个实施例中的录播画面在系统界面上的显示示意图;
图4为一个实施例中的录播画面切换在系统界面上的显示示意图;
图5为一个实施例中的主画面上切入子画面的切换流程示意图;
图6为一个实施例中的教师特定动作的示意图;
图7为一个实施例中的教师特写画面切换信号产生的流程示意图;
图8为一个实施例中的录播画面切换系统的结构示意图;
图9为另一个实施例中的录播画面切换系统的结构示意图;
图10为又一个实施例中的录播画面切换系统的结构示意图;
图11为一个实施例中的录播画面切换设备的结构示意图;
图12为一个实施例中的拍摄录播画面的三目摄像机的安装位置示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步的详细说明。应当理解,此处所描述的具体实施方式仅仅用以解释本发明,并不限定本发明的保护范围。
本发明实施例的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或(模块)单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
图1为一个实施例中录播画面切换方法的应用环境图。如图1所示,该应用环境包括拍摄终端110、服务器120和显示设备130,其中拍摄终端110、服务器120和显示设备130之间可通过网络进行通信。拍摄终端110向服务器120发送录播场景的拍摄数据,服务器120根据接收到的拍摄数据进行数据处理,并在与服务器120连接的显示设备130上显示录播场景的录播画面,同时还可以对显示设备130上显示的录播画面进行切换。其中,拍摄终端110可以是但不仅限于是各种不同功能、类型、大小的智能摄像机等等。
本申请提供的录播画面切换方法,可以应用于各种需要录播的场景中,例如教室、会议室、演说厅、舞台等等。
参见图2所示,为本发明一个实施例的录播画面切换方法的流程示意图。该实施例中的录播画面切换方法包括以下步骤:
步骤S210:获取录播场景各个不同角度的录播画面,对各录播画面进行轮循显示;
在本步骤中,录播场景是需要进行录播的场所景象,录播画面可以通过拍摄装置获取,由于拍摄装置的拍摄范围有限,因此可以从各个不同角度获取录播画面,以尽可能覆盖整个录播场景,在对各个录播画面进行格式预处理后,可以对其进行轮循显示,即轮回循环显示,各个录播画面均有概率可以显示,在轮循显示的过程中,各个录播画面的显示顺序可以指定或随机;
步骤S220:在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
在本步骤中,在录播画面轮循显示的过程中,会有需要切换到指定的录播画面的需求,此时会生成对应该录播画面的切换信号,当获得任一播画面的切换信号时,并不立即将显示画面切换,由于录播场景中各个位置的重要程度不同,因此可以为各个角度的录播画面设置优先级,按照重要程度的大小设置优先级的高低,另外,还要考虑当前显示的录播画面的显示时间,结合显示时间和画面优先级判断是否该切换画面,避免当前显示的录播画面显示时间过长或过短,均衡录播画面的显示时长;
步骤S230:若是,显示待切换的录播画面。
在本步骤中,在确定要切换画面时,则执行切换操作,显示待切换的录播画面。
在本实施例中,对录播场景进行不同角度的拍摄,获取各个不同角度的录播画面,并轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;在实际应用中,用户会需要观看某一特定录播画面中的场景,或者某一特定录播画面中出现重要事件,需要着重观察,此时会触发产生对应此录播画面的切换信号,但并不对录播画面立即进行切换,而是根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
需要说明的是,上述录播画面切换方法的步骤可以在处理录播画面的设备中执行,如与拍摄录播画面的拍摄终端110连接的服务器120等。
在一个实施例中,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面的步骤包括以下步骤:
若待切换的录播画面的优先级高于当前显示的录播画面的优先级,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最小显示时间,若是,切换画面;
若待切换的录播画面的优先级低于当前显示的录播画面的优先级,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最大显示时间,若是,切换画面。
在本实施例中,录播画面配置有最小显示时间和最大显示时间,在待切换的录播画面的优先级高,当前显示的录播画面的优先级低时,表明待切换的录播画面当前需要在第一时间进行显示,此时判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最小显示时间,若已达到,当前显示的录播画面已经显示了最短需要的时间,可以切换至待切换的录播画面;在待切换的录播画面的优先级低,当前显示的录播画面的优先级高时,表明当前显示的录播画面需要在第一时间进行显示,待切换的录播画面需要等待当前显示的录播画面显示足够的时间,这一时间即是当前显示的录播画面的最大显示时间,在达到最大显示时间后,可以切换至待切换的录播画面,通过优先级、已显示时间、最大显示时间、最小显示时间之间的比较关系,可以对录播画面的切换时机进行合理设置,均衡待切换的录播画面和当前显示的录播画面的显示时间,避免录播画面的显示时间过长或过短。
进一步的,在待切换的录播画面的优先级高于当前显示的录播画面的优先级时,若当前显示的录播画面已显示的时间未到达当前显示的录播画面的最小显示时间,则继续显示当前的录播画面,直至达到最小显示时间,再切换至待切换的录播图像,确保当前显示的低优先级的录播画面能够显示足够的时间;
在待切换的录播画面的优先级低于当前显示的录播画面的优先级时,若当前显示的录播画面已显示的时间未到达当前显示的录播画面的最大显示时间,则继续显示当前的录播画面,直至达到最大显示时间,再切换至待切换的录播图像,确保当前显示的高优先级的录播画面能够显示足够的时间。
在一个实施例中,对各录播画面进行轮循显示的步骤包括以下步骤:
获取各录播画面的最大显示时间,根据对应的最大显示时间轮循显示各录播画面;
或者,获取各录播画面的最小显示时间,根据对应的最小显示时间轮循显示各录播画面;
或者,根据预设时间轮循显示各录播画面,预设时间在最小显示时间和最大显示时间之间。
在本实施例中,录播画面配置有最小显示时间和最大显示时间,可以按照最大显示时间、或最小显示时间来轮循显示各个录播画面,也可以选择处于最大显示时间和最小显示时间之间的预设时间来轮循显示各个录播画面,此时各个录播画面的显示时间相同或相近,可以尽可能地均衡各个录播画面的显示时间。
进一步的,各个录播画面的最大显示时间可以相同,也可以不同;各个录播画面的最小显示时间可以相同,也可以不同;预设时间可以是单个录播画面的最大显示时间和最小显示时间的平均时间,每个录播画面的预设时间可以不同,也可以相同,预设时间也可以是多个录播画面的最大显示时间的平均时间,或多个录播画面的最小显示时间的平均时间,各种时间可由用户进行自由配置。
在一个实施例中,对各录播画面进行轮循显示的步骤包括以下步骤:
在显示屏幕的主画面轮循显示各录播画面,在显示屏幕的子画面上显示各录播画面,主画面和子画面同时显示在显示屏幕上,子画面的显示比例小于主画面的显示比例。
在本实施例中,显示屏幕分为主画面和子画面,主画面的显示比例大于子画面的显示比例,在主画面上轮循显示各录播画面,可以方便用户对单个录播画面进行细节观察,在子画面上显示各录播画面,可以方便用户对整个录播场景进行全局观察。
在一个实施例中,各录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种。
在本实施例中,各录播画面可以包括多种画面,录播场景一般可以包括主讲人所在的主讲区域、参与人所在的听众区域以及主讲内容的展示区域,针对主讲人、参与人分别有全景和特写两种画面,还可以有主讲区域画面和/或主讲内容展示画面,通过多种画面可以覆盖整个录播场景,而且可以根据实际需要对多种画面进行选取。
在一个实施例中,主讲人全景画面、参与人全景画面、主讲人特写画面、参与人特写画面和主讲内容展示画面的优先级依次递增;
对各录播画面进行轮循显示的步骤包括以下步骤:
对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示;
在显示待切换的录播画面的步骤之后,还包括以下步骤:
在待切换的录播画面显示时间达到待切换的录播画面的最大显示时间后,对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示。
在本实施例中,在默认情况下,参与人全景画面、主讲内容展示画面和主讲人全景画面是相对较为重要的画面,可以对其进行轮循显示,以缩短轮循显示的循环时间,同时避免遗漏重要的画面信息;主讲人全景画面、参与人全景画面、主讲人特写画面、参与人特写画面和主讲内容展示画面的优先级依次递增,在获得录播画面的切换信号时,利用画面相应的优先级以及当前显示的录播画面的已显示时间进行录播画面的切换;在待切换的录播画面显示时间达到对应的最大显示时间后,继续响应轮循显示机制,重新对对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示,避免待切换的录播画面显示时间过长。
需要说明的是,在显示待切换的录播画面之后,若再次获得其他画面的切换信号,则继续根据本方案的切换方式进行画面切换,在未获得新的切换信号的情况下,才对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示;另外,初始显示的时候,可以显示参与人全景画面;主讲区域画面可以显示在显示屏幕的子画面中,但可以不进行轮循显示。
具体的,以录播场景为多媒体教室,主讲人为教师,参与人为学生为例进行说明:
录播画面可以包括教师全景画面、教师特写画面、板书特写画面(即主讲内容展示画面)、学生全景画面、学生特写画面和教师授课区域(即主讲区域)画面。
如图3所示,显示屏幕分为主画面和子画面,子画面是全局画面,包括教师全景子画面、教师特写子画面、板书特写子画面、学生全景子画面、学生特写子画面和教师授课区域子画面,主画面是导播画面,主画面的显示比例大于子画面的显示比例,根据既定的轮循规则显示子画面中的某个特定子画面,当检测到教师授课区域符合条件时,触发产生切换信号,在符合切换规则的情况下,主画面显示教师特写画面,如图4所示;
进一步的,以主画面显示为轴,介绍录播画面的切换方法。系统启动时,主画面中显示学生全景子画面,在无视频画面切换信号产生的情况下,主画面以各子画面平均时间依次轮循显示,轮循顺序为:学生全景子画面>板书特写子画面>教师全景子画面。在有切换信号产生时,按如图5所示的流程进行主画面切入某个子画面进行显示。
当子画面切换信号同时到达后,主画面上显示子画面的优先级依次为:教师全景子画面<学生全景子画面<教师特写子画面<学生特写子画面<板书特写子画面;
当主画面显示某一子画面时,若收到当前显示的子画面的切换信号,则保持不变;若收到高优先级的子画面切换信号,先判断当前子画面的最小显示时间是否到达,若未到达,则继续显示当前子画面;若到达则切换为高优先级子画面;若收到低优先级的子画面切换信号,先判断当前子画面的最大显示时间是否到达,若到达,则响应视频画面切换信号,主画面切换为对应切换信号的子画面;若未到达,则继续显示当前子画面。
当主画面显示某一子画面时,显示该子画面的最大显示时间已经到达,此时没有其它信号产生,则按轮循方式以平均时间显示各子画面,轮循顺序为:学生全景子画面>板书特写子画面>教师全景子画面,平均时间可以是各个子画面的最大显示时间的平均值,也可以是各个子画面的最小显示时间的平均值,或各个子画面的均衡时间的平均值,均衡时间是单个子画面的最小显示时间和最大显示时间的平均值;或者,每个子画面的平均时间是各自的最小显示时间和最大显示时间的平均值,或在最小显示时间和最大显示时间之间的任意时间。
以上为系统画面切换规则,其中各个子画面的切换顺序可以根据实际场景的需要进行调整。
具体的,教师特写画面的切换具体实施方法为:
(1)当主画面显示其它子画面时,在系统没有切换信号产生的情况下,依据既定的轮循规则,以平均显示时间依次轮循,一次循环的顺序为:学生全景子画面>板书特写子画面>教师全景子画面;在系统有切换信号产生时,执行步骤(2)或(3);
(2)如果当前主画面显示的是教师特写子画面,当前切换信号中没有比教师特写子画面优先级高的切换信号,若是教师特写切换信号,则主画面不变,若是其它信号(如:学生全景或教师全景切换信号),则需要比较当前主画面上教师特写子画面的最大显示时间是否已经到达,若到达,主画面显示学生全景子画面,若最大显示时间未到达,则主画面继续显示教师特写子画面;
(3)如果当前主画面显示的是教师特写子画面,当前切换信号中有比教师特写子画面高的切换信号(如:板书或学生特写切换信号),则需要判断当前教师特写子画面的最小显示时间是否到达,未到达则主画面继续显示教师特写子画面,到达则显示学生特写子画面或板书特写子画面;
(4)如果当前主画面中显示的是非教师特写子画面,教师特写切换信号到达时,若主画面中子画面的优先级比教师特写子画面高,则需要判断当前主画面中子画面的显示是否已经达到最大显示时间,若是,则主画面显示教师特写子画面;若未到达,则不予响应教师特写子画面切换信号;若主画面中子画面的优先级比教师特写子画面低,则需要判断当前主画面中子画面的显示是否已经达到最小显示时间,若是则主画面显示教师特写子画面;若未到达,则不予响应教师特写子画面切换信号。
其中除了对教师特写子画面切换信号的产生详细叙述外,其它子画面中目标对象的检测,产生的切换信号均可采用通用的技术。
引用用户配置的各子画面最大、最小、平均在主画面上的显示时间与子画面切换信号相结合的方式,决定主画面是否切换为其它子画面的方法,可避免因系统切换信号误报或长时间无其它切换信号产生的某一子画面长期占据主画面,无法兼顾其它画面的现象。
在一个实施例中,获得主讲人特写画面的切换信号的步骤包括以下步骤:
检测主讲区域画面中是否存在主讲人,若是,采集主讲区域的音频数据,检测音频数据中是否存在目标语音;
若是,生成主讲人特写画面的切换信号。
在本实施例中,可以通过画面检测和音频检测来生成主讲人特写画面的切换信号,主讲人一般位于主讲区域,可以先检测主讲区域画面中是否存在主讲人,若存在,则采集主讲区域的音频数据,检测其中是否存在目标语音,目标语音可以表征主讲人正在作出重要的动作或说明重要的内容,此时需要显示主讲人特写画面,通过上述方式可以准确检测主讲区域中的主讲人,以此生成主讲人特写画面的切换信号,便于用户观察了解。
进一步的,若主讲区域画面中不存在主讲人,则不采集主讲区域的音频数据,以减少资源消耗。
在一个实施例中,检测主讲区域画面中是否存在主讲人的步骤包括以下步骤:
检测主讲区域画面中是否存在人脸,若是,将检测到的人脸与预设的数据库中的人脸进行数据对比,若两者相匹配,确定主讲区域画面中存在主讲人;
检测音频数据中是否存在目标语音的步骤包括以下步骤:
检测音频数据是否对应数据库保存的语句样式,若是,确定音频数据中存在目标语音。
在本实施例中,可以预先设置一数据库,在该数据库中保存有主讲人的人脸数据,以及对应主讲人的目标语音的语句样式;检测主讲区域画面中的人脸数据,将其与数据库中的人脸数据进行对比,在数据匹配时才认定主讲区域画面中存在主讲人,如此可以避免其他人员进入主讲区域时将其误认为主讲人,同时将主讲区域中的音频数据与数据库保存的语句样式进行对比,在两者匹配对应时才生成主讲人特写画面的切换信号,通过此种方式可以更加准确地确定主讲人的主讲身份。
在一个实施例中,录播画面切换方法还包括以下步骤:
根据目标人物检测算法在主讲区域画面中识别目标人物,并判断目标人物是否存在人脸;
若是,判断距离目标人物的人脸预设范围内是否存在预设形状的物体;
若是,对目标人物的人脸进行数据采集,并将目标人物的人脸数据存入数据库;
根据音频识别算法在主讲区域的音频数据中识别语句,若语句符合预设规则,将语句的语句样式并存入数据库。
在本实施例中,数据库中的数据无需预先保存,可以在录播场景中进行现场检测,实现数据的动态建立;通过目标人物检测算法识别主讲区域画面中的目标人物,在检测到人脸时,判断其周围预设范围内是否存在预设形状的物体,预设形状的物体是主讲人在演说时会使用的物体,通过这一特征可以对目标人物的主讲身份进行确认,在确认之后可以将目标人物的人脸数据保存在数据库中,如此就无需提前预存人脸数据,适应录播场景难以事先保存主讲人数据的情况;同理,通过音频识别算法识别主讲区域中的音频数据,在识别到语句时,判断其是否符合预设规则,该预设规则可以设置主讲人才会使用的语句样式规则,通过这一规则可以对主讲人的目标语音进行确认,在确认之后可以将目标语音的语句样式保存在数据库中,如此就无需提前预存语句样式,适应录播场景难以事先保存语句样式的情况。
进一步的,预设规则可以包括语句中包含多个关键词,以及多个关键词之间的关联关系;将目标人物的人脸数据和语句样式存入数据库后,可以在后续检测主讲区域画面中是否存在主讲人时,直接使用数据库中的人脸数据和语句样式,若主讲区域画面中不存在主讲人,则可以实施本实施例中的方案,执行判断距离目标人物的人脸预设范围内是否存在预设形状的物体的步骤以及后续步骤。
需要说明的是,若距离目标人物的人脸预设范围内不存在预设形状的物体,则无需执行根据音频识别算法在主讲区域的音频数据中识别语句的步骤,减少资源消耗;预设形状的物体和距离目标人物的人脸的预设范围可以根据具体的录播场景进行调整。
进一步的,在将目标人物的人脸数据和语句样式存入数据库的步骤之后,还包括以下步骤:生成主讲人特写画面的切换信号。由于存入数据库时,已经确认目标人物的主讲人身份,因此可以直接生成主讲人特写画面的切换信号,以及时对主讲人特写画面进行显示。
此外,上述几个实施例对获得主讲人特写画面的切换信号的过程进行了详细描述,对于主讲人全景画面、主讲内容展示画面、参与人全景画面和参与人特写画面的切换信号,可以采用通用的技术来触发产生。
以往目标对比数据库的建立都需要事先对目标信息(照片、声音等信息)进行采集。但现实中,由于某些条件的限制,无法事先获取到要保存到数据库中目标对象信息,故需要现场动态的建立。本申请提出了一种基于特定手势创建目标对象人脸信息和基于特定语句创建目标对象声音信息的方法。本申请的介绍以教师授课区域教师目标对象数据库信息的建立为例。
当教师走进教室后,会走向讲台向学生们问好,介绍本次授课内容。录播系统中教师区域检测摄像头和教师全景摄像头结合起来设置行为检测模块,其工作原理为:设置检测行为分析规则,当检测到场景有由符合该规则的目标对象时,对目标对象进行人脸信息采集,并将其保存到数据库。具体行为分析规则为:
如图6和图7所示,以教师右手拿起讲义(或书),举起到右肩膀的右前方,不遮挡自己面部为行为规则判断标准。首先教师授课区域根据已有的目标检测算法检测到目标,检测目标是否存在人脸,若存在,判断距离人脸一定范围内是否存在矩形目标(因为讲义、书等课件基本为矩形),若存在,对人脸图像进行采集,标识目标人脸信息采集成功,并存入教师信息数据库。
当教师授课区域音频采集设备检测到“同学们好,本次课堂我们学习XXXX内容,请大家拿出讲义或课本”的语句样式时,用已有的音频信息采集方式对其音频信息进行采集保存,并将其存入师信息数据库,实现音频信息的采集。
以上通过对视频图像进行特定的行为分析和特定语句样式的语音信息采集,实现了教师对象的身份信息采集。接下来可以在教师特写子画面目标检测过程中使用该数据库信息。
上述目标检测和音频检测可以采用通用的技术方案。视频和音频检测设备检测教师授课区域内教师的影像信息和声音信息,如若跟教师信息数据库中教师信息相匹配,则产生教师特写子画面切换信号给系统,系统根据既定规则进行主画面的切换。
教师信息数据库不需要事先建立,根据一定的规则现场建立教师信息对比数据库。教师信息数据库即目标检测过程中对比参考的预留信息。教师信息数据库中人脸信息特性的采集使用特定行为分析判断该目标为教师,并进行人脸信息采集。本申请中采用的方法是:教师站在讲台,面对学生,举起讲义到右肩膀的右前方,以不遮挡面部为基准,教师区域检测摄像头对抓拍图像中的人脸进行特征分析并存入数据库。
根据上述录播画面切换方法,本发明实施例还提供一种录播画面切换系统,以下就录播画面切换系统的实施例进行详细说明。
参见图8所示,为一个实施例的录播画面切换系统的结构示意图。该实施例中的录播画面切换系统包括:
画面轮询显示单元310,用于获取录播场景各个不同角度的录播画面,对各录播画面进行轮循显示;
画面切换判断单元320,用于在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
画面切换执行单元330,用于在确定切换画面时,显示待切换的录播画面。
根据上述的录播画面切换系统,其是对录播场景进行不同角度的拍摄,画面轮询显示单元310获取各个不同角度的录播画面,并轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;在实际应用中,用户会需要观看某一特定录播画面中的场景,或者某一特定录播画面中出现重要事件,需要着重观察,此时会触发产生对应此录播画面的切换信号,但并不对录播画面立即进行切换,画面切换判断单元320根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后,画面切换执行单元330才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
在一个实施例中,画面切换判断单元320还用于在待切换的录播画面的优先级高于当前显示的录播画面的优先级时,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最小显示时间,若是,切换画面;
画面切换判断单元320还用于在待切换的录播画面的优先级低于当前显示的录播画面的优先级时,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最大显示时间,若是,切换画面。
在一个实施例中,画面轮询显示单元310还用于获取各录播画面的最大显示时间,根据对应的最大显示时间轮循显示各录播画面;或者,获取各录播画面的最小显示时间,根据对应的最小显示时间轮循显示各录播画面;或者,根据预设时间轮循显示各录播画面,预设时间在最小显示时间和最大显示时间之间。
在一个实施例中,画面轮询显示单元310还用于在显示屏幕的主画面轮循显示各录播画面,在显示屏幕的子画面上显示各录播画面,主画面和子画面同时显示在显示屏幕上,子画面的显示比例小于主画面的显示比例。
在一个实施例中,各录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种。
在一个实施例中,主讲人全景画面、参与人全景画面、主讲人特写画面、参与人特写画面和主讲内容展示画面的优先级依次递增;
画面轮询显示单元310还用于对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示;
在画面切换执行单元330执行显示待切换的录播画面的操作之后,画面轮询显示单元310还用于在待切换的录播画面显示时间达到待切换的录播画面的最大显示时间后,对参与人全景画面、主讲内容展示画面和主讲人全景画面进行轮循显示。
在一个实施例中,如图9所示,录播画面切换系统还包括切换信号产生单元340,用于检测主讲区域画面中是否存在主讲人,若是,采集主讲区域的音频数据,检测音频数据中是否存在目标语音;若是,生成主讲人特写画面的切换信号。
在一个实施例中,切换信号产生单元340还用于检测主讲区域画面中是否存在人脸,若是,将检测到的人脸与预设的数据库中的人脸进行数据对比,若两者相匹配,确定主讲区域画面中存在主讲人;
切换信号产生单元340还用于检测音频数据是否对应数据库保存的语句样式,若是,确定音频数据中存在目标语音。
在一个实施例中,如图10所示,录播画面切换系统还包括数据动态获取单元350,用于根据目标人物检测算法在主讲区域画面中识别目标人物,并判断目标人物是否存在人脸;若是,判断距离目标人物的人脸预设范围内是否存在预设形状的物体;若是,对目标人物的人脸进行数据采集,并将目标人物的人脸数据存入数据库;
数据动态获取单元350还用于根据音频识别算法在主讲区域的音频数据中识别语句,若语句符合预设规则,将语句的语句样式并存入数据库。
在一个实施例中,切换信号产生单元340还用于在数据动态获取单元350将目标人物的人脸数据和语句样式存入数据库之后,生成主讲人特写画面的切换信号。
本发明实施例的录播画面切换系统与上述录播画面切换方法一一对应,在上述录播画面切换方法的实施例阐述的技术特征及其有益效果均适用于录播画面切换系统的实施例中。
根据上述录播画面切换方法,本发明实施例还提供一种录播画面切换设备,以下就录播画面切换设备的实施例进行详细说明。
参见图11所示,为一个实施例的录播画面切换设备的结构示意图。该实施例中的录播画面切换设备包括多目摄像机410、存储器420和处理器430;
多目摄像机410用于对录播场景进行各个不同角度的拍摄;
存储器420用于存储机器可执行指令;
处理器430用于控制多目摄像机410,其中,机器可执行指令的执行使处理器430:
获取录播场景各个不同角度的录播画面,对各录播画面进行轮循显示;
在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
若是,显示待切换的录播画面。
根据上述的录播画面切换设备,其包括多目摄像机410、存储器420和处理器430,多目摄像机410可以对录播场景进行不同角度的拍摄,处理器430调用执行存储器420中的机器可执行指令,通过控制多目摄像机410获取各个不同角度的录播画面,轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;在实际应用中,用户会需要观看某一特定录播画面中的场景,或者某一特定录播画面中出现重要事件,需要着重观察,此时处理器430会触发产生对应此录播画面的切换信号,但并不对录播画面立即进行切换,而是根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
进一步的,多目摄像机410可以是多个,分别设置在录播场景的不同位置,以获取多个录播画面,如以多媒体教室为例,如图12所示,可以设置两个三目摄像机,一个设置在教室靠近教室授课区域②的角落,一个设置在教室学生活动区域①的后侧的角落,其中,③是板书区域,④⑤⑥为三目摄像机,分别为教师全景摄像头、教师特写摄像头、板书特写摄像头;⑦⑧⑨也为三目摄像机,分别为学生全景摄像头,学生特写摄像头,教师区域检测摄像头。
在一个实施例中,如图12所示,录播画面切换设备还包括音频采集装置440,用于采集录播场景的主讲区域的音频数据,并将音频数据发送至处理器430,处理器430用于检测主讲区域画面中是否存在主讲人,若是,检测音频数据中是否存在目标语音;若是,生成主讲人特写画面的切换信号。
本发明实施例的录播画面切换设备与上述录播画面切换方法相对应,在上述录播画面切换方法的实施例阐述的技术特征及其有益效果均适用于录播画面切换设备的实施例中。
一种可读存储介质,其上存储有可执行程序,可执行程序被处理器执行时实现上述的录播画面切换方法的步骤。
上述可读存储介质,通过其存储的可执行程序,可以轮循显示各个录播画面,使各个录播画面都可以在合适的时间显示;根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面,经过判断确定后才显示待切换的录播画面,如此可以确保当前显示的录播画面的显示时间不会太短,同时又可以显示待切换的录播画面,而且由于轮循显示的机制,待切换的录播画面也不会长时间占据显示资源,可以兼顾各个角度的录播画面,解决某一画面长时间占主画面时难以观看兼顾其他画面的问题。
本领域普通技术人员可以理解实现上述实施例用于录播画面切换方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,程序可存储于一非易失性的计算机可读取存储介质中,如实施例中,该程序可存储于计算机系统的存储介质中,并被该计算机系统中的至少一个处理器执行,以实现包括如上述录播画面切换方法的实施例的流程。其中,存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成。所述的程序可以存储于可读取存储介质中。该程序在执行时,包括上述方法所述的步骤。所述的存储介质,包括:ROM/RAM、磁碟、光盘等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (11)

1.一种录播画面切换方法,其特征在于,所述方法包括以下步骤:
获取录播场景各个不同角度的录播画面,对各所述录播画面进行轮循显示;
在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
若是,显示待切换的录播画面;
各所述录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种;
获得所述主讲人特写画面的切换信号的步骤包括以下步骤:
检测所述主讲区域画面中是否存在主讲人,若是,采集主讲区域的音频数据,检测所述音频数据中是否存在目标语音;
若是,生成所述主讲人特写画面的切换信号。
2.根据权利要求1所述的录播画面切换方法,其特征在于,所述根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面的步骤包括以下步骤:
若所述待切换的录播画面的优先级高于当前显示的录播画面的优先级,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最小显示时间,若是,切换画面;
若所述待切换的录播画面的优先级低于当前显示的录播画面的优先级,判断当前显示的录播画面已显示的时间是否到达当前显示的录播画面的最大显示时间,若是,切换画面。
3.根据权利要求1所述的录播画面切换方法,其特征在于,所述对各所述录播画面进行轮循显示的步骤包括以下步骤:
获取各所述录播画面的最大显示时间,根据对应的最大显示时间轮循显示各所述录播画面;
或者,获取各所述录播画面的最小显示时间,根据对应的最小显示时间轮循显示各所述录播画面;
或者,根据预设时间轮循显示各所述录播画面,所述预设时间在所述最小显示时间和所述最大显示时间之间。
4.根据权利要求1所述的录播画面切换方法,其特征在于,所述对各所述录播画面进行轮循显示的步骤包括以下步骤:
在显示屏幕的主画面轮循显示各所述录播画面,在所述显示屏幕的子画面上显示各所述录播画面,所述主画面和所述子画面同时显示在所述显示屏幕上,所述子画面的显示比例小于所述主画面的显示比例。
5.根据权利要求1所述的录播画面切换方法,其特征在于,所述主讲人全景画面、所述参与人全景画面、所述主讲人特写画面、所述参与人特写画面和所述主讲内容展示画面的优先级依次递增;
所述对各所述录播画面进行轮循显示的步骤包括以下步骤:
对所述参与人全景画面、所述主讲内容展示画面和所述主讲人全景画面进行轮循显示;
在所述显示待切换的录播画面的步骤之后,还包括以下步骤:
在所述待切换的录播画面显示时间达到所述待切换的录播画面的最大显示时间后,对所述参与人全景画面、所述主讲内容展示画面和所述主讲人全景画面进行轮循显示。
6.根据权利要求1所述的录播画面切换方法,其特征在于,所述检测所述主讲区域画面中是否存在主讲人的步骤包括以下步骤:
检测所述主讲区域画面中是否存在人脸,若是,将检测到的人脸与预设的数据库中的人脸进行数据对比,若两者相匹配,确定所述主讲区域画面中存在主讲人;
所述检测所述音频数据中是否存在目标语音的步骤包括以下步骤:
检测所述音频数据是否对应所述数据库保存的语句样式,若是,确定所述音频数据中存在目标语音。
7.根据权利要求6所述的录播画面切换方法,其特征在于,所述方法还包括以下步骤:
根据目标人物检测算法在所述主讲区域画面中识别目标人物,并判断所述目标人物是否存在人脸;
若是,判断距离所述目标人物的人脸预设范围内是否存在预设形状的物体;
若是,对所述目标人物的人脸进行数据采集,并将所述目标人物的人脸数据存入所述数据库;
根据音频识别算法在所述主讲区域的音频数据中识别语句,若所述语句符合预设规则,将所述语句的语句样式并存入所述数据库。
8.根据权利要求7所述的录播画面切换方法,其特征在于,在将所述目标人物的人脸数据和所述语句样式存入所述数据库的步骤之后,还包括以下步骤:生成所述主讲人特写画面的切换信号。
9.一种录播画面切换系统,其特征在于,包括:
画面轮询显示单元,用于获取录播场景各个不同角度的录播画面,对各所述录播画面进行轮循显示;各所述录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种;
画面切换判断单元,用于在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
画面切换执行单元,用于在确定切换画面时,显示待切换的录播画面;
切换信号产生单元,用于检测所述主讲区域画面中是否存在主讲人,若是,采集主讲区域的音频数据,检测所述音频数据中是否存在目标语音;若是,生成所述主讲人特写画面的切换信号。
10.一种录播画面切换设备,其特征在于,所述设备包括多目摄像机、音频采集装置、存储器和处理器;
所述多目摄像机用于对录播场景进行各个不同角度的拍摄;
所述音频采集装置用于采集所述录播场景的主讲区域的音频数据,并将所述音频数据发送至所述处理器;
所述存储器用于存储机器可执行指令;
所述处理器用于控制所述多目摄像机,其中,所述机器可执行指令的执行使所述处理器:
获取录播场景各个不同角度的录播画面,对各所述录播画面进行轮循显示;各所述录播画面包括主讲人全景画面、主讲人特写画面、主讲区域画面、主讲内容展示画面、参与人全景画面和参与人特写画面中的至少一种;
在获得任一录播画面的切换信号时,根据待切换的录播画面的优先级、当前显示的录播画面的优先级和当前显示的录播画面已显示的时间,判断是否切换画面;
若是,显示待切换的录播画面;
检测所述主讲区域画面中是否存在主讲人,若是,检测所述音频数据中是否存在目标语音;
若是,生成所述主讲人特写画面的切换信号。
11.一种可读存储介质,其上存储有可执行程序,其特征在于,所述可执行程序被处理器执行时实现权利要求1至8中任意一项所述的录播画面切换方法的步骤。
CN201911280791.7A 2019-12-13 2019-12-13 录播画面切换方法、系统、可读存储介质和设备 Active CN111083397B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911280791.7A CN111083397B (zh) 2019-12-13 2019-12-13 录播画面切换方法、系统、可读存储介质和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911280791.7A CN111083397B (zh) 2019-12-13 2019-12-13 录播画面切换方法、系统、可读存储介质和设备

Publications (2)

Publication Number Publication Date
CN111083397A CN111083397A (zh) 2020-04-28
CN111083397B true CN111083397B (zh) 2022-01-11

Family

ID=70314322

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911280791.7A Active CN111083397B (zh) 2019-12-13 2019-12-13 录播画面切换方法、系统、可读存储介质和设备

Country Status (1)

Country Link
CN (1) CN111083397B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112040249A (zh) * 2020-08-11 2020-12-04 浙江大华技术股份有限公司 一种录播方法、装置及单相机
CN113489915B (zh) * 2020-10-30 2022-09-27 青岛海信电子产业控股股份有限公司 一种智能设备及其控制方法
CN112911089A (zh) * 2021-01-25 2021-06-04 睿魔智能科技(深圳)有限公司 一种导播画面自动切换的方法及系统
CN113422933B (zh) * 2021-06-23 2022-10-25 江苏小牛电子科技有限公司 一种基于教学的录播系统及录播方法、介质
CN113743268A (zh) * 2021-08-25 2021-12-03 浙江大华技术股份有限公司 一种检测人物行为的方法、装置、设备及介质
CN113965793A (zh) * 2021-10-12 2022-01-21 上海赛连信息科技有限公司 一种智能录制布局切换的方法和装置
CN113986443A (zh) * 2021-11-10 2022-01-28 四川天辰智联科技有限公司 一种互动录播方法、设备及系统
CN116389660B (zh) * 2021-12-22 2024-04-12 广州开得联智能科技有限公司 录播的导播方法、装置、设备及存储介质

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103281492A (zh) * 2013-05-23 2013-09-04 深圳锐取信息技术股份有限公司 视频画面切换方法、系统、录播服务器及视频录播系统
CN104410834A (zh) * 2014-12-04 2015-03-11 重庆晋才富熙科技有限公司 一种教学视频的智能切换方法
CN104469303A (zh) * 2014-12-04 2015-03-25 重庆晋才富熙科技有限公司 教学视频的智能切换方法
CN104822038A (zh) * 2015-04-30 2015-08-05 广州瀚唐电子科技有限公司 录播系统及其画面切换方法
CN104837051B (zh) * 2015-05-26 2019-02-22 腾讯科技(北京)有限公司 视频播放方法及客户端
CN105049764B (zh) * 2015-06-17 2018-05-25 武汉智亿方科技有限公司 一种基于多个定位摄像头的教学用图像跟踪方法及系统
CN105139702A (zh) * 2015-10-14 2015-12-09 广州天莱软件科技有限公司 一种用于教学的录播系统及其使用方法
CN106791485B (zh) * 2016-11-16 2020-02-07 深圳市异度信息产业有限公司 视频的切换方法及装置
CN106961568B (zh) * 2017-03-09 2021-03-23 广州盈可视电子科技有限公司 一种画面切换方法、装置和系统

Also Published As

Publication number Publication date
CN111083397A (zh) 2020-04-28

Similar Documents

Publication Publication Date Title
CN111083397B (zh) 录播画面切换方法、系统、可读存储介质和设备
CN106227335B (zh) 预习讲义与视频课程的交互学习方法及应用学习客户端
US11128793B2 (en) Speaker tracking in auditoriums
CN106961568B (zh) 一种画面切换方法、装置和系统
CN108419141B (zh) 一种字幕位置调整的方法、装置、存储介质及电子设备
US20150146078A1 (en) Shift camera focus based on speaker position
WO2018209879A1 (zh) 自动选择摄像头画面的方法、装置及音视频系统
CN110472099B (zh) 互动视频生成方法及装置、存储介质
JP5316286B2 (ja) ビデオ会議システム,サーバ装置,及びビデオ会議プログラム
CN103888696A (zh) 照片的拍摄和查看方法和拍摄装置
CN112004046A (zh) 一种基于视频会议的图像处理方法和装置
US20180366089A1 (en) Head mounted display cooperative display system, system including dispay apparatus and head mounted display, and display apparatus thereof
CN114531564A (zh) 处理方法及电子设备
CN105915974A (zh) 一种智能的投影播放方法和装置
CN111107283B (zh) 一种信息显示方法、电子设备及存储介质
CN113283246B (zh) 视觉交互方法、装置、设备及存储介质
CN114513622A (zh) 说话人检测方法、设备、存储介质及程序产品
CN110933510B (zh) 控制系统中的信息交互方法
JP7069550B2 (ja) 講義映像分析装置、講義映像分析システム、方法およびプログラム
CN111031369A (zh) 控制系统中的信息投屏方法
JP2005295133A (ja) 情報配信装置
CN114727050B (zh) 一种多人连麦直播会议的视频数据生成方法及装置
CN117560538B (zh) 基于云平台的交互式语音视频的服务方法
CN116033110A (zh) 视频会议发言人显示方法、装置、设备及存储介质
CN115174845A (zh) 一种针对视频会议中特殊行为动作的特写拍摄方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant