CN112423054A - 显示输出控制方法、设备及多媒体教室系统 - Google Patents

显示输出控制方法、设备及多媒体教室系统 Download PDF

Info

Publication number
CN112423054A
CN112423054A CN202011286547.4A CN202011286547A CN112423054A CN 112423054 A CN112423054 A CN 112423054A CN 202011286547 A CN202011286547 A CN 202011286547A CN 112423054 A CN112423054 A CN 112423054A
Authority
CN
China
Prior art keywords
software
host
display
signal source
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011286547.4A
Other languages
English (en)
Other versions
CN112423054B (zh
Inventor
张新华
李兵
王程
张少鹏
马玉中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Lancoo Technology Co ltd
Original Assignee
Zhejiang Lancoo Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Lancoo Technology Co ltd filed Critical Zhejiang Lancoo Technology Co ltd
Priority to CN202011286547.4A priority Critical patent/CN112423054B/zh
Publication of CN112423054A publication Critical patent/CN112423054A/zh
Application granted granted Critical
Publication of CN112423054B publication Critical patent/CN112423054B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003—Display of colours
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus

Abstract

本申请涉及多媒体教学领域，公开了一种显示输出控制方法、设备及多媒体教室系统。该方法包括：当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到该显示设备；获取当前输出到该显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口，识别该当前活动窗口对应的软件类型，根据识别的软件类型将截取的该当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。本申请的实施方式在不增加硬件投入的情况下，实现多媒体教室内各设备的输出信号源的自动智能切换显示输出。

Description

显示输出控制方法、设备及多媒体教室系统
技术领域
本申请涉及多媒体教学领域，特别涉及多媒体教室及其显示输出控制技术。
背景技术
随着教育信息化的发展，多媒体教室内的数字化设备日益增多，而每个设备大都自带一套显示系统，缺乏一体化设计。目前对于多媒体教室内各设备之间复杂的协作功能大都是通过手动操作实现，且操作起来比较复杂。
发明内容
本申请的目的在于提供一种显示输出控制方法、设备及多媒体教室系统，在不增加硬件投入的情况下，实现多媒体教室内各设备的输出信号源的自动智能切换显示输出。
本申请公开了一种用于多媒体教室系统的显示输出控制方法，包括：
当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到所述显示设备；
获取当前输出到所述显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口，识别所述当前活动窗口对应的软件类型，根据识别的软件类型将截取的所述当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。
在一个优选例中，所述识别所述当前活动窗口对应的软件类型进一步包括：
预先存储包含软件信息和对应软件类型的教学软件库，所述软件类型包括多媒体播放软件和课件播放软件；
识别所述当前活动窗口对应的软件信息，基于所述教学软件库识别该软件信息对应的软件类型。
在一个优选例中，所述识别所述当前活动窗口对应的软件信息时，还包括：
如果未能在所述教学软件库中识别到该软件信息，则周期性地截取当前活动窗口播放的画面图像；
将每个图像其转化为灰度图，并计算相邻灰度图的差值；
若连续预设数量图像的该差值的和小于第一预设阈值，则判定为该软件信息对应的软件类型为课件播放软件，否则为多媒体播放软件。
在一个优选例中，所述根据识别的软件类型将截取的所述当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器，进一步包括：
如果识别的软件类型为多媒体播放软件，则截取所述当前活动窗口播放的音频或视频推送到远程服务器；
如果识别的软件类型为课件播放软件，则截取所述当前活动窗口播放的画面，并将该画面与所述摄像机的输出视频进行合成，将合成画面推送到远程服务器。
在一个优选例中，还包括：当检测到所述显示设备处于关闭状态时，打开黑板灯，将所述摄像机的输出视频推送到远程服务器；
所述当检测到所述显示设备处于打开状态时，还包括：关闭所述黑板灯。
在一个优选例中，所述系统包括用于运行教学软件的第一主机、用于接入第二主机设备的接口单元；
所述预设切换规则包括：
如果检测到所述接口单元未连接所述第二主机设备，则切换输出来自所述第一主机的输入信号源到所述显示设备；
如果检测到所述接口单元连接有所述第二主机设备，则检测所述第二主机设备的操作指令和所述第二主机设备的输出信号源；
当检测到所述第二主机设备的操作指令时，切换输出来自所述第二主机设备的输入信号源到所述显示设备；
当检测到所述第二主机设备的输出信号源时，读取该信号源中的信息，当检测到该信息在预设时长内无变化，则切换输出来自所述第一主机的输入信号源到所述显示设备。
在一个优选例中，所述系统还包括第三主机，用于处理教室内物联网设备管理；
所述预设切换规则还包括：
所述系统开启后，检测登录系统的账号信息；
如果所述账号信息对应管理员身份，则切换输出来自所述第三主机的输入信号源到所述显示设备；
如果所述账号信息对应教师身份，则检测所述接口单元是否连接有所述第二主机设备。
本申请还公开了一种用于多媒体教室系统的显示输出控制设备包括：
显示切换模块，用于当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到所述显示设备；
信息推送模块，用于获取当前输出到所述显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口，识别所述当前活动窗口对应的软件类型，根据识别的软件类型将截取的所述当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。
本申请还公开了一种多媒体教室系统包括显示设备、摄像机和如前文描述的显示输出控制设备。
本申请还公开了一种计算机可读存储介质所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如前文描述的方法中的步骤。
本申请实施方式中，至少包括以下优点和有益效果：
通过设置显示切换模块自动切换输出各输入信号源到显示设备，并且通过设置信息推送模块自动选择显示信息、摄像机输出视频或者该显示信息与摄像机输出视频的合成信息推送到远程服务器，在不增加硬件投入的情况下，实现多媒体教室内各设备的输出信号源的自动智能切换显示输出，有利于将各个主机设备的功能效用发挥到最大化。
进一步地，信息推送模块根据显示切换模块输出的信号源确定对应主机、识别该主机的当前活动窗口以及判别当前活动窗口的软件类型，并根据软件类型的变化自动智能切换推送相应信息到远程服务器，所采用的显示切换规则和信息推送切换规则简单，准确度高，大大节省了硬件运算资源，降低造价成本，便于实施。
此外，本申请不仅可以应用于在线教学场景，还可以应用于常态化录播产品。
本申请的说明书中记载了大量的技术特征，分布在各个技术方案中，如果要罗列出本申请所有可能的技术特征的组合(即技术方案)的话，会使得说明书过于冗长。为了避免这个问题，本申请上述发明内容中公开的各个技术特征、在下文各个实施方式和例子中公开的各技术特征、以及附图中公开的各个技术特征，都可以自由地互相组合，从而构成各种新的技术方案(这些技术方案均因视为在本说明书中已经记载)，除非这种技术特征的组合在技术上是不可行的。例如，在一个例子中公开了特征A+B+C，在另一个例子中公开了特征A+B+D+E，而特征C和D是起到相同作用的等同技术手段，技术上只要择一使用即可，不可能同时采用，特征E技术上可以与特征C相组合，则，A+B+C+D的方案因技术不可行而应当不被视为已经记载，而A+B+C+E的方案应当视为已经被记载。
附图说明
图1是根据本申请第一实施方式的用于多媒体教室系统的显示输出控制方法流程示意图。
图2是根据本申请第二实施方式的用于多媒体教室系统的显示输出控制设备结构示意图。
图3是根据本申请的一个示例多媒体教室系统结构示意图。
具体实施方式
在以下的叙述中，为了使读者更好地理解本申请而提出了许多技术细节。但是，本领域的普通技术人员可以理解，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。
部分概念的说明：
活动窗口：即当前的工作窗口，又称当前窗口，在有多个打开的窗口时，只有一个是活动窗口。
为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请的实施方式作进一步地详细描述。
本申请的第一实施方式涉及一种用于多媒体教室系统的显示输出控制方法。
可选地，该系统包括第一主机和用于接入第二主机设备的接口单元。该接口单元例如但不限于是HDMI接口、VGA接口、DVI接口、DisplayPort接口等。该第一主机例如但不限于为X86主机、工业主机、嵌入式主机等。该第二主机设备例如但不限于为MP3、手提电脑、手机等。
可选地，该系统还可以包括第三主机，用于处理教室内物联网设备管理。
该显示输出控制方法流程如图1所示，该方法包括以下步骤：
开始，在步骤101中，当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到该显示设备。其中，各路输入信号源例如是来自N路主机的N路输入信号源。可选地，该N路主机例如但不限于包括该第一主机、该第二主机设备的主机和第三主机。
可选地，步骤101中“当检测到该显示设备处于打开状态”时，还包括以下步骤：关闭黑板灯。其中该黑板灯设于黑板处，用改善黑板的照明亮度。
可选地，该预设切换规则可以包括基于“用户登录系统的账号信息的改变来触发切换”、“接口单元是否连接第二主机设备的判断结果来触发切换”、“第二主机设备是否处于待机状态的判断结果来触发切换”、“接收到系统配置的按键的操作指令来触发切换”的切换规则的任意组合。
例如，基于“用户登录系统的账号信息的改变来触发切换”的切换规则可以包括：该系统开启后，检测登录系统的账号信息，如果该账号信息对应管理员身份，则切换输出来自该第三主机的输入信号源到该显示设备；如果该账号信息对应教师身份，则切换输出来自该第一主机的输入信号源或该第二主机设备的输入信号源到该显示设备。
例如，基于“接口单元是否连接第二主机设备的判断结果来触发切换”的切换规则包括：检测该接口单元是否连接有该第二主机设备，1)如果检测到该接口单元未连接有该第二主机设备，则切换输出来自该第一主机的输入信号源到该显示设备；2)如果检测到该接口单元连接有该第二主机设备，则检测该第二主机设备的操作指令和该第二主机设备的输出信号源：2-1)当检测到该第二主机设备的操作指令时，切换输出来自该第二主机设备的输入信号源到该显示设备；2-2)当检测到该第二主机设备的输出信号源时，周期性地读取该信号源中的信息，当检测到所读取的信息在预设时间内无变化，则切换输出来自该第一主机的输入信号源到该显示设备。例如，该预设切换规则还包括：当检测到第二主机设备移除时，切换输出连接该第二主机设备之前的输入信号源到显示设备。
例如，基于“第二主机设备是否待机的判断结果来触发切换”的切换规则包括：
周期性地采集第二主机设备输出信号源，检测到该信号源在预设时间内无变化，说明第二主机设备处于有连接但是待机状态，则自动切换回输出来自该第一主机的输入信号源。进一步地，周期性地采集当前活动窗口对应的软件类型(课件播放软件或多媒体播放软件)，如果是课件播放软件，则周期性地截取当前活动窗口的图像画面，将每个图像转化为灰度图，计算相邻灰度图的差值，如果连续预设帧数图像的该差值的和为0则判定该信号源无变化；如果是多媒体播放软件，判断是音频播放软件还是视频播放软件：①若为视频播放软件，则周期性地读取信号源中图像帧，将每个图像帧转化为灰度图，计算相邻灰度图的差值，同时读取信号源中的音频信号，计算预设时间t内(与前述连续预设帧数图像的时间对应)的音频信号的平均幅值，如果连续预设帧数的该差值的和小于a且预设时间t内的音频信号的平均幅值为0，则判定该视频无变化，其中a表示系统对画面变化的敏感程度；②若为音频播放软件，则读取信号源中的音频信号，计算预设时间t内的音频信号的平均幅值，若计算的平均幅值为0则判定该音频无变化。
例如，基于“接收到系统配置的按键的操作指令来触发切换”的切换规则包括：接收到按键操作指令后(例如，该系统设置有按键)，依次在来自该第一主机、该第二主机、该第三主机的输入信号源之间切换地输出到该显示设备。其中，该按键操作指令触发的显示切换例如是预设切换规则中的优先级最高的。
之后，进入步骤102，获取当前输出到该显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口。
之后，进入步骤103，识别该当前活动窗口对应的软件类型。
可选地，该步骤103进一步包括以下子步骤103a和103b：
步骤103a，预先存储包含软件信息和对应软件类型的教学软件库，该软件类型包括多媒体播放软件和课件播放软件；步骤103b，识别该当前活动窗口对应的软件信息，基于该教学软件库识别该软件信息对应的软件类型。
该步骤103a中的软件信息和对应软件类型例如如下表1所示，虽然表1中的软件信息只列举了比较常见的几种教学软件，但是本实施方式包括现有的或者待开发的所有音频、视频或课件播放软件。
表1
Figure BDA0002782581820000081
可选地，上述步骤103b还包括以下步骤：如果未能在该教学软件库中识别到该软件信息，则周期性地截取当前活动窗口播放的画面图像；将每个图像其转化为灰度图，并计算相邻灰度图的差值；若连续预设数量图像的该差值的和小于第一预设阈值，则判定为该软件信息对应的软件类型为课件播放软件，否则为多媒体播放软件。例如，将每个图像转化为灰度图像记为分别记为{D1 D2,……,Dn}，所取的图像相邻4帧作差，其值满足公式|Dk-Dk-1|+|Dk+1-Dk|+|Dk-Dk-1|+|Dk+2-Dk+1|＜b时，则判定为该软件信息对应的软件类型为课件播放软件，b为经验值常数。
之后，进入步骤104，根据识别的软件类型将截取的该当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。
可选地，该步骤104可以进一步包括以下子步骤104a和104b：
步骤104a，如果识别的软件类型为多媒体播放软件，则将截取该当前活动窗口播放的音频或视频推送到远程服务器；步骤104b，如果识别的软件类型为课件播放软件，则截取该当前活动窗口播放的画面，并将该画面与该摄像机的输出视频进行合成，将合成信息推送到远程服务器。
该合成方式是多种多样的，例如可以直接拼接或者将视频嵌入在截取的该当前活动窗口播放的画面中等。
可选地，该方法还可以包括以下步骤：当检测到该显示设备处于关闭状态时，将该摄像机的输出视频推送到远程服务器。
可选地，当检测到该显示设备处于关闭状态时还包括以下步骤：打开背景灯。
本申请的第二实施方式涉及一种用于多媒体教室系统的显示输出控制设备，如图2所示结构示意图，该设备包括显示切换模块和信息推送模块。
可选地，该多媒体教室系统包括第一主机、用于接入第二主机设备的接口单元和显示输出控制设备。该接口单元例如但不限于是HDMI接口、VGA接口、DVI接口、DisplayPort接口等。该第一主机例如但不限于为X86主机、工业主机、嵌入式主机等。该第二主机设备例如但不限于为MP3、手提电脑、手机等。在一个实施例中，该第一主机、接口单元和该第二主机可以集成在该显示输出控制设备中。
可选地，该系统还可以包括第三主机，用于处理教室内物联网设备管理。
该显示切换模块用于当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到该显示设备。其中，各路输入信号源例如是来自N路主机的N路输入信号源。可选地，该N路主机例如但不限于包括该第一主机、该第二主机设备的主机和第三主机。
可选地，该显示切换模块还用于当检测到该显示设备处于打开状态时，关闭黑板灯。其中。该黑板灯设于黑板处，用改善黑板的照明亮度。
可选地，该预设切换规则可以包括基于“用户登录系统的账号信息的改变来触发切换”、“接口单元是否连接第二主机设备的判断结果来触发切换”、“第二主机设备是否待机的判断结果来触发切换”、“接收到系统配置的按键的操作指令来触发切换”的切换规则的任意组合。
例如，基于“用户登录系统的账号信息的改变来触发切换”的切换规则可以包括：该系统开启后，检测登录系统的账号信息，如果该账号信息对应管理员身份，则切换输出来自该第三主机的输入信号源到该显示设备；如果该账号信息对应教师身份，则切换输出来自该第一主机的输入信号源或该第二主机设备的输入信号源到该显示设备。
例如，基于“接口单元是否连接第二主机设备的判断结果来触发切换”的切换规则包括：检测该接口单元是否连接有该第二主机设备，1)如果检测到该接口单元未连接有该第二主机设备，则切换输出来自该第一主机的输入信号源到该显示设备；2)如果检测到该接口单元连接有该第二主机设备，则检测该第二主机设备的操作指令和该第二主机设备的输出信号源：2-1)当检测到该第二主机设备的操作指令时，切换输出来自该第二主机设备的输入信号源到该显示设备；2-2)当检测到该第二主机设备的输出信号源时，周期性地读取该信号源中的信息，当检测到所读取的信息在预设时间内无变化，则切换输出来自该第一主机的输入信号源到该显示设备。例如，该预设切换规则还包括：当检测到第二主机设备移除时，切换输出连接该第二主机设备之前的输入信号源到显示设备。
例如，基于“第二主机设备是否待机的判断结果来触发切换”的切换规则包括：周期性地采集第二主机设备输出信号源，检测到该信号源在预设时间内无变化，说明第二主机设备处于有连接但是待机状态，则自动切换回输出来自该第一主机的输入信号源。进一步地，周期性地采集当前活动窗口对应的软件类型(课件播放软件或多媒体播放软件)，如果是课件播放软件，则周期性地截取当前活动窗口的图像画面，将每个图像转化为灰度图，计算相邻灰度图的差值，如果连续预设帧数图像的该差值的和为0则判定该信号源无变化；如果是多媒体播放软件，判断是音频播放软件还是视频播放软件：①若为视频播放软件，则周期性地读取信号源中图像帧，将每个图像帧转化为灰度图，计算相邻灰度图的差值，同时读取信号源中的音频信号，计算预设时间t内(与前述连续预设帧数图像的时间对应)的音频信号的平均幅值，如果连续预设帧数的该差值的和小于a且预设时间t内的音频信号的平均幅值为0，则判定该视频无变化，其中a表示系统对画面变化的敏感程度；②若为音频播放软件，则读取信号源中的音频信号，计算预设时间t内的音频信号的平均幅值，若计算的平均幅值为0则判定该音频无变化。
例如，基于“接收到系统配置的按键的操作指令来触发切换”的切换规则包括：接收到按键操作指令后(例如，该系统设置有按键)，依次在来自该第一主机的输入信号源、来自该第二主机的输入信号源、来自该第三主机的输入信号源之间切换输出到显示设备。其中，该按键操作指令触发的切换例如是预设切换规则中的优先级最高的。
该信息推送模块用于获取当前输出到该显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口，识别该当前活动窗口对应的软件类型，根据识别的软件类型将截取的该当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。
可选地，该信息推送模块还用于预先存储包含软件信息和对应软件类型的教学软件库，该软件类型包括多媒体播放软件和课件播放软件，识别该当前活动窗口对应的软件信息，基于该教学软件库识别该软件信息对应的软件类型。其中，软件信息和对应软件类型例如如上表1所示，虽然表1中的软件信息只列举了比较常见的教学软件，但是本实施方式包括现有的或者待开发的所有音频、视频或课件播放软件。
可选地，该信息推送模块还用于如果未能在该教学软件库中识别到该软件信息，则周期性地截取当前活动窗口播放的画面图像；将每个图像其转化为灰度图，并计算相邻灰度图的差值，若连续预设数量图像的该差值的和小于第一预设阈值，则判定为该软件信息对应的软件类型为课件播放软件，否则为多媒体播放软件。例如，将每个图像转化为灰度图像记为分别记为{D1 D2,……,Dn}，所取的图像相邻4帧作差，其值满足公式|Dk-Dk-1|+|Dk+1-Dk|+|Dk-Dk-1|+|Dk+2-Dk+1|＜b时，则判定为该软件信息对应的软件类型为课件播放软件，b为经验值常数。
可选地，该信息推送模块还用于如果识别的软件类型为多媒体播放软件，则截取该当前活动窗口播放的音频或视频推送到远程服务器，以及如果识别的软件类型为课件播放软件，则截取该当前活动窗口播放的画面，并将该画面与该摄像机的输出视频进行合成，将合成信息推送到远程服务器。
该合成方式是多种多样的，例如可以直接拼接或者将视频嵌入在截取的该当前活动窗口播放的画面中等。
可选地，该信息推送模块还用于当检测到该显示设备处于关闭状态时，将该摄像机的输出视频推送到远程服务器。
可选地，该信息推送模块还用于当检测到该显示设备处于关闭状态时，打开背景灯。
第一实施方式是与本实施方式相对应的方法实施方式，第一实施方式中的技术细节可以应用于本实施方式，本实施方式中的技术细节也可以应用于第一实施方式。
本申请的第三实施方式涉及一种多媒体教室系统，该多媒体教室包括显示设备、摄像机和显示输出控制设备，其中，该显示输出控制设备为本申请第二实施方式的显示输出控制设备，所以第二实施方式中的技术细节均可以应用于本实施方式。
可选地，该多媒体教室系统还包括第一主机、用于接入第二主机设备的接口单元。该接口单元例如但不限于是HDMI接口、VGA接口、DVI接口、DisplayPort接口等。该第一主机例如但不限于为X86主机、工业主机、嵌入式主机等。该第二主机设备例如但不限于为MP3、手提电脑、手机等。
可选地，该多媒体教室系统还可以包括第三主机，用于处理教室内物联网设备管理。
在一个实施例中，该第一主机、第三主机、接口单元集成在显示输出控制设备中。
需要说明的是，虽然本申请的各实施方式中的多媒体教室系统只描述了内置第一主机和第三主机，但是在其他实施方式中，也可以内置更多个主机，该预设切换规则例如同时还可以包括根据各主机的开关状态或待机状态的判断结果来触发显示切换。
为了能够更好地理解本申请的技术方案，下面结合一个具体的例子来进行说明。如图3所示，示出了本申请的一个示例多媒体教室系统，该系统包括显示设备、摄像机、黑板灯光和显示输出控制设备。其中，显示设备例如可以安装在黑板侧墙面。摄像机用于拍摄教师上课的实况、老师黑板板书等。黑板灯用改善黑板的照明亮度，显示设备打开时，黑板灯处于关闭状态，显示设备关闭时，黑板灯处于打开状态。显示输出控制设备集成了一个X86主机、一个ARM主机、接口单元、显示切换模块和信息推送模块，各部分的连接关系如图2所示。具体的，该X86主机用于运行教学软件，以实现教学课件播放、远程同步课堂教学、教学资源管理等基本教学应用功能，并输出信号源1到显示切换模块；该ARM主机用于处理教室内物联网设备管理和控制、设备基础信息配置功能等，并输出信号源2到显示切换模块；该接口单元用于接入外接设备并输出信号源3到显示切换模块，例如，该接口单元是HDMI接口时，其用于接收外接设备(例如但不限于笔记本电脑等)输入的显示信号；显示切换模块根据预设切换规则自动地切换显示设备的显示内容；信息推送模块根据当前活动窗口对应的软件类型自动智能地推送相应的远程教学视频。需要指出，该例子中罗列的细节主要是为了便于理解，不作为对本申请保护范围的限制。本示例中，该接口单元是HDMI接口时，显示切换模块监听HDMI接口的插拔，当捕捉到接口接插信息后，判断为已经连接外接设备，当捕捉到HDMI接口的插拔信息，判断为与外接设备断开连接。其中，显示输出控制设备关机时，同时执行设备联动操作，关闭显示设备、打开黑板灯光。
需要说明的是，本领域技术人员应当理解，上述显示输出控制设备的实施方式中所示的各模块的实现功能可参照前述显示输出控制方法的相关描述而理解。上述显示输出控制设备的实施方式中所示的各模块的功能可通过运行于处理器上的程序(可执行指令)而实现，也可通过具体的逻辑电路而实现。本申请实施例上述显示输出控制设备如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。这样，本申请实施例不限制于任何特定的硬件和软件结合。
相应地，本申请实施方式还提供一种计算机可读存储介质，其中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现本申请的各方法实施方式。计算机可读存储介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于，相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读存储介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
此外，本申请实施方式还提供一种用于多媒体教室系统的显示输出控制设备，其中包括用于存储计算机可执行指令的存储器，以及，处理器；该处理器用于在执行该存储器中的计算机可执行指令时实现上述各方法实施方式中的步骤。其中，该处理器可以是中央处理单元(Central Processing Unit，简称“CPU”)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，简称“DSP”)、专用集成电路(Application SpecificIntegrated Circuit，简称“ASIC”)等。前述的存储器可以是只读存储器(read-onlymemory，简称“ROM”)、随机存取存储器(random access memory，简称“RAM”)、快闪存储器(Flash)、硬盘或者固态硬盘等。本发明各实施方式所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
需要说明的是，在本专利的申请文件中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。本专利的申请文件中，如果提到根据某要素执行某行为，则是指至少根据该要素执行该行为的意思，其中包括了两种情况：仅根据该要素执行该行为、和根据该要素和其它要素执行该行为。多个、多次、多种等表达包括2个、2次、2种以及2个以上、2次以上、2种以上。
在本申请提及的所有文献都被认为是整体性地包括在本申请的公开内容中，以便在必要时可以作为修改的依据。此外应理解，以上所述仅为本说明书的较佳实施例而已，并非用于限定本说明书的保护范围。凡在本说明书一个或多个实施例的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本说明书一个或多个实施例的保护范围之内。

Claims (10)

1.一种用于多媒体教室系统的显示输出控制方法，其特征在于，包括：
当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到所述显示设备；
获取当前输出到所述显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口，识别所述当前活动窗口对应的软件类型，根据识别的软件类型将截取的所述当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。
2.如权利要求1所述的用于多媒体教室系统的显示输出控制方法，其特征在于，所述识别所述当前活动窗口对应的软件类型进一步包括：
预先存储包含软件信息和对应软件类型的教学软件库，所述软件类型包括多媒体播放软件和课件播放软件；
识别所述当前活动窗口对应的软件信息，基于所述教学软件库识别该软件信息对应的软件类型。
3.如权利要求2所述的用于多媒体教室系统的显示输出控制方法，其特征在于，所述识别所述当前活动窗口对应的软件信息时，还包括：
如果未能在所述教学软件库中识别到该软件信息，则周期性地截取当前活动窗口播放的画面图像；
将每个图像其转化为灰度图，并计算相邻灰度图的差值；
若连续预设数量图像的该差值的和小于第一预设阈值，则判定为该软件信息对应的软件类型为课件播放软件，否则为多媒体播放软件。
4.如权利要求1-3中任意一项所述的用于多媒体教室系统的显示输出控制方法，其特征在于，所述根据识别的软件类型将截取的所述当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器，进一步包括：
如果识别的软件类型为多媒体播放软件，则截取所述当前活动窗口播放的音频或视频推送到远程服务器；
如果识别的软件类型为课件播放软件，则截取所述当前活动窗口播放的画面，并将该画面与所述摄像机的输出视频进行合成，将合成画面推送到远程服务器。
5.如权利要求1所述的用于多媒体教室系统的显示输出控制方法，其特征在于，还包括：当检测到所述显示设备处于关闭状态时，打开黑板灯，将所述摄像机的输出视频推送到远程服务器；
所述当检测到所述显示设备处于打开状态时，还包括：关闭所述黑板灯。
6.如权利要求1所述的用于多媒体教室系统的显示输出控制方法，其特征在于，所述系统包括用于运行教学软件的第一主机、用于接入第二主机设备的接口单元；
所述预设切换规则包括：
如果检测到所述接口单元未连接所述第二主机设备，则切换输出来自所述第一主机的输入信号源到所述显示设备；
如果检测到所述接口单元连接有所述第二主机设备，则检测所述第二主机设备的操作指令和所述第二主机设备的输出信号源；
当检测到所述第二主机设备的操作指令时，切换输出来自所述第二主机设备的输入信号源到所述显示设备；
当检测到所述第二主机设备的输出信号源时，读取该信号源中的信息，当检测到该信息在预设时长内无变化，则切换输出来自所述第一主机的输入信号源到所述显示设备。
7.如权利要求6所述的用于多媒体教室系统的显示输出控制方法，其特征在于，所述系统还包括第三主机，用于处理教室内物联网设备管理；
所述预设切换规则还包括：
所述系统开启后，检测登录系统的账号信息；
如果所述账号信息对应管理员身份，则切换输出来自所述第三主机的输入信号源到所述显示设备；
如果所述账号信息对应教师身份，则检测所述接口单元是否连接有所述第二主机设备。
8.一种用于多媒体教室系统的显示输出控制设备，其特征在于，包括：
显示切换模块，用于当检测到显示设备处于打开状态时，根据预设切换规则将各路输入信号源切换地输出到所述显示设备；
信息推送模块，用于获取当前输出到所述显示设备的信号源，确定该信号源对应的主机，读取该主机的当前活动窗口，识别所述当前活动窗口对应的软件类型，根据识别的软件类型将截取的所述当前活动窗口播放的信息或者该信息与摄像机的输出视频的合成信息推送到远程服务器。
9.一种多媒体教室系统，其特征在于，包括显示设备、摄像机和如权利要求8所述的显示输出控制设备。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，所述计算机可执行指令被处理器执行时实现如权利要求1至7中任意一项所述的方法中的步骤。
CN202011286547.4A 2020-11-17 2020-11-17 显示输出控制方法、设备及多媒体教室系统 Active CN112423054B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011286547.4A CN112423054B (zh) 2020-11-17 2020-11-17 显示输出控制方法、设备及多媒体教室系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011286547.4A CN112423054B (zh) 2020-11-17 2020-11-17 显示输出控制方法、设备及多媒体教室系统

Publications (2)

Publication Number Publication Date
CN112423054A true CN112423054A (zh) 2021-02-26
CN112423054B CN112423054B (zh) 2023-03-24

Family

ID=74831438

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011286547.4A Active CN112423054B (zh) 2020-11-17 2020-11-17 显示输出控制方法、设备及多媒体教室系统

Country Status (1)

Country Link
CN (1) CN112423054B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003029610A (ja) * 2001-07-13 2003-01-31 Mega Chips Corp 講義配信方法
US20070298656A1 (en) * 2006-06-22 2007-12-27 Good Mind Industries Co., Ltd. Switch apparatus for multiple high definition multimedia interface sources
US20100186056A1 (en) * 2009-01-22 2010-07-22 Microsoft Corporation Lecture Capture and Broadcast System
US20100279266A1 (en) * 2009-04-07 2010-11-04 Kendall Laine System and method for hybrid course instruction
US20120026327A1 (en) * 2010-07-29 2012-02-02 Crestron Electronics, Inc. Presentation Capture with Automatically Configurable Output
CN204559734U (zh) * 2015-04-09 2015-08-12 上海恒锐智能工程有限公司 智能信号切换器
CN107295273A (zh) * 2017-07-29 2017-10-24 安徽博威康信息技术有限公司 一种混插矩阵切换器
CN110430181A (zh) * 2019-07-29 2019-11-08 山东华网智能科技股份有限公司 智能电化教育系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003029610A (ja) * 2001-07-13 2003-01-31 Mega Chips Corp 講義配信方法
US20070298656A1 (en) * 2006-06-22 2007-12-27 Good Mind Industries Co., Ltd. Switch apparatus for multiple high definition multimedia interface sources
US20100186056A1 (en) * 2009-01-22 2010-07-22 Microsoft Corporation Lecture Capture and Broadcast System
US20100279266A1 (en) * 2009-04-07 2010-11-04 Kendall Laine System and method for hybrid course instruction
US20120026327A1 (en) * 2010-07-29 2012-02-02 Crestron Electronics, Inc. Presentation Capture with Automatically Configurable Output
CN204559734U (zh) * 2015-04-09 2015-08-12 上海恒锐智能工程有限公司 智能信号切换器
CN107295273A (zh) * 2017-07-29 2017-10-24 安徽博威康信息技术有限公司 一种混插矩阵切换器
CN110430181A (zh) * 2019-07-29 2019-11-08 山东华网智能科技股份有限公司 智能电化教育系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张衡: "蓝鸽校园版物联网管控软件交互设计研究与实践", 《硕士论文电子期刊》 *

Also Published As

Publication number Publication date
CN112423054B (zh) 2023-03-24

Similar Documents

Publication Publication Date Title
US20210258357A1 (en) Method and device for recording and transmitting courseware, interactive white board and storage medium
US10248865B2 (en) Identifying presentation styles of educational videos
US20160034786A1 (en) Computerized machine learning of interesting video sections
US20120151217A1 (en) Granular tagging of content
CN111462554A (zh) 网上课堂视频知识点识别方法和装置
KR20180029100A (ko) 분산된 트랜스코딩을 위한 콘텐츠-적응 청킹
CN110062287B (zh) 目标对象控制方法及装置、存储介质、电子设备
CN112947813B (zh) 控制悬浮窗口常驻显示方法、装置、介质及电子设备
US20180268867A1 (en) Video processing apparatus, video processing method and storage medium for properly processing videos
CN113010703A (zh) 一种信息推荐方法、装置、电子设备和存储介质
KR20210091082A (ko) 영상 처리 장치, 이의 제어 방법 및 컴퓨터 프로그램이 기록된 기록 매체
US11348254B2 (en) Visual search method, computer device, and storage medium
CN112423054B (zh) 显示输出控制方法、设备及多媒体教室系统
CN111479079A (zh) Ui列表操作方法、装置、智慧屏和可读存储介质
US20220270647A1 (en) Method and device for editing video
CN110780955A (zh) 一种用于处理表情消息的方法与设备
WO2015180587A1 (zh) 一种图像的展示处理方法和装置
CN115719053A (zh) 一种呈现读物标注信息的方法与设备
JP6225077B2 (ja) 学習状態監視端末、学習状態監視方法、学習状態監視端末用プログラム
CN114898145A (zh) 一种隐式新类实例的挖掘方法、装置及电子设备
US20200286120A1 (en) Advertising monitoring method, system, apparatus, and electronic equipment
JP2002101357A (ja) 視聴環境制御方法、情報処理装置、情報処理装置に適用する視聴環境制御プログラム
US8880823B2 (en) Information processing system, information processing apparatus, and non-transitory computer readable medium storing information processing program
CN112835544A (zh) 显示方法及显示设备、电子设备、存储介质
US11055515B2 (en) Real-time modification of presentations based on behavior of participants thereto

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant