CN112071337A - 一种录音控制方法、装置、服务器和显示设备 - Google Patents
一种录音控制方法、装置、服务器和显示设备 Download PDFInfo
- Publication number
- CN112071337A CN112071337A CN201910497523.4A CN201910497523A CN112071337A CN 112071337 A CN112071337 A CN 112071337A CN 201910497523 A CN201910497523 A CN 201910497523A CN 112071337 A CN112071337 A CN 112071337A
- Authority
- CN
- China
- Prior art keywords
- recording
- application
- display device
- display
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000004891 communication Methods 0.000 description 52
- 230000006870 function Effects 0.000 description 49
- 238000010586 diagram Methods 0.000 description 17
- 238000012545 processing Methods 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 7
- 230000009977 dual effect Effects 0.000 description 7
- 230000003993 interaction Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000005236 sound signal Effects 0.000 description 6
- 230000033001 locomotion Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000004886 process control Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本实施例提供一种录音控制方法、装置、服务器和显示设备,涉及录音技术领域,用于使显示设备上同时运行的不同录音应用,能够同时获取同一录音资源,保证这些录音应用能够同时正常工作。该方法应用于服务器,包括接收录音应用的录音请求;给每一个录音应用分配一个内存空间,并将显示设备、录音应用和内存空间的对应关系存储于应用列表中;获取显示设备的录音信息,并每间隔预设的时间,将录音信息存储于每一个内存空间内,以及,根据对应关系将每一个内存空间内的录音信息同时发送给对应的显示设备。
Description
技术领域
本申请涉及录音技术领域,尤其涉及一种录音控制方法、装置、服务器和显示设备。
背景技术
显示设备(例如智能电视)通常设置有各种各样的应用程序,例如音视频播放应用、聊天应用、游戏应用、语音控制应用等,以满足用户的多元化娱乐需求。其中,聊天、游戏和语音控制等应用在运行的过程中可能需要获取用户的录音信息,以提供相应的服务。例如,聊天应用需要将用户的录音信息发送给聊天对端,语音控制应用需要根据用户的录音信息,对显示设备进行控制。
通常情况下,应用程序通过录音模块(例如麦克风)获得录音信息。对于具有双系统的显示设备,由于其能够提供更加多样化的服务,因此,在该显示设备上,不仅可能有多个录音应用同时请求录制一个音频资源,而且这些应用程序可能分别处于不同的系统中。然而,根据Android系统的设计,同一个音频资源同一时刻仅支持一个应用程序使用。当有多个应用程序需要同时录音时,各个应用程序将无法获得所需的录音信息,从而导致这些应用程序将无法正常工作。
发明内容
本申请提供了一种录音控制方法、装置、服务器及显示设备,用于解决同时使用的应用程序,无法同时使用同一音频资源的问题。
第一方面,本实施例提供一种录音控制方法,应用于服务器,包括:
接收显示设备发送的录音应用的录音请求;
给每一个所述录音应用分配一个内存空间,并将所述显示设备、所述录音应用和所述内存空间的对应关系存储于应用列表中;
获取所述显示设备的录音信息,并每间隔预设的时间,执行如下步骤S1-S2:
S1将所述录音信息存储于每一个所述内存空间内;
S2根据所述对应关系,将每一个所述内存空间内的所述录音信息同时发送给所述显示设备。
在第一方面的第一种实现方式中,所述方法还包括:接收所述显示设备发送的所述录音应用的录音停止指令,并将所述录音应用的对应关系从所述应用列表中删除。
在第一方面的第二种实现方式中,所述方法还包括:如果所述应用列表内不包括所述显示设备的对应关系,则控制所述显示设备停止录音。
在第一方面的第三种实现方式中,给每一个所述录音应用分配一个内存空间,包括:对所述显示设备和所述录音应用进行身份认证,若所述显示设备和所述录音应用均合法,则给所述录音应用分配一个内存空间。
在第一方面的第四种实现方式中,所述接收显示设备发送的录音信息,包括:如果所述显示设备当前处于录音状态,则直接获取所述显示设备发送的录音信息;如果所述显示设备当前不处于录音状态,则在指示所述显示设备开始录音之后,获取所述显示设备的录音信息。
第二方面,本实施例提供一种录音控制方法,应用于显示设备,包括:
将每一个录音应用的录音请求发送给服务器;
将录音模块的录音信息发送给服务器;
接收服务器发送给每一个所述录音应用的录音信息;
将所述录音信息分发给对应的录音应用。
第三方面,本实施例提供一种录音控制装置,应用于服务器,包括:
第一接收模块,用于接收显示设备发送的录音应用的录音请求,以及所述显示设备发送的录音信息;
第一管理模块,用于给每一个所述录音应用分配一个内存空间,并将所述显示设备、所述录音应用和所述内存空间的对应关系存储于应用列表中;并在所述第一接收模块获取显示设备的录音信息之后,每间隔预设的时间,将所述录音信息存储于每一个所述内存空间内;
第一发送模块,用于每间隔所述预设的时间,根据所述对应关系,将每一个所述内存空间内的所述录音信息同时发送给所述显示设备。
第四方面,本实施例提供一种录音控制装置,应用于显示设备,包括:
第二发送模块,用于将每一个录音应用的录音请求发送给服务器,以及,将录音模块的录音信息发送给服务器;
第二接收模块,用于接收服务器发送给每一个所述录音应用的所述录音信息;
录音管理模块,用于将所述录音信息分发给对应的录音应用。
第五方面,本实施例提供一种服务器,包括上述第三方面提供的一种录音控制装置。
第六方面,本实施例提供一种显示设备,包括录音模块和上述第四方面提供的一种录音控制装置。
本实施例提供的录音控制方法、装置、服务器以及显示设备,均能够使显示设备上相同或者不同系统上,同时运行的不同录音应用,同时获取同一录音资源,从而保证这些录音应用能够同时正常工作。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据实施例中控制装置100的硬件配置框图;
图3中示例性示出了根据实施例中显示设备200的硬件配置框图;
图4中示例性示出了根据图3显示设备200的硬件架构框图;
图5中示例性示出了根据实施例中显示设备200的功能配置示意图;
图6a中示例性示出了根据实施例中显示设备200中软件配置示意图;
图6b中示例性示出了根据实施例中显示设备200中应用程序的配置示意图;
图7中示例性示出了根据实施例中显示设备200中用户界面的示意图;
图8中示例性示出了根据实施例中录音控制方法的流程图一;
图9中示例性示出了根据实施例中服务器和显示设备的连接示意图;
图10中示例性示出了根据实施例中录音控制方法的流程图二;
图11中示例性示出了根据实施例中录音控制装置的示意图一;
图12中示例性示出了根据实施例中录音控制装置的示意图二;
图13中示例性示出了根据实施例中服务器的示意图;
图14中示例性示出了根据实施例中显示设备的示意图。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
为便于用户使用,显示设备上通常会设置各种外部装置接口,以便于连接不同的外设设备或线缆以实现相应的功能。而在显示设备的接口上连接有高清晰度的摄像头时,如果显示设备的硬件系统没有接收源码的高像素摄像头的硬件接口,那么就会导致无法将摄像头接收到的数据呈现到显示设备的显示屏上。
并且,受制于硬件结构,传统显示设备的硬件系统仅支持一路硬解码资源,且通常最大仅能支持4K分辨率的视频解码,因此当要实现边观看网络电视边进行视频聊天时,为了不降低网络视频画面清晰度,就需要使用硬解码资源(通常是硬件系统中的GPU)对网络视频进行解码,而在此情况下,只能采取由硬件系统中的通用处理器(例如CPU)对视频进行软解码的方式处理视频聊天画面。
采用软解码处理视频聊天画面,会大大增加CPU的数据处理负担,当CPU的数据处理负担过重时,可能会出现画面卡顿或者不流畅的问题。进一步的,受制于CPU的数据处理能力,当采用CPU软解码处理视频聊天画面时,通常无法实现多路视频通话,当用户想要再同一聊天场景同时与多个其他用户进行视频聊天时,会出现接入受阻的情况。
基于上述各方面的考虑,为克服上述缺陷,本申请公开了一种双硬件系统架构,以实现多路视频聊天数据(至少一路本地视频)。
下面首先结合附图对本申请所涉及的概念进行说明。在此需要指出的是,以下对各个概念的说明,仅为了使本申请的内容更加容易理解,并不表示对本申请保护范围的限定。
本申请各实施例中使用的术语“模块”,可以是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请各实施例中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,该组件通常可在较短的距离范围内无线控制电子设备。该组件一般可以使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请各实施例中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
本申请各实施例中使用的术语“硬件系统”,可以是指由集成电路(IntegratedCircuit,IC)、印刷电路板(Printed circuitboard,PCB)等机械、光、电、磁器件构成的具有计算、控制、存储、输入和输出功能的实体部件。在本申请各个实施例中,硬件系统通常也会被称为主板(motherboard)或芯片。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,其可与显示设备200之间通过红外协议通信、蓝牙协议通信、紫蜂(ZigBee)协议通信或其他短距离通信方式进行通信,用于通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等,其可以通过本地网(LAN,Local Area Network)、广域网(WAN,Wide AreaNetwork)、无线局域网((WLAN,Wireless Local AreaNetwork)或其他网络与显示设备200之间通信,并通过与显示设备200相应的应用程序实现对显示设备200的控制。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI,User Interface)为用户提供各种控制。
示例的,移动终端100B与显示设备200均可安装软件应用,从而可通过网络通信协议实现二者之间的连接通信,进而实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能;也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还可与服务器300通过多种通信方式进行数据通信。在本申请各个实施例中,可允许显示设备200通过局域网、无线局域网或其他网络与服务器300进行通信连接。服务器300可以向显示设备200提供各种内容和互动。
示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG,ElectronicProgram Guide)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200,可以是液晶显示器、OLED(Organic Light Emitting Diode)显示器、投影显示设备、智能电视。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。
如图1所述,显示设备上可以连接或设置有摄像头,用于将摄像头拍摄到的画面呈现在本显示设备或其他显示设备的显示界面上,以实现用户之间的交互聊天。具体的,摄像头拍摄到的画面可在显示设备上全屏显示、半屏显示、或者显示任意可选区域。
作为一种可选的连接方式,摄像头通过连接板与显示器后壳连接,固定安装在显示器后壳的上侧中部,作为可安装的方式,可以固定安装在显示器后壳的任意位置,能保证其图像采集区域不被后壳遮挡即可,例如,图像采集区域与显示设备的显示朝向相同。
作为另一种可选的连接方式,摄像头通过连接板或者其他可想到的连接器可升降的与显示后壳连接,连接器上安装有升降马达,当用户要使用摄像头或者有应用程序要使用摄像头时,再升出显示器之上,当不需要使用摄像头时,其可内嵌到后壳之后,以达到保护摄像头免受损坏。
作为一种实施例,本申请所采用的摄像头可以为1600万像素,以达到超高清显示目的。在实际使用中,也可采用比1600万像素更高或更低的摄像头。
当显示设备上安装有摄像头以后,显示设备不同应用场景所显示的内容可得到多种不同方式的融合,从而达到传统显示设备无法实现的功能。
示例性的,用户可以在边观看视频节目的同时,与至少一位其他用户进行视频聊天。视频节目的呈现可作为背景画面,视频聊天的窗口显示在背景画面之上。形象的,可以称该功能为“边看边聊”。
可选的,在“边看边聊”的场景中,在观看直播视频或网络视频的同时,跨终端的进行至少一路的视频聊天。
另一示例中,用户可以在边进入教育应用学习的同时,与至少一位其他用户进行视频聊天。例如,学生在学习教育应用程序中内容的同时,可实现与老师的远程互动。形象的,可以称该功能为“边学边聊”。
另一示例中,用户在玩纸牌游戏时,与进入游戏的玩家进行视频聊天。例如,玩家在进入游戏应用参与游戏时,可实现与其他玩家的远程互动。形象的,可以称该功能为“边看边玩”。
可选的,游戏场景与视频画面进行融合,将视频画面中人像进行抠图,显示在游戏画面中,提升用户体验。
可选的,在体感类游戏中(如打球类、拳击类、跑步类、跳舞类等),通过摄像头获取人体姿势和动作,肢体检测和追踪、人体骨骼关键点数据的检测,再与游戏中动画进行融合,实现如体育、舞蹈等场景的游戏。
另一示例中,用户可以在K歌应用中,与至少一位其他用户进行视频和语音的交互。形象的,可以称该功能为“边看边唱”。优选的,当至少一位用户在聊天场景进入该应用时,可多个用户共同完成一首歌的录制。
另一个示例中,用户可在本地打开摄像头获取图片和视频,形象的,可以称该功能为“照镜子”。
在另一些示例中,还可以再增加更多功能或减少上述功能。本申请对该显示设备的功能不作具体限定。
图2中示例性示出了根据示例性实施例中控制装置100的配置框图。如图3所示,控制装置100包括控制器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
控制装置100被配置为可控制所述显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起到用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端100B或其他智能电子设备,可在安装操控显示设备200的应用之后,起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100B或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
控制器110包括处理器112、RAM113和ROM114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括WIFI模块131、蓝牙模块132、NFC模块133等通信模块中至少一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制装置100包括通信器130和输出接口中至少一者。控制装置100中配置通信器130,如:WIFI、蓝牙、NFC等模块,可将用户输入指令通过WIFI协议、或蓝牙协议、或NFC协议编码,发送至显示设备200.
存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制装置100各元件提供运行电力支持。可以电池及相关控制电路。
图3中示例性示出了根据示例性实施例中显示设备200中硬件系统的硬件配置框图。
在采用双硬件系统架构时,硬件系统的机构关系可以图3所示。为便于表述以下将双硬件系统架构中的一个硬件系统称为第一硬件系统或A系统、A芯片,并将另一个硬件系统称为第二硬件系统或N系统、N芯片。A芯片包含A芯片的控制器及通过各类接口与A芯片的控制器相连的各类模块,N芯片则包含N芯片的控制器及通过各类接口与N芯片的控制器相连的各类模块。A芯片及N芯片中可以各自安装有独立的操作系统,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。
如图3所示,A芯片与N芯片之间可以通过多个不同类型的接口实现连接、通信及供电。A芯片与N芯片之间接口的接口类型可以包括通用输入输出接口(General-purposeinput/output,GPIO)、USB接口、HDMI接口、UART接口等。A芯片与N芯片之间可以使用这些接口中的一个或多个进行通信或电力传输。例如图3所示,在双硬件系统架构下,可以由外接的电源(power)为N芯片供电,而A芯片则可以不由外接电源,而由N芯片供电。
除用于与N芯片进行连接的接口之外,A芯片还可以包含用于连接其他设备或组件的接口,例如图3中所示的用于连接摄像头(Camera)的MIPI接口,蓝牙接口等。
类似的,除用于与N芯片进行连接的接口之外,N芯片还可以包含用于连接显示屏TCON(Timer Control Register)的VBY接口,用于连接功率放大器(Amplifier,AMP)及扬声器(Speaker)的i2S接口;以及IR/Key接口,USB接口,Wifi接口,蓝牙接口,HDMI接口,Tuner接口等。
下面结合图4对本申请双硬件系统架构进行进一步的说明。需要说明的是图4仅仅是对本申请双硬件系统架构的一个示例性说明,并不表示对本申请的限定。在实际应用中,两个硬件系统均可根据需要包含更多或更少的硬件或接口。
图4中示例性示出了根据图3显示设备200的硬件架构框图。如图4所示,显示设备200的硬件系统可以包括A芯片和N芯片,以及通过各类接口与A芯片或N芯片相连接的模块。
N芯片可以包括调谐解调器220、通信器230、外部装置接口250、控制器210、存储器290、用户输入接口、视频处理器260-1、音频处理器260-2、显示器280、音频输出接口272、供电电源。在其他实施例中N芯片也可以包括更多或更少的模块。
其中,调谐解调器220,用于对通过有线或无线方式接收广播电视信号,进行放大、混频和谐振等调制解调处理,从而从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。根据电视信号广播制式不同,调谐解调器220的信号途径可以有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,所述信号的调整方式可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,调谐解调器220可以解调模拟信号和/或数字信号。
调谐解调器220,还用于根据用户选择,以及由控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过外置装置接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据控制器的控制接收遥控器100的控制信号。
外部装置接口250,是提供N芯片控制器210和A芯片及外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子251、复合视频消隐同步(CVBS)端子252、模拟或数字分量端子253、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。本申请不对外部装置接口的数量和类型进行限制。
控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作系统和/或各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图4所示,控制器210包括只读存储器RAM213、随机存取存储器ROM214、图形处理器216、CPU处理器212、通信接口218、以及通信总线。其中,RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM214中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
CPU处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。所述多个处理器中可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
控制器210可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如:语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
用户输入接口,用于将用户的输入信号发送给控制器210,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示器的更新率有关。输入有通常的格式采用如插帧方式实现。
显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面。显示器280包括用于呈现画面的显示器组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。显示器220,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与控制器210一起集成在一个或多个芯片中。
供电电源,用于在控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
与N芯片相类似,如图4所示,A芯片可以包括控制器310、通信器330、检测器340、存储器390。在某些实施例中还可以包括用户输入接口、视频处理器、音频处理器、显示器、音频输出接口。在某些实施例中,也可以存在独立为A芯片供电的供电电源。
通信器330是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器330可以包括WIFI模块331,蓝牙通信协议模块332,有线以太网通信协议模块333,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块。
A芯片的通信器330和N芯片的通信器230也有相互交互。例如,N芯片的WiFi模块231用于连接外部网络,与外部服务器等产生网络通信。A芯片的WiFi模块331用于连接至N芯片的WiFi模块231,而不与外界网络等产生直接连接。因此,对于用户而言,一个如上述实施例中的显示设备至对外显示一个WiFi账号。
检测器340,是显示设备A芯片用于采集外部环境或与外部交互的信号的组件。检测器340可以包括光接收器342,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器341,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
外部装置接口350,提供控制器310与N芯片或外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接。
控制器310,通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与N芯片的交互,来控制显示设备200的工作和响应用户的操作。
如图4所示,控制器310包括只读存储器ROM313、随机存取存储器RAM314、图形处理器316、CPU处理器312、通信接口318、以及通信总线。其中,ROM313和RAM314以及图形处理器316、CPU处理器312、通信接口318通过总线相连接。
ROM313,用于存储各种系统启动的指令。CPU处理器312运行ROM中系统启动指令,将存储在存储器390的操作系统拷贝至RAM314中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器312再将存储器390中各种应用程序拷贝至RAM314中,然后,开始运行启动各种应用程序。
CPU处理器312,用于执行存储在存储器390中操作系统和应用程序指令,和与N芯片进行通信、信号、数据、指令等传输与交互,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
通信接口,可包括第一接口318-1到第n接口318-n。这些接口可以是经由网络被连接到外部设备的网络接口,也可以是经由网络被连接到N芯片的网络接口。
控制器310可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
图形处理器316,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
A芯片的图形处理器316与N芯片的图形处理器216均能产生各种图形对象。区别性的,若应用1安装于A芯片,应用2安装在N芯片,当用户在应用1的界面,且在应用1内进行用户输入的指令时,由A芯片图形处理器316产生图形对象。当用户在应用2的界面,且在应用2内进行用户输入的指令时,由N芯片的图形处理器216产生图形对象。
图5中示例性示出了根据示例性实施例中显示设备的功能配置示意图。
如图5所示,A芯片的存储器390和N芯片的存储器290分别用于存储操作系统、应用程序、内容和用户数据等,在A芯片的控制器310和N芯片的控制器210的控制下执行驱动显示设备200的系统运行以及响应用户的各种操作。A芯片的存储器390和N芯片的存储器290可以包括易失性和/或非易失性存储器。
对于N芯片,存储器290,具体用于存储驱动显示设备200中控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作系统(OS)内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储视频处理器260-1和音频处理器260-2、显示器280、通信接口230、调谐解调器220、输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理系统资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
存储器390,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器390中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。由于存储器390与存储器290的功能比较相似,相关之处参见存储器290即可,在此就不再赘述。
示例的,存储器390,包括图像控制模块3904、音频控制模块2906、外部指令识别模块3907、通信控制模块3908、光接收模块3909、操作系统3911、以及其他应用程序3912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序,来执行诸如:图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
区别性的,N芯片的外部指令识别模块2907和A芯片的外部指令识别模块3907可识别不同的指令。
示例性的,由于摄像头等图像接收设备与A芯片连接,因此,A芯片的外部指令识别模块3907可包括图形识别模块2907-1,图形识别模块3907-1内存储有图形数据库,摄像头接收到外界的图形指令时,与图形数据库中的指令进行对应关系,以对显示设备作出指令控制。而由于语音接收设备以及遥控器与N芯片连接,因此,N芯片的外部指令识别模块2907可包括语音识别模块2907-2,图形识别模块2907-2内存储有语音数据库,语音接收设备等接收到外界的语音指令或时,与语音数据库中的指令进行对应关系,以对显示设备作出指令控制。同样的,遥控器等控制装置100与N芯片连接,由按键指令识别模块与控制装置100进行指令交互。
图6a中示例性示出了根据示例性实施例中显示设备200中软件系统的配置框图。
对N芯片,如图6a中所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示器、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
事件传输系统2914,可在操作系统2911内或应用程序2912中实现。一些实施例中,一方面在在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-1,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理模块2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
由于A芯片的操作系统3911与N芯片的操作系统2911的功能比较相似,相关之处参见操作系统2911即可,在此就不再赘述。
如图6b中所示,显示设备的应用程序层包含可在显示设备200执行的各种应用程序。
N芯片的应用程序层2912可包含但不限于一个或多个应用程序,如:视频点播应用程序、应用程序中心、游戏应用等。A芯片的应用程序层3912可包含但不限于一个或多个应用程序,如:直播电视应用程序、媒体中心应用程序等。需要说明的是,A芯片和N芯片上分别包含什么应用程序是根据操作系统和其他设计确定的,本发明无需对A芯片和N芯片上所包含的应用程序做具体的限定和划分。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在显示设备中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
图7中示例性示出了根据示例性实施例中显示设备200中用户界面的示意图。如图7所示,用户界面包括多个视图显示区,示例的,第一视图显示区201和播放画面202,其中,播放画面包括布局一个或多个不同项目。以及用户界面中还包括指示项目被选择的选择器,可通过用户输入而移动选择器的位置,以改变选择不同的项目。
需要说明的是,多个视图显示区可以呈现不同层级的显示画面。如,第一视图显示区可呈现视频聊天项目内容,第二视图显示区可呈现应用层项目内容(如,网页视频、VOD展示、应用程序画面等)。
可选的,不同视图显示区的呈现存在优先级区别,优先级不同的视图显示区之间,视图显示区的显示优先级不同。如,系统层的优先级高于应用层的优先级,当用户在应用层使用获取选择器和画面切换时,不遮挡系统层的视图显示区的画面展示;以及,根据用户的选择使应用层的视图显示区的大小和位置发生变化时,系统层的视图显示区的大小和位置不受影响。
也可以呈现相同层级的显示画面,此时,选择器可以在第一视图显示区和第二视图显示区之间做切换,以及当第一视图显示区的大小和位置发生变化时,第二视图显示区的大小和位置可随及发生改变。
由于A芯片及N芯片中可能分别安装有独立的操作系统,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。例如,A芯片和N芯片均可以独立安装有安卓(Android)及各类APP,使得每个芯片均可以实现一定的功能,并且使A芯片和N芯片协同实现某项功能。
在显示设备存储的应用程序中,通常会包括一些需要对显示设备的周围环境进行录音的应用程序,例如聊天应用、语音控制应用等,并且这些应用程序可能分别设置于不同的系统中。例如,聊天应用设置于N芯片中,语音控制应用设置于A芯片中。然而,根据Android系统的设计,同一个音频资源同一时刻仅支持一个应用程序使用。当有多个应用程序需要同时录音时,各个应用程序将无法获得所需的录音信息,从而导致这些应用程序将无法正常工作。基于此,本实施例提供一种录音控制方法,以解决上述问题。
请参阅图8,本实施例提供一种录音控制方法,应用于服务器,具体包括如下步骤S801-S804。
步骤S801,服务器接收显示设备发送的录音应用的录音请求。
本实施例中,如图9所示,服务器能够给不同的显示设备提供录音服务,并且,每一给该显示设备都有设有录音模块和可读性存储介质。该录音模块用于录制显示设备所处环境的声音,该可读性存储介质用于存储录音信息以及各种应用程序。
在显示设备中,当有录音应用需要录制显示设备所处环境的声音时,该录音应用会向该显示设备的录音控制模块发送一个录音请求,该录音控制模块会将该录音请求发送给服务器。示例性的,对于双系统的显示设备A,该录音应用可以是A芯片中的语音控制应用、N芯片中的聊天应用等。
其中,需要说明的是,该录音请求携带有显示设备的设备标识和应用程序的应用标识。该设备标识用于唯一指示该显示设备,该应用标识用于唯一指示该录音应用。
步骤S802,服务器给每一个录音应用分配一个内存空间,并将显示设备、录音应用和内存空间的对应关系存储于应用列表中。
在一种可能的实现方式中,服务器允许每一个显示设备和录音应用进行录音。此时,服务器在接收到录音请求之后,无需对该显示设备和录音应用的合法性进行校验,直接给每一个录音应用分配一个内存空间。
在另一种可能的实现方式中,服务器只允许经过授权的显示设备和录音应用进行录音。此时,服务器在接收到录音请求之后,可以先根据该录音请求携带的设备标识和应用标识,对该录音应用进行认证,判断其合法性。
在一个示例中,可以在服务器内预先设置一个存储有所有合法显示设备的设备标识,及合法录音应用的应用标识的列表,如果该列表中同时包括该录音请求携带的设备标识和应用标识,则说明该显示设备和录音应用均合法。此时,服务器给该录音应用分配一段内存空间,并分配一个唯一指示该录音应用的应用标识。
在录音应用分配到应用标识和内存空间之后,服务器将该显示设备、录音应用和内存空间的对应关系存储于一个应用列表中。
例如表1示出的应用列表,该应用列表内存储有显示设备A中聊天应用和内存空间的对应关系;显示设备A中语音控制应用和内存空间的对应关系;显示设备B中游戏应用和内存空间的对应关系;以及,显示设备B中聊天应用和内存空间的对应关系。
表1应用列表
名称 | 设备标识 | 应用标识 | 内存空间 |
聊天应用 | A | ID-1 | M1 |
语音控制应用 | A | ID-2 | M2 |
游戏应用 | B | ID-3 | M3 |
聊天应用 | B | ID-4 | M4 |
其中,需要说明的是,在表1中的应用标识可以是录音请求携带的应用标识,也可是由服务器分配给录音应用的应用标识,本实施例对此不进行限制。
步骤S803,服务器获取显示设备的录音信息,并每间隔预设的时间,执行如下步骤S1-S2。
首先,需要说明的是,由于各个录音模块需要实时从显示设备的录音模块获取显示设备周围环境的声音,例如语音控制模块要实时获取用户的说话声音,以便根据用户的语音控制显示设备。
因此,显示设备需要实时地将录音模块录制的录音信息发送给服务器,以由服务器对该录音信息进行处理之后,实时地将各个录音应用所需的录音信息同时反馈给显示设备,以由显示设备分发给对应的录音应用,保证各个录音应用能够正常运行。
服务器从显示设备获取录音信息时,首先需要先判断该显示设备是否处于录音状态。如果显示设备处于录音状态,则直接读取录音信息。如果显示设备不处于录音状态,则需要先控制显示设备的录音模块开始录音,并随后获取录音信息。
在一个可能的实现方式中,当服务器新存储一个显示设备的录音应用的对应关系之后,可以通过判断当前应用列表中,是否有该显示设备的其它录音应用的对应关系,如果有,则说明该显示设备处于录音状态。
当服务器获取到录音信息之后,通过不断执行如下步骤S1-S2,保证及时对接收到的录音信息进行处理和分发。
步骤S1,服务器将录音信息存储于每一个内存空间内。
由于同一录音信息,在同一时间无法同时发送给多个录音应用。因此,服务器需要每间隔预设的时间,便将该时间间隔内接收到的录音信息储于每个录音应用的内存空间内,使之成为不同的录音信息,以便由服务器同时将其分发给对应的录音应用。
其中,需要说明的是,该预设的时间根据预先的配置确定,例如1ms、5ms、10ms等,本实施例对此不进行限制。
在一个示例中,结合表1示出的应用列表,服务器每间隔10ms将该10ms内接收到的显示设备A发送的录音信息存储于内存空间M1-M2中。每间隔10ms将该10ms内接收到的显示设备B发送的录音信息存储于内存空间M3-M4中
步骤S2,服务器将根据对应关系,将每一个内存空间内的录音信息同时发送给对应的显示设备。
在一个示例中,结合表1示出的应用列表,服务器在将接收到的录音信息存储于内存空间M1-M4之后,便同时将内存空间M1、M2内的录音信息发送给显示设备A,将内存空间M3、M4内的录音信息发送给显示设备B。显示设备A在接收到内存空间M1、M2内的录音信息,分别将其分发给聊天应用和语音控制应用。显示设备B在接收到内存空间M3、M4内的录音信息,分别将其分发给游戏应用和聊天应用。
服务器通过不断执行上述步骤S1-S2,便可以实时将显示设备的麦克风录制的声音同时发送该显示设备中不同的录音应用,以保证各个同时运行的录音应用正常工作。
作为一种可选的实施方式,录音应用的录音请求还包括该录音应用的延时需求(例如延时100ms)。服务器在接收到该录音请求之后,可以将该延时需求存储于应用列表中与该录音应用的对应位置。
服务器在向录音应用发送录音信息时,可以根据每一个录音应用的延时需求,对与该录音应用对应的内存空间内的录音信息进行延时发送。服务器在发送录音信息的过程中,可以通过调整读数据、写数据之间的时间长度,实现对录音信息的延时控制。具体地,当写数据位置减去读数据位置的之间的时间长度不满足延时需求时,将阻塞住读数据,不给录音应用发送录音信息。
步骤S804,服务器接收显示设备发送的录音应用的录音停止指令,并将该录音应用的对应关系从应用列表中删除。
当录音应用不再需要录音时,例如该录音应用关闭时,其会发送一个录音停止指令给显示设备的录音控制模块,该录音控制模块会将其转发给服务器,以指示服务器停止向该录音应用提供录音信息。该录音停止指令携带该录音应用所在显示设备的设备标识,以及,该录音应用的应用标识。显示设备在接收到该录音停止指令之后,根据该设备标识和应用标识,从应用列表中查找到该录音应用的对应关系,并将该对应关系删除。
在一个示例中,结合表1示例性示出的应用列表,当服务器接收到显示设备A发送的聊天应用的录音停止请求之后,对该录音停止请求进行解析,获得设备标识A和应用标识ID-1。根据该设备标识A和应用标识ID-1从应用列表中查找到该聊天应用的对应关系,并将该对应关系删除。
显示设备在删除该对应关系之后,需要确定该应用列表中是否还有该显示设备的其它录音应用的对应关系,如果有,则说明有其它的录音应用正在进行录音,该显示设备继续执行上述步骤S1-S2。如果应用列表中没有该显示设备的其他录音应用的对应关系,则说明该显示设备所有的录音应用均已停止录音,此时,服务器控制显示设备停止录音。
此外,作为一种可选的实施方式,服务器在删除录音应用的对应关系之后,可以将该录音应用的录音信息也从对应内存空间中删除,并撤回给其分配的内存空间,以避免不工作的录音应用占用服务器的内存资源。
需要说明的是,在本实施例中,服务器与显示设备之间的通信可以为基于RPC(Remote Process Control)的通信方式,例如,Socket、串口、HDMI-CEC等,当然也可以为其它通信方式,本实施例对此不进行限制。
通过本实施例提供的录音控制方法,显示设备上相同或者不同系统上,同时运行的不同录音应用,能够同时获取同一录音资源,从而保证这些录音应用能够同时正常工作。
基于上述内容,本实施例还提供一种录音控制方法,应用于显示设备,该方法包括如下步骤S1001-S1004,具体如图10所示。
步骤S1001,显示设备将每一个录音应用的录音请求发送给服务器。具体参见步骤S801,本实施例在此不进行赘述。
步骤S1002,显示设备将录音模块的录音信息发送给服务器。具体参见步骤S801,本实施例在此不进行赘述。
步骤S1003,显示设备接收服务器发送给每一个录音应用的录音信息。
步骤S1004,显示设备将录音信息分发给对应的录音应用。
结合表1示出的应用列表,显示设备A在接收到服务器发送的聊天应用的录音信息和语音控制应用的录音信息之后,将这两个录音信息分别发送给聊天应用和语音控制应用。
通过本实施例提供的录音控制方法,显示设备上相同或者不同系统上,同时运行的不同录音应用,能够同时获取同一录音资源,从而保证这些录音应用能够同时正常工作。
请参阅图11,基于上述本实施例提供的一种录音控制方法,本实施例还提供一种录音控制装置,该装置应用于服务器,包括如下部件。
第一接收模块1101,用于接收显示设备发送的录音应用的录音请求,以及显示设备发送的录音信息。
第一管理模块1102,用于给每一个录音应用分配一个内存空间,并将显示设备、录音应用和内存空间的对应关系存储于应用列表中,并在第一接收模块1101获取显示设备的录音信息之后,每间隔预设的时间,将录音信息存储于每一个内存空间内。
第一发送模块1103,用于每间隔预设的时间,根据对应关系,将每一个内存空间内的录音信息同时发送给对应的显示设备。
可选的,第一接收模块1101,还用于接收显示设备发送的录音应用的录音停止指令,并将该录音应用的对应关系从应用列表中删除。
可选的,该第一管理模块1102,还用于如果应用列表内不包括显示设备的对应关系,则控制该显示设备停止录音。
可选的,该第一管理模块1102,还用于对显示设备和录音应用进行身份认证,若显示设备和录音应用均合法,则给该录音应用分配一个内存空间。
第一接收模块1101,还用于如果显示设备当前处于录音状态,则直接获取该显示设备的录音信息;如果显示设备当前不处于录音状态,则在指示显示设备开始录音之后,获取显示设备的录音信息。
请参阅图12,基于上述本实施例提供的一种录音控制方法,本实施例还提供一种录音控制装置,该装置应用于显示设备,包括如下部件。
第二发送模块1201,用于将每一个录音应用的录音请求发送给服务器,以及,将录音模块的录音信息发送给服务器。
第二接收模块1202,用于接收服务器发送给每一个录音模块的录音信息。
录音管理模块1203,用于将录音信息分发给对应的录音应用。
请参阅图13,本实施例提供的一种服务器,该服务器包括上述本实施例提供的一种应用于服务器的录音控制装置。
请参阅图14,本实施例提供的一种显示设备,该显示设备包括录音模块1204,和上述本实施例提供的一种应用于显示设备的录音控制装置。
上述本实施例提供的录音控制装置、服务器、显示设备,均能够使显示设备上相同或者不同系统上,同时运行的不同录音应用,能够同时获取同一录音资源,从而保证这些录音应用能够同时正常工作。
基于本申请中示出的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
应当理解,本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
Claims (10)
1.一种录音控制方法,应用于服务器,其特征在于,包括:
接收显示设备发送的录音应用的录音请求;
给每一个所述录音应用分配一个内存空间,并将所述显示设备、所述录音应用和所述内存空间的对应关系存储于应用列表中;
获取所述显示设备的录音信息,并每间隔预设的时间,执行如下步骤S1-S2:
S1将所述录音信息存储于每一个所述内存空间内;
S2根据所述对应关系,将每一个所述内存空间内的所述录音信息同时发送给所述显示设备。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收所述显示设备发送的所述录音应用的录音停止指令,并将所述录音应用的对应关系从所述应用列表中删除。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
如果所述应用列表内不包括所述显示设备的对应关系,则控制所述显示设备停止录音。
4.根据权利要求1所述的方法,其特征在于,给每一个所述录音应用分配一个内存空间,包括:
对所述显示设备和所述录音应用进行身份认证,若所述显示设备和所述录音应用均合法,则给所述录音应用分配一个内存空间。
5.根据权利要求1所述的方法,其特征在于,所述接收显示设备发送的录音信息,包括:
如果所述显示设备当前处于录音状态,则直接获取所述显示设备发送的录音信息;
如果所述显示设备当前不处于录音状态,则在指示所述显示设备开始录音之后,获取所述显示设备的录音信息。
6.一种录音控制方法,应用于显示设备,其特征在于,包括:
将每一个录音应用的录音请求发送给服务器;
将录音模块的录音信息发送给服务器;
接收服务器发送给每一个所述录音应用的录音信息;
将所述录音信息分发给对应的录音应用。
7.一种录音控制装置,应用于服务器,其特征在于,包括:
第一接收模块,用于接收显示设备发送的录音应用的录音请求,以及所述显示设备发送的录音信息;
第一管理模块,用于给每一个所述录音应用分配一个内存空间,并将所述显示设备、所述录音应用和所述内存空间的对应关系存储于应用列表中;并在所述第一接收模块获取显示设备的录音信息之后,每间隔预设的时间,将所述录音信息存储于每一个所述内存空间内;
第一发送模块,用于每间隔所述预设的时间,根据所述对应关系,将每一个所述内存空间内的所述录音信息同时发送给所述显示设备。
8.一种录音控制装置,应用于显示设备,其特征在于,包括:
第二发送模块,用于将每一个录音应用的录音请求发送给服务器,以及,将录音模块的录音信息发送给服务器;
第二接收模块,用于接收服务器发送给每一个所述录音应用的所述录音信息;
录音管理模块,用于将所述录音信息分发给对应的录音应用。
9.一种服务器,其特征在于,包括如权利要求7所述的一种录音控制装置。
10.一种显示设备,其特征在于,包括录音模块和如权利要求8所述的一种录音控制装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910497523.4A CN112071337B (zh) | 2019-06-10 | 2019-06-10 | 一种录音控制方法、装置、服务器和显示设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910497523.4A CN112071337B (zh) | 2019-06-10 | 2019-06-10 | 一种录音控制方法、装置、服务器和显示设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112071337A true CN112071337A (zh) | 2020-12-11 |
CN112071337B CN112071337B (zh) | 2022-03-15 |
Family
ID=73658187
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910497523.4A Active CN112071337B (zh) | 2019-06-10 | 2019-06-10 | 一种录音控制方法、装置、服务器和显示设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112071337B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1722757A (zh) * | 2004-07-12 | 2006-01-18 | 深圳市友邻通讯设备有限公司 | 基于话音通讯的录音系统 |
CN101477816A (zh) * | 2008-12-25 | 2009-07-08 | 北京中星微电子有限公司 | 一种录音模式转换方法及装置 |
CN101616222A (zh) * | 2009-07-22 | 2009-12-30 | 杭州华三通信技术有限公司 | 电话会议的录音方法和设备 |
CN103701803A (zh) * | 2013-12-26 | 2014-04-02 | 迈普通信技术股份有限公司 | 录音控制系统 |
CN103905670A (zh) * | 2012-12-28 | 2014-07-02 | 鸿富锦精密工业(深圳)有限公司 | VoIP录音方法与装置 |
CN104113604A (zh) * | 2014-07-29 | 2014-10-22 | 广东能龙教育股份有限公司 | 一种云环境下语音快速采集的实现方法 |
WO2016020942A2 (en) * | 2014-08-08 | 2016-02-11 | Vishal Gupta | Ultra quick messaging & connected phonebooks device |
CN106897146A (zh) * | 2017-02-09 | 2017-06-27 | 青岛海信移动通信技术股份有限公司 | 一种终端的麦克风的数据处理方法和具有麦克风的终端 |
CN109378017A (zh) * | 2018-09-26 | 2019-02-22 | 科大讯飞股份有限公司 | 一种录音方法、装置、音频系统、录音设备及存储介质 |
CN109508230A (zh) * | 2018-09-29 | 2019-03-22 | 百度在线网络技术(北京)有限公司 | 音频数据的采集方法、装置与存储介质 |
US20190149917A1 (en) * | 2017-11-10 | 2019-05-16 | Nigel Henry CANNINGS | Audio recording system and method |
-
2019
- 2019-06-10 CN CN201910497523.4A patent/CN112071337B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1722757A (zh) * | 2004-07-12 | 2006-01-18 | 深圳市友邻通讯设备有限公司 | 基于话音通讯的录音系统 |
CN101477816A (zh) * | 2008-12-25 | 2009-07-08 | 北京中星微电子有限公司 | 一种录音模式转换方法及装置 |
CN101616222A (zh) * | 2009-07-22 | 2009-12-30 | 杭州华三通信技术有限公司 | 电话会议的录音方法和设备 |
CN103905670A (zh) * | 2012-12-28 | 2014-07-02 | 鸿富锦精密工业(深圳)有限公司 | VoIP录音方法与装置 |
CN103701803A (zh) * | 2013-12-26 | 2014-04-02 | 迈普通信技术股份有限公司 | 录音控制系统 |
CN104113604A (zh) * | 2014-07-29 | 2014-10-22 | 广东能龙教育股份有限公司 | 一种云环境下语音快速采集的实现方法 |
WO2016020942A2 (en) * | 2014-08-08 | 2016-02-11 | Vishal Gupta | Ultra quick messaging & connected phonebooks device |
CN106897146A (zh) * | 2017-02-09 | 2017-06-27 | 青岛海信移动通信技术股份有限公司 | 一种终端的麦克风的数据处理方法和具有麦克风的终端 |
US20190149917A1 (en) * | 2017-11-10 | 2019-05-16 | Nigel Henry CANNINGS | Audio recording system and method |
CN109378017A (zh) * | 2018-09-26 | 2019-02-22 | 科大讯飞股份有限公司 | 一种录音方法、装置、音频系统、录音设备及存储介质 |
CN109508230A (zh) * | 2018-09-29 | 2019-03-22 | 百度在线网络技术(北京)有限公司 | 音频数据的采集方法、装置与存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112071337B (zh) | 2022-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112073797B (zh) | 一种音量调节方法及显示设备 | |
CN112399212A (zh) | 显示设备、分享文件的方法和服务器 | |
CN112073662A (zh) | 一种显示设备 | |
CN111385631B (zh) | 一种显示设备、通信方法及存储介质 | |
CN112068741B (zh) | 显示设备及显示设备蓝牙开关状态的显示方法 | |
CN112995733B (zh) | 一种显示设备、设备发现方法及存储介质 | |
CN112463267B (zh) | 在显示设备屏幕上呈现屏保信息的方法及显示设备 | |
CN112528051A (zh) | 一种演唱作品的发布方法、显示设备及服务器 | |
CN112073776B (zh) | 语音控制方法及显示设备 | |
CN112073777B (zh) | 一种语音交互方法及显示设备 | |
CN112073812B (zh) | 一种智能电视上的应用管理方法及显示设备 | |
CN113727163B (zh) | 一种显示设备 | |
CN112071338A (zh) | 一种录音控制方法、装置和显示设备 | |
CN112071337B (zh) | 一种录音控制方法、装置、服务器和显示设备 | |
CN112073808A (zh) | 一种色彩空间切换方法及显示装置 | |
CN112073769A (zh) | 显示设备及应用共同显示的方法 | |
CN112073666A (zh) | 一种显示设备的电源控制方法及显示设备 | |
CN112073773A (zh) | 一种屏幕互动方法、装置及显示设备 | |
CN112073816A (zh) | 双系统usb升级方法、装置及显示设备 | |
CN112399223B (zh) | 一种改善莫尔条纹现象的方法及显示设备 | |
CN112073772B (zh) | 基于双系统的按键无缝传递方法及显示设备 | |
CN112995113B (zh) | 一种显示设备、端口控制方法及存储介质 | |
CN112073811B (zh) | 一种文件传输调度方法及显示设备 | |
CN112071312B (zh) | 一种语音控制方法及显示设备 | |
CN112073779B (zh) | 显示设备及按键传递的容错方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |