CN113691841A - 一种演唱标签添加方法、快速试听方法及显示设备 - Google Patents

一种演唱标签添加方法、快速试听方法及显示设备 Download PDF

Info

Publication number
CN113691841A
CN113691841A CN202010420359.XA CN202010420359A CN113691841A CN 113691841 A CN113691841 A CN 113691841A CN 202010420359 A CN202010420359 A CN 202010420359A CN 113691841 A CN113691841 A CN 113691841A
Authority
CN
China
Prior art keywords
singing
file
label
chorus
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010420359.XA
Other languages
English (en)
Other versions
CN113691841B (zh
Inventor
王光强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juhaokan Technology Co Ltd
Original Assignee
Juhaokan Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juhaokan Technology Co Ltd filed Critical Juhaokan Technology Co Ltd
Priority to CN202010420359.XA priority Critical patent/CN113691841B/zh
Priority to CN202180060962.4A priority patent/CN116349231A/zh
Priority to PCT/CN2021/093151 priority patent/WO2021228109A1/zh
Publication of CN113691841A publication Critical patent/CN113691841A/zh
Application granted granted Critical
Publication of CN113691841B publication Critical patent/CN113691841B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8352Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请公开了一种演唱标签添加方法、快速试听方法及显示设备,在双端用户合唱录制过程中,基于本端用户的演唱部分的标记,在合唱所选歌曲文件的时间轴上添加第一演唱标签;基于对端用户的演唱部分的标记,在时间轴上添加第二演唱标签。在试听过程中,控制器响应于本端用户触发试听控件时产生的操作指令,获取本端用户与对端用户合唱后产生的合唱文件;识别合唱文件的时间轴上的演唱标签,以确定本端用户想要试听的目标用户的演唱部分。播放合唱文件中与演唱标签对应的文件片段。可见,本发明提供的方法及显示设备,通过识别演唱标签来获取对应用户的演唱部分,即通过演唱标签快速定位实现试听单一用户演唱的部分,以快速的完成歌曲试听。

Description

一种演唱标签添加方法、快速试听方法及显示设备
技术领域
本申请涉及电视软件技术领域,尤其涉及一种演唱标签添加方法、快速试听方法及显示设备。
背景技术
随着通信技术的不断发展,电脑、智能手机、显示设备等终端设备已经越来越普及。其中,针对显示设备的功能,由于用户对应用体验的需求越来越高,通常可在显示设备中安装不同种类的应用程序。为提供一个家庭娱乐场景,显示设备可适配多种媒资场景,例如,可在显示设备内安装K歌APP,播放歌曲文件,使得人们可以足不出户就能体验到与任何人合唱的乐趣。
合唱者在利用各自的显示设备完成合唱后,可对合唱后的合唱文件进行试听。但是,现有的显示设备在提供试听时,仅能对合唱文件进行全曲试听,若用户只想对自己演唱的部分进行试听,则只能在播放合唱文件时,自行对自己演唱的部分提高试听注意力,或者拖拽时间轴,寻找自己的演唱部分进行试听。可见,现有的显示设备,在用户想要仅对自己演唱部分进行试听时,无法实现快速准确定位。
发明内容
本申请提供了一种演唱标签添加方法、快速试听方法及显示设备,以解决在用户想要仅对自己演唱部分进行试听时,现有的显示设备无法实现快速准确定位的问题。
第一方面,本申请提供了一种显示设备,包括:
显示器,被配置为显示包括试听控件的操作界面;
与所述显示器连接的控制器,所述控制器被配置为:
在合唱结束后生成合唱文件并显示所述操作界面;
接收触发所述试听控件的操作指令;
响应于所述操作指令,获取合唱产生的合唱文件;
识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
播放所述合唱文件中与所述演唱标签对应的文件片段。
进一步地,所述试听控件包括试听本端控件;以及,所述控制器接收触发所述试听控件的操作指令具体为:所述控制器接收触发所述试听本端控件的操作指令;
所述控制器识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签具体为:所述控制器响应于触发试听本端控件产生的操作指令,确定所述演唱标签中用于表征本端用户演唱对应的文件片段的第一演唱标签;
所述控制器播放所述合唱文件中与所述演唱标签对应的文件片段,具体为:所述控制器播放所述合唱文件中与所述第一演唱标签对应的文件片段。
进一步地,所述第一演唱标签包括:第一演唱开始标签和第一演唱结束标签,所述第一演唱开始标签用于标识本端用户演唱对应的文件片段的开始时刻,所述第一演唱结束标签用于标识本端用户演唱对应的文件片段的结束时刻;所述控制器在执行所述播放合唱文件中与所述第一演唱标签对应的文件片段,被进一步配置为:
检测所述演唱标签;
响应于识别到所述第一演唱开始标签,基于所述开始时刻开始播放所述文件片段,其中,所述合唱文件中与所述开始时刻和所述结束时刻对应的歌曲片段为所述文件片段;
响应于识别到所述第一演唱结束标签,基于所述结束时刻停止播放所述文件片段并继续检测所述演唱标签。
进一步地,所述试听控件包括试听对端控件,所述控制器接收触发所述试听控件的操作指令具体为:所述控制器接收触发所述试听对端控件的操作指令;
所述控制器识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签具体为:所述控制器:响应于触发试听对端控件产生的操作指令,确定所述演唱标签中用于表征对端用户演唱对应的文件片段的第二演唱标签;
所述控制器播放所述合唱文件中与所述演唱标签对应的文件片段,具体为:所述控制器:
播放所述合唱文件中与所述第二演唱标签对应的文件片段。
进一步地,所述第二演唱标签包括:第二演唱开始标签和第二演唱结束标签,所述第二演唱开始标签用于标识对端用户演唱对应的文件片段的开始时刻,所述第二演唱结束标签用于标识对端用户演唱对应的文件片段的结束时刻;所述控制器在执行所述播放合唱文件中与所述第二演唱标签对应的文件片段,被进一步配置为:
检测所述演唱标签;
响应于识别到所述第二演唱开始标签,基于所述开始时刻开始播放所述文件片段,其中,所述合唱文件中与所述开始时刻和所述结束时刻对应的歌曲片段为所述文件片段;
响应于识别到所述第二演唱结束标签,基于所述结束时刻停止播放所述文件片段并继续检测所述演唱标签。
进一步地,所述控制器在执行所述在合唱结束后生成合唱文件之前,被进一步配置为:
播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
基于所述本端用户的演唱部分的标记,在合唱文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述合唱文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
基于所述对端用户的演唱部分的标记,在合唱文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述合唱文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
第二方面,本申请还提供了一种显示设备,包括:
显示器;
与所述显示器连接的控制器,所述控制器被配置为:
在合唱结束后,接收触发试听合唱文件的操作的操作指令,其中所述合唱文件是在合唱过程中根据所述显示设备接收的音频数据、其他显示设备接收到的音频数据以及合唱曲目的伴奏生成的文件,所述其他显示设备是和所述显示设备进行合唱的其他显示设备;
响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段。
进一步地,所述控制器响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段,包括:
所述控制器响应于所述操作指令,确定所述合唱文件的时间轴上的第一演唱标签,所述第一演唱标签是在生成所述合唱文件时,根据文件片段的时间点对应设置的标签;所述文件片段是指合唱文件中包含所述显示设备接收的音频数据的片段;
播放所述第一演唱标签对应的文件片段。
第三方面,本申请还提供一种显示设备,包括:
显示器,被配置为显示歌曲文件;
与所述显示器连接的控制器,所述控制器被配置为:
播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
基于所述本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述歌曲文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
基于所述对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述歌曲文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
进一步地,所述控制器被进一步配置为:
在获取到所述歌曲文件的时间轴之后,接收从本端显示设备或对端显示设备中录入的声音数据;
识别所述声音数据的声纹特性,确定所述声音数据是否与第一声纹或第二声纹相匹配,其中所述第一声纹是表征本端显示设备的用户的声纹,第二声纹是表征对端显示设备的用户的声纹;
在所述歌曲文件中与所述第一声纹对应的文件片段增加第一演唱标签,以及,在所述歌曲文件中与所述第二声纹对应的文件片段增加第二演唱标签。
进一步地,所述控制器被进一步配置为:
在合唱结束后生成合唱文件并显示所述操作界面;
接收触发所述试听控件的操作指令;
响应于所述操作指令,获取合唱产生的合唱文件;
识别所述合唱文件的时间轴上的和所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
播放所述合唱文件中与所述演唱标签对应的文件片段。
第四方面,本申请还提供了一种快速试听方法,所述方法包括:
在合唱结束后生成合唱文件并显示所述操作界面;
接收触发所述试听控件的操作指令;
响应于所述操作指令,获取合唱产生的合唱文件;
识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
播放所述合唱文件中与所述演唱标签对应的文件片段。
第五方面,本申请还提供了一种快速试听方法,所述方法包括:
在合唱结束后,接收触发试听合唱文件的操作的操作指令,其中所述合唱文件是在合唱过程中根据所述显示设备接收的音频数据、其他显示设备接收到的音频数据以及合唱曲目的伴奏生成的文件,所述其他显示设备是和所述显示设备进行合唱的其他显示设备;
响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段。
第六方面,本申请提供了一种演唱标签添加方法,所述方法包括:
播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
基于所述本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述歌曲文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
基于所述对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述歌曲文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
第七方面,本申请还提供了一种存储介质,该计算机存储介质可存储有程序,该程序执行时可实现包括本申请提供的快速试听方法各实施例中的部分或全部步骤。
第八方面,本申请还提供了一种存储介质,该计算机存储介质可存储有程序,该程序执行时可实现包括本申请提供的演唱标签添加方法各实施例中的部分或全部步骤。
由以上技术方案可知,本发明实施例提供的一种演唱标签添加方法、快速试听方法及显示设备,在双端用户合唱录制过程中,播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息,基于本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签;基于对端用户的演唱部分的标记,在时间轴上添加第二演唱标签。在试听过程中,控制器接收并响应于本端用户触发试听控件时产生的操作指令,获取本端用户与对端用户合唱后产生的合唱文件;识别合唱文件的时间轴上的与试听控件相对应的演唱标签,以确定本端用户想要试听的目标用户的演唱部分。并基于识别到的演唱标签,播放合唱文件中与演唱标签对应的文件片段。可见,本发明提供的方法及显示设备,通过识别演唱标签来获取对应用户的演唱部分,即通过演唱标签快速定位实现试听单一用户演唱的部分,以快速的完成歌曲试听。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据实施例中显示设备200的硬件配置框图;
图3中示例性示出了根据实施例中控制设备100的硬件配置框图;
图4中示例性示出了根据实施例中显示设备200的功能配置示意图;
图5a中示例性示出了根据实施例中显示设备200中软件配置示意图;
图5b中示例性示出了根据实施例中显示设备200中应用程序的配置示意图;
图6中示例性示出了根据实施例中演唱标签添加方法的流程图;
图7中示例性示出了根据实施例中合唱时双方数据流的同步流程图;
图8中示例性示出了根据实施例中根据声纹确定双端用户演唱部分的方法流程图;
图9中示例性示出了根据实施例中显示设备的操作界面的示意图;
图10中示例性示出了根据实施例中快速试听方法的第一种流程图;
图11中示例性示出了根据实施例中快速试听方法的数据流程图;
图12中示例性示出了根据实施例中按照颜色添加歌词标签的显示示意图;
图13中示例性示出了根据实施例中快速试听方法的第二种流程图。
具体实施方式
为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请中示出的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。
应当理解,本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
本申请中使用的术语“模块”,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,通常可在较短的距离范围内无线控制电子设备。一般使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬键。
本申请中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1中示出,用户可通过移动终端300和控制装置100操作显示设备200。
其中,控制装置100可以遥控器,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键,语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
在一些实施例中,也可以使用移动终端、平板电脑、计算机、笔记本电脑、和其他智能设备以控制显示设备200。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,在直观的用户界面(UI)中为用户提供各种控制。
示例的,移动终端300可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以实现用移动终端300与显示设备200建立控制指令协议,将遥控控制键盘同步到移动终端300上,通过控制移动终端300上用户界面,实现控制显示设备200的功能。也可以将移动终端300上显示音视频内容传输到显示设备200上,实现同步显示功能。
如图1中还示出,显示设备200还与服务器400通过多种通信方式进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器400可以一组,也可以多组,可以一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。
显示设备200,可以液晶显示器、OLED显示器、投影显示设备。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议电视(IPTV)等。
图2中示例性示出了根据示例性实施例中显示设备200的硬件配置框图。如图2中示出,显示设备200中包括控制器210、调谐解调器220、通信接口230、检测器240、输入\输出接口250、视频处理器260-1,音频处理器60-2,显示器280,音频输出270、存储器290,供电电源、红外接收器。
显示器280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面的组件。显示器280包括用于呈现画面的显示屏组件,以及驱动图像显示的驱动组件。显示视频内容,可以来自广播电视内容,也可以是说,可通过有线或无线通信协议接收的各种广播信号。或者,可显示来自网络通信协议接收来自网络服务器端发送的各种图像内容。
同时,显示器280,同时显示显示设备200中产生且用于控制显示设备200的用户操控UI界面。
以及,根据显示器280类型不同,还包括用于驱动显示的驱动组件。或者,倘若显示器280为一种投影显示器,还可以包括一种投影装置和投影屏幕。
通信接口230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信接口230可以是Wifi芯片231,蓝牙通信协议芯片232,有线以太网通信协议芯片233等其他网络通信协议芯片或近场通信协议芯片,以及红外接收器(图中未示出)。
显示设备200可以通过通信接口230与外部控制设备或内容提供设备之间建立控制信号和数据信号发送和接收。以及,红外接收器,可用于接收控制装置100(如:红外遥控器等)红外控制信号的接口器。
检测器240,是显示设备200用于采集外部环境或与外部交互的信号。检测器240包括光接收器242,用于采集环境光线强度的传感器,可以通过采集环境光可以自适应性显示参数变化等。
以及包括图像采集器241,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
在其他一些示例性实施例中,检测器240,还可温度传感器等,如通过感测环境温度,显示设备200可自适应调整图像的显示色温。如当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调,或当温度偏低的环境时,可以调整显示设备200显示图像偏暖色调。
在其他一些示例性实施例中,检测器240,还可声音采集器等,如麦克风,可以用于接收用户的声音,包括用户控制显示设备200的控制指令的语音信号,或采集环境声音,用于识别环境场景类型,显示设备200可以自适应适应环境噪声。
输入/输出接口250,在控制器210的控制显示设备200与外部其他设备间数据传输。如接收外部设备的视频信号和音频信号、或命令指令等数据。
其中,输入/输出接口250可以包括,但不限于如下:可以高清多媒体接口HDMI接口251、模拟或数据高清分量输入接口253、复合视频输入接口252、USB输入接口254、RGB端口(图中未示出)等任一个或多个接口。
在其他一些示例性实施例中,输入/输出接口250也可以上述多个接口形成复合性的输入/输出接口。
调谐解调器220,通过有线或无线接收方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,从多多个无线或有线广播电视信号中解调出用户所选择电视频道频率中所携带的电视音视频信号,以及EPG数据信号。
调谐解调器220,可根据用户选择,以及由控制器210控制,响应用户选择的电视信号频率以及该频率所携带的电视信号。
调谐解调器220,可以接收信号的途径,根据电视信号广播制式不同,有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播信号等;以及根据调制类型不同,可以数字调制,也可以模拟调制方式。根据接收电视信号种类不同,可以模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过输入/输出接口250输入显示设备200中。
视频处理器260-1,用于将接收外部视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等等视频处理,可得到直接可显示设备200上显示或播放的信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,则用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对转换输入视频帧率,如将60Hz帧率转换为120Hz帧率或240Hz帧率,通常的格式采用如插帧方式实现。
显示格式化模块,则用于将接收帧率转换后视频输出信号,改变信号以符合显示格式的信号,如输出RGB数据信号。
音频处理器260-2,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等处理,得到可以在扬声器中播放的声音信号。
在其他一些示例性实施例中,视频处理器260-1可以包括一颗或多颗芯片组成。音频处理器260-2,也可以包括一颗或多颗芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以单独的芯片,也可以于控制器210一起集成在一颗或多颗芯片中。
音频输出272,在控制器210的控制下接收音频处理器260-2输出的声音信号,如:扬声器272,以及除了显示设备200自身携带的扬声器272之外,可以输出至外接设备的发生装置的外接音响输出端子274,如:外接音响接口或耳机接口等。
供电电源,在控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部电源,在显示设备200中提供外接电源的电源接口。
用户输入接口,用于接收用户的输入信号,然后,将接收用户输入信号发送给控制器210。用户输入信号可以是通过红外接收器接收的遥控器信号,可以通过网络通信模块接收各种用户控制信号。
示例的,用户通过遥控器100或移动终端300输入用户命令,用户输入接口则根据用户的输入,显示设备200则通过控制器210响应用户的输入。
在一些实施例中,用户可在显示器280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
控制器210,通过存储在存储器290上中各种软件控制程序,来控制显示设备200的工作和响应用户的操作。
如图2所示,控制器210包括RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218,如:第一接口218-1到第n接口218-n,以及通信总线。其中,RAM213和ROM214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM213中,以使开始运行启动操作系统。当操作系统启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM213中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在显示器280上。
CPU处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于在待机模式等状态下一种操作。
控制器210可以控制显示设备100的整体操作。例如:响应于接收到用于选择在显示器280上显示UI对象的用户命令,控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与所述图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等。
其中,基础模块用于产后护理显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。
例如:语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块用于控制显示器280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,用于与外部设备之间进行控制和数据通信的模块。浏览器模块,用于执行浏览服务器之间数据通信的模块。服务模块,用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
图3中示例性示出了根据示例性实施例中控制设备100的配置框图。如图3所示,控制设备100包括控制器110、通信接口130、用户输入/输出接口140、存储器190、供电电源180。
控制设备100被配置为控制显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起用用户与显示设备200之间交互中介作用。如:用户通过操作控制设备100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制设备100可是一种智能设备。如:控制设备100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端300或其他智能电子设备,可在安装操控显示设备200的应用之后,可以起到控制设备100类似功能。如:用户可以通过安装应用,在移动终端300或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制设备100实体按键的功能。
控制器110包括处理器112和RAM113和ROM114、通信接口218以及通信总线。控制器110用于控制控制设备100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信接口130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信接口130可包括WiFi芯片、蓝牙模块、NFC模块等其他近场通信模块中至少之一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144等其他输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制设备100包括通信接口130和输出接口中至少一者。控制设备100中配置通信接口130,如:WiFi、蓝牙、NFC等模块,可将用户输入指令通过WiFi协议、或蓝牙协议、或NFC协议编码,发送至显示设备200.
存储器190,用于在控制器110的控制下存储驱动和控制控制设备200的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制设备100各元件提供运行电力支持。可以电池及相关控制电路。
图4中示例性示出了根据示例性实施例中显示设备200功能配置示意图。如图4所示,存储器290用于存储操作系统、应用程序、内容和用户数据等,在控制器210控制下执行驱动显示设备200的系统运行以及响应用户的各种操作。存储器290可以包括易失性和/或非易失性存储器。
存储器290,具体用于存储驱动显示设备200中控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用户从外部设备下载的各种应用程序、以及与应用相关各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用的内部数据。存储器290用于存储OS内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储音视频处理器260-1和260-2、显示器280、通信接口230、调谐解调器220、检测器240输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理系统资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块等等。控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等其他应用。
图5a中示例性示出了根据示例性实施例中显示设备200中软件系统的配置框图。
如图5a中所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成的数据处理的媒介。一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序可访问,可实现用户可操作性。
控制应用程序2911-4,用于可控制进程管理,包括运行时间应用程序等。
事件传输系统2914,可在操作系统2911内或应用程序2912中实现,以一些实施例中,一方面在在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-1,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制设备100等)的输入。如:语音输入各种子事件,手势识别的手势输入,以及控制设备的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理器2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
如图5b中所示,应用程序层2912包含也可在显示设备200执行的各种应用程序。应用程序可包含但不限于一个或多个应用程序,如:直播电视应用程序、视频点播应用程序、媒体中心应用程序、应用程序中心、游戏应用等。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在智能电视中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。应用程序可提供显示设备进行K歌功能。
在利用显示设备进行K歌,现阶段常见的大屏K歌软件普遍功能单一、玩法独立,缺少用户间的互动,本发明实施例提供的显示设备,基于社交体系提供合唱功能,以实现深度建立用户间的关系,增强用户粘性和活跃,从而丰富显示设备K歌平台玩法,让用户在家能够做到想和谁唱就和谁唱。
本发明实施例提供的显示设备在实现合唱功能时,显示设备提供业务子系统和消息子系统。合唱过程包括:用户A先选择想合唱的用户B,选择完好友后,用户A所使用的显示设备A向业务子系统发送合唱邀请;业务子系统首先会校验显示设备A的合法性,如果是合法用户,则向消息子系统发送创建房间的申请(携带显示设备A传递过来的本账号信息和目标账号B的相关信息)。
消息子系统接收到邀请后,创建房间信息,并将房间信息返回给业务子系统,并且给用户B所使用的显示设备B推送一条邀请信息。业务子系统接收到消息子系统返回的房间信息后回给用户A(显示设备A)发送消息。用户A接收到消息后会根据反馈的房间号,加入到相应的房间中。用户B接收到消息子系统推送的好友合唱邀请信息后,如果选择接受,则会调用Imservice(即时通讯服务)加入到房间中,如果不接受,则显示设备A会收到用户B通过显示设备B发送的已拒绝的消息通知。
用户A和用户B都进入到合唱房间后,双方的通信就被建立,进入合唱逻辑,即需要各自将本地的视频流和音频流经过低延时通道传递给对方。用户A和用户B两边均独自播放伴奏,本地的音视频叠加上对端的音视频流进行播放,从而实现合唱功能。用户合唱完成后,可以通过按钮来触发是否保存作品的提示,如果保存作品,上传作品,进行作品相应的保存,如果不保存,弹出对话提示,本地删除临时文件。
本发明实施例提供的显示设备,在两个用户进行合唱的过程中,可对歌词显示位置进行调整,并在完成合唱录制过程后,可对合唱文件进行试听。
为了在合唱录制完成后,用户可以快速地定位到自己演唱的部分,本发明实施例提供了一种显示设备,通过在合成过程中的标签标记方法,对每个用户的演唱部分在歌曲时间轴上添加对应的演唱标签,以对合唱用户的演唱部分进行区分。在进行试听时,通过识别演唱标签来获取对应用户的演唱部分,即通过演唱标签快速定位实现试听单一用户演唱的部分,以快速的完成歌曲试听。
图6中示例性示出了根据实施例中演唱标签添加方法的流程图。为此,在合唱过程中添加演唱标签时,本发明实施例提供一种显示设备,包括:显示器,与显示器连接的控制器。显示器被配置为显示歌曲文件,歌曲文件为利用显示设备实现合唱功能时,双方用户所选择的合唱歌曲。控制器被配置为执行演唱标签添加方法,具体地,参见图6,该方法包括以下步骤:
S11、播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息。
本端用户和对端用户均进入合唱房间后,需先确定双方想要合唱的歌曲,在选择出合唱用的歌曲文件后,双方显示设备开始播放歌曲文件。
图7中示例性示出了根据实施例中合唱时双方数据流的同步流程图。参见图7,在进行合唱时,本端用户(客户端A)和对端用户(客户端B)需要各自将本地的视频流和音频流经过低延时网络通道传递给对方。显示设备内还设置有K歌服务端,用于实现K歌合唱时两端数据流的同步。客户端A将A端数据流经过A端低延时网络通道发送至K歌服务端,K歌服务端将A端数据流经过B端的低延时网络通道发送至客户端B;客户端B将B端数据流经过B端低延时网络通道发送至K歌服务端,K歌服务端将B端数据流经过A端的低延时网络通道发送至客户端A。数据流包括音频流和视频流。
本端用户和对端用户同步播放歌曲文件的伴奏,在合唱录制时,本端的音视频流叠加对端的音视频流即可得到合唱文件。
为准确区分本端用户和对端用户的演唱部分,本实施例提供的显示设备,可预先对本端用户和对端用户的演唱部分进行划分,为此,在一些实施例中,可根据歌曲文件的合唱划分信息进行划分。
合唱划分信息用于在合唱时提示不同用户的演唱时段,基于合唱划分信息,将歌曲文件中与用于提示第一用户的演唱时段对应的歌曲片段作为本端用户的演唱部分,以及,将歌曲文件中与用于提示第二用户的演唱时段对应的歌曲片段作为对端用户的演唱部分。
每个用于合唱的歌曲文件均会预先设定合唱划分信息,即在歌词时间轴上标示出哪几句由用户一演唱,哪几句由用户二演唱,哪几句由两个用户合唱。因此,根据预设的合唱划分信息,即可确定本端用户的演唱部分和对端用户的演唱部分。
在按照歌词划分演唱部分后,每句歌词在时间轴上的出现位置(时间)和消失位置(时间),即可确定该用户的演唱时段,演唱时段是指用户在演唱自己负责歌词的首先出现时刻和结束时刻之间的时长。其中,一个演唱时段对应歌曲文件中的一个歌曲片段,多个演唱时段和间奏时段可形成完整的时间轴,多个歌曲片段和间奏片段可形成歌曲文件。
因此,可将本端用户所负责的歌词对应的多个演唱时段作为本端用户在合唱歌曲文件时的演唱部分,以及,将对端用户所负责的歌词对应的多个演唱时段作为对端用户在合唱歌曲文件时的演唱部分。
S12、获取歌曲文件的时间轴,时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分。
为对每个用户演唱部分进行区分,本实施例提供的显示设备,在歌曲文件的时间轴上添加演唱标签。
在时间轴上添加演唱标签时,可根据合唱划分信息划分的本端用户演唱部分和对端用户演唱部分,在时间轴上添加某一时间段的标签,作为本端用户演唱部分的标记或对端用户演唱部分的标记。
S13、基于本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,第一演唱标签用于表征歌曲文件的时间轴上对应本端用户演唱部分的开始时刻和结束时刻。
歌曲文件的时间轴上,根据合唱划分信息存在的本端用户演唱部分的标记,为此,在后续试听时,为便于准确定位本端用户的演唱部分,可在时间轴上的本端用户的演唱部分的标记对应的位置添加第一演唱标签。
时间轴上根据合唱划分信息存在的标记,可标识本端用户的演唱的开始时刻和结束时刻,相对应的开始时刻和结束时刻对应的歌曲片段即为本端用户的演唱片段。多个不同时间段对应的演唱片段即为本端用户的演唱部分。因此,可由第一演唱标签确定本端用户演唱部分的开始时刻和结束时刻,不同的演唱片段对应不同的开始时刻和对应的结束时刻。
S14、基于对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,第二演唱标签用于表征歌曲文件的时间轴上对应对端用户演唱部分的开始时刻和结束时刻。
歌曲文件的时间轴上,根据合唱划分信息存在的对端用户演唱部分的标记,为此,在后续试听时,为便于准确定位对端用户的演唱部分,可在时间轴上的对端用户的演唱部分的标记对应的位置添加第二演唱标签。
时间轴上根据合唱划分信息存在的标记,可标识对端用户的演唱的开始时刻和结束时刻,相对应的开始时刻和结束时刻对应的歌曲片段即为对端用户的演唱片段。多个不同时间段对应的演唱片段即为对端用户的演唱部分。因此,可由第二演唱标签确定对端用户演唱部分的开始时刻和结束时刻,不同的演唱片段对应不同的开始时刻和对应的结束时刻。
可见,通过在歌曲文件的时间轴上添加第一演唱标签和第二演唱标签,可以区分本端用户和对端用户的演唱部分,因此,在时间轴上添加的第一演唱标签用于标识本端用户的演唱部分,由在时间轴上添加的第二演唱标签用于标识对端用户的演唱部分。
上述实施例提供的显示设备,可根据歌曲文件的预设合唱划分信息来区分本端用户的演唱部分和对端用户的演唱部分;而在另一些实施例中,还可根据合唱过程中的声纹变化来确定。
图8中示例性示出了根据实施例中根据声纹确定双端用户演唱部分的方法流程图。参见图8,本发明实施例提供的显示设备,在利用声纹确定本端用户和对端用户的演唱部分时,控制器被进一步配置为:
S121、在获取到歌曲文件的时间轴之后,接收从本端显示设备或对端显示设备中录入的声音数据。
S122、识别声音数据的声纹特性,确定声音数据是否与第一声纹或第二声纹相匹配,其中第一声纹是表征本端显示设备的用户的声纹,第二声纹是表征对端显示设备的用户的声纹。
S123、在歌曲文件中与第一声纹对应的文件片段增加第一演唱标签,以及,在歌曲文件中与第二声纹对应的文件片段增加第二演唱标签。
本端用户利用本端显示设备进行演唱,对端用户利用对端显示设备进行演唱,使得本端用户和对端用户在合唱时,本端显示设备和对端显示设备均录入大量的声纹数据。而由于当前合唱的用户仅为本端用户和对端用户,因此,按照声纹特性来识别,只会识别出两种声纹,分别为第一声纹和第二声纹,第一声纹对应一种声纹特性,第二声纹对应另一种声纹特性。
在一些实施例中,将第一声纹作为使用本端显示设备的本端用户的声纹,将第二声纹作为使用对端显示设备的对端用户的声纹。因此,实时检测两端用户合唱时的当前声纹数据,并识别声纹特性,以判断当前声纹数据是属于第一声纹,还是属于第二声纹。
如果识别当前声纹数据的声纹特性属于第一声纹,则将当前声纹数据对应的歌曲片段确定为本端用户的演唱部分。如果当前声纹数据第二声纹,则将当前声纹数据对应的歌曲片段确定为对端用户的演唱部分。
因此,在一些实施例中,可以根据声纹数据对应的声纹特性,来确定出确定本端用户的演唱部分和对端用户的演唱部分。
在基于声纹特性划分两端用户的演唱部分后,还可利用声纹实现演唱标签的添加。具体地,在时间轴上添加演唱标签时,如果识别到符合第一声纹的声纹数据,则对应的演唱部分属于本端用户演唱的文件片段,因此,在歌曲文件时间轴上添加第一演唱标签;如果识别到符合第二声纹的声纹数据,则对应的演唱部分属于对端用户演唱的文件片段,因此,在歌曲文件时间轴上添加第二演唱标签。
某一用户演唱的文件片段对应的演唱标签包括演唱开始标签和演唱结束标签,因此,在利用声纹特性在合唱文件时间轴上添加标签时,可根据识别到的声纹数据的声纹特性变化来进行演唱开始标签和演唱结束标签的添加。
例如,如果检测到的声纹数据由符合第一声纹特性切换为符合第二声纹特性,则在声纹切换时刻添加第一声纹特性对应用户的演唱结束标签,以及,在声纹切换时刻添加第二声纹特性对应用户的演唱开始标签。
在一些实施例中,基于检测到的声纹的变化实现时间轴上的演唱标签的添加。为此,控制器实时检测双端用户在合唱歌曲文件时的声纹数据,若检测到的当前声纹数据一直属于其中一个用户,即当前声纹数据符合第一声纹的特性,则可将当前声纹数据对应的歌曲片段均确定为该用户演唱的部分。
如果检测到当前声纹数据的声纹特性发生变化,例如,由符合第一声纹的特性切换为符合第二声纹的特性,此时,说明当前正在演唱的用户发生改变,即演唱的用户由本端用户切换为对端用户。因此,为准确标识双端用户在合唱时的演唱部分,可在声纹发生变化的时刻同时添加前一演唱用户(本端用户)的演唱结束标签和当前演唱用户(对端用户)的演唱开始标签。
而如果再次检测到当前声纹数据的声纹特性发生变化,例如,由符合第二声纹的特性切换为符合第一声纹的特性,此时,说明当前正在演唱的用户再次发生改变,即演唱的用户由对端用户切换为本端用户。因此,为准确标识双端用户在合唱时的演唱部分,可在声纹发生变化的时刻同时添加前一演唱用户(对端用户)的演唱结束标签和当前演唱用户(本端用户)的演唱开始标签。
可见,在一些实施例中,实时检测双端用户的声纹数据,若检测到声纹发生变化,即在时间轴上同时添加前一演唱用户的演唱结束标签和正在演唱用户的演唱开始标签。
演唱开始标签和演唱结束标签一一对应,一个用户演唱时均对应一个演唱开始标签和一个演唱结束标签。演唱开始标签和演唱结束标签之间的歌曲片段即为对应用户的演唱部分。
为对两端用户的演唱部分进行区分,在时间轴上添加的演唱标签包括第一演唱标签和第二演唱标签。第一演唱标签用于标识本端用户的演唱部分,第二演唱标签用于标识对端用户的演唱部分。
由于一个用户演唱的起始标签和结束标签均是对应的关系,因此,在基于本端用户的演唱部分,在时间轴上添加第一演唱标签时,可将第一演唱标签划分为第一演唱开始标签和第一演唱结束标签。
在同一时间轴上,由于本端用户可能负责多个演唱部分,因此,会存在多组相互对应的第一演唱开始标签和第一演唱结束标签。第一演唱开始标签用于标识本端用户在演唱当前歌曲片段的开始时刻,第一演唱结束标签用于标识本端用户在演唱当前歌曲片段的结束时刻。
在一些实施例中,步骤S13中,控制器在执行基于本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,被进一步配置为:在播放歌曲文件的时刻到达本端用户的演唱部分的开始时刻时,在开始时刻对应的时间轴上添加第一演唱开始标签。在播放歌曲文件的时刻到达本端用户的演唱部分的结束时刻时,在结束时刻对应的时间轴上添加第一演唱结束标签。
两端用户在合唱的过程中,歌曲文件一直在播放,当歌曲文件的时间轴播放到本端用户的演唱部分的开始时刻时,则在时间轴上的对应开始时刻的位置添加第一演唱开始标签。本端用户继续跟随歌曲文件演唱,在其负责的演唱部分的结束时刻对应的时间轴上添加第一演唱结束标签。
例如,本端用户需负责演唱歌曲文件中的第三句歌词和第四句歌词,第三句歌词和第四句歌词在时间轴上对应的时段为0:23至0:35,那么开始演唱第三句歌词的时刻为第23秒,完成演唱第四句歌词的时刻为第35秒。因此,将第23秒作为本端用户的演唱部分的开始时刻,将第35秒作为本端用户的演唱部分的结束时刻,分别在时间轴上的第23秒位置添加第一演唱开始标签,以及在时间轴上的第35秒位置添加第一演唱结束标签。
同样的,在同一时间轴上,由于对端用户可能负责多个演唱部分,因此,会存在多组相互对应的第二演唱开始标签和第二演唱结束标签。第二演唱开始标签用于标识对端用户在演唱当前歌曲片段的开始时刻,第二演唱结束标签用于标识对端用户在演唱当前歌曲片段的结束时刻。
在一些实施例中,步骤S14中,控制器在执行基于对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,被进一步配置为:在播放歌曲文件的时刻到达对端用户的演唱部分的开始时刻时,在开始时刻对应的时间轴上添加第二演唱开始标签。在播放歌曲文件的时刻到达对端用户的演唱部分的结束时刻时,在结束时刻对应的时间轴上添加第二演唱结束标签。
两端用户在合唱的过程中,歌曲文件一直在播放,当歌曲文件的时间轴播放到对端用户的演唱部分的开始时刻时,则在时间轴上的对应开始时刻的位置添加第二演唱开始标签。对端用户继续跟随歌曲文件演唱,在其负责的演唱部分的结束时刻对应的时间轴上添加第二演唱结束标签。
例如,对端用户需负责演唱歌曲文件中的第五句歌词和第六句歌词,第五句歌词和第六句歌词在时间轴上对应的时段为0:38至0:46,那么开始演唱第五句歌词的时刻为第38秒,完成演唱第六句歌词的时刻为第46秒。因此,将第38秒作为对端用户的演唱部分的开始时刻,将第46秒作为对端用户的演唱部分的结束时刻,分别在时间轴上的第38秒位置添加第二演唱开始标签,以及在时间轴上的第46秒位置添加第二演唱结束标签。
根据歌曲文件中的演唱部分的划分,本端用户会负责演唱多句相邻或不相邻的歌词部分,同样,对端用户也会负责演唱多句相邻或不相邻的歌词部分,按照前述实施例提供的步骤,分别在本端用户的演唱部分和对端用户的演唱部分对应的时间轴上添加对应的演唱开始标签和演唱结束标签。因此,在同一时间轴上,会存在本端用户的演唱部分对应的多组相互对应的第一演唱开始标签和第一演唱结束标签,以及,存在对端用户的演唱部分对应的多组相互对应的第二演唱开始标签和第二演唱结束标签。
双端用户在完成歌曲合唱的录制后,形成的合唱文件的时间轴上包括对应的演唱标签,演唱标签包括第一演唱标签和第二演唱标签,以区分本端用户演唱部分和对端演唱部分。
图9中示例性示出了根据实施例中显示设备的操作界面的示意图。参见图9,完成合唱录制后,显示设备的显示器上显示操作界面。操作界面上包括试听控件,用于提供用户进行试听演唱歌曲的功能。试听控件包括试听本端控件、试听对端控件和试听全曲控件。试听本端控件用于提供给本端用户试听自己演唱部分的功能,试听对端控件用于提供给本端用户试听对端用户演唱部分的功能,试听全曲控件用于提供给本端用户对双方合唱的作品进行完整试听的功能。
本发明实施例提供一种显示设备,利用在双方合唱时在歌曲文件时间轴上添加的演唱标签,可以在用户试听合唱文件能够精准定位到自己的演唱部分或对方演唱的部分,实现快速试听。
图10中示例性示出了根据实施例中快速试听方法的第一种流程图;图11中示例性示出了根据实施例中快速试听方法的数据流程图。具体地,参见图10和图11,本发明实施例提供的显示设备,其配置的控制器在执行快速试听方法时,被配置为执行下述步骤:
S21、在合唱结束后生成合唱文件并显示操作界面。
S22、接收触发试听控件的操作指令。
双端用户在利用各自的显示设备完成合唱录制后,即可得到合唱文件,合唱文件的时间轴上带有用于标识各自演唱部分的标签。
完成合唱录制后,合唱文件显示在显示器的操作界面上,两端显示设备的操作界面上均显示合唱文件,以便于用户基于合唱文件进行后序操作,例如,保存合唱文件、重新合唱录制、删除合唱文件和试听合唱文件等。
如果用户想要试听合唱录制完成的合唱文件,可触发操作界面中显示的试听控件。如果用户触发本端显示设备操作界面呈现的试听控件,则相应产生操作指令,操作指令用于指示控制器完成合唱文件的试听。
S23、响应于操作指令,获取合唱产生的合唱文件。
本端用户在基于显示器中呈现的操作界面,触发试听控件以对双方合唱的文件进行试听时,产生操作指令,并发送至控制器。控制器接收到用户触发的操作指令,随即获取双方用户合唱录制后得到的合唱文件。
操作指令中携带试听类型,试听类型包括试听本端、试听对端和试听全曲。控制器根据操作指令中携带的试听类型,即可判断出本端用户想要试听的文件片段是自己负责的部分还是对端负责的部分还是双方合唱的部分。
S24、识别合唱文件的时间轴上的与试听控件相对应的演唱标签,演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签。
为便于快速定位用户想要试听的部分,可检测合唱文件中的时间轴上的演唱标签,以根据操作指令获取到对应的演唱标签。控制器根据识别到的演唱标签,即可判断出合唱文件中所要进行试听的文件片段是属于本端用户还是对端用户。
例如,如果操作指令为本端试听指令,则检测合唱文件时间轴上的第一个演唱标签是否为第一演唱标签,如果是,则开始播放合唱文件;如果不是,则继续检测。如果操作指令为对端试听指令,则检测合唱文件时间轴上的第一个演唱标签是否为第二演唱标签,如果是,则开始播放合唱文件;如果不是,则继续检测。
S25、播放合唱文件中与演唱标签对应的文件片段。
控制器若识别到所需的演唱标签后,则播放合唱文件中该演唱标签对应的歌曲片段作为文件片段,文件片段是指演唱开始标签和演唱结束标签在时间轴上对应的歌曲片段。
控制器根据识别出的演唱标签的类型,播放对应的文件片段。例如,如果演唱标签标识本端用户的演唱部分,则播放本端用户的多组相互对应的演唱开始标签和演唱结束标签对应的多个文件片段。如果演唱标签标识对端用户的演唱部分,则播放对端用户的多组相互对应的演唱开始标签和演唱结束标签对应的多个文件片段。其中,一组演唱开始标签和演唱结束标签对应一个文件片段。
演唱标签的类型可根据操作指令携带的试听类型来确定,试听类型则根据用户触发的试听控件来确定。
在一些实施例中,如果用户触发试听本端控件,则此时生成的操作指令为本端试听指令,即控制器接收触发试听控件的操作指令为试听本端控件的操作指令。试听类型为试听本端用户的演唱部分,因此,控制器识别合唱文件的时间轴上的与试听控件相对应的演唱标签具体为:控制器响应于触发试听本端控件产生的操作指令,确定演唱标签中用于表征本端用户演唱对应的文件片段的第一演唱标签。控制器播放合唱文件中与演唱标签对应的文件片段,具体为:播放合唱文件中与第一演唱标签对应的文件片段。
本实施例中,在用户触发试听本端控件时,需播放合唱文件中本端用户的演唱部分,此时,控制器被进一步配置为:在试听指令为本端试听指令时,判断演唱标签是否为用于标识本端用户演唱部分的第一演唱标签。如果演唱标签是用于标识本端用户演唱部分的第一演唱标签,则执行响应于识别到演唱标签,播放合唱文件中与演唱标签对应的文件片段的步骤。
在本端用户触发操作界面中显示的试听本端控件时,产生本端试听指令。控制器接收到并响应本端试听指令,检测合唱文件时间轴上的第一个演唱标签,判断第一个演唱标签是否为第一演唱标签。
如果控制器检测到的第一个演唱标签为第一演唱标签,则说明当前检测到的演唱标签对应的文件片段为本端用户的演唱部分,则可播放该第一演唱标签对应的文件片段。
如果控制器检测到的第一个演唱标签不是第一演唱标签,而是为第二演唱标签,则说明当前检测到的演唱标签对应的文件片段为对端用户的演唱部分,此时不播放,而是继续检测下一个演唱标签,直到检测到第一演唱标签为止。
可见,在控制器接收到的是本端试听指令时,只有判断出合唱文件时间轴上的演唱标签为第一演唱标签时,才执行播放操作,以进行精准试听。若判断出不是第一演唱标签,则继续检测下一个演唱标签,直到检测到第一演唱标签为止。以实现显示设备在为用户提供试听功能时,能够根据演唱标签保证精准定位到用户想要试听的片段,实现快速试听。
控制器在判断出检测的演唱标签为第一演唱标签后,则响应于识别到的第一演唱标签,以播放合唱文件中与第一演唱标签对应的文件片段。第一演唱标签包括:第一演唱开始标签和第一演唱结束标签,第一演唱开始标签用于标识本端用户演唱部分的开始时刻,第一演唱结束标签用于标识本端用户演唱部分的结束时刻。此时,合唱文件中开始时刻和结束时刻对应的歌曲片段即为当前第一演唱标签对应的文件片段。
具体地,在一些实施例中,在播放合唱文件中与第一演唱标签对应的文件片段过程中,控制器被进一步配置为:
步骤2511、检测演唱标签。
步骤2512、响应于识别到第一演唱开始标签,基于开始时刻开始播放文件片段,其中,合唱文件中与开始时刻和结束时刻对应的歌曲片段为文件片段。
步骤2513、响应于识别到第一演唱结束标签,基于结束时刻停止播放文件片段并继续检测演唱标签。
控制器在合唱文件的时间轴上检测演唱标签并检测到第一演唱开始标签后,则开始播放合唱文件。此时,合唱文件的起始播放位置是开始时刻对应的位置,而非合唱文件的开头位置。
控制器在开始播放合唱文件后,继续检测演唱标签,在检测到与在先第一演唱开始标签对应的第一演唱结束标签后,停止播放合唱文件。此时,已播放的歌曲片段即为一个文件片段。
而后控制器再继续检测下一第一演唱开始标签,若检测到,则继续播放合唱文件,直到检测到下一第一演唱结束标签,停止播放合唱文件。此时,当前播放的歌曲片段即为下一个文件片段。
控制器依据此方法继续检测后续的第一演唱开始标签和第一演唱结束标签,并对应播放文件片段,直到整个合唱文件中本端用户的演唱部分对应的文件片段均播放完毕为止。
在一些实施例中,如果用户触发试听对端项,则此时生成的试听指令为对端试听指令,即控制器接收触发试听控件的操作指令为试听对端控件的操作指令。试听类型为试听对端用户的演唱部分,因此,控制器识别合唱文件的时间轴上的与试听控件相对应的演唱标签具体为:控制器响应于触发试听对端控件产生的操作指令,确定演唱标签中用于表征对端用户演唱对应的文件片段的第二演唱标签。控制器播放合唱文件中与演唱标签对应的文件片段具体为:控制器播放合唱文件中与第二演唱标签对应的文件片段。
本实施例中,在用户触发试听对端控件时,需播放合唱文件中对端用户的演唱部分,此时,控制器被进一步配置为:在试听指令为对端试听指令时,判断演唱标签是否为用于标识对端用户演唱部分的第二演唱标签。如果演唱标签是用于标识对端用户演唱部分的第二演唱标签,则执行响应于识别到演唱标签,播放合唱文件中与演唱标签对应的文件片段的步骤。
在本端用户触发操作界面中显示的试听对端控件时,产生对端试听指令。控制器接收到并响应对端试听指令,检测合唱文件时间轴上的第一个演唱标签,判断第一个演唱标签是否为第二演唱标签。
如果控制器检测到的第一个演唱标签为第二演唱标签,则说明当前检测到的演唱标签对应的文件片段为对端用户的演唱部分,则可播放该第二演唱标签对应的文件片段。
如果控制器检测到的第一个演唱标签不是第二演唱标签,而是为第一演唱标签,则说明当前检测到的演唱标签对应的文件片段为本端用户的演唱部分,此时不播放,而是继续检测下一个演唱标签,直到检测到第二演唱标签为止。
可见,在控制器接收到的是对端试听指令时,只有判断出合唱文件时间轴上的演唱标签为第二演唱标签时,才执行播放操作,以进行精准试听。若判断出不是第二演唱标签,则继续检测下一个演唱标签,直到检测到第二演唱标签为止。以实现显示设备在为用户提供试听功能时,能够根据演唱标签保证精准定位到用户想要试听的片段,实现快速试听。
控制器在判断出检测的演唱标签为第二演唱标签后,则响应于识别到的第二演唱标签,以播放合唱文件中与第二演唱标签对应的文件片段。第二演唱标签包括:第二演唱开始标签和第二演唱结束标签,第二演唱开始标签用于标识对端用户演唱部分的开始时刻,第二演唱结束标签用于标识对端用户演唱部分的结束时刻。此时,合唱文件中开始时刻和结束时刻对应的歌曲片段即为当前第二演唱标签对应的文件片段。
具体地,在一些实施例中,在播放合唱文件中与第二演唱标签对应的文件片段过程中,控制器被进一步配置为:
步骤2521、检测演唱标签。
步骤2522、响应于识别到第二演唱开始标签,基于开始时刻开始播放文件片段,其中,合唱文件中与开始时刻和结束时刻对应的歌曲片段为文件片段。
步骤2523、响应于识别到第二演唱结束标签,基于结束时刻停止播放文件片段并继续检测演唱标签。
控制器在合唱文件的时间轴上检测演唱标签并检测到第二演唱开始标签后,则开始播放合唱文件。此时,合唱文件的起始播放位置是开始时刻对应的位置,而非合唱文件的开头位置。
控制器在开始播放合唱文件后,继续检测演唱标签,在检测到与在先第二演唱开始标签对应的第二演唱结束标签后,停止播放合唱文件。此时,已播放的歌曲片段即为一个文件片段。
而后控制器再继续检测下一第二演唱开始标签,若检测到,则继续播放合唱文件,直到检测到下一第二演唱结束标签,停止播放合唱文件。此时,当前播放的歌曲片段即为下一个文件片段。
控制器依据此方法继续检测后续的第二演唱开始标签和第二演唱结束标签,并对应播放文件片段,直到整个合唱文件中对端用户的演唱部分对应的文件片段均播放完毕为止。
在一些实施例中,如果用户触发试听全曲控件,则此时生成的试听指令为全曲试听指令。试听类型为试听双端用户演唱的整体合唱文件。此时,控制器可直接从合唱文件的初始时刻开始播放合唱文件,无需再检测演唱标签。
在一些实施例中,本发明实施例提供的显示设备,在双端用户合唱所选歌曲文件的时间轴上添加演唱标签时,还可采用按照歌曲文件的伴奏段落来作为添加标识的依据。
歌曲文件的伴奏段落可依据歌曲文件的自由分段,而不再按照歌词来分配。例如,一首歌曲可分为第一段、第二段、第三段、第四段、第五段、第六段等六段,第一段、第二段、第四段和第五段为独唱段落,第三段和第六段为合唱段落。此时,将上述六段均作为伴奏段落,每个伴奏段落指定一个用户进行演唱。
将歌曲文件划分为六个伴奏段落后,对每个伴奏段落对应的时间轴上分别添加一个录制标识,录制标识用于标识演唱该伴奏段落的用户,以及,标识用户是否演唱该伴奏段落。
在双端用户合唱录制过程中,如果本端用户演唱第一段和第四段伴奏段落,则在第一段和第四段伴奏段落上分别添加第一录制标识;如果对端用户演唱第二段和第五段伴奏段落,则在第二段和第五段伴奏段落上分别添加第二录制标识。针对第三段和第六段的合唱段落,可在第三段和第六段的伴奏段落上均添加上第一录制标识和第二录制标识。
第一录制标识用于标识本端用户的演唱伴奏段落,第二录制标识用于标识对端用户的演唱伴奏段落。
如果原歌曲文件中已指定第一段伴奏段落由本端用户演唱,但在实际合唱录制中,在歌曲文件播放到第一段伴奏段落时,本端用户并未演唱,此时,则不在第一段伴奏段落对应的时间轴上添加第一录制标识。
可见,本发明实施例提供的显示设备,在歌曲文件的时间轴上添加录制标识时,每一伴奏段落对应一个录制标识。与前述实施例提供的在歌曲文件的时间轴上添加一组演唱标签(演唱开始标签和演唱结束标签)的方法不同。
在双端用户完成合唱录制后,得到的合唱文件的时间轴上包括多个录制标识。因此,用户若想要试听合唱文件,则可通过检测录制标识的方式精准定位到该用户的演唱部位,再进行试听。
例如,本端用户触发试听本端控件,想要试听自己演唱的部分,则可检测合唱文件的时间轴上是否存在第一录制标识。如果存在,则将所有第一录制标识对应的段落进行连续播放,即检测到第一个第一录制标识后,开始播放第一个段落,直到该段落播放完毕;再继续检测到第二个第一录制标识后,开始播放第二个段落,直到该段落播放完毕;若检测到第二录制标识,则跳过不播放;若同时检测到第一录制标识和第二录制标识,则说明是两端用户的和声段落,此时,也播放对应的段落。依此类推,完成合唱文件中本端用户的演唱部分的试听。
再例如,本端用户触发试听对端控件,想要试听对端用户演唱的部分,则可检测合唱文件的时间轴上是否存在第二录制标识。如果存在,则将所有第二录制标识对应的段落进行连续播放,即检测到第一个第二录制标识后,开始播放第一个段落,直到该段落播放完毕;再继续检测到第二个第二录制标识后,开始播放第二个段落,直到该段落播放完毕;若检测到第一录制标识,则跳过不播放;若同时检测到第一录制标识和第二录制标识,则说明是两端用户的和声段落,此时,也播放对应的段落。依此类推,完成合唱文件中对端用户的演唱部分的试听。
再例如,本端用户触发试听全曲控件,则按照合唱文件的时间轴从初始时刻开始播放,直到合唱文件完整播放完毕,此过程将不再检测是否存在录制标识。
在另一些实施例中,本发明实施例提供的显示设备,在双端用户合唱所选歌曲文件的时间轴上添加演唱标签时,还可采用将歌曲文件的歌词按照预先配置的分段作为演唱标签的添加依据。此处,预先配置的歌词分段是指歌曲文件按照预设歌词划分规则进行划分得到的信息,不同用户负责演唱的歌词采用不同颜色作为标记。
图12中示例性示出了根据实施例中按照颜色添加歌词标签的显示示意图。例如,参见图12,将本端用户负责演唱的部分用蓝色歌词作为标记,如歌曲文件“故梦”中,歌词“旧忆就像一扇窗,推开了就再难合上”;将对端用户负责演唱的部分用红色歌词作为标记,如歌词“谁踩过枯枝轻响,萤火绘着画屏香”。
在添加演唱标签时,将歌曲文件中所有蓝色标记对应的歌曲片段均添加第一演唱标签,将歌曲文件中所有红色标记对应的歌曲片段均添加第二演唱标签。例如,蓝色标记歌词前添加的“蓝色圆圈”作为第一演唱标签,红色标记歌词前添加的“红色圆圈”作为第二演唱标签。
此时,一个第一演唱标签对应本端用户演唱的一个歌曲片段,一个第二演唱标签对应对端用户演唱的一个歌曲片段。
用户在试听合唱文件时,如果本端用户触发试听本端控件,则检测合唱文件时间轴上的第一演唱标签,并获取合唱文件中与第一演唱标签对应的所有文件片段。而后,将获取到的所有文件片段按照时间顺序进行播放,以完成本端用户对自身演唱部分的试听。
如果本端用户触发试听对端控件,则检测合唱文件时间轴上的第二演唱标签,并获取合唱文件中与第二演唱标签对应的所有文件片段。而后,将获取到的所有文件片段按照时间顺序进行播放,以完成本端用户对对端用户演唱部分的试听。
本发明实施例还提供一种显示设备,利用在双方合唱时在歌曲文件时间轴上添加的演唱标签,可以在用户试听合唱文件能够精准定位到自己的演唱部分或对方演唱的部分,实现快速试听。
图13中示例性示出了根据实施例中快速试听方法的第二种流程图。参见图13,本发明实施例提供的显示设备,其配置的控制器在执行快速试听方法时,被配置为执行下述步骤:
S31、在合唱结束后,接收触发试听合唱文件的操作的操作指令,其中合唱文件是在合唱过程中根据显示设备接收的音频数据、其他显示设备接收到的音频数据以及合唱曲目的伴奏生成的文件,其他显示设备是和显示设备进行合唱的其他显示设备。
S32、响应于操作指令,播放合唱文件中包含显示设备接收的音频数据的文件片段。
双端用户在利用各自的显示设备进行合唱歌曲录制时,本端用户通过本端显示设备进行演唱时,会由本端显示设备接收本端用户演唱时的音频数据;对端用户通过对端显示设备进行演唱时,会由对端显示设备接收对端用户演唱时的音频数据。本端显示设备和对端显示设备(其他显示设备)为进行合唱的双端显示设备。
在合唱录制完成后,得到的合唱文件中包括歌曲文件的原音频数据和双端用户演唱时通过各自显示设备输入的音频数据,即原音频数据、本端用户输入音频数据和对端用户输入音频数据。
用户在合唱结束后,触发试听控件,以对合唱文件进行试听。具体地,用户触发试听合唱文件的操作,并产生操作指令发送至控制器。控制器根据接收到的操作指令,播放对应的包含显示设备接收到的音频数据的文件片段。
具体地,在进行合唱文件试听时,可按照前述实施例提供的检测合唱文件中的演唱标签的方式进行精准定位所要试听的文件片段。因此,控制器响应于操作指令,播放合唱文件中包含显示设备接收的音频数据的文件片段,包括:
步骤3211、控制器响应于操作指令,确定合唱文件的时间轴上的第一演唱标签,第一演唱标签是在生成合唱文件时,根据文件片段的时间点对应设置的标签;文件片段是指合唱文件中包含显示设备接收的音频数据的片段。
步骤3212、播放第一演唱标签对应的文件片段。
如果本端用户触发本端显示设备的操作界面中的试听控件,具体触发试听本端控件,想要试听自己演唱的片段,此时,产生本端试听指令。控制器响应本端试听指令,检测合唱文件时间轴上的第一演唱标签,并播放第一演唱标签对应的包含音频数据的文件片段。具体的演唱标签识别方法和播放对应的文件片段的方法,可相应参照前述任一实施例提供的方法,此处不再赘述。
在另一些实施例中,控制器响应于操作指令,播放合唱文件中包含显示设备接收的音频数据的文件片段,包括:
步骤3221、控制器响应于操作指令,确定合唱文件的时间轴上的第二演唱标签,第二演唱标签是在生成合唱文件时,根据文件片段的时间点对应设置的标签;文件片段是指合唱文件中包含显示设备接收的音频数据的片段。
步骤3222、播放第二演唱标签对应的文件片段。
如果本端用户触发本端显示设备的操作界面中的试听控件,具体触发试听对端控件,想要试听对端用户演唱的片段,此时,产生对端试听指令。控制器响应对端试听指令,检测合唱文件时间轴上的第二演唱标签,并播放第二演唱标签对应的包含音频数据的文件片段。具体的演唱标签识别方法和播放对应的文件片段的方法,可相应参照前述任一实施例提供的方法,此处不再赘述。
由以上技术方案可知,本发明实施例提供的一种显示设备,在双端用户合唱录制过程中,播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息,基于本端用户的演唱部分的标记,在合唱所选歌曲文件的时间轴上添加第一演唱标签;基于对端用户的演唱部分的标记,在时间轴上添加第二演唱标签。在试听过程中,控制器接收并响应于本端用户触发试听控件时产生的操作指令,获取本端用户与对端用户合唱后产生的合唱文件;识别合唱文件的时间轴上的与试听控件相对应的演唱标签,以确定本端用户想要试听的目标用户的演唱部分。并基于识别到的演唱标签,播放合唱文件中与演唱标签对应的文件片段。可见,本发明提供的显示设备,通过识别演唱标签来获取对应用户的演唱部分,即通过演唱标签快速定位实现试听单一用户演唱的部分,以快速的完成歌曲试听。
图6中示例性示出了根据实施例中演唱标签添加方法的流程图。本发明实施例提供的一种演唱标签添加方法,由显示设备中的控制器执行,参见图6,该方法包括以下步骤:
S11、播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
S12、获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
S13、基于所述本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述歌曲文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
S14、基于所述对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述歌曲文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
图10中示例性示出了根据实施例中快速试听方法的第一种流程图。本发明实施例提供的一种快速试听方法,由显示设备中的控制器执行,参见图10,该方法包括以下步骤:
S21、在合唱结束后生成合唱文件并显示所述操作界面;
S22、接收触发所述试听控件的操作指令;
S23、响应于所述操作指令,获取合唱产生的合唱文件;
S24、识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
S25、播放所述合唱文件中与所述演唱标签对应的文件片段。
图13中示例性示出了根据实施例中快速试听方法的第二种流程图。本发明实施例提供的一种快速试听方法,由显示设备中的控制器执行,参见图13,该方法包括以下步骤:
S31、在合唱结束后,接收触发试听合唱文件的操作的操作指令,其中所述合唱文件是在合唱过程中根据所述显示设备接收的音频数据、其他显示设备接收到的音频数据以及合唱曲目的伴奏生成的文件,所述其他显示设备是和所述显示设备进行合唱的其他显示设备;
S32、响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段。
具体实现中,本发明还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时可包括本发明提供的演唱标签添加方法和快速试听方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-onlymemory,简称:ROM)或随机存储记忆体(英文:random access memory,简称:RAM)等。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于演唱标签添加方法和快速试听方法实施例而言,由于其基本相似于显示设备实施例,所以描述的比较简单,相关之处参见显示设备实施例中的说明即可。
以上所述的本发明实施方式并不构成对本发明保护范围的限定。

Claims (14)

1.一种显示设备,其特征在于,包括:
显示器,被配置为显示包括试听控件的操作界面;
与所述显示器连接的控制器,所述控制器被配置为:
在合唱结束后生成合唱文件并显示所述操作界面;
接收触发所述试听控件的操作指令;
响应于所述操作指令,获取合唱产生的合唱文件;
识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
播放所述合唱文件中与所述演唱标签对应的文件片段。
2.根据权利要求1所述的显示设备,其特征在于,所述试听控件包括试听本端控件;以及,所述控制器接收触发所述试听控件的操作指令具体为:所述控制器接收触发所述试听本端控件的操作指令;
所述控制器识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签具体为:所述控制器响应于触发试听本端控件产生的操作指令,确定所述演唱标签中用于表征本端用户演唱对应的文件片段的第一演唱标签;
所述控制器播放所述合唱文件中与所述演唱标签对应的文件片段,具体为:所述控制器播放所述合唱文件中与所述第一演唱标签对应的文件片段。
3.根据权利要求2所述的显示设备,其特征在于,所述第一演唱标签包括:第一演唱开始标签和第一演唱结束标签,所述第一演唱开始标签用于标识本端用户演唱对应的文件片段的开始时刻,所述第一演唱结束标签用于标识本端用户演唱对应的文件片段的结束时刻;所述控制器在执行所述播放合唱文件中与所述第一演唱标签对应的文件片段,被进一步配置为:
检测所述演唱标签;
响应于识别到所述第一演唱开始标签,基于所述开始时刻开始播放所述文件片段,其中,所述合唱文件中与所述开始时刻和所述结束时刻对应的歌曲片段为所述文件片段;
响应于识别到所述第一演唱结束标签,基于所述结束时刻停止播放所述文件片段并继续检测所述演唱标签。
4.根据权利要求1所述的显示设备,其特征在于,所述试听控件包括试听对端控件,所述控制器接收触发所述试听控件的操作指令具体为:所述控制器接收触发所述试听对端控件的操作指令;
所述控制器识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签具体为:所述控制器:响应于触发试听对端控件产生的操作指令,确定所述演唱标签中用于表征对端用户演唱对应的文件片段的第二演唱标签;
所述控制器播放所述合唱文件中与所述演唱标签对应的文件片段,具体为:所述控制器:
播放所述合唱文件中与所述第二演唱标签对应的文件片段。
5.根据权利要求4所述的显示设备,其特征在于,所述第二演唱标签包括:第二演唱开始标签和第二演唱结束标签,所述第二演唱开始标签用于标识对端用户演唱对应的文件片段的开始时刻,所述第二演唱结束标签用于标识对端用户演唱对应的文件片段的结束时刻;所述控制器在执行所述播放合唱文件中与所述第二演唱标签对应的文件片段,被进一步配置为:
检测所述演唱标签;
响应于识别到所述第二演唱开始标签,基于所述开始时刻开始播放所述文件片段,其中,所述合唱文件中与所述开始时刻和所述结束时刻对应的歌曲片段为所述文件片段;
响应于识别到所述第二演唱结束标签,基于所述结束时刻停止播放所述文件片段并继续检测所述演唱标签。
6.根据权利要求1所述的显示设备,其特征在于,所述控制器在执行所述在合唱结束后生成合唱文件之前,被进一步配置为:
播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
基于所述本端用户的演唱部分的标记,在合唱文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述合唱文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
基于所述对端用户的演唱部分的标记,在合唱文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述合唱文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
7.一种显示设备,其特征在于,包括:
显示器;
与所述显示器连接的控制器,所述控制器被配置为:
在合唱结束后,接收触发试听合唱文件的操作的操作指令,其中所述合唱文件是在合唱过程中根据所述显示设备接收的音频数据、其他显示设备接收到的音频数据以及合唱曲目的伴奏生成的文件,所述其他显示设备是和所述显示设备进行合唱的其他显示设备;
响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段。
8.根据权利要求7所述的显示设备,其特征在于,所述控制器响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段,包括:
所述控制器响应于所述操作指令,确定所述合唱文件的时间轴上的第一演唱标签,所述第一演唱标签是在生成所述合唱文件时,根据文件片段的时间点对应设置的标签;所述文件片段是指合唱文件中包含所述显示设备接收的音频数据的片段;
播放所述第一演唱标签对应的文件片段。
9.一种显示设备,其特征在于,包括:
显示器,被配置为显示歌曲文件;
与所述显示器连接的控制器,所述控制器被配置为:
播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
基于所述本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述歌曲文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
基于所述对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述歌曲文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
10.根据权利要求9所述的显示设备,其特征在于,所述控制器被进一步配置为:
在获取到所述歌曲文件的时间轴之后,接收从本端显示设备或对端显示设备中录入的声音数据;
识别所述声音数据的声纹特性,确定所述声音数据是否与第一声纹或第二声纹相匹配,其中所述第一声纹是表征本端显示设备的用户的声纹,第二声纹是表征对端显示设备的用户的声纹;
在所述歌曲文件中与所述第一声纹对应的文件片段增加第一演唱标签,以及,在所述歌曲文件中与所述第二声纹对应的文件片段增加第二演唱标签。
11.根据权利要求9所述的显示设备,其特征在于,所述控制器被进一步配置为:
在合唱结束后生成合唱文件并显示所述操作界面;
接收触发所述试听控件的操作指令;
响应于所述操作指令,获取合唱产生的合唱文件;
识别所述合唱文件的时间轴上的和所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
播放所述合唱文件中与所述演唱标签对应的文件片段。
12.一种快速试听方法,其特征在于,所述方法包括:
在合唱结束后生成合唱文件并显示所述操作界面;
接收触发所述试听控件的操作指令;
响应于所述操作指令,获取合唱产生的合唱文件;
识别所述合唱文件的时间轴上的与所述试听控件相对应的演唱标签,所述演唱标签是用于表征本端用户演唱对应文件片段的标签或用于表征对端用户演唱对应文件片段的标签;
播放所述合唱文件中与所述演唱标签对应的文件片段。
13.一种快速试听方法,其特征在于,所述方法包括:
在合唱结束后,接收触发试听合唱文件的操作的操作指令,其中所述合唱文件是在合唱过程中根据所述显示设备接收的音频数据、其他显示设备接收到的音频数据以及合唱曲目的伴奏生成的文件,所述其他显示设备是和所述显示设备进行合唱的其他显示设备;
响应于所述操作指令,播放所述合唱文件中包含所述显示设备接收的音频数据的文件片段。
14.一种演唱标签添加方法,其特征在于,所述方法包括:
播放本端用户与对端用户进行合唱时所选择的歌曲文件和合唱划分信息;
获取所述歌曲文件的时间轴,所述时间轴中根据合唱划分信息将某一时间段的歌曲文件标记为本端用户的演唱部分或对端用户的演唱部分;
基于所述本端用户的演唱部分的标记,在歌曲文件的时间轴上添加第一演唱标签,所述第一演唱标签用于表征所述歌曲文件的时间轴上对应所述本端用户演唱部分的开始时刻和结束时刻;
基于所述对端用户的演唱部分的标记,在歌曲文件的时间轴上添加第二演唱标签,所述第二演唱标签用于表征所述歌曲文件的时间轴上对应所述对端用户演唱部分的开始时刻和结束时刻。
CN202010420359.XA 2020-05-13 2020-05-18 一种演唱标签添加方法、快速试听方法及显示设备 Active CN113691841B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010420359.XA CN113691841B (zh) 2020-05-18 2020-05-18 一种演唱标签添加方法、快速试听方法及显示设备
CN202180060962.4A CN116349231A (zh) 2020-05-13 2021-05-11 文本框控件显示位置的调整方法及显示设备
PCT/CN2021/093151 WO2021228109A1 (zh) 2020-05-13 2021-05-11 文本框控件显示位置的调整方法及显示设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010420359.XA CN113691841B (zh) 2020-05-18 2020-05-18 一种演唱标签添加方法、快速试听方法及显示设备

Publications (2)

Publication Number Publication Date
CN113691841A true CN113691841A (zh) 2021-11-23
CN113691841B CN113691841B (zh) 2022-08-30

Family

ID=78575544

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010420359.XA Active CN113691841B (zh) 2020-05-13 2020-05-18 一种演唱标签添加方法、快速试听方法及显示设备

Country Status (1)

Country Link
CN (1) CN113691841B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070099501A (ko) * 2007-09-18 2007-10-09 테크온팜 주식회사 노래 학습 시스템 및 방법
CN101442645A (zh) * 2007-11-22 2009-05-27 索尼株式会社 记录/回放设备和方法、程序及记录介质
CN103561229A (zh) * 2013-10-21 2014-02-05 华为技术有限公司 会议标签生成及应用方法、装置、系统
CN104869427A (zh) * 2014-02-24 2015-08-26 唐大为 实现多人在线同唱同一首歌的方法、装置及系统
CN105023559A (zh) * 2015-05-27 2015-11-04 腾讯科技(深圳)有限公司 K歌处理方法及系统
CN108269560A (zh) * 2017-01-04 2018-07-10 北京酷我科技有限公司 一种声音合成方法及系统
CN108924610A (zh) * 2018-07-20 2018-11-30 网易(杭州)网络有限公司 多媒体文件处理方法、装置、介质和计算设备
CN109327731A (zh) * 2018-11-20 2019-02-12 福建海媚数码科技有限公司 一种基于卡拉ok的diy视频实时合成方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070099501A (ko) * 2007-09-18 2007-10-09 테크온팜 주식회사 노래 학습 시스템 및 방법
CN101442645A (zh) * 2007-11-22 2009-05-27 索尼株式会社 记录/回放设备和方法、程序及记录介质
CN103561229A (zh) * 2013-10-21 2014-02-05 华为技术有限公司 会议标签生成及应用方法、装置、系统
CN104869427A (zh) * 2014-02-24 2015-08-26 唐大为 实现多人在线同唱同一首歌的方法、装置及系统
CN105023559A (zh) * 2015-05-27 2015-11-04 腾讯科技(深圳)有限公司 K歌处理方法及系统
CN108269560A (zh) * 2017-01-04 2018-07-10 北京酷我科技有限公司 一种声音合成方法及系统
CN108924610A (zh) * 2018-07-20 2018-11-30 网易(杭州)网络有限公司 多媒体文件处理方法、装置、介质和计算设备
CN109327731A (zh) * 2018-11-20 2019-02-12 福建海媚数码科技有限公司 一种基于卡拉ok的diy视频实时合成方法及系统

Also Published As

Publication number Publication date
CN113691841B (zh) 2022-08-30

Similar Documents

Publication Publication Date Title
CN111277884B (zh) 视频播放方法及设备
CN111131898B (zh) 播放媒体资源的方法、装置、显示设备及存储介质
CN111405318B (zh) 视频展示方法、装置及计算机存储介质
CN111757171A (zh) 一种显示设备及音频播放方法
CN110996136B (zh) 视频资源的显示方法及装置
CN112492371B (zh) 一种显示设备
CN112333509B (zh) 一种媒资推荐方法、推荐媒资的播放方法及显示设备
CN112533037B (zh) 连麦合唱作品的生成方法和显示设备
CN111405321B (zh) 视频获取方法、显示设备、服务器
CN113796091A (zh) 一种演唱界面的显示方法、显示设备及服务器
CN111343509A (zh) 一种虚拟形象的动作控制方法及显示设备
CN113805738A (zh) 一种控制按键的自定义设置方法、启动方法及显示设备
CN114079829A (zh) 一种显示设备及视频集锦文件水印的生成方法
CN111083538A (zh) 一种背景图像的显示方法及设备
CN113115083A (zh) 显示设备及显示方法
CN111836083B (zh) 显示设备及屏幕发声方法
CN111741314A (zh) 视频播放方法及显示设备
CN111984167A (zh) 一种快捷命名的方法及显示设备
CN111726695B (zh) 显示设备及音频合成方法
CN113691841B (zh) 一种演唱标签添加方法、快速试听方法及显示设备
CN113784186B (zh) 终端设备、服务器和通信控制方法
CN112118476B (zh) 一种快速显示节目预约图标的方法及显示设备
CN112333520B (zh) 节目推荐方法、显示设备及服务器
CN112533023B (zh) 连麦合唱作品的生成方法和显示设备
CN112533030A (zh) 一种演唱界面的显示方法、显示设备及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant