CN111757165B - 数据输出方法、数据处理方法、装置及设备 - Google Patents

数据输出方法、数据处理方法、装置及设备 Download PDF

Info

Publication number
CN111757165B
CN111757165B CN201910243712.9A CN201910243712A CN111757165B CN 111757165 B CN111757165 B CN 111757165B CN 201910243712 A CN201910243712 A CN 201910243712A CN 111757165 B CN111757165 B CN 111757165B
Authority
CN
China
Prior art keywords
multimedia data
interface area
data
multimedia
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910243712.9A
Other languages
English (en)
Other versions
CN111757165A (zh
Inventor
孙浩华
尹广磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201910243712.9A priority Critical patent/CN111757165B/zh
Publication of CN111757165A publication Critical patent/CN111757165A/zh
Application granted granted Critical
Publication of CN111757165B publication Critical patent/CN111757165B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/365—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems the accompaniment information being stored on a host computer and transmitted to a reproducing terminal by means of a network, e.g. public telephone lines
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00—Details of electrophonic musical instruments
    • G10H1/36—Accompaniment arrangements
    • G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/366—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems with means for modifying or correcting the external signal, e.g. pitch correction, reverberation, changing a singer's voice
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提出了一种数据输出方法、数据处理方法、装置及设备。显示第一界面区域和第二界面区域；在第一界面区域输出第一多媒体数据，并在第二界面区域输出与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据是由第二用户针对第一多媒体数据录制的，第一多媒体数据和第二多媒体数据能够被独立操作。通过同屏输出第一多媒体数据和与第一多媒体数据对应的第二多媒体数据，可以加强戏剧效果，制造冲突，并且可以让第一多媒体数据和与第一多媒体数据对应的第二多媒体数据的同屏互动成为可能，从而可以提高用户的使用体验。

Description

数据输出方法、数据处理方法、装置及设备
技术领域
本公开涉及互联网技术领域，特别是涉及一种数据输出方法、数据处理方法、装置及设备。
背景技术
随着互联网技术的发展，越来越多的互联网产品走进人们的生活，为人们的生活添姿添彩。
以音乐类产品为例，现有的音乐类产品主要是为用户提供音乐播放或歌曲录制服务，服务形式比较单一，能够满足的用户需求较低，用户的使用体验并不好。
发明内容
本公开的一个目的在于提供一种能够为提高多媒体类应用的用户使用体验提供技术支持的方案。
根据本公开的第一个方面，提出了一种数据输出方法，包括：显示第一界面区域和第二界面区域；利用第一多媒体播放器在第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在第二界面区域输出与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据是由第二用户针对第一多媒体数据录制的。
可选地，该方法还包括：响应于用户针对第一界面区域执行的操作，切换第一界面区域中的第一多媒体数据，并切换第二界面区域中的第二多媒体数据；并且/或者响应于用户针对第二界面区域执行的操作，切换第二界面区域中的第二多媒体数据。
可选地，响应于用户针对第一多媒体数据执行的播放操作，利用第一多媒体播放器在第一界面区域播放第一多媒体数据，并暂停第二多媒体数据的播放，并且/或者响应于用户针对第二多媒体数据执行的播放操作，利用第二多媒体播放器在第二界面区域播放第二多媒体数据，并暂停第一多媒体数据的播放。
可选地，该方法还包括：响应于用户的指令或外部条件的变化，更改第一界面区域和/或第二界面区域的排版方式。
可选地，在执行数据输出方法的设备的屏幕横屏的情况下，第一界面区域和第二界面区域并排显示在界面中，并且/或者在执行数据输出方法的设备的屏幕竖屏的情况下，第一界面区域叠加显示在第二界面区域内部。
可选地，该方法还包括：获取用户针对第一多媒体数据录制的第二多媒体数据，并在第二界面区域输出该第二多媒体数据。
可选地，第一多媒体数据为音频数据或音乐短片，并且/或者第二多媒体数据为视频数据。
根据本公开的第二个方面，还提出了一种数据输出方法，包括：显示第一界面区域和第二界面区域；在第一界面区域输出第一多媒体数据，并在第二界面区域输出与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据是由第二用户针对第一多媒体数据录制的，第一多媒体数据和第二多媒体数据能够被独立操作。
根据本公开的第三个方面，还提出了一种数据处理方法，包括：接收客户端发送的用户针对第一多媒体数据录制的第二多媒体数据；基于第一多媒体数据对第二多媒体数据中的至少部分数据进行修正；将修正后的第二多媒体数据发送给客户端。
可选地，第一多媒体数据包括第一音频数据，第二多媒体数据包括第二音频数据，基于第一多媒体数据对第二多媒体数据中的至少部分数据进行修正的步骤包括：将第二音频数据中的伴奏部分与第一音频数据中的伴奏部分进行匹配；根据伴奏匹配结果，将第二音频数据中的第二人声部分和第一音频数据中的第一人声部分进行匹配，以确定对应相同伴奏的人声；基于第一音频数据中与第二音频数据中的第二人声对应相同伴奏的第一人声的声学特征，对第二人声的声学特征进行修正。
可选地，第一多媒体数据包括第一音频数据，该方法还包括：响应于接收到客户端发送的用户针对第一多媒体数据的录制请求，将第一音频数据中的伴奏部分发送给客户端，以便客户端基于伴奏部分完成录制。
可选地，该方法还包括：将第二多媒体数据与第一多媒体数据关联地保存。
根据本公开的第四个方面，还提出了一种数据输出装置，包括：显示模块，用于显示第一界面区域和第二界面区域；输出模块，用于利用第一多媒体播放器在第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在第二界面区域输出与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据是由第二用户针对第一多媒体数据录制的。
根据本公开的第五个方面，还提出了一种数据输出装置，包括：显示模块，用于显示第一界面区域和第二界面区域；输出模块，用于在第一界面区域输出第一多媒体数据，并在第二界面区域输出与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据是由第二用户针对第一多媒体数据录制的，第一多媒体数据和第二多媒体数据能够被独立操作。
根据本公开的第六个方面，还提出了一种数据处理装置，包括：接收模块，用于获取客户端发送的用户针对第一多媒体数据录制的第二多媒体数据；修正模块，用于基于第一多媒体数据对第二多媒体数据中的至少部分数据进行修正；发送模块，用于将修正后的第二多媒体数据发送给客户端。
通过同屏输出第一多媒体数据和与第一多媒体数据对应的第二多媒体数据，可以加强戏剧效果，制造冲突，并且可以让第一多媒体数据和与第一多媒体数据对应的第二多媒体数据的同屏互动成为可能，从而可以提高用户的使用体验。
附图说明
通过结合附图对本公开示例性实施方式进行更详细的描述，本公开的上述以及其它目的、特征和优势将变得更加明显，其中，在本公开示例性实施方式中，相同的参考标号通常代表相同部件。
图1示出了根据本公开一实施例的可用于实现本公开的技术方案的系统的结构示意图。
图2示出了根据本公开一实施例的数据输出方法的示意性流程图。
图3A、图3B示出了本公开一实施例的在手机屏幕中同屏显示第一多媒体数据和第二多媒体数据的示意图。
图4示出了根据本公开一实施例的数据处理方法的示意性流程图。
图5是以应用于音乐翻唱场景为例示出了业务系统时序图。
图6是示出了根据本公开一实施例的数据输出装置的结构的示意性方框图。
图7是示出了根据本公开一实施例的数据输出装置的结构的示意性方框图。
图8是示出了根据本公开一实施例的数据处理装置的结构的示意性方框图。
图9示出了根据本发明一实施例的计算设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的优选实施方式。虽然附图中显示了本公开的优选实施方式，然而应该理解，可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反，提供这些实施方式是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。
为了提高用户的使用体验，本公开提出，可以同屏输出第一多媒体数据和与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据对应第二用户，并且第一多媒体数据和第二多媒体数据能够被独立操作。通过同屏输出第一多媒体数据和与其对应的第二多媒体数据，可以加强戏剧效果，制造冲突，并且可以让第一多媒体数据和与第一多媒体数据对应的第二多媒体数据的同屏互动成为可能，从而可以提高用户的使用体验。
图1示出了根据本公开一实施例的可用于实现本公开的技术方案的系统的结构示意图。
如图1所示，系统可以包括至少一个服务器20和多个终端设备10_1、10_2……10_N。
终端设备10是可用来进行网络访问的任何合适的电子设备。优选例如可以是便携式电子设备，包括但不限于智能电话、平板电脑或是其他便携式客户端。终端设备10可以经由网络40实现与服务器20的信息收发。终端设备之间(例如，10_1与10_2或10_N之间)也可以经由网络40彼此通信。
服务器20则是能够通过网络访问的提供交互服务所需信息的任何服务器。服务器20可以通过访问数据库30来获取终端设备10所需的内容。
网络40可以是广义上的用于信息传递的网络，可以包括一个或多个通信网络，诸如无线通信网络、因特网、私域网、局域网、城域网、广域网或是蜂窝数据网络等。
应当注意，如果向图示环境中添加附加模块或从其中去除个别模块，不会改变本发明的示例实施例的底层概念。
另外，虽然为了方便说明而在图中示出了从数据库30到服务器20的双向箭头，但本领域技术人员可以理解的是，上述数据的收发也是可以通过网络40实现的。
并且，在随后的描述中会选择其中的一个或部分移动终端加以描述(例如，终端设备10-1)，但是本领域技术人员应该理解的是，上述1…N个终端旨在表示真实网络中存在的大量终端，示出的单个服务器20和数据库30旨在表示本发明的技术方案涉及服务器及数据库的操作。对特定编号的移动终端以及单个服务器和数据库加以详述至少为了说明方便，而非暗示对移动端和服务器的类型或是位置等具有限制。
如下将结合附图详细说明本公开的技术方案。
图2示出了根据本公开一实施例的数据输出方法的示意性流程图。其中，图2所示的方法可以由图1中示出的终端设备执行。
参见图2，在步骤S210，显示第一界面区域和第二界面区域。
在步骤S220，在第一界面区域输出第一多媒体数据，在第二界面区域输出与第一多媒体数据对应的第二多媒体数据。
第一界面区域和第二界面区域是指同一界面中的两个显示区域。第一界面区域和第二界面区域之间可以具有多种排版方式。例如，第一界面区域和第二界面区域可以并排显示，或者第一界面区域也可以叠加显示在第二界面区域内。作为示例，可以响应于用户的指令或外部条件的变化，更改第一界面区域和/或第二界面区域的排版方式。例如，可以在执行数据输出方法的设备的屏幕横屏的情况下，第一界面区域和第二界面区域并排显示在界面中，并且/或者可以在执行数据输出方法的设备的屏幕竖屏的情况下，第一界面区域叠加显示在第二界面区域内部。
第一多媒体数据和第二多媒体数据可以是多种格式的多媒体数据，如可以是音频数据，也可以是视频数据，还可以是音频数据和视频数据的组合。
第一多媒体数据对应于第一用户，此处述及的第一用户可以是指发布
第一多媒体数据的用户，也可以是指第一多媒体数据的作者。在本公开的示例性实施方式中，第一多媒体数据可以是指原创作品，如可以是第一用户发布的(或第一用户演唱或录制的)音频数据或音乐短片。例如，第一多媒体数据可以是指原唱艺人的原唱歌曲(或原唱MV)中的部分或全部。
第二多媒体数据是由第二用户针对第一多媒体数据录制的，也即第二多媒体数据是由第二用户模仿第一多媒体数据录制的。以第一多媒体数据为原唱歌曲为例，第二多媒体数据是指第二用户针对原唱歌曲的翻唱版本。
本公开述及的翻唱(cover)与原唱对应，分为两种情况。第一种是不改变词曲，保持原唱的伴奏旋律的翻唱，比如各个直播平台和唱吧里的都是这种翻唱；第二种是重新填词或作曲的改编翻唱。对于保持原唱的伴奏旋律的翻唱来说，本公开还可以对用户录制好的翻唱进行调音(也即美音)，由此可以让用户参与翻唱的门槛降到最低。调音过程可以参见下文相关描述，此处不再赘述。
第一多媒体数据和第二多媒体数据是指两个能够被独立播放的多媒体文件。因此，第一界面区域输出的第一多媒体数据和第二界面区域输出的第二多媒体数据能够被独立操作。作为示例，可以响应于用户针对第一多媒体数据执行的播放操作，在第一界面区域播放第一多媒体数据，并暂停第二多媒体数据的播放，并且/或者也可以响应于用户针对第二多媒体数据执行的播放操作，在第二界面区域播放第二多媒体数据，并暂停第一多媒体数据的播放。
通过同屏输出第一多媒体数据和与第一多媒体数据对应的第二多媒体数据，可以加强戏剧效果，制造冲突。并且可以让第一多媒体数据和与第一多媒体数据对应的第二多媒体数据的同屏互动成为可能，从而可以提高用户的使用体验。
在本公开中，可以利用第一多媒体播放器在第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在第二界面区域输出与第一多媒体数据对应的第二多媒体数据。
作为示例，响应于用户针对第一多媒体数据执行的播放操作，可以利用第一多媒体播放器在第一界面区域播放第一多媒体数据，并暂停第二多媒体数据的播放，并且/或者响应于用户针对第二多媒体数据执行的播放操作，可以利用第二多媒体播放器在第二界面区域播放第二多媒体数据，并暂停第一多媒体数据的播放。
由此，利用多播放器组合交互的方式，可以让第一多媒体数据和与第一多媒体数据对应的第二多媒体数据的同屏互动成为可能。
在本公开中，一个第一多媒体数据可以有多个与其对应的第二多媒体数据。也就是说，多个第二用户可以针对第一多媒体数据录制第二多媒体数据。因此，作为示例，响应于用户针对第一界面区域执行的操作(例如滑动操作)，可以切换第一界面区域中的第一多媒体数据，并同时切换第二界面区域中的第二多媒体数据。响应于用户针对第二界面区域执行的操作(例如滑动操作)，可以切换第二界面区域中的第二多媒体数据。
进一步地，还可以获取用户针对第一多媒体数据录制的第二多媒体数据，并在第二界面区域输出该第二多媒体数据。关于第二多媒体数据的录制过程可以参见下文相关描述，此处暂不赘述。
图3A、图3B示出了在手机屏幕中同屏显示第一多媒体数据和第二多媒体数据的示意图。
如图3A所示，在手机横屏状态下，第一界面区域和第二界面区域可以并排显示在屏幕中，第一界面区域可以用于播放第一用户发布的第一多媒体数据，第二界面区域可以用于播放第二用户针对第一多媒体数据录制的第二多媒体数据。第一界面区域和第二界面区域中还可以包括但不限于用于表示特定信息和/或指令的图标。例如，第一界面区域中的“圆形”图标用于表示第一用户的头像，第一界面区域中的“音乐”图标用于展示第一用户和/或第一多媒体数据的资料，第一界面区域中的“五角星”图标用于展示第一多媒体数据的来源。第二界面区域中的“圆形”图标用于表示第二用户的头像，第二界面区域中的“心形”图标用于表示“将第二多媒体数据添加到喜欢”的指令，第二界面区域中的“留言”图标用于表示“查看第二多媒体数据的评论”的指令和/或“对第二多媒体数据进行评论”的指令，第二界面区域中的“转发”图标用于表示“转发(也即分享)第二多媒体数据”的指令，第二界面区域中的“加号”图标用于表示“参与录制”的指令，第二界面区域中的“旋转”图标用于表示“切换到纵屏显示”的指令。作为示例：手机在接收到针对某一界面区域的点击操作后，可以暂停该区域中多媒体数据的播放，并播放另一界面区域中的多媒体数据；或者，手机在接收到针对某一界面区域的点击操作后，也可以播放该区域中多媒体数据，并暂停播放另一界面区域中的多媒体数据。作为示例：手机在接收到针对第一界面区域中的滑动操作后，可以切换第一界面区域中的第一多媒体数据，并同时切换第二界面区域中的第一多媒体数据，手机在接收到针对第二界面区域中的滑动操作后，可以切换第二界面区域中的第二多媒体数据。
如图3B所示，在手机竖屏状态下，第一界面区域为一个较小的框选区域，第二界面区域为一个较大的框选区域，第一界面区域可以叠加显示在第二界面区域中。整个界面中还可以包括但不限于用于表示特定信息和/或指令的图标。例如，第二界面区域中的“加号”图标用于表示“参与录制”的指令，第二界面区域中的“旋转”图标用于表示“切换到横屏显示”的指令，界面中上部示出的两个“圆形”图标分别用于表示第一用户和第二用户，界面中底部示出的“音乐”图标用于展示第一用户和/或第一多媒体数据的资料，界面中底部示出的“五角星”图标用于展示第一多媒体数据的来源，界面中底部示出的“心形”图标用于表示“将第二多媒体数据添加到喜欢”的指令，界面中底部示出的“留言”图标用于表示“查看第二多媒体数据的评论”的指令和/或“对第二多媒体数据进行评论”的指令，界面中底部示出的“转发”图标用于表示“转发(也即分享)第二多媒体数据”的指令。
以应用于歌曲翻唱场景为例，左边(也即第一界面区域)展示的是原唱(也即主咖)，用于给用户树一些“靶子”。右边(也即第二界面区域)是翻唱(也即斗咖)，让用户模仿调侃。原唱和翻唱左右同屏对比，可以加强戏剧效果，制造冲突，可使单个视频的效果加强。向上翻(也即向上划动)右边播放器，可以切换不同人的不同翻唱版本，向上翻(也即向上划动)左边播放器，可以切换不同的原唱歌曲，同步右侧播放器会做相应对应翻唱队列的切换，易于理解、操作简单、有主咖引导利于右侧用户“填空”。在纵屏情况下，原唱可以缩小并叠加显示在翻唱界面中。可选地，当播放原唱时，可以将原唱放大显示，并将翻唱缩小显示在原唱界面中，以不影响用户的使用体验。
本公开在应用于音乐翻唱场景中时，通过将原唱和翻唱同屏互动，主辅结合，翻唱成本低，通过翻唱带火结合致敬原唱，形成比较鲜明的对比和戏剧冲突。并且多播放器组合交互的形式，让同屏互动成为可能，该方案区别于同播放器多画面形式。
图4示出了根据本公开一实施例的数据处理方法的示意性流程图。其中，图4所示的方法可以由图1中示出的服务器执行。
参见图4，在步骤S510，接收客户端发送的用户针对第一多媒体数据录制的第二多媒体数据。
关于第一多媒体数据和第二多媒体数据可以参见上文相关描述，此处不再赘述。作为示例，第一多媒体数据可以是指原创的歌曲数据，如可以是原创MV(可以是完整的MV，也可以是其中部分片段)，第二多媒体数据可以是用户录制的视频数据。并且，用户在录制视频的过程中，可以使用第一多媒体数据中的伴奏部分，也可以不使用第一多媒体数据中的伴奏部分。
作为示例，在执行步骤S510之前，响应于接收到客户端发送的用户针对第一多媒体数据的录制请求，还可以将第一音频数据中的伴奏部分发送给客户端，以便客户端基于伴奏部分完成录制。
在步骤S520，基于第一多媒体数据对第二多媒体数据中的至少部分数据进行修正。
以第一多媒体数据包括第一音频数据，第二多媒体数据包括第二音频数据为例，对第二多媒体数据中的至少部分数据进行修正，也即对第二音频数据中的人声部分进行修正(也即美音)。
作为示例，可以将第二音频数据中的伴奏部分与第一音频数据中的伴奏部分进行匹配，根据伴奏匹配结果，将第二音频数据中的第二人声部分和第一音频数据中的第一人声部分进行匹配，以确定对应相同伴奏的人声，如此可以基于第一音频数据中与第二音频数据中的第二人声对应相同伴奏的第一人声的声学特征，对第二人声的声学特征进行修正。此处述及的声学特征可以包括但不限于音高、音准等。
在步骤S530，将修正后的第二多媒体数据发送给客户端。
可选地，在修正完成后，还可以将第二多媒体数据与第一多媒体数据关联地保存。关于具体的保存方式本公开不再赘述。
客户端在接收到修正后的第二多媒体数据后，可以执行图1所示的数据输出方法，同屏输出第一多媒体数据和第二多媒体数据。
应用例
下面就本公开应用于音乐翻唱场景为例，就本公开的实现过程进行示例性说明。
参见图5，服务端可以存储多种原创音频文件。所存储的原创音频文件可以包括曲库中的原创歌曲(如MV)，也可以包括原创艺人通过客户端上传的原唱歌曲或视频，对于客户端上传的视频，服务端可以将其进行音频处理，以抽取出其中的音频文件，并将其存储到数据库中。并且还可以利用预定的算法对音频文件进行人声分离，以抽取出人声部分和伴奏部分。
在翻唱用户期望针对某个原创歌曲进行翻唱时，服务端可以将该原创歌曲的伴奏部分抽取出来并发送给客户端，以便用户可以基于该原创歌曲的伴奏部分录制视频。可选地，在录制视频时，可以根据服务端的存储需求，进行结构化录制。这里的结构化录制是指录制预定尺寸的满足预定格式要求的视频。在采集得到视音频数据后，可以将视视音频数据上传到服务端，由服务端基于预定算法进行调音。例如，服务端可以首先进行音画分离，然后对其中的音频部分进行音色匹配和伴奏匹配，其中，伴奏匹配是指将分离出来的音频部分中的伴奏部分与伴奏库中的伴奏进行匹配，以得到与分离出来的音频部分中的伴奏部分相匹配的伴奏，音色匹配是指根据伴奏匹配结果，将音频指纹库中与匹配的伴奏对应的音频指纹与分离出来的音频部分中的人声部分进行匹配，以将对应同一伴奏的音频指纹与人声部分对应起来，由此，可以将人声部分的音高/音准等声学特征与音频指纹对齐，从而可以实现调音。在调音完成后，可以将伴奏与调音后的音轨合成，然后再将音频与画面复原，从而可以得到修音后的视频，修音后的视频可以与对应的原创歌曲关联地存储，并且可以将修音后的视频发送给客户端。在客户端上将原创视频和修音后的视频同屏展示。如果客户端用户不满意，则可以重新拍摄，并且客户端用户还可以执行收藏和分享操作。
本公开如上所述的方法可以由相应的装置实现。
图6是示出了根据本公开一实施例的数据输出装置的结构的示意性方框图。图6所示的数据输出装置可以实现为一种终端设备。其中，数据输出装置的功能模块可以由实现本发明原理的硬件、软件或硬件和软件的结合来实现。本领域技术人员可以理解的是，图6所描述的功能模块可以组合起来或者划分成子模块，从而实现上述发明的原理。因此，本文的描述可以支持对本文描述的功能模块的任何可能的组合、或者划分、或者更进一步的限定。
下面就装置可以具有的功能模块以及各功能模块可以执行的操作做简要说明，对于其中涉及的细节部分可以参见上文相关的描述，这里不再赘述。
参见图6，数据输出装置700包括显示模块710和输出模块720。
显示模块710用于显示第一界面区域和第二界面区域。关于第一界面区域和第二界面区域可以参见上文相关描述，此处不再赘述。
输出模块720用于在第一界面区域输出第一多媒体数据，并在第二界面区域输出与第一多媒体数据对应的第二多媒体数据，其中，第一多媒体数据对应于第一用户，第二多媒体数据是由第二用户针对第一多媒体数据录制的，第一多媒体数据和第二多媒体数据能够被独立操作。关于第一多媒体数据和第二多媒体数据可以参见上文相关描述，此处不再赘述。
输出模块720可以响应于用户针对第一多媒体数据执行的播放操作，在第一界面区域播放第一多媒体数据，并暂停第二多媒体数据的播放，并且/或者输出模块720还可以响应于用户针对第二多媒体数据执行的播放操作，在第二界面区域播放第二多媒体数据，并暂停第一多媒体数据的播放。
作为示例，输出模块720可以利用第一多媒体播放器在第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在第二界面区域输出与第一多媒体数据对应的第二多媒体数据。
输出模块720可以响应于用户针对第一多媒体数据执行的播放操作，利用第一多媒体播放器在第一界面区域播放第一多媒体数据，并暂停第二多媒体数据的播放，并且/或者输出模块720还可以响应于用户针对第二多媒体数据执行的播放操作，利用第二多媒体播放器在第二界面区域播放第二多媒体数据，并暂停第一多媒体数据的播放。
响应于用户的指令或外部条件的变化，显示模块710还可以更改第一界面区域和/或第二界面区域的排版方式。例如，在执行数据输出方法的设备的屏幕横屏的情况下，第一界面区域和第二界面区域可以并排显示在界面中，并且/或者在执行数据输出方法的设备的屏幕竖屏的情况下，第一界面区域可以叠加显示在第二界面区域内部。
在本公开的一个实施例中，数据输出装置700还可以包括获取模块(图中未示出)。获取模块可以用于获取用户针对第一多媒体数据录制的第二多媒体数据，并在第二界面区域输出该第二多媒体数据。
在本公开的一个实施例中，数据输出装置700还可以包括切换模块(图中未示出)。切换模块可以响应于用户针对第一界面区域执行的操作，切换第一界面区域中的第一多媒体数据，并切换第二界面区域中的第二多媒体数据。另外，切换模块还可以响应于用户针对第二界面区域执行的操作，切换第二界面区域中的第二多媒体数据。
图7是示出了根据本公开一实施例的数据输出装置的结构的示意性方框图。图7所示的数据输出装置可以实现为一种终端设备。其中，数据输出装置的功能模块可以由实现本发明原理的硬件、软件或硬件和软件的结合来实现。本领域技术人员可以理解的是，图7所描述的功能模块可以组合起来或者划分成子模块，从而实现上述发明的原理。因此，本文的描述可以支持对本文描述的功能模块的任何可能的组合、或者划分、或者更进一步的限定。
下面就装置可以具有的功能模块以及各功能模块可以执行的操作做简要说明，对于其中涉及的细节部分可以参见上文相关的描述，这里不再赘述。
参见图7，数据输出装置800包括获取模块810和输出模块820。
获取模块810用于获取第二用户针对第一多媒体数据录制的第二多媒体数据，其中，第一多媒体数据对应于第一用户。输出模块820用于在第一界面区域输出第一多媒体数据，并在第二界面区域输出第二多媒体数据。例如，输出模块820可以利用第一多媒体播放器在第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在第二界面区域输出第二多媒体数据。
图8是示出了根据本公开一实施例的数据处理装置的结构的示意性方框图。图8所示的数据处理装置可以实现为一种终端设备。其中，数据输出装置的功能模块可以由实现本发明原理的硬件、软件或硬件和软件的结合来实现。本领域技术人员可以理解的是，图8所描述的功能模块可以组合起来或者划分成子模块，从而实现上述发明的原理。因此，本文的描述可以支持对本文描述的功能模块的任何可能的组合、或者划分、或者更进一步的限定。
下面就装置可以具有的功能模块以及各功能模块可以执行的操作做简要说明，对于其中涉及的细节部分可以参见上文相关的描述，这里不再赘述。
参见图8，数据处理装置900包括接收模块910、修正模块920以及发送模块930。
接收模块910用于获取客户端发送的用户针对第一多媒体数据录制的第二多媒体数据。修正模块920用于基于所述第一多媒体数据对所述第二多媒体数据中的至少部分数据进行修正。发送模块930用于将修正后的第二多媒体数据发送给客户端。
以第一多媒体数据包括第一音频数据，所述第二多媒体数据包括第二音频数据为例，修正模块920可以将所述第二音频数据中的伴奏部分与所述第一音频数据中的伴奏部分进行匹配，根据伴奏匹配结果，将所述第二音频数据中的第二人声部分和所述第一音频数据中的第一人声部分进行匹配，以确定对应相同伴奏的人声，基于所述第一音频数据中与所述第二音频数据中的第二人声对应相同伴奏的第一人声的声学特征，对所述第二人声的声学特征进行修正。
以第一多媒体数据包括第一音频数据为例，发送模块930还可以响应于接收到客户端发送的用户针对所述第一多媒体数据的录制请求，将所述第一音频数据中的伴奏部分发送给所述客户端，以便所述客户端基于所述伴奏部分完成录制。
数据处理装置900还可以包括保存模块，用于将所述第二多媒体数据与所述第一多媒体数据关联地保存。
图9示出了根据本发明一实施例可用于实现上述数据输出方法或数据处理方法的计算设备的结构示意图。
参见图9，计算设备1000包括存储器1010和处理器1020。
处理器1020可以是一个多核的处理器，也可以包含多个处理器。在一些实施例中，处理器1020可以包含一个通用的主处理器以及一个或多个特殊的协处理器，例如图形处理器(GPU)、数字信号处理器(DSP)等等。在一些实施例中，处理器1020可以使用定制的电路实现，例如特定用途集成电路(ASIC，Application Specific Integrated Circuit)或者现场可编程逻辑门阵列(FPGA，Field Programmable Gate Arrays)。
存储器1010可以包括各种类型的存储单元，例如系统内存、只读存储器(ROM)，和永久存储装置。其中，ROM可以存储处理器1020或者计算机的其他模块需要的静态数据或者指令。永久存储装置可以是可读写的存储装置。永久存储装置可以是即使计算机断电后也不会失去存储的指令和数据的非易失性存储设备。在一些实施方式中，永久性存储装置采用大容量存储装置(例如磁或光盘、闪存)作为永久存储装置。另外一些实施方式中，永久性存储装置可以是可移除的存储设备(例如软盘、光驱)。系统内存可以是可读写存储设备或者易失性可读写存储设备，例如动态随机访问内存。系统内存可以存储一些或者所有处理器在运行时需要的指令和数据。此外，存储器1010可以包括任意计算机可读存储媒介的组合，包括各种类型的半导体存储芯片(DRAM，SRAM，SDRAM，闪存，可编程只读存储器)，磁盘和/或光盘也可以采用。在一些实施方式中，存储器1010可以包括可读和/或写的可移除的存储设备，例如激光唱片(CD)、只读数字多功能光盘(例如DVD-ROM，双层DVD-ROM)、只读蓝光光盘、超密度光盘、闪存卡(例如SD卡、min SD卡、Micro-SD卡等等)、磁性软盘等等。计算机可读存储媒介不包含载波和通过无线或有线传输的瞬间电子信号。
存储器1010上存储有可执行代码，当可执行代码被处理器1020处理时，可以使处理器1020执行上文述及的数据输出方法或数据处理方法。
上文中已经参考附图详细描述了根据本发明的数据输出方法、数据处理方法、装置及设备。
此外，根据本发明的方法还可以实现为一种计算机程序或计算机程序产品，该计算机程序或计算机程序产品包括用于执行本发明的上述方法中限定的上述各步骤的计算机程序代码指令。
或者，本发明还可以实施为一种非暂时性机器可读存储介质(或计算机可读存储介质、或机器可读存储介质)，其上存储有可执行代码(或计算机程序、或计算机指令代码)，当所述可执行代码(或计算机程序、或计算机指令代码)被电子设备(或计算设备、服务器等)的处理器执行时，使所述处理器执行根据本发明的上述方法的各个步骤。
本领域技术人员还将明白的是，结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。
附图中的流程图和框图显示了根据本发明的多个实施例的系统和方法的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标记的功能也可以以不同于附图中所标记的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本发明的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术的改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (10)

1.一种数据输出方法，其特征在于，包括：
显示第一界面区域和第二界面区域；
利用第一多媒体播放器在所述第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在所述第二界面区域输出与所述第一多媒体数据对应的第二多媒体数据，其中，所述第一多媒体数据对应于第一用户，所述第二多媒体数据是由第二用户针对所述第一多媒体数据录制的；
响应于用户针对所述第一界面区域执行的操作，切换所述第一界面区域中的第一多媒体数据，并切换所述第二界面区域中的第二多媒体数据，并且/或者响应于用户针对所述第二界面区域执行的操作，切换所述第二界面区域中的第二多媒体数据。
2.根据权利要求1所述的数据输出方法，其特征在于，
响应于用户针对所述第一多媒体数据执行的播放操作，利用所述第一多媒体播放器在所述第一界面区域播放所述第一多媒体数据，并暂停所述第二多媒体数据的播放，并且/或者
响应于用户针对所述第二多媒体数据执行的播放操作，利用所述第二多媒体播放器在所述第二界面区域播放所述第二多媒体数据，并暂停所述第一多媒体数据的播放。
3.根据权利要求1所述的数据输出方法，其特征在于，还包括：
响应于用户的指令或外部条件的变化，更改所述第一界面区域和/或所述第二界面区域的排版方式。
4.根据权利要求1所述的数据输出方法，其特征在于，还包括：
获取用户针对所述第一多媒体数据录制的第二多媒体数据，并在所述第二界面区域输出该第二多媒体数据。
5.一种数据输出方法，其特征在于，包括：
显示第一界面区域和第二界面区域；
在所述第一界面区域输出第一多媒体数据，并在所述第二界面区域输出与所述第一多媒体数据对应的第二多媒体数据，其中，所述第一多媒体数据对应于第一用户，所述第二多媒体数据是由第二用户针对所述第一多媒体数据录制的，所述第一多媒体数据和所述第二多媒体数据能够被独立操作；
响应于用户针对所述第一界面区域执行的操作，切换所述第一界面区域中的第一多媒体数据，并切换所述第二界面区域中的第二多媒体数据，并且/或者响应于用户针对所述第二界面区域执行的操作，切换所述第二界面区域中的第二多媒体数据。
6.一种数据处理方法，其特征在于，包括：
接收客户端发送的用户针对第一多媒体数据录制的第二多媒体数据；
基于所述第一多媒体数据对所述第二多媒体数据中的至少部分数据进行修正；
将修正后的第二多媒体数据发送给客户端，
其中，所述第一多媒体数据包括第一音频数据，所述第二多媒体数据包括第二音频数据，所述基于所述第一多媒体数据对所述第二多媒体数据中的至少部分数据进行修正的步骤包括：将所述第二音频数据中的伴奏部分与所述第一音频数据中的伴奏部分进行匹配；根据伴奏匹配结果，将所述第二音频数据中的第二人声部分和所述第一音频数据中的第一人声部分进行匹配，以确定对应相同伴奏的人声；基于所述第一音频数据中与所述第二音频数据中的第二人声对应相同伴奏的第一人声的声学特征，对所述第二人声的声学特征进行修正。
7.一种数据输出装置，其特征在于，包括：
显示模块，用于显示第一界面区域和第二界面区域；
输出模块，用于利用第一多媒体播放器在所述第一界面区域输出第一多媒体数据，并利用第二多媒体播放器在所述第二界面区域输出与所述第一多媒体数据对应的第二多媒体数据，其中，所述第一多媒体数据对应于第一用户，所述第二多媒体数据是由第二用户针对所述第一多媒体数据录制的；
切换模块，用于响应于用户针对所述第一界面区域执行的操作，切换所述第一界面区域中的第一多媒体数据，并切换所述第二界面区域中的第二多媒体数据，并且/或者响应于用户针对所述第二界面区域执行的操作，切换所述第二界面区域中的第二多媒体数据。
8.一种数据输出装置，其特征在于，包括：
显示模块，用于显示第一界面区域和第二界面区域；
输出模块，用于在所述第一界面区域输出第一多媒体数据，并在所述第二界面区域输出与所述第一多媒体数据对应的第二多媒体数据，其中，所述第一多媒体数据对应于第一用户，所述第二多媒体数据是由第二用户针对所述第一多媒体数据录制的，所述第一多媒体数据和所述第二多媒体数据能够被独立操作；
切换模块，用于响应于用户针对所述第一界面区域执行的操作，切换所述第一界面区域中的第一多媒体数据，并切换所述第二界面区域中的第二多媒体数据，并且/或者响应于用户针对所述第二界面区域执行的操作，切换所述第二界面区域中的第二多媒体数据。
9.一种数据处理装置，其特征在于，包括：
接收模块，用于获取客户端发送的用户针对第一多媒体数据录制的第二多媒体数据；
修正模块，用于基于所述第一多媒体数据对所述第二多媒体数据中的至少部分数据进行修正；
发送模块，用于将修正后的第二多媒体数据发送给客户端，
其中，所述第一多媒体数据包括第一音频数据，所述第二多媒体数据包括第二音频数据，所述修正模块将所述第二音频数据中的伴奏部分与所述第一音频数据中的伴奏部分进行匹配；根据伴奏匹配结果，将所述第二音频数据中的第二人声部分和所述第一音频数据中的第一人声部分进行匹配，以确定对应相同伴奏的人声；基于所述第一音频数据中与所述第二音频数据中的第二人声对应相同伴奏的第一人声的声学特征，对所述第二人声的声学特征进行修正。
10.一种计算设备，包括：
处理器；以及
存储器，其上存储有可执行代码，当所述可执行代码被所述处理器执行时，使所述处理器执行如权利要求1至6中任何一项所述的方法。
CN201910243712.9A 2019-03-28 2019-03-28 数据输出方法、数据处理方法、装置及设备 Active CN111757165B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910243712.9A CN111757165B (zh) 2019-03-28 2019-03-28 数据输出方法、数据处理方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910243712.9A CN111757165B (zh) 2019-03-28 2019-03-28 数据输出方法、数据处理方法、装置及设备

Publications (2)

Publication Number Publication Date
CN111757165A CN111757165A (zh) 2020-10-09
CN111757165B true CN111757165B (zh) 2022-09-16

Family

ID=72672441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910243712.9A Active CN111757165B (zh) 2019-03-28 2019-03-28 数据输出方法、数据处理方法、装置及设备

Country Status (1)

Country Link
CN (1) CN111757165B (zh)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI377557B (en) * 2008-12-12 2012-11-21 Univ Nat Taiwan Science Tech Apparatus and method for correcting a singing voice
US20120291056A1 (en) * 2011-05-11 2012-11-15 CSC Holdings, LLC Action enabled automatic content preview system and method
CN102821308B (zh) * 2012-06-04 2014-11-05 西安交通大学 一种多场景流媒体课件录制与直播方法
CN104954874B (zh) * 2014-10-15 2018-11-09 腾讯科技（北京）有限公司 多媒体数据播放方法和装置
CN105006234B (zh) * 2015-05-27 2018-06-29 广州酷狗计算机科技有限公司 一种k歌处理方法及装置
CN104883516B (zh) * 2015-06-05 2018-08-14 福建凯米网络科技有限公司 一种制作实时演唱视频的方法及系统
CN105825844B (zh) * 2015-07-30 2020-07-07 维沃移动通信有限公司 一种修音的方法和装置
CN105120305A (zh) * 2015-08-10 2015-12-02 合一网络技术(北京)有限公司 在移动终端上播放画中画视频的方法及系统
CN105224276A (zh) * 2015-10-29 2016-01-06 维沃移动通信有限公司 一种分屏显示方法及电子设备
CN105872695A (zh) * 2015-12-31 2016-08-17 乐视网信息技术（北京）股份有限公司 一种视频播放方法及装置
US10345998B2 (en) * 2016-11-10 2019-07-09 Google Llc Recommending different song recording versions based on a particular song recording version
CN106804005B (zh) * 2017-03-27 2019-05-17 维沃移动通信有限公司 一种视频的制作方法及移动终端
CN109348155A (zh) * 2018-11-08 2019-02-15 北京微播视界科技有限公司 视频录制方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN111757165A (zh) 2020-10-09

Similar Documents

Publication Publication Date Title
US20200007816A1 (en) Video recording method, electronic device and storage medium
CN104882151B (zh) 在歌曲演唱中展示多媒体资源的方法、装置及系统
WO2022152064A1 (zh) 视频生成方法、装置、电子设备和存储介质
JP2010541415A (ja) マルチメディアイベントのプレゼンテーションの合成
CN108449632B (zh) 一种演唱视频实时合成的方法及终端
CN107785037B (zh) 使用音频时间码同步媒体内容的方法、系统和介质
CN109348254A (zh) 消息推送方法、装置、计算机设备及存储介质
US20170092253A1 (en) Karaoke system
CN109120990B (zh) 直播方法、装置和存储介质
CN112423095A (zh) 游戏视频录制方法、装置、电子设备和存储介质
US20080159724A1 (en) Method and system for inputting and displaying commentary information with content
EP3615153A1 (en) Streaming of augmented/virtual reality spatial audio/video
US20160249091A1 (en) Method and an electronic device for providing a media stream
CN111800661A (zh) 直播间显示控制方法、电子设备及存储介质
US11665406B2 (en) Verbal queries relative to video content
WO2024067157A1 (zh) 生成特效视频的方法、装置、电子设备及存储介质
JP2017184841A (ja) 情報処理プログラム、情報処理装置及び情報処理方法
WO2020253452A1 (zh) 直播间状态消息的推送方法、交互内容的切换方法、装置及设备
CN111757165B (zh) 数据输出方法、数据处理方法、装置及设备
TW201917556A (zh) 多屏互動方法、裝置及電子設備
JP6972308B2 (ja) ユーザ端末をグループとして連結し、グループと関連するコンテンツを含むサービスを提供する、方法および装置
CN112562430B (zh) 辅助阅读方法、视频播放方法、装置、设备及存储介质
US20220366881A1 (en) Artificial intelligence models for composing audio scores
CN116939230A (zh) 直播交互方法、装置、计算机设备和存储介质
CN103136277A (zh) 多媒体文件播放方法与电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant