CN116567315A - 基于多端协同的多媒体数据处理方法、装置及计算机设备 - Google Patents

基于多端协同的多媒体数据处理方法、装置及计算机设备 Download PDF

Info

Publication number
CN116567315A
CN116567315A CN202310851070.7A CN202310851070A CN116567315A CN 116567315 A CN116567315 A CN 116567315A CN 202310851070 A CN202310851070 A CN 202310851070A CN 116567315 A CN116567315 A CN 116567315A
Authority
CN
China
Prior art keywords
multimedia data
multimedia
data
equipment
category
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310851070.7A
Other languages
English (en)
Other versions
CN116567315B (zh
Inventor
谭雅文
苏军根
卢燕青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN202310851070.7A priority Critical patent/CN116567315B/zh
Publication of CN116567315A publication Critical patent/CN116567315A/zh
Application granted granted Critical
Publication of CN116567315B publication Critical patent/CN116567315B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4432—Powering on the client, e.g. bootstrap loading using setup parameters being stored locally or received from the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458—Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请涉及一种基于多端协同的多媒体数据处理方法、装置、计算机设备和存储介质。所述方法包括：针对多媒体设备进行音频数据采集；根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别；在所述多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，所述多媒体数据播放指令用于指示所述机顶盒采用弹窗的方式播放第二类别的多媒体数据。采用本方法能够提高多媒体数据播放的灵活性。

Description

基于多端协同的多媒体数据处理方法、装置及计算机设备
技术领域
本申请涉及无线通讯技术领域，特别是涉及一种基于多端协同的多媒体数据处理方法、装置、计算机设备和存储介质。
背景技术
随着科技的发展和人们生活水平的提高，电视已经进入千家万户。人们可以通过电视进行电视节目，例如：电视剧、电影等节目的观看。在进行电视节目播放的过程中，往往可以进行相关多媒体数据的播放，例如：在电视节目播放的过程中播放广告。
在IPTV（Internet Protocol Television，交互式网络电视）播放电视节目的场景中，往往是在电视节目播放期间插入播放相关多媒体数据，也即在电视节目播放到相关多媒体数据的播放节点时，停止播放电视节目，开始播放相关多媒体数据，并在完成相关多媒体数据的播放后，继续播放电视节目。
这样一来，不仅会降低用户的观看体验，还会导致用户进行电视节目的切换，导致相关多媒体数据在电视节目切换后，无法针对当前用户进行播放展示，因此，相关多媒体数据在IPTV播放场景下，播放展示的灵活性较差，播放效果较差。
发明内容
基于此，有必要针对上述技术问题，提供一种能够提高多媒体数据播放灵活性的基于多端协同的多媒体数据处理方法、装置、计算机设备和计算机可读存储介质。
第一方面，本申请提供了一种基于多端协同的多媒体数据处理方法。所述方法包括：
针对多媒体设备进行音频数据采集；
根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别；
在所述多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，所述多媒体数据播放指令用于指示所述机顶盒采用弹窗的方式播放第二类别的多媒体数据。
在其中一个实施例中，所述针对多媒体设备进行音频数据采集，包括：
接收所述机顶盒发送的开机指令；
响应于所述开机指令，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述针对多媒体设备进行音频数据采集，包括：
接收所述机顶盒发送的播放数据切换指令；
响应于所述播放数据切换指令，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述针对多媒体设备进行音频数据采集，包括：
向所述机顶盒发送所述多媒体数据播放指令后，开始计时；
在计时时长达到预置时长的情况下，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别，包括：
将采集到的所述音频数据输入预训练的分类网络进行分类处理，得到所述多媒体设备当前播放的多媒体数据的类别。
第二方面，本申请还提供了一种基于多端协同的多媒体数据处理方法，其特征在于，所述方法包括：
通过多媒体设备播放第一多媒体数据；
接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，所述多媒体数据播放指令为所述音箱设备在确定所述第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令；
响应于所述多媒体数据播放指令，获取第二多媒体数据，所述第二多媒体数据的类别为第二类别；
通过弹窗的方式，在所述多媒体设备上播放所述第二多媒体数据。
在其中一个实施例中，所述方法还包括：
响应于开机操作，检测与所述机顶盒处于同一局域网内的所述音箱设备；
在检测到与所述机顶盒处于同一局域网内的所述音箱设备的情况下，向所述音箱设备发送开机指令，所述开机指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据确定所述第一多媒体数据的类别。
在其中一个实施例中，所述方法还包括：
响应于针对所述第一多媒体数据的切换操作，通过所述多媒体设备播放第三多媒体数据；
向所述音箱设备发送播放数据切换指令，所述播放数据切换指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据反馈所述第三多媒体数据的类别。
在其中一个实施例中，所述获取第二多媒体数据，包括：
向服务器发送数据获取指令，所述数据获取指令中包括所述机顶盒登录的用户账户信息，所述数据获取指令用于指示所述服务器根据所述用户账户信息的账户特征，从所述第二类别的多媒体数据中确定第二多媒体数据；
接收所述服务器反馈的第二多媒体数据。
在其中一个实施例中，所述方法还包括：
检测针对所述第二多媒体数据的交互操作；
根据所述交互操作及所述第二多媒体数据，向服务器发送更新指令，所述更新指令用于指示所述服务器根据所述交互操作及所述第二多媒体数据，更新所述用户账户信息对应的账户特征。
第三方面，本申请还提供了一种基于多端协同的多媒体数据处理系统，其特征在于，所述系统包括机顶盒和音箱设备，所述机顶盒与所述音箱设备处于同一局域网内，其中，
所述音箱设备，用于在多媒体设备播放多媒体数据的情况下，采集音频数据，根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别，并在所述多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令；
所述机顶盒，用于接收音箱设备发送的多媒体数据播放指令，并响应于所述多媒体数据播放指令，获取第二类别的多媒体数据，通过弹窗的方式，在所述多媒体设备上播放所述第二类别的多媒体数据。
第四方面，本申请还提供了一种基于多端协同的多媒体数据处理装置，其特征在于，所述装置包括：
采集模块，用于针对多媒体设备进行音频数据采集；
确定模块，用于根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别；
发送模块，用于在所述多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，所述多媒体数据播放指令用于指示所述机顶盒采用弹窗的方式播放第二类别的多媒体数据。
在其中一个实施例中，所述采集模块，还用于：
接收所述机顶盒发送的开机指令；
响应于所述开机指令，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述采集模块，还用于：
接收所述机顶盒发送的播放数据切换指令；
响应于所述播放数据切换指令，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述采集模块，还用于：
向所述机顶盒发送所述多媒体数据播放指令后，开始计时；
在计时时长达到预置时长的情况下，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述确定模块，还用于：
将采集到的所述音频数据输入预训练的分类网络进行分类处理，得到所述多媒体设备当前播放的多媒体数据的类别。
第五方面，本申请还提供了一种基于多端协同的多媒体数据处理装置，其特征在于，所述装置包括：
第一播放模块，用于通过多媒体设备播放第一多媒体数据；
接收模块，用于接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，所述多媒体数据播放指令为所述音箱设备在确定所述第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令；
获取模块，用于响应于所述多媒体数据播放指令，获取第二多媒体数据，所述第二多媒体数据的类别为第二类别；
第二播放模块，用于通过弹窗的方式，在所述多媒体设备上播放所述第二多媒体数据。
在其中一个实施例中，所述装置还包括：
第一检测模块，用于响应于开机操作，检测与所述机顶盒处于同一局域网内的所述音箱设备；
第一发送模块，用于在检测到与所述机顶盒处于同一局域网内的所述音箱设备的情况下，向所述音箱设备发送开机指令，所述开机指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据确定所述第一多媒体数据的类别。
在其中一个实施例中，所述装置还包括：
第三播放模块，用于响应于针对所述第一多媒体数据的切换操作，通过所述多媒体设备播放第三多媒体数据；
第二发送模块，用于向所述音箱设备发送播放数据切换指令，所述播放数据切换指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据反馈所述第三多媒体数据的类别。
在其中一个实施例中，所述获取模块，还用于：
向服务器发送数据获取指令，所述数据获取指令中包括所述机顶盒登录的用户账户信息，所述数据获取指令用于指示所述服务器根据所述用户账户信息的账户特征，从所述第二类别的多媒体数据中确定第二多媒体数据；
接收所述服务器反馈的第二多媒体数据。
在其中一个实施例中，所述装置还包括：
第二检测模块，用于检测针对所述第二多媒体数据的交互操作；
第三发送模块，用于根据所述交互操作及所述第二多媒体数据，向服务器发送更新指令，所述更新指令用于指示所述服务器根据所述交互操作及所述第二多媒体数据，更新所述用户账户信息对应的账户特征。
第六方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以上任一方面提供的基于多端协同的多媒体数据处理方法。
第七方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现任一方面提供的基于多端协同的多媒体数据处理方法。
第八方面，本申请还提供了一种计算机程序产品。所述计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现任一方面提供的基于多端协同的多媒体数据处理方法。
上述基于多端协同的多媒体数据处理方法、装置、计算机设备和存储介质，音箱设备针对多媒体设备进行音频数据采集，根据采集到的音频数据，确定多媒体设备当前播放的多媒体数据的类别，并在多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，该多媒体数据播放指令用于指示机顶盒采用弹窗的方式播放第二类别的多媒体数据。采用本公开实施例提供的方法，可以通过设备之间的协同配合，在多媒体设备播放第一类别的多媒体数据的同时，采用弹窗的方式播放第二类别的多媒体数据，可以丰富第二类别的多媒体数据的展示方式，提高第二类别的多媒体数据展示方式的灵活性，可以实现在不打断节目连贯性的前提下，进行第二类别的多媒体数据的播放，能够提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
附图说明
图1为一个实施例中基于多端协同的多媒体数据处理方法的应用环境图；
图2为一个实施例中基于多端协同的多媒体数据处理方法的流程示意图；
图3为一个实施例中202步骤的流程示意图；
图4为一个实施例中202步骤的流程示意图；
图5为一个实施例中基于多端协同的多媒体数据处理方法的流程示意图；
图6为一个实施例中基于多端协同的多媒体数据处理方法的流程示意图；
图7为一个实施例中基于多端协同的多媒体数据处理方法的流程示意图；
图8为一个实施例中506步骤的流程示意图；
图9为一个实施例中基于多端协同的多媒体数据处理方法的流程示意图；
图10为一个实施例中基于多端协同的多媒体数据处理方法的示意图；
图11为一个实施例中基于多端协同的多媒体数据处理方法的示意图；
图12为一个实施例中基于多端协同的多媒体数据处理装置的结构框图；
图13为一个实施例中基于多端协同的多媒体数据处理装置的结构框图；
图14为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请实施例提供的基于多端协同的多媒体数据处理方法，可以应用于如图1所示的应用环境中。其中，机顶盒102通过网络分别与音箱设备104和服务器106进行通信。数据存储系统可以存储机顶盒102和音箱设备104需要处理的数据。数据存储系统可以集成在机顶盒102和音箱设备104上，也可以放在云上或其他网络服务器上。
本公开实施例中，机顶盒102和音箱设备104处于同一局域网内，多媒体设备在机顶盒102的控制下，进行多媒体数据的播放，在多媒体数据播放过程中，音箱设备104可以进行音频数据的采集，并基于采集到的音频数据确定多媒体设备当前所播放的多媒体数据的类别，并在确定多媒体数据为第一类别的情况下，向机顶盒102发送多媒体数据播放指令。机顶盒102接收到多媒体数据播放指令后，可以从多媒体数据库中获取第二类别的多媒体数据，通过弹窗的方式在多媒体设备上播放该第二类别的多媒体数据。
这样一来，可以通过设备之间的协同配合，在多媒体设备播放第一类别的多媒体数据的同时，采用弹窗的方式播放第二类别的多媒体数据，可以提高第二类别的多媒体数据展示的灵活性，可以在不打断节目连贯性的前提下，提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一个实施例中，如图2所示，提供了一种基于多端协同的多媒体数据处理方法，以该方法应用于图1中的音箱设备104为例进行说明，包括以下步骤：
步骤202中，针对多媒体设备进行音频数据采集；
步骤204中，根据采集到的音频数据，确定多媒体设备当前播放的多媒体数据的类别；
步骤206中，在多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，多媒体数据播放指令用于指示机顶盒采用弹窗的方式播放第二类别的多媒体数据。
本公开实施例中，多媒体设备在机顶盒的控制下进行多媒体数据的播放，音箱设备与机顶盒处于同一局域网内。示例性的，多媒体数据的第一类别与多媒体数据的第二类别为不同的类别，用于标识不同类型的多媒体数据，例如：第一类别为节目类别，第二类别为广告类别等。
音箱设备可以在多媒体设备进行多媒体数据播放的过程中，进行音频数据采集，并根据采集到的音频数据进行多媒体数据类别的分析，确定多媒体设备当前播放的多媒体数据的类别。在确定多媒体数据的类别为第一类别的情况下，音箱设备可以向机顶盒发送多媒体数据播放指令，该媒体数据播放指令用于指示机顶盒采用弹窗的方式播放第二类别的多媒体数据。
机顶盒接收到多媒体数据播放指令的情况下，可以从多媒体数据库中获取第二类别的多媒体数据，并采用弹窗的方式在多媒体设备中播放展示该第二类别的多媒体数据。示例性的，多媒体设备的展示界面中展示第一类别的多媒体数据，在展示界面的指定区域展示弹窗，在弹窗中展示第二类别的多媒体数据。
在确定多媒体数据的类别为第二类别的情况下，音箱设备可以继续进行音频数据的采集，直至基于采集的音频数据确定多媒体设备当前播放的多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，使得多媒体设备仅在播放第一类别的多媒体数据的情况下，通过弹窗方式展示第二类别的多媒体数据，不会重复展示相同类别的多媒体数据，可以大大提高用户体验。
本公开实施例提供的基于多端协同的多媒体数据处理方法，音箱设备针对多媒体设备进行音频数据采集，根据采集到的音频数据，确定多媒体设备当前播放的多媒体数据的类别，并在多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，该多媒体数据播放指令用于指示机顶盒采用弹窗的方式播放第二类别的多媒体数据。采用本公开实施例提供的方法，可以通过设备之间的协同配合，在多媒体设备播放第一类别的多媒体数据的同时，采用弹窗的方式播放第二类别的多媒体数据，可以丰富第二类别的多媒体数据展示的灵活性，在不打断节目连贯性的前提下，进行第二类别的多媒体数据的播放，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，参照图3所示，在步骤202中，针对多媒体设备进行音频数据采集，包括：
步骤302，接收机顶盒发送的开机指令；
步骤304，响应于开机指令，针对多媒体设备进行音频数据采集。
本公开实施例中，机顶盒在开机时，会向处于同一局域网内的音箱设备发送开机指令。机顶盒开机后，表征多媒体设备即将开始播放多媒体数据，音箱设备接收到开机指令后，可以开始进行音频数据的采集，并基于采集到的音频数据判断多媒体设备当前播放的多媒体数据的类别，以在多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令，以通过多媒体数据播放指令指示机顶盒控制多媒体设备采用弹窗的方式播放第二类别的多媒体数据。
采用本公开实施例提供的方法，可以在多媒体设备开始播放多媒体数据时，触发音箱设备及时进行音频数据采集，进而通过采集到的音频数据确定第二类别的多媒体数据的合适播放时机，控制机顶盒采用弹窗的方式播放第二类别的多媒体数据，可以提高第二类别的多媒体数据展示的灵活性，提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，参照图4所示，在步骤202中，针对多媒体设备进行音频数据采集，包括：
步骤402中，接收机顶盒发送的播放数据切换指令；
步骤404中，响应于播放数据切换指令，针对多媒体设备进行音频数据采集。
本公开实施例中，机顶盒在接收到针对多媒体数据的切换指令（例如：换台指令等）时，可以向音箱设备发送播放数据切换指令，该播放数据切换指令用于通知音箱设备多媒体播放设备当前已进行多媒体数据的切换操作。音箱设备接收到该播放数据切换指令的情况下，可以针对多媒体设备进行音频数据的采集，以基于采集到的音频数据确定多媒体设备当前播放的多媒体数据的类别，并在多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令，以通过多媒体数据播放指令指示机顶盒控制多媒体设备采用弹窗的方式播放第二类别的多媒体数据。
采用本公开实施例提供的方法，可以在多媒体设备切换播放的多媒体数据时，触发音箱设备及时进行音频数据采集，进而在多媒体数据切换后及时确定第二类别的多媒体数据的合适播放时机，控制机顶盒采用弹窗的方式播放第二类别的多媒体数据，可以提高第二类别的多媒体数据的展示方式的灵活性，提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，在步骤202中，针对多媒体设备进行音频数据采集，包括：
向机顶盒发送多媒体数据播放指令后，开始计时；
在计时时长达到预置时长的情况下，针对多媒体设备进行音频数据采集。
本公开实施例中，在向机顶盒发送多媒体数据播放指令后，开始计时，并在计时时长达到预置时长时，可以针对多媒体设备进行音频数据采集，以基于采集到的音频数据确定多媒体设备当前播放的多媒体数据的类别，并在多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令，以通过多媒体数据播放指令指示机顶盒控制多媒体设备采用弹窗的方式播放第二类别的多媒体数据。
其中，预置时长可以为预先设置的时长，具体取值大小可以由本领域技术人员根据需求确定，例如：在第二类别的多媒体数据的播放频率较高的情况下，可以设置较小的预置时长，反之，在第二类别的多媒体数据的播放频率较低的情况下，可以设置较大的预置时长。
采用本公开实施例提供的方法，可以通过预置时长控制第二类别的多媒体数据的展示频率，丰富第二类别的多媒体数据的展示方式，提高第二类别的多媒体数据展示的灵活性，提高多媒体数据的播放效果，以及提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，在步骤204中，根据采集到的音频数据，确定多媒体设备当前播放的多媒体数据的类别，包括：
将采集到的音频数据输入预训练的分类网络进行分类处理，得到多媒体设备当前播放的多媒体数据的类别。
本公开实施例中，音箱设备可以为智能音箱。可以预先训练分类网络，该分类网络可以基于音频数据判断数据类别，例如：基于多媒体数据的音频数据，判断多媒体数据的类别，多媒体数据的类别可以包括第一类别和第二类别。可以将音频数据输入该分类网络中进行分类处理，输出得到多媒体数据的类别。
示例性的，可以基于第一类别的多媒体数据的音频数据和第二类别的多媒体数据的音频数据，训练分类网络。本公开实施例中不对分类网络的训练过程做具体限定，任一训练方式均适用于本公开实施例中。本公开实施例中同样不对分类网络的网络类型做具体限定，任一能够实现分类的网络类型均适用于本公开实施例中。
采用本公开实施例提供的方法，可以通过设备之间的协同配合，由音箱设备通过预先训练的分类网络，基于多媒体设备播放的多媒体数据的音频数据，确定多媒体数据的类别，进而基于多媒体数据的类别控制机顶盒进行第二类别的多媒体数据的播放，可以丰富第二类别的多媒体数据的展示方式，提高第二类别的多媒体数据展示的灵活性，在不打断节目连贯性的前提下，进行第二类别的多媒体数据的播放，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一个实施例中，如图5所示，提供了一种基于多端协同的多媒体数据处理方法，以该方法应用于图1中的机顶盒102为例进行说明，包括以下步骤：
步骤502，通过多媒体设备播放第一多媒体数据；
步骤504，接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，多媒体数据播放指令为音箱设备在确定第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令；
步骤506，响应于多媒体数据播放指令，获取第二多媒体数据，第二多媒体数据的类别为第二类别；
步骤508，通过弹窗的方式，在多媒体设备上播放第二多媒体数据。
本公开实施例中，机顶盒可以为IPTV机顶盒，其可以控制多媒体设备播放第一多媒体数据。在第一多媒体数据的类别为第一类别的情况下，位于同一局域网内的音箱设备会向机顶盒发送多媒体数据播放指令（具体过程参照前述实施例的相关描述即可，本公开实施例中在此不再赘述）。
机顶盒接收到多媒体数据播放指令后，可以响应于多媒体数据播放指令，从多媒体数据库中获取类别为第二类别的第二多媒体数据，并控制多媒体设备以弹窗的方式播放展示第二多媒体数据，示例性的，多媒体设备的展示界面中展示第一类别的多媒体数据，在展示界面的指定区域展示弹窗，在弹窗中展示第二类别的多媒体数据。
采用本公开实施例提供的方法，机顶盒通过多媒体设备播放第一多媒体数据，接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，多媒体数据播放指令为音箱设备在确定第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令。响应于多媒体数据播放指令，获取第二多媒体数据，第二多媒体数据的类别为第二类别，并通过弹窗的方式，在多媒体设备上播放第二多媒体数据。采用本公开实施例提供的方法，可以通过设备之间的协同配合，在多媒体设备播放第一类别的多媒体数据的同时，采用弹窗的方式播放第二类别的多媒体数据，可以丰富第二类别的多媒体数据的展示方式，提高第二类别的多媒体数据展示的灵活性，在不打断节目连贯性的前提下，进行第二类别的多媒体数据的播放，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，参照图6所示，上述方法还包括：
步骤602，响应于开机操作，检测与机顶盒处于同一局域网内的音箱设备；
步骤604，在检测到与机顶盒处于同一局域网内的音箱设备的情况下，向音箱设备发送开机指令，开机指令用于指示音箱设备进行音频数据采集，并根据采集到的音频数据确定第一多媒体数据的类别。
本公开实施例中，机顶盒在开机时，多媒体设备将开始进行多媒体数据的播放，同时机顶盒将检测与其处于同一局域网内的音箱设备，在检测到该音箱设备的情况下，可以向该音箱设备发送开机指令，该开机指令用于通知音箱设备机顶盒已开机，指示音箱设备开始进行音频数据采集，并根据采集到的音频数据确定多媒体设备当前所播放的多媒体数据的类别。音箱设备在确定多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令，机顶盒基于多媒体数据播放指令控制多媒体设备采用弹窗的方式播放第二类别的多媒体数据。
采用本公开实施例提供的方法，可以在多媒体设备开始播放多媒体数据时，通过机顶盒发送的开机指令触发音箱设备及时进行音频数据采集，进而通过采集到的音频数据确定第二类别的多媒体数据的合适播放时机，控制机顶盒采用弹窗的方式播放第二类别的多媒体数据，丰富第二类别的多媒体数据的展示方式，提高第二类别的多媒体数据展示的灵活性，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，参照图7所示，上述方法还包括：
步骤702，响应于针对第一多媒体数据的切换操作，通过多媒体设备播放第三多媒体数据；
步骤704，向音箱设备发送播放数据切换指令，播放数据切换指令用于指示音箱设备进行音频数据采集，并根据采集到的音频数据反馈第三多媒体数据的类别。
本公开实施例中，机顶盒接收到针对多媒体数据的切换指令（例如：换台指令等）时，可以控制多媒体设备切换播放的多媒体数据，例如：由频道1切换到频道2，进而将播放的多媒体数据由频道1播放的第一多媒体数据切换为频道2播放的第三多媒体数据。
机顶盒同时可以向音箱设备发送播放数据切换指令，该播放数据切换指令用于通知音箱设备多媒体设备播放的多媒体数据进行了切换，指示音箱设备开始进行音频数据采集，并根据采集到的音频数据确定多媒体设备切换后播放的第三多媒体数据的类别。音箱设备在确定第三多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令，机顶盒控制基于多媒体数据播放指令控制多媒体设备采用弹窗的方式播放第二类别的多媒体数据。
采用本公开实施例提供的方法，可以在多媒体设备切换播放的多媒体数据时，通过多媒体数据播放指令触发音箱设备及时进行音频数据采集，进而在多媒体数据切换后及时确定第二类别的多媒体数据的合适播放时机，控制机顶盒采用弹窗的方式播放第二类别的多媒体数据，丰富第二类别的多媒体数据的展示方式，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在一示例性的实施例中，参照图8所示，步骤506中，获取第二多媒体数据，包括：
步骤802，向服务器发送数据获取指令，数据获取指令中包括机顶盒登录的用户账户信息，数据获取指令用于指示服务器根据用户账户信息的账户特征，从第二类别的多媒体数据中确定第二多媒体数据；
步骤804，接收服务器反馈的第二多媒体数据。
本公开实施例中，机顶盒在接收到多媒体数据播放指令后，可以响应于多媒体数据播放指令，获取机顶盒登录的用户账户信息，并基于该用户账户信息向服务器发送数据获取指令，以使得服务器接收到数据获取指令后，可以根据数据获取指令中携带的用户账户信息获取账户特征（从特征库中查找该用户账户信息对应的账户特征，例如：获取用户账户对应的画像特征等信息），并基于用户账户信息对应的账户特征，从第二类别的多媒体数据中获取与该账户特征相匹配的第二多媒体数据，并反馈第二多媒体数据至机顶盒。
其中，本公开实施例中不对服务器基于用户特征匹配第二多媒体数据的方式做具体限定，任一特征匹配算法均适用于本公开实施例中。
采用本公开实施例的方法，可以根据用户观看习惯和喜好，提供个性化的多媒体数据投放服务，可以提高第二多媒体数据的投放的精准度和提高用户体验，在第二多媒体数据为广告的情况下，还可以提高广告转化率。
在一示例性的实施例中，参照图9所示，上述方法还包括：
步骤902中，检测针对第二多媒体数据的交互操作；
步骤904中，根据交互操作及第二多媒体数据，向服务器发送更新指令，更新指令用于指示服务器根据交互操作及第二多媒体数据，更新用户账户信息对应的账户特征。
本公开实施例中，机顶盒可以检测用户针对第二多媒体数据的交互操作，例如：点击操作、关闭操作、等待操作等。参照图10所示，在检测到针对第二多媒体数据的交互操作时，可以根据该交互操作和第二多媒体数据向服务器发送更新指令，服务器接收到该更新指令后，可以基于该交互操作和第二多媒体数据更新用户账户信息对应的账户特征，后续可以基于更新后的账户特征匹配第二多媒体数据，可以提高第二多媒体数据的匹配精度。
示例性的，服务器可以将交互操作和第二多媒体数据输入账户特征提取网络中，提取得到账户特征信息，并基于提取到的账户特征信息更新用户账户信息的账户特征。其中，本公开实施例中不对账户特征提取网络的网络结构做具体限定，任一特征提取网络均适用于本公开实施例中。
在一个实施例中，提供了一种基于多端协同的多媒体数据处理系统，该系统包括机顶盒和音箱设备，机顶盒与音箱设备处于同一局域网内，其中，
音箱设备，用于在多媒体设备播放多媒体数据的情况下，采集音频数据，根据采集到的音频数据，确定多媒体设备当前播放的多媒体数据的类别，并在多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令；
机顶盒，用于接收音箱设备发送的多媒体数据播放指令，并响应于多媒体数据播放指令，获取第二类别的多媒体数据，通过弹窗的方式，在多媒体设备上播放所述第二类别的多媒体数据。
示例性的，参照图11所示，机顶盒开机后，向音箱设备发送开机指令，音箱设备接收到开机指令后，启动对多媒体设备播放的多媒体数据的类别的判断，本示例中以多媒体数据的类别包括电视节目和电视广告为例。具体地：音箱设备采集音频数据，并根据采集到的音频数据，判断多媒体设备当前播放的多媒体数据是电视节目还是电视广告，例如：将音频数据输入预先训练好的神经网络模型中，得到当前播放内容的类别（电视节目或电视广告）。
如果当前播放的多媒体数据是电视节目，音箱设备可以向机顶盒发送多媒体数据播放指令，通知机顶盒弹出广告窗口，机顶盒接收到多媒体数据播放指令，则根据当前用户的特征，从广告库中选择与之匹配的电视广告，在IPTV上弹出广告窗口，通过该广告窗口展示所选广告。
监测用户对播放的电视广告的反馈行为，如点击、关闭、等待，并根据用户反馈行为更新用户画像。
在一定时间间隔后，音箱设备重复进行音频数据的采集，以进行下一份广告的投放处理。当用户切换频道时，机顶盒向音箱设备发送多媒体数据切换指令，音箱设备接收到多媒体数据切换指令后，开始进行音频数据的采集，以实现对不同播放内容的精准投放。
当机顶盒接收到关机指令的情况下，机顶盒可以向音箱设备发送关闭指令，音箱设备接收到该关闭指令后，可以停止采集音频数据，以及停止对多媒体设备播放的多媒体数据的类别的判断。本公开实施例能够根据用户观看习惯和喜好，提供个性化的广告服务，从而提高广告转化率和用户满意度。
本公开实施例提供的方法，机顶盒开机后，通知音箱设备启动对电视播放内容的判断，包括根据采集到的音频数据，判断当前播放内容是电视节目还是电视广告，如果是电视节目，音箱设备通知机顶盒弹出广告窗口。如果用户换台，机顶盒通知音箱设备重新判断播放内容，如果机顶盒关机，音箱设备停止对播放内容的判断。
本公开实施例提供的基于多端协同的多媒体数据处理方法，能够协同处于同一局域网下的音箱设备和机顶盒，利用音箱设备采集播放内容的音频数据，并将音频数据输入预先训练好的神经网络模型中，得到当前播放内容的类别。实现了播放内容的实时判断，摆脱了对于广告播放标识的依赖。在播放电视节目时通知机顶盒投放广告，机顶盒根据用户的账户特征从广告库中匹配广告并通过弹出窗口的形式投放，可以在不打断节目连贯性的前提下，实现广告的个性化推荐，以提升广告转化率。且通过投放弹窗广告，获取用户的反馈来更新用户的账户特征，可以根据用户观看习惯和喜好，提供个性化的广告服务，从而提高广告转化率和用户满意度。
应该理解的是，虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思，本申请实施例还提供了一种用于实现上述所涉及的基于多端协同的多媒体数据处理方法的基于多端协同的多媒体数据处理装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个基于多端协同的多媒体数据处理装置实施例中的具体限定可以参见上文中对于基于多端协同的多媒体数据处理方法的限定，在此不再赘述。
在一个实施例中，如图12所示，提供了一种基于多端协同的多媒体数据处理装置，包括：采集模块1202、确定模块1204和发送模块1206，其中：
采集模块1202，用于针对多媒体设备进行音频数据采集；
确定模块1204，用于根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别；
发送模块1206，用于在所述多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，所述多媒体数据播放指令用于指示所述机顶盒采用弹窗的方式播放第二类别的多媒体数据。
采用本公开实施例提供的装置，可以通过设备之间的协同配合，在多媒体设备播放第一类别的多媒体数据的同时，采用弹窗的方式播放第二类别的多媒体数据，可以丰富第二类别的多媒体数据的展示方式的灵活性，在不打断节目连贯性的前提下，进行第二类别的多媒体数据的播放，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在其中一个实施例中，所述采集模块1202，还用于：
接收所述机顶盒发送的开机指令；
响应于所述开机指令，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述采集模块1202，还用于：
接收所述机顶盒发送的播放数据切换指令；
响应于所述播放数据切换指令，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述采集模块1202，还用于：
向所述机顶盒发送所述多媒体数据播放指令后，开始计时；
在计时时长达到预置时长的情况下，针对所述多媒体设备进行音频数据采集。
在其中一个实施例中，所述确定模块1204，还用于：
将采集到的所述音频数据输入预训练的分类网络进行分类处理，得到所述多媒体设备当前播放的多媒体数据的类别。
在一个实施例中，如图13所示，提供了一种基于多端协同的多媒体数据处理装置，包括：第一播放模块1302、接收模块1304、获取模块1306和第二播放模块1308，其中：
第一播放模块1302，用于通过多媒体设备播放第一多媒体数据；
接收模块1304，用于接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，所述多媒体数据播放指令为所述音箱设备在确定所述第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令；
获取模块1306，用于响应于所述多媒体数据播放指令，获取第二多媒体数据，所述第二多媒体数据的类别为第二类别；
第二播放模块1308，用于通过弹窗的方式，在所述多媒体设备上播放所述第二多媒体数据。
采用本公开实施例提供的装置，可以通过设备之间的协同配合，在多媒体设备播放第一类别的多媒体数据的同时，采用弹窗的方式播放第二类别的多媒体数据，可以丰富第二类别的多媒体数据的展示方式的灵活性，在不打断节目连贯性的前提下，进行第二类别的多媒体数据的播放，可以提高多媒体数据的播放效果，提高第二类别的多媒体数据的曝光率和展示效果。
在其中一个实施例中，所述装置还包括：
第一检测模块，用于响应于开机操作，检测与所述机顶盒处于同一局域网内的所述音箱设备；
第一发送模块，用于在检测到与所述机顶盒处于同一局域网内的所述音箱设备的情况下，向所述音箱设备发送开机指令，所述开机指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据确定所述第一多媒体数据的类别。
在其中一个实施例中，所述装置还包括：
第三播放模块，用于响应于针对所述第一多媒体数据的切换操作，通过所述多媒体设备播放第三多媒体数据；
第二发送模块，用于向所述音箱设备发送播放数据切换指令，所述播放数据切换指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据反馈所述第三多媒体数据的类别。
在其中一个实施例中，所述获取模块1306，还用于：
向服务器发送数据获取指令，所述数据获取指令中包括所述机顶盒登录的用户账户信息，所述数据获取指令用于指示所述服务器根据所述用户账户信息的账户特征，从所述第二类别的多媒体数据中确定第二多媒体数据；
接收所述服务器反馈的第二多媒体数据。
在其中一个实施例中，所述装置还包括：
第二检测模块，用于检测针对所述第二多媒体数据的交互操作；
第三发送模块，用于根据所述交互操作及所述第二多媒体数据，向服务器发送更新指令，所述更新指令用于指示所述服务器根据所述交互操作及所述第二多媒体数据，更新所述用户账户信息对应的账户特征。
上述基于多端协同的多媒体数据处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图14所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC（近场通信）或其他技术实现。该计算机程序被处理器执行时以实现一种基于多端协同的多媒体数据处理方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图14中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，还提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
需要说明的是，本申请所涉及的用户信息（包括但不限于用户设备信息、用户个人信息等）和数据（包括但不限于用于分析的数据、存储的数据、展示的数据等），均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器（Read-OnlyMemory，ROM）、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器（ReRAM）、磁变存储器（Magnetoresistive Random Access Memory，MRAM）、铁电存储器（Ferroelectric Random Access Memory，FRAM）、相变存储器（Phase Change Memory，PCM）、石墨烯存储器等。易失性存储器可包括随机存取存储器（Random Access Memory，RAM）或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器（Static Random AccessMemory，SRAM）或动态随机存取存储器（Dynamic RandomAccess Memory，DRAM）等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。

Claims (15)

1.一种基于多端协同的多媒体数据处理方法，其特征在于，所述方法包括：
针对多媒体设备进行音频数据采集；
根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别；
在所述多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，所述多媒体数据播放指令用于指示所述机顶盒采用弹窗的方式播放第二类别的多媒体数据。
2.根据权利要求1所述的方法，其特征在于，所述针对多媒体设备进行音频数据采集，包括：
接收所述机顶盒发送的开机指令；
响应于所述开机指令，针对所述多媒体设备进行音频数据采集。
3.根据权利要求1所述的方法，其特征在于，所述针对多媒体设备进行音频数据采集，包括：
接收所述机顶盒发送的播放数据切换指令；
响应于所述播放数据切换指令，针对所述多媒体设备进行音频数据采集。
4.根据权利要求1所述的方法，其特征在于，所述针对多媒体设备进行音频数据采集，包括：
向所述机顶盒发送所述多媒体数据播放指令后，开始计时；
在计时时长达到预置时长的情况下，针对所述多媒体设备进行音频数据采集。
5.根据权利要求1至4中任一项所述的方法，其特征在于，所述根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别，包括：
将采集到的所述音频数据输入预训练的分类网络进行分类处理，得到所述多媒体设备当前播放的多媒体数据的类别。
6.一种基于多端协同的多媒体数据处理方法，其特征在于，所述方法包括：
通过多媒体设备播放第一多媒体数据；
接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，所述多媒体数据播放指令为所述音箱设备在确定所述第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令；
响应于所述多媒体数据播放指令，获取第二多媒体数据，所述第二多媒体数据的类别为第二类别；
通过弹窗的方式，在所述多媒体设备上播放所述第二多媒体数据。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
响应于开机操作，检测与所述机顶盒处于同一局域网内的所述音箱设备；
在检测到与所述机顶盒处于同一局域网内的所述音箱设备的情况下，向所述音箱设备发送开机指令，所述开机指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据确定所述第一多媒体数据的类别。
8.根据权利要求6所述的方法，其特征在于，所述方法还包括：
响应于针对所述第一多媒体数据的切换操作，通过所述多媒体设备播放第三多媒体数据；
向所述音箱设备发送播放数据切换指令，所述播放数据切换指令用于指示所述音箱设备进行音频数据采集，并根据采集到的音频数据反馈所述第三多媒体数据的类别。
9.根据权利要求6至8中任一项所述的方法，其特征在于，所述获取第二多媒体数据，包括：
向服务器发送数据获取指令，所述数据获取指令中包括所述机顶盒登录的用户账户信息，所述数据获取指令用于指示所述服务器根据所述用户账户信息的账户特征，从所述第二类别的多媒体数据中确定第二多媒体数据；
接收所述服务器反馈的第二多媒体数据。
10.根据权利要求9所述的方法，其特征在于，所述方法还包括：
检测针对所述第二多媒体数据的交互操作；
根据所述交互操作及所述第二多媒体数据，向服务器发送更新指令，所述更新指令用于指示所述服务器根据所述交互操作及所述第二多媒体数据，更新所述用户账户信息对应的账户特征。
11.一种基于多端协同的多媒体数据处理系统，其特征在于，所述系统包括机顶盒和音箱设备，所述机顶盒与所述音箱设备处于同一局域网内，其中，
所述音箱设备，用于在多媒体设备播放多媒体数据的情况下，采集音频数据，根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别，并在所述多媒体数据的类别为第一类别的情况下，向机顶盒发送多媒体数据播放指令；
所述机顶盒，用于接收所述音箱设备发送的所述多媒体数据播放指令，并响应于所述多媒体数据播放指令，获取第二类别的多媒体数据，通过弹窗的方式，在所述多媒体设备上播放所述第二类别的多媒体数据。
12.一种基于多端协同的多媒体数据处理装置，其特征在于，所述装置包括：
采集模块，用于针对多媒体设备进行音频数据采集；
确定模块，用于根据采集到的所述音频数据，确定所述多媒体设备当前播放的多媒体数据的类别；
发送模块，用于在所述多媒体数据的类别为第一类别的情况下，向位于同一局域网内的机顶盒发送多媒体数据播放指令，所述多媒体数据播放指令用于指示所述机顶盒采用弹窗的方式播放第二类别的多媒体数据。
13.一种基于多端协同的多媒体数据处理装置，其特征在于，所述装置包括：
第一播放模块，用于通过多媒体设备播放第一多媒体数据；
接收模块，用于接收位于同一局域网内的音箱设备发送的多媒体数据播放指令，所述多媒体数据播放指令为所述音箱设备在确定所述第一多媒体数据的类别为第一类别的情况下，向机顶盒发送的指令；
获取模块，用于响应于所述多媒体数据播放指令，获取第二多媒体数据，所述第二多媒体数据的类别为第二类别；
第二播放模块，用于通过弹窗的方式，在所述多媒体设备上播放所述第二多媒体数据。
14.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至10中任一项所述的方法的步骤。
15.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至10中任一项所述的方法的步骤。
CN202310851070.7A 2023-07-12 2023-07-12 基于多端协同的多媒体数据处理方法、装置及计算机设备 Active CN116567315B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310851070.7A CN116567315B (zh) 2023-07-12 2023-07-12 基于多端协同的多媒体数据处理方法、装置及计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310851070.7A CN116567315B (zh) 2023-07-12 2023-07-12 基于多端协同的多媒体数据处理方法、装置及计算机设备

Publications (2)

Publication Number Publication Date
CN116567315A true CN116567315A (zh) 2023-08-08
CN116567315B CN116567315B (zh) 2023-10-20

Family

ID=87503947

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310851070.7A Active CN116567315B (zh) 2023-07-12 2023-07-12 基于多端协同的多媒体数据处理方法、装置及计算机设备

Country Status (1)

Country Link
CN (1) CN116567315B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140139742A1 (en) * 2012-11-19 2014-05-22 United Video Properties, Inc. Methods and systems for displaying advertisements
CN108289235A (zh) * 2018-01-10 2018-07-17 北京掌阔移动传媒科技有限公司 一种跨屏广告投放方法和装置
CN108848411A (zh) * 2018-08-01 2018-11-20 夏颖 基于音频信号波形界定节目边界和广告边界的系统和方法
CN110324691A (zh) * 2018-03-29 2019-10-11 中兴通讯股份有限公司 一种分屏显示的方法、设备及计算机可读存储介质
CN111510750A (zh) * 2020-04-26 2020-08-07 深圳市易平方网络科技有限公司 一种广告跨屏投放方法、系统及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140139742A1 (en) * 2012-11-19 2014-05-22 United Video Properties, Inc. Methods and systems for displaying advertisements
CN108289235A (zh) * 2018-01-10 2018-07-17 北京掌阔移动传媒科技有限公司 一种跨屏广告投放方法和装置
CN110324691A (zh) * 2018-03-29 2019-10-11 中兴通讯股份有限公司 一种分屏显示的方法、设备及计算机可读存储介质
CN108848411A (zh) * 2018-08-01 2018-11-20 夏颖 基于音频信号波形界定节目边界和广告边界的系统和方法
CN111510750A (zh) * 2020-04-26 2020-08-07 深圳市易平方网络科技有限公司 一种广告跨屏投放方法、系统及存储介质

Also Published As

Publication number Publication date
CN116567315B (zh) 2023-10-20

Similar Documents

Publication Publication Date Title
CN108712665B (zh) 一种直播列表的生成方法、装置、服务器及存储介质
CN105808182B (zh) 显示控制方法及系统、广告破口判断装置、影音处理装置
US11409817B2 (en) Display apparatus and method of controlling the same
CN111158546B (zh) 媒体信息的展示方法和装置、存储介质、电子装置
CN107659828A (zh) 视频画质调整方法、装置、终端设备及存储介质
CN111783001A (zh) 页面显示方法、装置、电子设备和存储介质
CN104113780A (zh) 广告处理方法及装置
CN109783656B (zh) 音视频数据的推荐方法、系统及服务器和存储介质
CN112445970B (zh) 一种信息推荐方法、装置、电子设备及存储介质
WO2022247220A1 (zh) 界面处理方法及装置
CN111010619A (zh) 处理短视频数据的方法、装置、计算机设备和存储介质
CN112464031A (zh) 交互方法、装置、电子设备以及存储介质
CN110035302A (zh) 信息推荐及模型训练方法和装置、计算设备、存储介质
CN105335198A (zh) 字体添加方法及装置
CN107211174A (zh) 显示设备及其信息提供方法
CN112135170A (zh) 一种显示设备、服务器及视频推荐方法
CN106815284A (zh) 新闻视频的推荐方法及推荐装置
CN107846624A (zh) 视频画质调整方法、装置、终端设备及存储介质
CN109727597A (zh) 语音信息的交互辅助方法和装置
CN114095793A (zh) 一种视频播放方法、装置、计算机设备及存储介质
CN113747246A (zh) 节目资源推荐方法、装置、设备及存储介质
CN112784069A (zh) 一种iptv内容智能推荐系统以及方法
CN116567315B (zh) 基于多端协同的多媒体数据处理方法、装置及计算机设备
WO2017032237A1 (zh) 一种刷新播放列表的方法及装置
CN110933504A (zh) 视频推荐方法、装置、服务器和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant