CN113868084B - 智能控制方法、装置及电子设备 - Google Patents

智能控制方法、装置及电子设备 Download PDF

Info

Publication number
CN113868084B
CN113868084B CN202111134745.3A CN202111134745A CN113868084B CN 113868084 B CN113868084 B CN 113868084B CN 202111134745 A CN202111134745 A CN 202111134745A CN 113868084 B CN113868084 B CN 113868084B
Authority
CN
China
Prior art keywords
screen
state
output
audio data
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111134745.3A
Other languages
English (en)
Other versions
CN113868084A (zh
Inventor
李京
张亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN202111134745.3A priority Critical patent/CN113868084B/zh
Publication of CN113868084A publication Critical patent/CN113868084A/zh
Priority to US17/682,933 priority patent/US11704088B2/en
Priority to GB2205295.5A priority patent/GB2611135B/en
Application granted granted Critical
Publication of CN113868084B publication Critical patent/CN113868084B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/3041—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is an input/output interface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1415—Digital output to display device ; Cooperation and interconnection of the display device with other functional units with means for detecting differences between the image stored in the host and the images displayed on the displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/756—Media network packet handling adapting media to device capabilities
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/045—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller using multiple communication channels, e.g. parallel and serial
    • G09G2370/047—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller using multiple communication channels, e.g. parallel and serial using display data channel standard [DDC] communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/16—Details of telephonic subscriber devices including more than one display unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Telephone Function (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种智能控制方法、装置及电子设备，所述方法包括：通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，控制实时传输的所述音频数据切换至播放设备进行输出。

Description

智能控制方法、装置及电子设备
技术领域
本申请涉及投屏技术领域，尤其涉及一种控制方法、装置及电子设备。
背景技术
为了实现屏幕扩展，目前多采用投屏技术，将投屏设备的画面和声音输出到被投屏设备上，由被投屏设备输出画面和声音。
但是，被投屏设备可能会连接多个投屏设备，当被投屏设备输出其他投屏设备的画面和声音时，由于投屏设备与被投屏设备之间的传输通道并未被断开，会导致投屏设备上的画面和声音仍然向被投屏设备传输，使得投屏设备上无法输出声音。
发明内容
有鉴于此，本申请提供一种智能控制方法、装置及电子设备，如下：
一种智能控制方法，所述方法包括：
通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；
监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；
如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，控制实时传输的所述音频数据切换至播放设备进行输出。
上述方法，优选的，如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，所述方法还包括：
控制实时传输的所述显示数据切换至所述播放设备进行输出。
上述方法，优选的，控制实时传输的所述显示数据切换至所述播放设备进行输出之前，所述方法还包括：
延迟第一时长。
上述方法，优选的，在控制实时传输的所述音频数据切换至播放设备进行输出之前，所述方法还包括：
监测所述显示数据在所述投屏设备上的输出状态；
其中，如果所述显示数据在所述投屏设备的输出状态为有效输出的状态，所述播放设备与被投屏设备不同。
上述方法，优选的，所述音频数据在所述投屏设备的输出状态为未有效输出的状态，包括：
被投屏设备上的投屏配置参数对应于所述投屏设备，且，所述被投屏设备接收到所述投屏设备发送的输出切换消息，所述输出切换消息在所述投屏设备未有效输出所述音频数据的情况下生成并输出。
上述方法，优选的，所述音频数据在所述投屏设备的输出状态为未有效输出的状态，包括：
被投屏设备上的投屏配置参数对应于所述投屏设备，且，所述被投屏设备在向所述投屏设备发送监测请求消息之后接收到所述投屏设备发送的监测反馈消息，所述监测反馈消息在所述投屏设备未有效输出所述音频数据的情况下生成。
上述方法，优选的，所述音频数据在所述投屏设备的输出状态为未有效输出的状态，包括：
被投屏设备上的投屏配置参数对应于所述投屏设备，且，所述被投屏设备所在周边环境中的声音参数与所述音频数据之间的相似度小于或等于相似阈值。
上述方法，优选的，所述声音参数在所述音频数据对应于所述被投屏设备中的目标应用程序的情况下进行采集。
一种智能控制装置，包括：
数据输出单元，用于通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；
状态监测单元，用于监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，触发输出切换单元；
所述输出切换单元，用于控制实时传输的所述音频数据切换至播放设备进行输出。
一种电子设备，包括：
存储器，用于存储应用程序和所述应用程序运行所产生的数据；
处理器，用于通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，控制实时传输的所述音频数据切换至播放设备进行输出。
从上述技术方案可以看出，本申请公开的一种智能控制方法、装置及电子设备中，在通过与投票设备连接的数据通道实时为投屏设备传输显示数据和音频数据的过程中，监测数据通道的状态以及音频数据在投屏设备上的输出状态，进而在数据通道的状态为连接状态而音频数据在投屏设备的输出状态为有效输出的状态的情况下，控制实时输出的音频设备被切换到播放设备进行输出，这里的播放设备为区别于投屏设备的设备。可见，本申请中在投屏设备上无法有效输出音频数据的情况下，将被投屏设备输出的音频数据切换到区别于投屏设备的播放设备进行输出，而此时被投屏设备与投屏设备之间的数据通道仍然处于连接状态，因此，在不影响投屏设备对显示数据的接收的情况下，用户可以通过播放设备收听到被投屏设备所输出的音频数据。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例一提供的一种智能控制方法的流程图；
图2-图7分别为本申请实施例中的应用示例图；
图8为本申请实施例一提供的一种智能控制方法的另一流程图；
图9为本申请实施例中的另一应用示例图；
图10为本申请实施例一提供的一种智能控制方法的另一流程图；
图11-图12分别为本申请实施例中的另一应用示例图；
图13为本申请实施例一提供的一种智能控制方法的另一流程图；
图14-图19分别为本申请实施例中的另一应用示例图；
图20为本申请实施例二提供的一种智能控制装置的结构示意图；
图21为本申请实施例三提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
参考图1所示，为本申请实施例一提供的一种智能控制方法的实现流程图，该方法可以适用于能够与投屏设备建立数据通道的电子设备中，即被投屏设备，如手机、pad、笔记本或带有显示屏的计算机等。而投屏设备可以为电视机、笔记本或计算机等设备，如图2中所示，被投屏设备与投屏设备之间建立有数据通道，如手机与或笔记本与电视机之间的高清多媒体接口HDMI(High Definition Multimedia Interface)所实现的数据通道，当然也可以是其他能够进行数据传输的有线接口或无线接口所实现的数据通道。
具体的，本实施例中的方法可以包含如下步骤：
步骤101：通过与投屏设备连接的数据通道实时为投屏设备传输显示数据和音频数据。
其中，显示数据可以理解为图像或视频等画面数据；而音频数据可以理解为声音数据。被投屏设备和投屏设备之间连接有数据通道的情况下，被投屏设备将显示数据和音频数据向投屏设备进行传输，由投屏设备输出被投屏设备的显示数据和音频数据。
在一种情况下，被投屏设备持续传输显示数据和音频数据，由此，在投屏设备上持续输出被投屏设备传输来的显示数据和音频数据；
另一种情况下，被投屏设备持续传输显示数据，仅在有音频数据需要输出的时候，才将音频数据向投屏设备进行输出，基于此，在投屏设备上持续输出被投屏设备传输来的显示数据，在被投屏设备向投屏设备传输来音频数据的时候，在投屏设备上输出音频数据，但此时被投屏设备和投屏设备之间的数据通道是持续处于连接状态的。
例如，手机在与电视机之间通过HDMI建立数据通道之后，数据通道可以传输手机侧的画面数据和声音数据。如图3中所示，手机将手机桌面投屏到电视机之后，手机在播放电影的时候，将所播放电影的电影画面和电影音效通过HDMI传输给电视机，由电视机进行输出。再如图4中所示，手机在没有播放电影的时候，将桌面通过HDMI投屏到电视机，电视机上显示手机桌面，并在有消息或来电等提示音的时候，将提示音通过HDMI传输给电视机，电视机上输出手机传输来的提示音。
步骤102：监测数据通道的状态以及音频数据在投屏设备上的输出状态，如果数据通道的状态为连接状态且音频数据在投屏设备的输出状态为未有效输出的状态，执行步骤103，如果是其他状态，返回继续执行步骤102，以继续监测数据通道的状态是否为连接状态且音频数据在投屏设备的输出状态是否为未有效输出的状态。
其中，数据通道有连接状态或未连接状态，在数据通道为连接状态的情况下，被投屏设备的显示数据和音频数据可以通过数据通道向投屏设备进行实时的输出，而在数据通道为未连接状态的情况下，被投屏设备的显示数据和音频数据不能向投屏设备进行实时的输出。
而音频数据在投屏设备的输出状态可以有未有效输出的状态和有效输出的状态，在投屏设备上接收到音频数据但没有输出音频数据的情况下，音频数据在投屏设备的输出状态为未有效输出的状态，在投屏设备上接收到音频数据且输出音频数据的情况下，音频数据在投屏设备的输出状态为有效输出的状态。
需要说明的是，如果数据通道的状态为连接状态但音频数据在投屏设备上的输出状态为未有效输出的状态，那么处于投屏设备周边的用户无法收听到被投屏设备传输到投屏设备的音频数据，而且，由于被投屏设备将音频数据输出在了与投屏设备之间的数据通道上，被投屏设备上不会同时输出音频数据，因此，在音频数据在投屏设备上的输出状态为未有效输出的状态时，用户即使处于投屏设备和被投屏设备周边，也无法收听到音频数据。
基于此，本实施例中对数据通道的状态以及音频数据在投屏设备上的输出状态进行持续的监测，进而在监测到数据通道的状态为连接状态但音频数据在投屏设备上的输出状态为未有效输出的状态，即处于投屏设备周边的用户无法收听到被投屏设备传输到投屏设备的音频数据的时候，为了能够使得用户收听到音频数据，可以执行步骤103。
步骤103：控制实时传输的音频数据切换至播放设备进行输出。
其中，播放设备可以为区别于投屏设备的设备。
在一种实现方式中，播放设备可以为被投屏设备上的播放装置，如手机上的听筒或外放喇叭等；
在另一种实现方式中，播放设备可以为区别被投屏设备但与被投屏设备相连接的设备，如与手机通过蓝牙连接的蓝牙音箱等。
由此，本实施例中在监测到数据通道的状态为连接状态但音频数据在投屏设备上的输出状态为未有效输出的状态，即处于投屏设备周边的用户无法收听到被投屏设备传输到投屏设备的音频数据的时候，就可以通过将投屏设备无法有效输出的音频数据通过播放设备进行输出，如图5中所示，由此，避免用户无法收听到音频数据的情况。
例如，如图6和图7中所示，在监测到电视机上没有输出手机所传输的来电提示音的时候，将手机的来电提示音切换到蓝牙音箱或手机喇叭进行输出，由此提示用户手机上有来电，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
由上述方案可知，本申请实施例一提供的一种智能控制方法中，在通过与投票设备连接的数据通道实时为投屏设备传输显示数据和音频数据的过程中，监测数据通道的状态以及音频数据在投屏设备上的输出状态，进而在数据通道的状态为连接状态而音频数据在投屏设备的输出状态为有效输出的状态的情况下，控制实时输出的音频设备被切换到播放设备进行输出，这里的播放设备为区别于投屏设备的设备。可见，本实施例中在投屏设备上无法有效输出音频数据的情况下，将被投屏设备输出的音频数据切换到区别于投屏设备的播放设备进行输出，而此时被投屏设备与投屏设备之间的数据通道仍然处于连接状态，因此，在不影响投屏设备对显示数据的接收的情况下，用户可以通过播放设备收听到被投屏设备所输出的音频数据。
需要说明的是，如果用户需要被投屏设备继续使用投屏设备进行音频数据和显示数据的输出，用户可以在被投屏设备和/或投屏设备上进行操作，以使得投屏设备继续为被投屏设备输出音频数据和显示数据。
在一种实现方式中，本实施例中在步骤102中监测到数据通道的状态为连接状态且音频数据在投屏设备的输出状态为未有效输出的状态时，还可以有如下步骤，如图8中所示：
步骤104：控制实时传输的显示数据切换至播放设备进行输出。
其中，播放设备为具有画面显示功能和声音播放功能的设备，如作为被投屏设备的手机等，也就是说，本实施例中在监测到数据通道的状态为连接状态但音频数据在投屏设备上的输出状态为未有效输出的状态，即处于投屏设备周边的用户无法收听到被投屏设备传输到投屏设备的音频数据的时候，在将投屏设备无法有效输出的音频数据通过播放设备进行输出的同时，将显示数据也通过播放数据进行输出，由此，使得用户通过同一个设备即播放设备收听音频数据和观看显示数据。
需要说明的是，步骤104可以在步骤103之后执行，如图8中所示，或者，步骤104也可以与步骤103同时执行，或者，步骤104可以在步骤103之前执行，步骤104和步骤103的执行顺序不同所形成的不同的技术方案均在本申请的保护范围内。
例如，如图9所示，在监测到电视机上没有输出手机所传输的电影音效的时候，将手机的电影音效切换到手机喇叭进行输出，并将手机的电影画面切换回手机显示屏进行输出，用户可以在观看手机显示屏上的电影画面的同时收听到手机喇叭所输出的电影音效，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到电影音效也无法观看到电影画面的情况。
进一步的，在步骤104之前，本实施例中的方法还可以包含如下步骤，如图10示：
步骤105：延迟第一时长。
其中，第一时长可以为预设值，可以由用户预先在被投屏设备上进行配置或修改。
也就是说，本实施例中在监测到数据通道的状态为连接状态但音频数据在投屏设备上的输出状态为未有效输出的状态，即处于投屏设备周边的用户无法收听到被投屏设备传输到投屏设备的音频数据的时候，在将投屏设备无法有效输出的音频数据通过播放设备进行输出之后，等待第一时长，之后，再将显示数据也通过播放数据进行输出，由此，使得用户通过同一个设备即播放设备收听音频数据和观看显示数据。
例如，如图11示，在监测到电视机上不能正常输出手机所传输的声音的时候，将手机的声音切换到手机喇叭进行输出，等待10分钟后，再将手机的桌面切换回手机显示屏进行输出，由此，如果手机上有来电，那么手机的来电提示音是通过手机喇叭进行输出的，由此提示用户手机上有来电，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
再如，如图12中所示，在监测到电视机上没有输出手机所传输的电影音效的时候，将手机的电影音效切换到手机喇叭进行输出，在延迟10分钟后，再将手机的电影画面切换回手机显示屏进行输出，用户可以在观看手机显示屏上的电影画面的同时收听到手机喇叭所输出的电影音效，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到电影音效也无法观看到电影画面的情况。
在一种实现方式中，本实施例中在步骤103之前，还可以包含如下步骤，如图13中所示：
步骤105：监测显示数据在投屏设备上的输出状态，如果显示数据在投屏设备的输出状态为有效输出的状态，那么在步骤103中控制音频数据所切换的播放设备是与被投屏设备不同的设备，也就是说，投屏设备上输出被投屏设备所传输的显示数据且播放设备上输出被投屏设备传输的音频数据，即被投屏设备上的显示数据和音频数据分别在不同的设备上输出，如图5中所示；而如果显示数据在投屏设备的输出状态为未有效输出的状态，那么在步骤103中控制音频数据所切换的播放设备可以是与被投屏设备相同的设备，由此，本实施例中可以在控制音频数据切换到被投屏设备进行输出的同时或在控制音频数据切换到被投屏设备进行输出之后，也将显示数据切换到被投屏设备进行输出，如图14中所示。
在一种实现方式中，显示数据在投屏设备的输出状态为有效输出的状态可以包含：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备没有接收到投屏设备发送的画面切换消息，画面切换消息在投屏设备未有效输出显示数据的情况下生成并输出。因此，如果投屏设备上没有接收到画面切换消息，那么表征显示数据在投屏设备的输出状态为有效输出的状态。
在另一种实现方式汇总，显示数据在投屏设备的输出状态为有效输出的状态可以包含：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备在向投屏设备发送显示监测消息之后没有接收到投屏设备发送的显示反馈消息。显示监测消息可以由被投屏设备按照预设的发送频率进行发送，显示反馈消息在投屏设备接收到显示监测消息并且未有效输出显示数据的情况下生成并发送给被投屏设备。因此，如果投屏设备上没有接收到显示反馈消息，那么表征显示数据在投屏设备的输出状态为有效输出的状态。
在另一种实现方式中，显示数据在投屏设备的输出状态为有效输出的状态为：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备所得到的针对投屏设备的画面数据与显示数据之间的相似度大于画面阈值。
具体实现中，被投屏设备所得到的画面数据可以通过被投屏设备上的图像采集装置对投屏设备进行图像采集得到，如手机摄像头采集电视机的显示画面，但是可能受限于被投屏设备所在位置，导致被投屏设备上的图像采集装置无法采集到包含投屏设备的画面数据，因此，本实施例中的画面数据可以通过第三方采集设备进行图像采集后再发送给被投屏设备，该第三方采集设备对应于投屏设备，能够采集到投屏设备的显示画面，如电视机所在空间的室内摄像头在采集到包含电视机显示画面的图像后再发送给室内的手机。基于此，本实施例中将包含投屏设备的显示画面的画面数据与被投屏设备的显示数据进行比对，如比如像素点等，由此得到画面数据与显示数据之间的相似度，在经过阈值比对之后，如果画面数据与显示数据之间的相似度大于画面阈值，那么说明画面数据与显示数据相似，此时可以确定显示数据在投屏设备的输出状态为有效输出的状态。
例如，在监测到电视机上不能正常输出手机所传输的声音的时候，如果电视机上能够正常输出手机所传输的画面，那么可以将手机的声音切换到蓝牙音箱进行输出，如图6中所示；而如果电视机上不能正常输出手机所传输的画面，那么可以将手机的声音切换到手机喇叭进行输出，由此，在等待10分钟后，可以再将手机的桌面切换回手机显示屏进行输出，如图15中所示，由此，如果手机上有来电，那么手机的来电提示音是通过手机喇叭进行输出的，并且手机上显示有来电画面，由此提示用户手机上有来电以及来电人的信息，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
再如，如图16中所示，在监测到电视机上没有输出手机所传输的电影音效的时候，如果电视机上能够正常输出手机所传输的画面，将手机的电影音效切换到蓝牙音箱进行输出，用户可以在观看电视机上的电影画面的同时收听到蓝牙音箱所输出的电影音效；而如果电视机上不能正常输出手机所传输的电影画面，将手机的电影音效切换到手机喇叭进行输出，在延迟10分钟后，再将手机的电影画面切换回手机显示屏进行输出，如图12中所示，用户可以在观看手机显示屏上的电影画面的同时收听到手机喇叭所输出的电影音效，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到电影音效也无法观看到电影画面的情况。
具体的，步骤102中音频数据在投屏设备的输出状态为未有效输出的状态，可以包含有如下几种情况：
在一种实现方式中，音频数据在投屏设备的输出状态为未有效输出的状态为：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备接收到投屏设备发送的输出切换消息。
其中，投屏配置参数对应于投屏设备是指：被投屏设备上仍然保持与投屏设备之间的音频数据的传输，也就是说，在被投屏设备上没有对其音频数据的传输进行切换，音频数据保持通过数据通道向投屏设备进行传输的状态。而输出切换消息在投屏设备未有效输出音频数据的情况下生成并输出。也就是说，投屏设备与被投屏设备之间连接有数据通道的情况下，如果投屏设备切换信号源使得投屏设备无法有效输出被投屏设备的音频数据，那么投屏设备生成输出切换消息，并发送给被投屏设备，以通知被投屏设备其音频数据已经无法被输出。基于此，被投屏设备上在接收到投屏设备发送的输出切换消息且被投屏设备上的投屏配置参数对应于投屏设备时，可以确定：被投屏设备上没有对其音频数据的传输进行切换，音频数据保持通过数据通道向投屏设备进行传输的状态，但是，投屏设备切换信号源使得投屏设备没有被投屏设备传输的音频数据进行有效输出。此时，本实施例中在步骤103中就可以控制实时传输的音频数据切换到区别于投屏设备的播放设备上进行输出，进一步的，可以在延迟第一时长后，控制显示数据切换到播放设备上进行输出。
例如，如图17中所示，在手机上的配置界面中的投屏配置参数仍然对应于电视机的HDMI，但是，手机上接收到电视机所发送的输出切换消息，由此确定电视机一侧切换了信号源不再继续输出手机所传输的声音，此时，手机将声音切换到手机喇叭进行输出，在等待10分钟后，可以再将手机的桌面切换回手机显示屏进行输出，如图11中所示，由此，如果手机上有来电，那么手机的来电提示音是通过手机喇叭进行输出的，并且手机上显示有来电画面，由此提示用户手机上有来电以及来电人的信息，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
在另一种实现方式中，音频数据在投屏设备的输出状态为未有效输出的状态为：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备在向投屏设备发送监测请求消息之后接收到投屏设备发送的监测反馈消息。
其中，监测请求消息可以由被投屏设备按照预设的发送频率进行发送，或者，可以由被投屏设备在有对应于目标应用程序的音频数据进行传输的时候进行发送。这里的目标应用程序可以为被投屏设备的操作系统自带的应用程序，如短消息、通讯录、邮箱等；或者，目标应用程序可以为被投屏设备的操作系统上安装的第三方应用程序，如某个聊天应用或游戏应用等。
而监测反馈消息在投屏设备接收到监测请求消息并且未有效输出音频数据的情况下生成并发送给被投屏设备。也就是说，投屏设备与被投屏设备之间连接有数据通道的情况下，被投屏设备按照一定的发送频率向投屏设备发送监测请求消息，或者，被投屏设备在向投屏设备传输目标应用程序对应的音频数据时向投屏设备发送监测请求消息，以请求告知是否有效输出音频数据，如果投屏设备切换信号源使得投屏设备无法有效输出被投屏设备的音频数据，那么投屏设备针对接收到的监测请求消息生成相应的监测反馈消息，并发送给被投屏设备，以通知被投屏设备其音频数据已经无法被输出。基于此，被投屏设备上在接收到投屏设备发送的监测反馈消息且被投屏设备上的投屏配置参数对应于投屏设备时，可以确定：被投屏设备上没有对其音频数据的传输进行切换，音频数据保持通过数据通道向投屏设备进行传输的状态，但是，投屏设备切换信号源使得投屏设备没有被投屏设备传输的音频数据进行有效输出。此时，本实施例中在步骤103中就可以控制实时传输的音频数据切换到区别于投屏设备的播放设备上进行输出，进一步的，可以在延迟第一时长后，控制显示数据切换到播放设备上进行输出。
例如，如图18中所示，在手机上的配置界面中的投屏配置参数仍然对应于电视机的HDMI，但是，手机在按照每5分钟一次的频率发送监测请求消息之后，手机接收到电视机发送的监测反馈消息，由此手机上可以确定电视机一侧切换了信号源不再继续输出手机所传输的声音，此时，手机将声音切换到手机喇叭进行输出，在等待10分钟后，可以再将手机的桌面切换回手机显示屏进行输出，如图11中所示，由此，如果手机上有来电，那么手机的来电提示音是通过手机喇叭进行输出的，并且手机上显示有来电画面，由此提示用户手机上有来电以及来电人的信息，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
在另一种实现方式中，音频数据在投屏设备的输出状态为未有效输出的状态为：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备所在周边环境中的声音参数与音频数据之间的相似度小于或等于相似阈值。
其中，相似阈值可以根据灵敏度需求和准确度需求进行设置或修改。被投屏设备所在周边环境中的声音参数表征用户所能够收听到的声音的参数，如果声音参数与音频数据之间的相似度小于或等于相似阈值，那么可以确定声音参数与音频数据相差较大，也就是说，投屏设备并没有将被投屏设备的音频数据进行有效输出，导致被投屏设备周边环境中的声音参数没有达到与音频数据相匹配的程度。也就是说，投屏设备与被投屏设备之间连接有数据通道的情况下，持续对被投屏设备所在周边环境中的声音参数进行参数，进而在声音参数与音频数据之间的相似度小于或等于相似阈值的情况下，那么可以确定投屏设备切换信号源使得投屏设备无法有效输出被投屏设备的音频数据，那么被投屏设备上在发现周边环境中的声音参数与音频数据之间的相似度小于或等于相似阈值且被投屏设备上的投屏配置参数对应于投屏设备时，可以确定：被投屏设备上没有对其音频数据的传输进行切换，音频数据保持通过数据通道向投屏设备进行传输的状态，但是，投屏设备切换信号源使得投屏设备没有被投屏设备传输的音频数据进行有效输出。此时，本实施例中在步骤103中就可以控制实时传输的音频数据切换到区别于投屏设备的播放设备上进行输出，进一步的，可以在延迟第一时长后，控制显示数据切换到播放设备上进行输出。
具体实现中，声音参数可以由被投屏设备上的声音采集装置进行采集得到，如手机麦克风采集周边的声音信号；或者，声音参数可以由与被投屏设备相连接的第三方采集设备进行采集再发送给被投屏设备，如室内摄像头上的麦克风采集室内的声音信号再发送给室内的手机。
例如，如图19中所示，在手机上的配置界面中的投屏配置参数仍然对应于电视机的HDMI，但是，手机通过麦克风采集周边的声音信号并与手机传输给电视机的声音数据进行比对，如果相似度小于或等于相似阈值，那么手机上可以确定电视机一侧切换了信号源不再继续输出手机所传输的声音，此时，手机将声音切换到手机喇叭进行输出，在等待10分钟后，可以再将手机的桌面切换回手机显示屏进行输出，如图11中所示，由此，如果手机上有来电，那么手机的来电提示音是通过手机喇叭进行输出的，并且手机上显示有来电画面，由此提示用户手机上有来电以及来电人的信息，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
另外，声音参数可以在音频数据对应于被投屏设备中的目标应用程序的情况下进行采集。这里的目标应用程序可以为被投屏设备的操作系统自带的应用程序，如短消息、通讯录、邮箱等；或者，目标应用程序可以为被投屏设备的操作系统上安装的第三方应用程序，如某个聊天应用或游戏应用等。
基于此，本实施例中可以在被投屏设备向投屏设备传输目标应用程序相关的音频数据时，才对被投屏设备周边环境中的声音参数进行采集，以此来确定投屏设备是否将音频数据进行有效输出。例如，在手机向电视机传输来电提示音的时候，对手机周边的声音信号进行采集，如果所采集到的声音信号与来电提示音之间的相似度较低，以至于低于相似阈值，那么手机可以确定电视机一侧切换了信号源不再继续输出手机所传输的来电提示音，此时，手机将来电提示音切换到手机喇叭进行输出，以提示用户手机上有来电，进一步的，可以在等待10分钟后，可以再将手机的桌面切换回手机显示屏进行输出，由此避免电视机与手机之间建立有HDMI通道但切换到其他信号源的时候，用户无法收听到来电提示音而无法及时接听通话的情况。
参考图20，为本申请实施例二提供的一种智能控制装置的结构示意图，该装置可以适用于能够与投屏设备建立数据通道的电子设备中，即被投屏设备，如手机、pad、笔记本或带有显示屏的计算机等。而投屏设备可以为电视机、笔记本或计算机等设备，如图2中所示，被投屏设备与投屏设备之间建立有数据通道，如手机与或笔记本与电视机之间的HDMI所实现的数据通道，当然也可以是其他能够进行数据传输的有线接口或无线接口所实现的数据通道。
具体的，本实施例中的装置可以包含如下单元：
数据输出单元2001，用于通过与投屏设备连接的数据通道实时为投屏设备传输显示数据和音频数据。
状态监测单元2002，用于监测数据通道的状态以及音频数据在投屏设备上的输出状态；如果数据通道的状态为连接状态且音频数据在投屏设备的输出状态为未有效输出的状态，触发输出切换单元2003；
输出切换单元2003，用于控制实时传输的音频数据切换至播放设备进行输出。
由上述方案可知，本申请实施例二提供的一种智能控制装置中，在通过与投票设备连接的数据通道实时为投屏设备传输显示数据和音频数据的过程中，监测数据通道的状态以及音频数据在投屏设备上的输出状态，进而在数据通道的状态为连接状态而音频数据在投屏设备的输出状态为有效输出的状态的情况下，控制实时输出的音频设备被切换到播放设备进行输出，这里的播放设备为区别于投屏设备的设备。可见，本实施例中在投屏设备上无法有效输出音频数据的情况下，将被投屏设备输出的音频数据切换到区别于投屏设备的播放设备进行输出，而此时被投屏设备与投屏设备之间的数据通道仍然处于连接状态，因此，在不影响投屏设备对显示数据的接收的情况下，用户可以通过播放设备收听到被投屏设备所输出的音频数据。
在一种实现方式中，如果状态监测单元2002监测到数据通道的状态为连接状态且音频数据在投屏设备的输出状态为未有效输出的状态，那么输出切换单元2003还用于：控制实时传输的显示数据切换至播放设备进行输出。
进一步的，输出切换单元2003在控制实时传输的显示数据切换至播放设备进行输出之前，先延迟第一时长。
在一种实现方式中，在输出切换单元2003控制实时传输的音频数据切换至播放设备进行输出之前，状态监测单元2002还用于：监测显示数据在投屏设备上的输出状态；其中，如果显示数据在投屏设备的输出状态为有效输出的状态，播放设备与被投屏设备不同。
在一种实现方式中，音频数据在投屏设备的输出状态为未有效输出的状态，包括：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备接收到投屏设备发送的输出切换消息，输出切换消息在投屏设备未有效输出音频数据的情况下生成并输出。
在一种实现方式中，音频数据在投屏设备的输出状态为未有效输出的状态，包括：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备在向投屏设备发送监测请求消息之后接收到投屏设备发送的监测反馈消息，监测反馈消息在投屏设备未有效输出音频数据的情况下生成。
在一种实现方式中，音频数据在投屏设备的输出状态为未有效输出的状态，包括：被投屏设备上的投屏配置参数对应于投屏设备，且，被投屏设备所在周边环境中的声音参数与音频数据之间的相似度小于或等于相似阈值。
可选的，声音参数在音频数据对应于被投屏设备中的目标应用程序的情况下进行采集。
需要说明的是，本实施例中各单元的具体实现可以参考前文中的相应内容，此处不再详述。
参考图21，为本申请实施例三提供的一种电子设备的结构示意图，该电子设备可以为能够与投屏设备建立数据通道的电子设备，即被投屏设备，如手机、pad、笔记本或带有显示屏的计算机等。而投屏设备可以为电视机、笔记本或计算机等设备，如图2中所示，被投屏设备与投屏设备之间建立有数据通道，如手机与或笔记本与电视机之间的高清多媒体接口HDMI(High Definition Multimedia Interface)所实现的数据通道，当然也可以是其他能够进行数据传输的有线接口或无线接口所实现的数据通道。
具体的，本实施例中的电子设备可以包含如下结构：
存储器2101，用于存储应用程序和所述应用程序运行所产生的数据；
处理器2102，用于通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，控制实时传输的所述音频数据切换至播放设备进行输出。
另外，电子设备作为被投屏设备，还可以包含有能够用于输出显示数据的显示器、能够用于输出音频数据的播放器等装置，当然还可以包含有各类接口，以便于实现与投屏设备之间的数据通道。
由上述方案可知，本申请实施例三提供的一种电子设备中，在通过与投票设备连接的数据通道实时为投屏设备传输显示数据和音频数据的过程中，监测数据通道的状态以及音频数据在投屏设备上的输出状态，进而在数据通道的状态为连接状态而音频数据在投屏设备的输出状态为有效输出的状态的情况下，控制实时输出的音频设备被切换到播放设备进行输出，这里的播放设备为区别于投屏设备的设备。可见，本实施例中在投屏设备上无法有效输出音频数据的情况下，将被投屏设备输出的音频数据切换到区别于投屏设备的播放设备进行输出，而此时被投屏设备与投屏设备之间的数据通道仍然处于连接状态，因此，在不影响投屏设备对显示数据的接收的情况下，用户可以通过播放设备收听到被投屏设备所输出的音频数据。
以手机通过手机桌面方式投屏到电视机为例，手机桌面投屏到电视机的同时，手机上播放音乐/视频的声道也可以转到电视机的扬声器上。如果此时用户在电视机上切换了电视机的信号源，如切换成有线电视，那么此时手机的发声通道仍旧会保留在电视的HDMI通道上，但手机的声音无法通过电视机的扬声器进行输出。如果手机上有来电或新消息，那么用户无法接收到提示音，也就无法及时进行回复。
因此，针对这一缺陷，本申请中提出一种针对手机投屏输出的智能控制方案，如果电视机一端切换了信号源，那么在手机上所连接到电视机的通道仍然保持连接在电视机的状态，此时，为了将手机的声音进行有效输出，可以将手机的声音切回手机扬声器，避免用户无法收听到提示音的情况。
具体实现中，在手机投屏到电视机的场景中，如果在电视机上当前激活的信号源通道是手机桌面的通道，那么表征电视机上能够有效输出手机上的声音；而如果在电视机上当前激活的信号源通道不是手机桌面的通道，那么电视机上正在输出其他信号源的声音，此时不能有效输出手机上的声音，此时，基于本申请中的智能控制方案将手机的声音切换回手机扬声器或切换到其他设备，如蓝牙音箱，而不再向电视机传输，由此，用户可以收听到手机扬声器或蓝牙音箱所输出的提示音。
进一步的，用户可以在手机上重新进行投屏设置，使得电视机再次切换到手机桌面，为手机输出画面和声音。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种智能控制方法，所述方法包括：
通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；
监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；
如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，控制实时传输的所述音频数据切换至播放设备进行输出，其中，所述音频数据在所述投屏设备的输出状态为未有效输出的状态是指在所述投屏设备上接收到所述音频数据但没有输出所述音频数据的状态。
2.根据权利要求1所述的方法，如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，所述方法还包括：
控制实时传输的所述显示数据切换至所述播放设备进行输出。
3.根据权利要求2所述的方法，控制实时传输的所述显示数据切换至所述播放设备进行输出之前，所述方法还包括：
延迟第一时长。
4.根据权利要求1或2所述的方法，在控制实时传输的所述音频数据切换至播放设备进行输出之前，所述方法还包括：
监测所述显示数据在所述投屏设备上的输出状态；
其中，如果所述显示数据在所述投屏设备的输出状态为有效输出的状态，所述播放设备与被投屏设备不同。
5.根据权利要求1或2所述的方法，所述音频数据在所述投屏设备的输出状态为未有效输出的状态，包括：
被投屏设备上的投屏配置参数对应于所述投屏设备，且，所述被投屏设备接收到所述投屏设备发送的输出切换消息，所述输出切换消息在所述投屏设备未有效输出所述音频数据的情况下生成并输出。
6.根据权利要求1或2所述的方法，所述音频数据在所述投屏设备的输出状态为未有效输出的状态，包括：
被投屏设备上的投屏配置参数对应于所述投屏设备，且，所述被投屏设备在向所述投屏设备发送监测请求消息之后接收到所述投屏设备发送的监测反馈消息，所述监测反馈消息在所述投屏设备未有效输出所述音频数据的情况下生成。
7.根据权利要求1或2所述的方法，所述音频数据在所述投屏设备的输出状态为未有效输出的状态，包括：
被投屏设备上的投屏配置参数对应于所述投屏设备，且，所述被投屏设备所在周边环境中的声音参数与所述音频数据之间的相似度小于或等于相似阈值。
8.根据权利要求7所述的方法，所述声音参数在所述音频数据对应于所述被投屏设备中的目标应用程序的情况下进行采集。
9.一种智能控制装置，包括：
数据输出单元，用于通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；
状态监测单元，用于监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，触发输出切换单元；其中，所述音频数据在所述投屏设备的输出状态为未有效输出的状态是指在所述投屏设备上接收到所述音频数据但没有输出所述音频数据的状态；
所述输出切换单元，用于控制实时传输的所述音频数据切换至播放设备进行输出。
10.一种电子设备，包括：
存储器，用于存储应用程序和所述应用程序运行所产生的数据；
处理器，用于通过与投屏设备连接的数据通道实时为所述投屏设备传输显示数据和音频数据；监测所述数据通道的状态以及所述音频数据在所述投屏设备上的输出状态；如果所述数据通道的状态为连接状态且所述音频数据在所述投屏设备的输出状态为未有效输出的状态，控制实时传输的所述音频数据切换至播放设备进行输出，其中，所述音频数据在所述投屏设备的输出状态为未有效输出的状态是指在所述投屏设备上接收到所述音频数据但没有输出所述音频数据的状态。
CN202111134745.3A 2021-09-27 2021-09-27 智能控制方法、装置及电子设备 Active CN113868084B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202111134745.3A CN113868084B (zh) 2021-09-27 2021-09-27 智能控制方法、装置及电子设备
US17/682,933 US11704088B2 (en) 2021-09-27 2022-02-28 Intelligent control method and electronic device
GB2205295.5A GB2611135B (en) 2021-09-27 2022-04-11 Intelligent control method and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111134745.3A CN113868084B (zh) 2021-09-27 2021-09-27 智能控制方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN113868084A CN113868084A (zh) 2021-12-31
CN113868084B true CN113868084B (zh) 2024-07-23

Family

ID=78991201

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111134745.3A Active CN113868084B (zh) 2021-09-27 2021-09-27 智能控制方法、装置及电子设备

Country Status (3)

Country Link
US (1) US11704088B2 (zh)
CN (1) CN113868084B (zh)
GB (1) GB2611135B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111131866A (zh) * 2019-11-25 2020-05-08 华为技术有限公司 一种投屏音视频播放方法及电子设备
CN112835549A (zh) * 2019-11-25 2021-05-25 华为技术有限公司 一种切换音频输出设备的方法及设备

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4516156B2 (ja) * 2008-02-06 2010-08-04 パナソニック株式会社 映像音声データ同期方法、映像出力機器、音声出力機器及び映像音声出力システム
US20140297882A1 (en) * 2013-04-01 2014-10-02 Microsoft Corporation Dynamic track switching in media streaming
US10579325B2 (en) * 2014-01-03 2020-03-03 061428 Corp. Method and system for playback of audio content using wireless mobile device
CN104793991B (zh) * 2014-01-20 2019-11-05 腾讯科技（深圳）有限公司 一种音频输出设备切换方法及装置
US9899035B2 (en) * 2015-11-04 2018-02-20 Ioannis Kakadiaris Systems for and methods of intelligent acoustic monitoring
US10346334B2 (en) * 2016-06-09 2019-07-09 Plantronics, Inc. Mode switchable audio processor for digital audio
US11038932B2 (en) * 2016-12-31 2021-06-15 Turner Broadcasting System, Inc. System for establishing a shared media session for one or more client devices
WO2018156103A1 (en) * 2017-02-21 2018-08-30 Hewlett-Packard Development Company, L.P. Audio signal routing to audio devices
CN111049984A (zh) * 2019-12-16 2020-04-21 北京小米移动软件有限公司 音频播放控制方法和设备以及存储介质
CN112860204A (zh) * 2021-02-19 2021-05-28 西安万像电子科技有限公司 数据处理方法及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111131866A (zh) * 2019-11-25 2020-05-08 华为技术有限公司 一种投屏音视频播放方法及电子设备
CN112835549A (zh) * 2019-11-25 2021-05-25 华为技术有限公司 一种切换音频输出设备的方法及设备

Also Published As

Publication number Publication date
GB2611135A (en) 2023-03-29
GB2611135B (en) 2024-10-02
US11704088B2 (en) 2023-07-18
CN113868084A (zh) 2021-12-31
US20230095078A1 (en) 2023-03-30
GB202205295D0 (en) 2022-05-25

Similar Documents

Publication Publication Date Title
EP3603077B1 (en) Content-activated intelligent, autonomous audio/video source controller
CN111583952B (zh) 音频处理方法、装置、电子设备及存储介质
US20120155657A1 (en) Communication device and communication methods
US8866867B2 (en) Method and apparatus for video recording in video calls
WO2023142389A1 (zh) 投屏方法、装置、电子设备及存储介质
KR101624904B1 (ko) 휴대용 단말기에서 디엔엘에이를 이용하여 멀티 사운드 채널 컨텐츠를 재생하기 위한 장치 및 방법
CN114845144B (zh) 一种投屏方法、辅助投屏装置及存储介质
CN110324653B (zh) 游戏互动交互方法及系统、电子设备及具有存储功能的装置
US20140362166A1 (en) Incoming call display method, electronic device, and incoming call display system
CN113868084B (zh) 智能控制方法、装置及电子设备
US10762913B2 (en) Image-based techniques for audio content
US20070171307A1 (en) Media playback system with real-time camera image display and method thereof
CN112788489B (zh) 控制方法、装置和电子设备
JP2005223778A (ja) 映像音声視聴装置
JP5803132B2 (ja) 音声切替装置、プログラム及び方法
JP2000278628A (ja) 受信装置
US20100115563A1 (en) Audio system and main box
JP2006157610A (ja) テレビジョン放送受信装置
JP2013115523A (ja) コンテンツ再生装置及びプログラム
CN115412756A (zh) 信息投放方法、装置、电子设备及存储介质
JP4610390B2 (ja) 告知放送システム
CN113747332A (zh) 检测音频播放设备播放状态的方法、装置、设备及介质
KR20100010151A (ko) 음원 재생 기능을 갖는 휴대용 촬영 장치 및 그 제어 방법
JP2005123756A (ja) 携帯情報端末及びそれに用いる放送録画録音方法並びにそのプログラム
JPH06113299A (ja) テレビ会議記憶装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant