CN110491387B - 一种基于多个终端的交互服务实现方法和系统 - Google Patents

一种基于多个终端的交互服务实现方法和系统 Download PDF

Info

Publication number
CN110491387B
CN110491387B CN201910782115.3A CN201910782115A CN110491387B CN 110491387 B CN110491387 B CN 110491387B CN 201910782115 A CN201910782115 A CN 201910782115A CN 110491387 B CN110491387 B CN 110491387B
Authority
CN
China
Prior art keywords
voice
terminal
screen
user
intelligent terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910782115.3A
Other languages
English (en)
Other versions
CN110491387A (zh
Inventor
季兵
金德镐
丁琳
柳瑞超
李文轩
袁煜然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN201910782115.3A priority Critical patent/CN110491387B/zh
Publication of CN110491387A publication Critical patent/CN110491387A/zh
Application granted granted Critical
Publication of CN110491387B publication Critical patent/CN110491387B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/606—Protecting data by securing the transmission between two devices or processes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Abstract

本申请公开了一种基于多个终端的交互服务实现方法和系统，包括：当带屏智能终端与语音终端处于连接状态时，所述语音终端监听用户语音指令；所述带屏智能终端包括智能移动终端设备；当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；所述带屏智能终端根据所述通知的用户语音指令，执行相应操作。应用本申请公开的技术方案，能够有效提高用户使用智能设备的便捷性。

Description

一种基于多个终端的交互服务实现方法和系统
技术领域
本申请涉及通信技术领域，特别涉及一种基于多个终端的交互服务实现方法和系统。
背景技术
目前，多数带屏智能设备具备智能语音功能，如智能手机、平板电脑，智能手表，智能电视等。但是，由于产品硬件形态和结构限制，部分带屏智能设备只能实现近场语音功能，无法实现远距离语音交互。
另外，上述智能设备也因为硬件原因，音量输出被限制在一定范围内。因此，用户在使用带屏智能设备时必须手持设备或者保持较近的距离，才能与设备进行互动，从而降低了用户使用智能设备的便捷性。
发明内容
本申请提供了一种基于多个终端的交互服务实现方法和系统，可以有效提高用户使用智能设备的便捷性。
一种基于多个终端的交互服务实现方法，包括：
当带屏智能终端与语音终端处于连接状态时，所述语音终端监听用户语音指令；所述带屏智能终端包括智能移动终端设备；
当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；所述带屏智能终端根据所述通知的用户语音指令，执行相应操作。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述带屏智能终端处于解锁状态，如果所述语音终端为语音智能终端，则处于唤醒状态。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端成功建立连接，且所述带屏智能终端置于所述语音终端的转向组件上时，所述带屏智能终端进入灭屏且解锁状态；
在所述带屏智能终端与所述语音终端处于连接状态时，当所述语音终端监听到的用户语音指令时，触发所述带屏智能终端进入亮屏状态。
较佳地，所述方法进一步包括：当所述语音终端执行用户语音指令时，通过所述带屏智能终端，显示相应的指令执行提示信息，以及所述语音终端同步播放的相应内容。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端处于连接状态时，如果所述带屏智能终端接收到信息且当前的信息同步播放功能开启，则通过所述语音终端播放所述信息的相关内容，所述相关内容包括信息来源和/或内容。
较佳地，所述方法进一步包括：所述语音终端在完成所述播放之后的预设时间内，监听到用户反馈的语音回复指令，则在语音播放该语音回复指令的同时，通过所述带屏智能终端显示所述语音回复指令指示的回复信息，并将经过用户确认后的所述回复信息反馈给相应的信息发送方。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述语音终端在监听用户语音指令的同时，识别相应声源的方向，并触发所转向组件根据所述声源方向，按照确保所述带屏智能终端的摄像头对准相应声源方向用户的原则，进行相应转动。
较佳地，所述方法进一步包括：所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的智能终端根据所述身份属性，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
较佳地，所述方法进一步包括：所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性和相应用户的历史行为数据，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
较佳地，所述方法进一步包括：所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性、相应用户的历史行为数据和当前的应用场景，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
较佳地，所述方法进一步包括：所述带屏智能终端根据当前的应用场景，确定当前的用户交互与服务模式。
较佳地，所述应用场景的识别包括：所述带屏智能终端采集当前应用场景的图像，从所述图像中提取场景特征属性，根据所述场景特征属性，获知所述应用场景。
较佳地，所述方法进一步包括：所述带屏智能终端检测当前所在环境中是否有用户正在休息，如果有，则从正在休息的用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d1和预设的清醒状态下的舒适音量Ls，设置所述语音终端当前的输出音量L1；否则，从所述用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d2和预设的休息状态下的舒适音量Lc，设置所述语音终端当前的输出音量L2。
较佳地，按照L1＝Ls+10log(1/4πd1 2)，得到所述输出音量L1；
按照L2＝Lc+10log(1/4πd2 2)，得到所述输出音量L2。
较佳地，所述方法进一步包括：当语音交互模式处于开启状态时，对于当前需要在所述带屏智能终端显示的用户指令执行结果，所述带屏智能终端触发所述语音终端同步播放该用户指令执行结果。
较佳地，所述方法进一步包括：当用户与所述语音终端发生交互时，所述语音终端触发所述带屏智能终端记录并显示所述交互时的相关内容，所述相关内容包括所述语音终端监听到的用户语音内容和本终端输出的语音内容。
较佳地，所述方法进一步包括：当与所述语音终端连接的带屏智能终端数量至少为两个时，所述语音终端在监听到用户语音指令时，对所述用户语音指令进行解析，按照预设的终端任务分配策略，根据所述解析的结果，确定当前用于执行所述用户语音指令的带屏智能终端以及相应的任务，触发所确定的每个带屏智能终端执行自身对应的任务。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端处于连接状态时，如果所述带屏智能终端的电量低于预设的低电量阈值时，所述带屏智能终端通过所述语音终端播放相应的低电量提示信息。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述语音终端通过自身的无线充电组件或者内置电池为所述带屏智能终端充电。
较佳地，所述方法进一步包括：当所述带屏智能终端充电完成后，通过所述语音终端播放充电完成提示信息，或者通过所述语音终端中LED灯的状态变化，将所述充电完成提示信息通知给用户。
较佳地，所述方法进一步包括：在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，如果所述语音终端的电量低于预设的低电量阈值，且所述带屏智能终端的电量大于预设的充电阈值，则所述带屏智能终端通过内置电池为所述语音终端充电。
较佳地，所述方法进一步包括：所述语音终端具有至少一个外接接口，所述外接接口具备即插即用OTG功能。
较佳地，所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述语音终端或所述带屏智能终端接收到用户的数据存储指令，则通过所述语音终端从所述带屏智能终端获取相应的目标数据并存储到目标存储设备，其中，所述数据存储指令用于指示将所述带屏智能终端中的目标数据存储到所述目标存储设备，所述目标存储设备通过所述外接接口与所述语音终端连接。
一种基于多个终端的交互服务实现系统，包括带屏智能终端和语音终端，其中，所述带屏智能终端包括智能移动终端设备；
所述语音终端，用于当与带屏智能终端处于连接状态时，监听用户语音指令；当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；
所述带屏智能终端，用于根据所述通知的用户语音指令，执行相应操作。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态，且置于所述语音终端的转向组件上时，处于解锁状态；
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，如果本语音终端属于语音智能终端，则处于唤醒状态。
较佳地，所述屏智能终端进入解锁状态包括：
所述带屏智能终端，进一步用于在与所述语音终端成功建立连接，且置于所述语音终端的转向组件上时，进入灭屏且解锁状态；
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态时，如果监听到的用户语音指令，则触发所述带屏智能终端进入亮屏状态。
较佳地，所述语音终端，进一步用于当执行用户语音指令时，通过所述带屏智能终端，显示相应的指令执行提示信息，以及所述语音终端同步播放的相应内容。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态时，如果接收到信息且当前的信息同步播放功能开启，则通过所述语音终端播放所述信息的相关内容，所述相关内容包括信息来源和/或内容。
较佳地，所述语音终端，进一步用于如果在完成所述播放之后的预设时间内，监听到用户反馈的语音回复指令，则在语音播放该语音回复指令的同时，通过所述带屏智能终端显示所述语音回复指令指示的回复信息，并将经过用户确认后的所述回复信息反馈给相应的信息发送方。
较佳地，所述语音终端，进一步用于在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，在监听用户语音指令的同时，识别相应声源的方向，并触发所转向组件根据所述声源方向，按照确保所述带屏智能终端的摄像头对准相应声源方向用户的原则，进行相应转动。
较佳地，所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端根据所述身份属性，控制所述用户语音指令的执行，和/或为用户提供与所述身份属性相匹配的APP服务。
较佳地，所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性和相应用户的历史行为数据，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性、相应用户的历史行为数据和当前的应用场景，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
较佳地，所述带屏智能终端，进一步用于根据当前的应用场景，确定当前的用户交互与服务模式。
较佳地，所述带屏智能终端，进一步用于识别当前的应用场景，包括：采集当前应用场景的图像，从所述图像中提取场景特征属性，根据所述场景特征属性，获知所述应用场景。
较佳地，所述带屏智能终端，进一步用于检测当前所在环境中是否有用户正在休息，如果有，则从正在休息的用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d1和预设的清醒状态下的舒适音量Ls，设置所述语音终端当前的输出音量L1；否则，从所述用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d2和预设的休息状态下的舒适音量Lc，设置所述语音终端当前的输出音量L2。
较佳地，所述带屏智能终端，进一步用于按照L1＝Ls+10log(1/4πd1 2)，得到所述输出音量L1；按照L2＝Lc+10log(1/4πd2 2)，得到所述输出音量L2。
较佳地，所述带屏智能终端，进一步用于当语音交互模式处于开启状态时，对于当前需要在本终端显示的用户指令执行结果，触发所述语音终端同步播放该用户指令执行结果。
较佳地，所述语音终端，进一步用于当用户与所述语音终端发生交互时，触发所述带屏智能终端记录并显示所述交互时的相关内容，所述相关内容包括所述语音终端监听到的用户语音内容和本语音终端输出的语音内容。
较佳地，所述语音终端，进一步用于当与本语音终端连接的带屏智能终端数量至少为两个时，在监听到用户语音指令时，对所述用户语音指令进行解析，按照预设的终端任务分配策略，根据所述解析的结果，确定当前用于执行所述用户语音指令的带屏智能终端以及相应的任务，触发所确定的每个带屏智能终端执行自身对应的任务。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态时，如果自身的电量低于预设的低电量阈值时，通过所述语音终端播放相应的低电量提示信息。
较佳地，所述语音终端，进一步用于在与所述带屏智能终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，通过所述语音终端的无线充电组件或者内置电池为所述带屏智能终端充电。
较佳地，所述带屏智能终端，进一步用于当自身充电完成后，通过所述语音终端播放充电完成提示信息，或者通过所述语音终端中LED灯的状态变化，将所述充电完成提示信息通知给用户。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态，且本带屏智能终端置于所述语音终端的转向组件上时，如果所述语音终端的电量低于预设的低电量阈值，且本带屏智能终端的电量大于预设的充电阈值，则通过本带屏智能终端的内置电池为所述语音终端充电。
较佳地，所述语音终端具有至少一个外接接口，所述外接接口具备即插即用OTG功能。
较佳地，所述语音终端，进一步用于在与所述带屏智能终端处于连接状态时，如果所述语音终端或所述带屏智能终端接收到用户的数据存储指令，则通过本语音终端从所述带屏智能终端获取相应的目标数据，并存储到目标存储设备，其中，所述数据存储指令用于指示将所述带屏智能终端中的目标数据存储到所述目标存储设备，所述目标存储设备通过所述外接接口与所述语音终端连接。
由上述技术方案可见，本申请基于多个终端的交互服务实现方法和系统，由语音终端采集用户对带屏智能终端的语音指令，用户可以在距离带屏智能终端较远的位置，通过语音终端与带屏智能终端交互，使得用户与带屏智能终端之间的交互不受限于较近的距离范围，从而可以有效提高用户使用智能设备的便捷性。
附图说明
图1为本发明实施例的方法流程示意图；
图2为本发明实施例的场景2应用示意图；
图3为本发明实施例的场景3应用示意图；
图4为本发明实施例的场景4的应用一示意图；
图5为本发明实施例的场景4的应用二示意图；
图6为本发明实施例的场景5应用示意图；
图7为本发明实施例的场景9应用示意图；
图8为本发明实施例的场景12应用示意图；
图9为本发明实施例的场景14应用示意图。
具体实施方式
为使本申请的目的、技术方案及优点更加清楚明白，以下参照附图并举实施例，对本申请作进一步详细说明。
图1为本发明实施例的方法流程示意图，如图1所示，该实施例实现的一种基于多个终端的交互服务实现方法，包括：
步骤101、当带屏智能终端与语音终端处于连接状态时，所述语音终端监听用户语音指令；所述带屏智能终端包括智能移动终端设备。
本步骤中，带屏智能终端与语音终端相互联接通讯时，将由语音终端监听用户的语音指令。
所述带屏智能终端至少包括智能移动终端设备，如手机、平板电脑等，但不限于此。
步骤102、当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；所述带屏智能终端根据所述通知的用户语音指令，执行相应操作。
本步骤中，与现有方案所不同的是，语音终端需要监听用户发送给带屏智能终端的语音指令，并触发带屏智能终端对指令的执行。这样，用户与带屏智能终端的交互可以不受限于两者间较近的距离范围内，用户可以在距离带屏智能终端较远的位置，通过语音终端与带屏智能终端交互，从而可以有效提高用户使用智能设备的便捷性。
在实际应用中，用户使用如手机、平板电脑之类的带屏智能终端时，通常会设置锁屏，这样，在需要应用时，首先需要进行设备解锁，才能进行下一步操作，否则只能执行简单的交互，如语音查询天气信息。因此在使用这类带屏智能终端的过程中，用户至少需要进行解锁—交互—反馈三个步骤，如此，大大降低了用户使用智能设备的便捷性。针对上述操作不便的问题，较佳地，可以采用下述方法解决：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述带屏智能终端处于解锁状态，如果所述语音终端为语音智能终端，则处于唤醒状态。
利用上述方法，在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，使得智能终端处于解锁或唤醒状态，使得用户可以在此情况下不需要解锁或唤醒直接对相应终端进行操作，从而大大提高了用户使用智能设备的便捷性。
可选地，对于上述将带屏智能终端处于解锁状态，为了获得较好的用户体验以及节省终端电耗，可以结合对带屏智能终端的屏幕亮度的控制，采取下述方法实现：
在所述带屏智能终端与所述语音终端成功建立连接，且所述带屏智能终端置于所述语音终端的转向组件上时，可以使所述带屏智能终端进入灭屏且解锁状态；在所述带屏智能终端与所述语音终端处于连接状态时，当所述语音终端监听到的用户语音指令时，触发所述带屏智能终端进入亮屏状态。
较佳地，为了方便用户对语音终端所播放语音内容的查看，可以通过带屏智能终端的屏幕同步显示相应的信息，具体如下：
当所述语音终端执行用户语音指令时，通过所述带屏智能终端，显示相应的指令执行提示信息，以及所述语音终端同步播放的相应内容。
较佳地，为了方便用户及时获知带屏智能终端接收到的信息，对于带屏智能终端接收到的信息，可以通过语音终端同步播放，具体如下：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述带屏智能终端接收到信息且当前的信息同步播放功能开启，则通过所述语音终端播放所述信息的相关内容，所述相关内容包括信息来源和/或内容。
进一步地，为了提高用户对带屏智能终端操作的便捷性，带屏智能终端接收到信息后，用户可以通过语音终端进行回复，而不需要在带屏智能终端上输入相应的回复信息，具体可以采用下述方法实现：
所述语音终端在完成所述播放之后的预设时间内，监听到用户反馈的语音回复指令，则在语音播放该语音回复指令的同时，通过所述带屏智能终端显示所述语音回复指令指示的回复信息，并将经过用户确认后的所述回复信息反馈给相应的信息发送方。
上述方法中，在完成所述播放之后的预设时间内，用户可以通过语音终端向信息发送方回复信息。这里所述预设时间可由本领域技术人员根据实际需要进行设置，较佳地，可以与用户设置的用于控制灭屏的时间阈值相一致。
进一步地，为了提高用户利用带屏智能终端进行视频采集等操作的便捷性，可以利用语音终端的转向组件，将带屏智能终端的摄像头对准用户，较佳地，可以采用下述方法实现：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述语音终端在监听用户语音指令的同时，识别相应声源的方向，并触发所转向组件根据所述声源方向，按照确保所述带屏智能终端的摄像头对准相应声源方向用户的原则，进行相应转动。
进一步地，为了提高用户操作的便捷性，语音终端可以根据用户的语音指令对用户身份进行识别，进而可以根据用户身份，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务，较佳地，可以采用下述方法实现：
所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的智能终端根据所述身份属性，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
进一步地，还可以将识别到的身份属性和相应用户的历史行为数据进行结合，来控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务，即：
所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性和相应用户的历史行为数据，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
进一步地，还可以将识别到的身份属性、相应用户的历史行为数据进行结合和当前的应用场景相结合，来控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务，即：
所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性、相应用户的历史行为数据和当前的应用场景，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
进一步地，带屏智能终端也可以根据当前的应用场景，确定当前采用的用户交互与服务模式。较佳地，可以采用下述方法对应用场景进行识别：
所述带屏智能终端采集当前应用场景的图像，从所述图像中提取场景特征属性，根据所述场景特征属性，获知所述应用场景。
较佳地，为了使得语音终端的音量与用户当前所在应用场景相匹配，可以采用下述方法对语音终端的音量进行控制：
所述带屏智能终端检测当前所在环境中是否有用户正在休息，如果有，则从正在休息的用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d1和预设的清醒状态下的舒适音量Ls，设置所述语音终端当前的输出音量L1；否则，从所述用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d2和预设的休息状态下的舒适音量Lc，设置所述语音终端当前的输出音量L2。
较佳地，上述方法中可以按照L1＝Ls+10log(1/4πd1 2)，得到所述输出音量L1；按照L2＝Lc+10log(1/4πd2 2)，得到所述输出音量L2。
在实际应用中，所述清醒状态下的舒适音量Ls和所述休息状态下的舒适音量Lc可由本领域技术人员或用户设置合适取值，也可以通过学习用户的习惯获得。
进一步地，为了提高用户操作的便捷性，用户在不方便查阅带屏智能终端显示的用户指令执行结果时，可通过语音终端获得该执行结果，具体可以采用下述方法实现：
当语音交互模式处于开启状态时，对于当前需要在所述带屏智能终端显示的用户指令执行结果，所述带屏智能终端触发所述语音终端同步播放该用户指令执行结果。
较佳地，带屏智能终端可以对语音终端与用户之间的交互情况进行记录和显示，具体可以采用下述方法实现：
当用户与所述语音终端发生交互时，所述语音终端触发所述带屏智能终端记录并显示所述交互时的相关内容，所述相关内容包括所述语音终端监听到的用户语音内容和本终端输出的语音内容。
较佳地，当与所述语音终端与多个带屏智能终端连接时，可以由语音终端对用户的语音指令进行解析，并分配给多个带屏智能终端共同执行该语音指令，具体可以采用下述方法实现：
当与所述语音终端连接的带屏智能终端数量至少为两个时，所述语音终端在监听到用户语音指令时，对所述用户语音指令进行解析，按照预设的终端任务分配策略，根据所述解析的结果，确定当前用于执行所述用户语音指令的带屏智能终端以及相应的任务，触发所确定的每个带屏智能终端执行自身对应的任务。
进一步地，语音终端可以将带屏智能终端的低电量提示信息，通过语音的方式通知给用户，具体可以采用下述方法实现：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述带屏智能终端的电量低于预设的低电量阈值时，所述带屏智能终端通过所述语音终端播放相应的低电量提示信息。
进一步地，带屏智能终端置于语音终端的转向组件上时，语音终端可以给带屏智能终端充电，具体可以采用下述方法实现：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述语音终端通过自身的无线充电组件或者内置电池为所述带屏智能终端充电。
所述转向组件，用于使得智能语音终端除底座之外的主体结构可进行360°水平转向的结构。该转向结构用于带屏智能终端放置在智能语音终端卡槽结构内，基于场景识别组件判定发声方位后，确保带屏智能终端始终面向发声方位，以便更好的与用户交互。
所述无线充电组件，用于智能设备间通过磁场传输能量，帮助终端充电的模块。
较佳地，所述方法进一步包括：当所述带屏智能终端充电完成后，通过所述语音终端播放充电完成提示信息，或者通过所述语音终端中LED灯的状态变化，将所述充电完成提示信息通知给用户。
进一步地，带屏智能终端置于语音终端的转向组件上时，带屏智能终端可以给语音终端充电，具体可以采用下述方法实现：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，如果所述语音终端的电量低于预设的低电量阈值，且所述带屏智能终端的电量大于预设的充电阈值，则所述带屏智能终端通过内置电池为所述语音终端充电。
较佳地，所述方法进一步包括：所述语音终端具有至少一个外接接口，所述外接接口具备即插即用(OTG)功能。
进一步地，可以通过语音终端，将带屏智能终端中的数据存储在与语音终端相连接的存储设备中，具体可以采用下述方法实现：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述语音终端或所述带屏智能终端接收到用户的数据存储指令，则通过所述语音终端从所述带屏智能终端获取相应的目标数据并存储到目标存储设备。
其中，所述数据存储指令用于指示将所述带屏智能终端中的目标数据存储到所述目标存储设备，所述目标存储设备通过所述具有即插即用功能的外接接口与所述语音终端连接。
通过上述技术方案可以看出本发明扩大了用户与智能终端进行交互的方式，可以满足用户在多种场景环境下进行多模态人机交互的需要，有效提高了用户使用智能设备的便捷性。下面以比较具有代表性的场景为例，对本发明的具体实现做进一步的详细说明。
下述示例中，远场语音交互的执行主体设备是智能语音终端，该终端设备是具有WIFI、NFC、蓝牙等联接功能的，可进行远场语音交互功能的智能音箱。带屏智能终端具体可以是手机、平板电脑、智能电视、智能手表等设备，也可以是显示器设备等。
场景1：免解锁/免唤醒交互方式
当所述带屏智能终端与语音终端相互联接通讯时，所述带屏智能终端处于灭屏且解锁状态。使用语音与语音终端交互时，所述带有屏幕的智能终端则点亮屏幕，并且开始执行用户的语音命令，不需要再进行解锁操作。
场景2：信息提醒与创建
1、所述语音终端可同步语音播报带屏智能终端接收到的消息通知和信息内容，语音播报信息内容包含但不限于信息来源、信息具体文字内容。在播放信息完毕后的一定时间阈值内，语音终端可以通过ASR识别用户语音指令，并进一步控制智能设备，或回复信息。
2、通过所述语音终端，远场识别用户语音指令，启动带屏智能终端APP应用。通过用户远场语音指令，带屏终端设备显示并执行用户语音指令操作，如发送信息内容、物联网(IoT)设备控制、智能设备设置等，如图2所示。
场景3：智能设备方向跟随
所述带屏智能终端设备和语音终端设备可以作为一个整体设备，与用户进行语音交互。所述语音终端利用室内语音定位的功能，识别用户声音方向，触发设备联接的带屏智能终端始终面向用户大致的方向，再由带屏智能终端的摄像头进行精确对准用户。带屏智能终端显示的界面信息可以面向用户，与用户进行交互。如图3所示。
场景4：个性化内容推荐
1、所述智能语音终端设备可以具有声纹识别，手机信息同步，能够识别用户身份属性。
2、所述智能语音终端和带屏智能终端具有APP应用的使用权限级别。所述语音智能终端根据识别到用户权限，允许用户控制、更改与智能语音设备相联接的其他任何智能设备。如密码设置，支付命令，隐私内容等，如图4所示。
3、所述智能语音设备根据用户语音指令，通过识别用户身份属性，启动所述智能语音终端和带屏智能终端设备的应用内容。
4、所述智能终端的应用，根据可识别的用户身份，提供与身份属性相符的内容，若不符合用户身份属性，则反馈给用户并提供其他服务内容。如用户语音指令观看《寂静岭》，智能语音终端根据声纹识别当前用户为成年用户，则协同带屏智能终端进行内容播放；若智能语音终端根据声纹识别用户为儿童，则智能语音终端反馈无权限观看，同时协同带屏智能设备推荐合适的儿童节目内容。
相同的，所述智能语音终端和带屏智能终端根据声纹识别、面部识别、虹膜识别，手机信息同步等方式识别用户身份，推荐和显示的内容不限于影视节目内容。所述应用包括智能设备中提供的所有服务，包括但不限于影视、游戏、音乐等APP服务内容，如图5所示。
场景5：个性化服务场景
1、所述带屏智能设备的摄像头模块，根据场景环境，识别当前所处的位置，提供有环境特征属性的服务内容。如所述摄像头模块经过基于人工智能的卷积神经网络训练的场景识别模块识别当前为厨房环境，则带屏智能终端优先显示以厨房服务为基准的服务内容，如美食菜谱等，智能语音终端和带屏智能终端以语音+体感的交互方式与用户进行互动；
2、相同的，如所述摄像头模块识别当前环境为客厅时，则提供视频节目搜索播放，IoT设备控制的服务；
3、所述带屏智能终端可根据LBS技术定位当前位置，结合所述智能语音终端提供有效的服务内容。当前环境位置包括但不限于私人环境、公共环境、汽车驾驶等移动环境中。
4、在私人环境中，以智能语音设备远场语音交互和带屏智能设备屏幕交互相结合为主要交互方式；在公共环境中，所述智能语音终端，可进行远场语音识别功能，进行消息提醒，但不会进行消息内容播报。在驾驶汽车等移动场景下，判断当前用户行为状态，提供只含有语音交互的服务内容。
5、上述基于摄像头和LBS技术定位的各种环境中，所述智能语音终端和带屏智能终端可以提供默认的场景服务模式供用户使用，也允许用户根据自身需求进行场景模式的设定，如图6所示。
场景6：个性化交互模式
1、所述带屏智能终端的摄像头模块，使用经过人工智能的卷积神经网络训练的人脸识别模块来识别当前用户身份特征，用户特征信息主要包含用户性别，用户年龄判别。相同的，所述智能语音终端可以具有声纹识别模块，可以识别当前用户身份特征。
2、根据用户身份特征信息，智能语音终端和带屏智能终端提供差异化的语音和界面服务模式。如识别当前用户为儿童，则提供儿童反馈的声音，推荐适合儿童的节目内容，带屏智能终端显示卡通画的角色形象，帮助儿童更好的理解和接受反馈信息；如果识别当前用户为老人，则提供具备老年用户特征的服务，包括放大显示界面中的文字内容，智能终端设备音量调整，启用免唤醒词模式，随时与用户进行语音交互。
场景7：场景识别，自动调整音量输出
1、当所述带屏智能终端通过摄像头检测到当前环境中没有用户正在休息，会计算与最近的用户的距离d，随后调整输出音量，使得输出音量L经过距离d后衰减到Lc，达到用户最舒适的音量播放效果。
2、当所述带屏智能终端通过摄像头检测到当前环境中的用户属于休息状态时，计算离最近的休息用户的距离d，调整智能语音设备的音量，使得输出音量L经过距离d后衰减到Ls，达到休息用户最舒适的播放效果，最大限度的减少对休息用户的影响。
场景8：带屏智能终端显示智能语音终端信息内容
1、所述带屏智能终端可作为智能语音终端的增强型设备进行交互操作并使用。
2、当用户使用语音命令与智能语音终端发生交互时，带屏智能终端记录并显示用户语音智能的内容以及智能语音终端输出的内容。
3、所述带屏智能终端记录的用户语音指令和智能语音终端输出的语音反馈，可以至少使用3种方式进行显示：a.纯文本内容显示，只记录显示内容,允许用户进行编辑保存；b.使用选项卡模板，将文本内容以单选或多选的方式呈现，允许用户进行二次交互和操作；c.语音用户指令启动对应App应用，带屏智能终端显示APP内容结果，智能语音终端输出语音反馈和APP应用反馈。
同上a场景中所述，用户与智能终端设备进行交互的信息和智能终端设备反馈的信息，可使用纯文本的方式显示，并能够保存记录，或同步在带屏智能终端的应用当中，如日历、日程信息等。
场景9：多设备协作显示
1、所述智能语音终端联接多个带屏智能设备时，将智能语音终端作为控制中心，根据用户语音命令指定，或根据内容自行判断各个带屏智能终端应该播放的节目内容。
2、如上所述，当智能语音终端同时联接了如手机、平板电脑、智能电视等带屏智能终端时，智能语音终端接收用户语音指令，在同时分配智能电视播放影视节目，平板电脑显示IoT监控设备信息，手机显示影视节目的补充信息，如明星介绍，剧集简介；智能语音终端则负责与用户的语音交互功能，如图7所示。
场景10：Voice onboarding场景
1、所述带屏智能终端和智能语音终端都可以作为智能家居场景(下简称IoT)的控制中心，IoT设备首先需要联接进局域网内，和控制中心的设备进行通讯。
2、用户使用语音交互指令，如：“将格力空调加入智能家居设备中”，智能语音终端接收用户指令并通知带屏智能设备搜索当前环境下的目标设备，智能设备与目标设备建立连接，将wifi的ssid和密码，以及云端信息发送给目标设备，目标设备使用接收到的ssid和密码连接互联网，并在云端注册，注册成功后云端通知语音终端和带屏终端有新设备加入完成，语音终端和带屏终端分别通过语音和界面反馈给用户。
场景11：基于场景模式的IoT设备控制
1、所述带屏智能终端可作为IoT的控制中心进行使用，智能语音终端也可作为IoT控制中心使用。带屏智能终端可以识别用户当前所属环境或场景。当智能语音设备与带屏智能终端信息同步后，带屏智能终端作为IoT控制的显示面板(该面板具有显示IoT设备功能，IoT设备当前状态，当前IoT所处的控制模式等界面信息)，可以进行触控操作；智能语音终端同步带屏智能终端数据，界面内容可以通过远场语音进行交互，控制所述带屏智能终端界面中所呈现的界面信息，以此增强了对IoT设备交互控制的方式；
2、如上所述，当带屏智能终端判断当前环境为卧室，且时间为深夜，定义的场景模式为睡眠模式；基于实施例3所述，用户使用体感识别快速与智能终端进行交互，使用语音控制IoT设备，如开灯，查询时间等。智能终端根据睡眠模式的设定，打开夜间照明灯，或语音播报时间。智能终端根据环境的判别，降低音量的输出，以保证与智能终端交互的用户接收有效信息，同时尽量不影响其他用户。
3、相同的，当带屏智能终端判定当前智能设备处于客厅场景中，基于客厅场景的IoT设备信息呈现在带屏智能终端上，用户通过语音指令与智能语音终端进行交互，控制界面信息中的IoT设备。
场景12：基于用户信息的个性化IoT控制
1、所述智能语音终端与带屏智能终端联接并且信息同步后，识别当前用户的身份信息特征，根据用户控制IoT设备的历史数据，为用户进行设备控制，如图8所示。
2、当智能终端识别用户身份信息特征后，用户只需要远场语音指令：“打开空调。”智能终端即可根据用户身份特征和使用习惯，将温度调整为26℃，风力中等，并将信息语音反馈给用户。
3、基于用户信息的个性化IoT控制，还表现在对场景的控制。当用户早上起床时，带屏智能终端摄像头模块检测到用户行为为起床状态，即将IoT模式设置为“晨起”模式，根据用户行为习惯特征，智能语音终端同步播报用户当天日程，智能电视播放新闻内容，用户也可通过远场语音控制打开热水器，运行咖啡机等。
场景13：充电和语音电量提醒
1、所述智能语音终端具有无线充电功能，带屏智能终端安置在智能语音终端设备上时，通过无线充电设备为带屏智能终端进行充电，所述智能带屏终端包括但不限于智能手机，平板电脑，智能手表等设备。
2、智能语音终端设备通过近场通讯功能与带屏智能终端同步数据信息，当智能设备电量过低时，智能语音终端可以语音进行电量提示，通知用户进行设备充电。
3、当带屏智能终端通过无线充电功能完成充电后，智能语音终端可通过语音方式提示用户充电已完成。相同的，智能语音终端也可以通过自身设备的LED灯状态的变化，提醒用户已完成充电。
4、所述智能语音终端内置电池，可携带，且电量充足时，智能语音终端也可以通过自身电池对带屏智能设备进行充电。
5、相反的，所述智能语音终端内置电池，可携带，若电量不足时，带屏智能终端可通过无线充电技术反向为所述智能语音终端进行充电。
场景14：近场通讯存储数据到外接设备
1、所述智能语音终端设备可以具有多个外接接口，所述外接接口包括但不限于USB、Type-c,Lightning等接口。所述智能语音终端接口具备OTG功能，可支持不同设备之间的联接，进行数据交换。
2、所述带屏智能终端与智能语音终端相联接时，终端内部数据可以近场通讯。第三方存储设备联接至智能语音终端后，OTG功能可以将带屏智能终端中的存储数据保存至第三方存储设备中，如图9所示。
与上述图1所示方法实施例相对应，本申请还提供了一种基于多个终端的交互服务实现系统，包括带屏智能终端和语音终端，其中，所述带屏智能终端包括智能移动终端设备；
所述语音终端，用于当与带屏智能终端处于连接状态时，监听用户语音指令；当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；
所述带屏智能终端，用于根据所述通知的用户语音指令，执行相应操作。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态，且置于所述语音终端的转向组件上时，处于解锁状态；
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，如果本语音终端属于语音智能终端，则处于唤醒状态。
较佳地，所述屏智能终端进入解锁状态包括：
所述带屏智能终端，进一步用于在与所述语音终端成功建立连接，且置于所述语音终端的转向组件上时，进入灭屏且解锁状态；
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态时，如果监听到的用户语音指令，则触发所述带屏智能终端进入亮屏状态。
较佳地，所述语音终端，进一步用于当执行用户语音指令时，通过所述带屏智能终端，显示相应的指令执行提示信息，以及所述语音终端同步播放的相应内容。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态时，如果接收到信息且当前的信息同步播放功能开启，则通过所述语音终端播放所述信息的相关内容，所述相关内容包括信息来源和/或内容。
较佳地，所述语音终端，进一步用于如果在完成所述播放之后的预设时间内，监听到用户反馈的语音回复指令，则在语音播放该语音回复指令的同时，通过所述带屏智能终端显示所述语音回复指令指示的回复信息，并将经过用户确认后的所述回复信息反馈给相应的信息发送方。
较佳地，所述语音终端，进一步用于在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，在监听用户语音指令的同时，识别相应声源的方向，并触发所转向组件根据所述声源方向，按照确保所述带屏智能终端的摄像头对准相应声源方向用户的原则，进行相应转动。
较佳地，所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端根据所述身份属性，控制所述用户语音指令的执行，和/或为用户提供与所述身份属性相匹配的APP服务。
较佳地，所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性和相应用户的历史行为数据，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性、相应用户的历史行为数据和当前的应用场景，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
较佳地，所述带屏智能终端，进一步用于根据当前的应用场景，确定当前的用户交互与服务模式。
较佳地，所述带屏智能终端，进一步用于识别当前的应用场景，包括：采集当前应用场景的图像，从所述图像中提取场景特征属性，根据所述场景特征属性，获知所述应用场景。
较佳地，所述带屏智能终端，进一步用于检测当前所在环境中是否有用户正在休息，如果有，则从正在休息的用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d1和预设的清醒状态下的舒适音量Ls，设置所述语音终端当前的输出音量L1；否则，从所述用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d2和预设的休息状态下的舒适音量Lc，设置所述语音终端当前的输出音量L2。
较佳地，所述带屏智能终端，进一步用于按照L1＝Ls+10log(1/4πd1 2)，得到所述输出音量L1；按照L2＝Lc+10log(1/4πd2 2)，得到所述输出音量L2。
较佳地，所述带屏智能终端，进一步用于当语音交互模式处于开启状态时，对于当前需要在本终端显示的用户指令执行结果，触发所述语音终端同步播放该用户指令执行结果。
较佳地，所述语音终端，进一步用于当用户与所述语音终端发生交互时，触发所述带屏智能终端记录并显示所述交互时的相关内容，所述相关内容包括所述语音终端监听到的用户语音内容和本语音终端输出的语音内容。
较佳地，所述语音终端，进一步用于当与本语音终端连接的带屏智能终端数量至少为两个时，在监听到用户语音指令时，对所述用户语音指令进行解析，按照预设的终端任务分配策略，根据所述解析的结果，确定当前用于执行所述用户语音指令的带屏智能终端以及相应的任务，触发所确定的每个带屏智能终端执行自身对应的任务。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态时，如果自身的电量低于预设的低电量阈值时，通过所述语音终端播放相应的低电量提示信息。
较佳地，所述语音终端，进一步用于在与所述带屏智能终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，通过所述语音终端的无线充电组件或者内置电池为所述带屏智能终端充电。
较佳地，所述带屏智能终端，进一步用于当自身充电完成后，通过所述语音终端播放充电完成提示信息，或者通过所述语音终端中LED灯的状态变化，将所述充电完成提示信息通知给用户。
较佳地，所述带屏智能终端，进一步用于在与所述语音终端处于连接状态，且本带屏智能终端置于所述语音终端的转向组件上时，如果所述语音终端的电量低于预设的低电量阈值，且本带屏智能终端的电量大于预设的充电阈值，则通过本带屏智能终端的内置电池为所述语音终端充电。
较佳地，所述语音终端具有至少一个外接接口，所述外接接口具备即插即用OTG功能。
较佳地，所述语音终端，进一步用于在与所述带屏智能终端处于连接状态时，如果所述语音终端或所述带屏智能终端接收到用户的数据存储指令，则通过本语音终端从所述带屏智能终端获取相应的目标数据，并存储到目标存储设备，其中，所述数据存储指令用于指示将所述带屏智能终端中的目标数据存储到所述目标存储设备，所述目标存储设备通过所述外接接口与所述语音终端连接。
以上所述仅为本申请的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。

Claims (42)

1.一种基于多个终端的交互服务实现方法，其特征在于，包括：
当带屏智能终端与语音终端处于连接状态时，所述语音终端监听用户语音指令；所述带屏智能终端包括智能移动终端设备；
当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；所述带屏智能终端根据所述通知的用户语音指令，执行相应操作；
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述带屏智能终端处于解锁状态，如果所述语音终端为语音智能终端，则处于唤醒状态。
2.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端成功建立连接，且所述带屏智能终端置于所述语音终端的转向组件上时，所述带屏智能终端进入灭屏且解锁状态；
在所述带屏智能终端与所述语音终端处于连接状态时，当所述语音终端监听到的用户语音指令时，触发所述带屏智能终端进入亮屏状态。
3.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
当所述语音终端执行用户语音指令时，通过所述带屏智能终端，显示相应的指令执行提示信息，以及所述语音终端同步播放的相应内容。
4.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述带屏智能终端接收到信息且当前的信息同步播放功能开启，则通过所述语音终端播放所述信息的相关内容，所述相关内容包括信息来源和/或内容。
5.如权利要求4所述的方法，其特征在于：所述方法进一步包括：
所述语音终端在完成所述播放之后的预设时间内，监听到用户反馈的语音回复指令，则在语音播放该语音回复指令的同时，通过所述带屏智能终端显示所述语音回复指令指示的回复信息，并将经过用户确认后的所述回复信息反馈给相应的信息发送方。
6.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述语音终端在监听用户语音指令的同时，识别相应声源的方向，并触发所转向组件根据所述声源方向，按照确保所述带屏智能终端的摄像头对准相应声源方向用户的原则，进行相应转动。
7.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的智能终端根据所述身份属性，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
8.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性和相应用户的历史行为数据，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
9.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
所述语音终端根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性、相应用户的历史行为数据和当前的应用场景，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
10.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
所述带屏智能终端根据当前的应用场景，确定当前的用户交互与服务模式。
11.如权利要求9或10所述的方法，其特征在于：所述应用场景的识别包括：
所述带屏智能终端采集当前应用场景的图像，从所述图像中提取场景特征属性，根据所述场景特征属性，获知所述应用场景。
12.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
所述带屏智能终端检测当前所在环境中是否有用户正在休息，如果有，则从正在休息的用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d1和预设的休息状态下的舒适音量Ls，设置所述语音终端当前的输出音量L1；否则，从所述用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d2和预设的清醒状态下的舒适音量Lc，设置所述语音终端当前的输出音量L2。
13.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
当语音交互模式处于开启状态时，对于当前需要在所述带屏智能终端显示的用户指令执行结果，所述带屏智能终端触发所述语音终端同步播放该用户指令执行结果。
14.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
当用户与所述语音终端发生交互时，所述语音终端触发所述带屏智能终端记录并显示所述交互时的相关内容，所述相关内容包括所述语音终端监听到的用户语音内容和本终端输出的语音内容。
15.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
当与所述语音终端连接的带屏智能终端数量至少为两个时，所述语音终端在监听到用户语音指令时，对所述用户语音指令进行解析，按照预设的终端任务分配策略，根据所述解析的结果，确定当前用于执行所述用户语音指令的带屏智能终端以及相应的任务，触发所确定的每个带屏智能终端执行自身对应的任务。
16.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述带屏智能终端的电量低于预设的低电量阈值时，所述带屏智能终端通过所述语音终端播放相应的低电量提示信息。
17.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，所述语音终端通过自身的无线充电组件或者内置电池为所述带屏智能终端充电。
18.如权利要求17所述的方法，其特征在于：所述方法进一步包括：
当所述带屏智能终端充电完成后，通过所述语音终端播放充电完成提示信息，或者通过所述语音终端中LED灯的状态变化，将所述充电完成提示信息通知给用户。
19.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，如果所述语音终端的电量低于预设的低电量阈值，且所述带屏智能终端的电量大于预设的充电阈值，则所述带屏智能终端通过内置电池为所述语音终端充电。
20.如权利要求1所述的方法，其特征在于：所述方法进一步包括：
所述语音终端具有至少一个外接接口，所述外接接口具备即插即用OTG功能。
21.如权利要求20所述的方法，其特征在于：所述方法进一步包括：
在所述带屏智能终端与所述语音终端处于连接状态时，如果所述语音终端或所述带屏智能终端接收到用户的数据存储指令，则通过所述语音终端从所述带屏智能终端获取相应的目标数据并存储到目标存储设备，其中，所述数据存储指令用于指示将所述带屏智能终端中的目标数据存储到所述目标存储设备，所述目标存储设备通过所述外接接口与所述语音终端连接。
22.一种基于多个终端的交互服务实现系统，其特征在于，包括带屏智能终端和语音终端，其中，所述带屏智能终端包括智能移动终端设备；
所述语音终端，用于当与带屏智能终端处于连接状态时，监听用户语音指令；当监听到的需要所述带屏智能终端执行的用户语音指令时，所述语音终端将当前监听到的所述用户语音指令通知给所述带屏智能终端；在与所述带屏智能终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，如果本语音终端属于语音智能终端，则处于唤醒状态；
所述带屏智能终端，用于根据所述通知的用户语音指令，执行相应操作；在与所述语音终端处于连接状态，且置于所述语音终端的转向组件上时，处于解锁状态。
23.如权利要求22所述的系统，其特征在于：所述屏智能终端进入解锁状态包括：
所述带屏智能终端，进一步用于在与所述语音终端成功建立连接，且置于所述语音终端的转向组件上时，进入灭屏且解锁状态；
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态时，如果监听到的用户语音指令，则触发所述带屏智能终端进入亮屏状态。
24.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于当执行用户语音指令时，通过所述带屏智能终端，显示相应的指令执行提示信息，以及所述语音终端同步播放的相应内容。
25.如权利要求22所述的系统，其特征在于：所述带屏智能终端，进一步用于在与所述语音终端处于连接状态时，如果接收到信息且当前的信息同步播放功能开启，则通过所述语音终端播放所述信息的相关内容，所述相关内容包括信息来源和/或内容。
26.如权利要求25所述的系统，其特征在于：
所述语音终端，进一步用于如果在完成所述播放之后的预设时间内，监听到用户反馈的语音回复指令，则在语音播放该语音回复指令的同时，通过所述带屏智能终端显示所述语音回复指令指示的回复信息，并将经过用户确认后的所述回复信息反馈给相应的信息发送方。
27.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于在所述带屏智能终端与所述语音终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，在监听用户语音指令的同时，识别相应声源的方向，并触发所转向组件根据所述声源方向，按照确保所述带屏智能终端的摄像头对准相应声源方向用户的原则，进行相应转动。
28.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端根据所述身份属性，控制所述用户语音指令的执行，和/或为用户提供与所述身份属性相匹配的APP服务。
29.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性和相应用户的历史行为数据，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
30.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于在监听到的用户语音指令时，根据当前用户语音指令的声纹特征，识别用户的身份属性；并触发执行所述用户语音指令的终端，根据所述身份属性、相应用户的历史行为数据和当前的应用场景，控制所述用户语音指令的执行，和/或为用户提供相匹配的APP服务。
31.如权利要求22所述的系统，其特征在于：
所述带屏智能终端，进一步用于根据当前的应用场景，确定当前的用户交互与服务模式。
32.如权利要求30或31所述的系统，其特征在于：所述带屏智能终端，进一步用于识别当前的应用场景，包括：采集当前应用场景的图像，从所述图像中提取场景特征属性，根据所述场景特征属性，获知所述应用场景。
33.如权利要求22所述的系统，其特征在于：
所述带屏智能终端，进一步用于检测当前所在环境中是否有用户正在休息，如果有，则从正在休息的用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d1和预设的休息状态下的舒适音量Ls，设置所述语音终端当前的输出音量L1；否则，从所述用户中选择出距离所述语音终端最近的用户，根据该用户与所述语音终端之间的距离d2和预设的清醒状态下的舒适音量Lc，设置所述语音终端当前的输出音量L2。
34.如权利要求22所述的系统，其特征在于：
所述带屏智能终端，进一步用于当语音交互模式处于开启状态时，对于当前需要在本终端显示的用户指令执行结果，触发所述语音终端同步播放该用户指令执行结果。
35.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于当用户与所述语音终端发生交互时，触发所述带屏智能终端记录并显示所述交互时的相关内容，所述相关内容包括所述语音终端监听到的用户语音内容和本语音终端输出的语音内容。
36.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于当与本语音终端连接的带屏智能终端数量至少为两个时，在监听到用户语音指令时，对所述用户语音指令进行解析，按照预设的终端任务分配策略，根据所述解析的结果，确定当前用于执行所述用户语音指令的带屏智能终端以及相应的任务，触发所确定的每个带屏智能终端执行自身对应的任务。
37.如权利要求22所述的系统，其特征在于：
所述带屏智能终端，进一步用于在与所述语音终端处于连接状态时，如果自身的电量低于预设的低电量阈值时，通过所述语音终端播放相应的低电量提示信息。
38.如权利要求22所述的系统，其特征在于：
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态，且所述带屏智能终端置于所述语音终端的转向组件上时，通过所述语音终端的无线充电组件或者内置电池为所述带屏智能终端充电。
39.如权利要求38所述的系统，其特征在于：
所述带屏智能终端，进一步用于当自身充电完成后，通过所述语音终端播放充电完成提示信息，或者通过所述语音终端中LED灯的状态变化，将所述充电完成提示信息通知给用户。
40.如权利要求22所述的系统，其特征在于：
所述带屏智能终端，进一步用于在与所述语音终端处于连接状态，且本带屏智能终端置于所述语音终端的转向组件上时，如果所述语音终端的电量低于预设的低电量阈值，且本带屏智能终端的电量大于预设的充电阈值，则通过本带屏智能终端的内置电池为所述语音终端充电。
41.如权利要求22所述的系统，其特征在于：
所述语音终端具有至少一个外接接口，所述外接接口具备即插即用OTG功能。
42.如权利要求41所述的系统，其特征在于：
所述语音终端，进一步用于在与所述带屏智能终端处于连接状态时，如果所述语音终端或所述带屏智能终端接收到用户的数据存储指令，则通过本语音终端从所述带屏智能终端获取相应的目标数据，并存储到目标存储设备，其中，所述数据存储指令用于指示将所述带屏智能终端中的目标数据存储到所述目标存储设备，所述目标存储设备通过所述外接接口与所述语音终端连接。
CN201910782115.3A 2019-08-23 2019-08-23 一种基于多个终端的交互服务实现方法和系统 Active CN110491387B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910782115.3A CN110491387B (zh) 2019-08-23 2019-08-23 一种基于多个终端的交互服务实现方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910782115.3A CN110491387B (zh) 2019-08-23 2019-08-23 一种基于多个终端的交互服务实现方法和系统

Publications (2)

Publication Number Publication Date
CN110491387A CN110491387A (zh) 2019-11-22
CN110491387B true CN110491387B (zh) 2022-03-29

Family

ID=68551696

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910782115.3A Active CN110491387B (zh) 2019-08-23 2019-08-23 一种基于多个终端的交互服务实现方法和系统

Country Status (1)

Country Link
CN (1) CN110491387B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111161722B (zh) * 2019-12-04 2023-08-29 深圳创维－Rgb电子有限公司 一种息屏画面显示方法、终端及存储介质
CN111048087A (zh) * 2019-12-24 2020-04-21 深圳Tcl新技术有限公司 共享式语音交互方法、装置、设备及存储介质
CN113127609A (zh) * 2019-12-31 2021-07-16 华为技术有限公司 语音控制方法、装置、服务器、终端设备及存储介质
CN111353771A (zh) * 2020-02-19 2020-06-30 北京声智科技有限公司 一种远程控制支付的方法、装置、设备和介质
CN113393834B (zh) * 2020-03-11 2024-04-16 阿里巴巴集团控股有限公司 一种控制方法及装置
CN113114546B (zh) * 2021-04-15 2023-02-10 杭州蓦然认知科技有限公司 一种动态构建语音处理能力列表的方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1054387A2 (en) * 1999-05-21 2000-11-22 Information Storage Devices, Inc. Method and apparatus for activating voice controlled devices
WO2018067528A1 (en) * 2016-10-03 2018-04-12 Google Llc Device leadership negotiation among voice interface devices
CN108428452A (zh) * 2018-03-14 2018-08-21 百度在线网络技术（北京）有限公司 终端支架和远场语音交互系统
CN109767773A (zh) * 2019-03-26 2019-05-17 北京百度网讯科技有限公司 基于语音交互终端的信息输出方法和装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9263041B2 (en) * 2012-03-28 2016-02-16 Siemens Aktiengesellschaft Channel detection in noise using single channel data
CN104331651A (zh) * 2014-10-08 2015-02-04 无锡指网生物识别科技有限公司 基于指纹和语音识别的控制系统及设备
CN105070117A (zh) * 2015-07-30 2015-11-18 广东小天才科技有限公司 一种控制点读机早晚听播放的方法和系统
CN105895096A (zh) * 2016-03-30 2016-08-24 乐视控股（北京）有限公司 一种身份识别与语音交互操作的方法及装置
CN105959794A (zh) * 2016-05-05 2016-09-21 Tcl海外电子（惠州）有限公司 视频终端的音量调节方法及装置
CN107846080A (zh) * 2016-09-18 2018-03-27 中兴通讯股份有限公司 无线通信方法及发送设备、接收设备
CN108076507B (zh) * 2017-12-13 2020-09-22 Oppo广东移动通信有限公司 定位方式控制方法、装置、存储介质及移动终端
CN108614583A (zh) * 2018-04-28 2018-10-02 北京小米移动软件有限公司 智能终端及智能终端的控制方法
CN109243444B (zh) * 2018-09-30 2021-06-01 百度在线网络技术（北京）有限公司 语音交互方法、设备及计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1054387A2 (en) * 1999-05-21 2000-11-22 Information Storage Devices, Inc. Method and apparatus for activating voice controlled devices
WO2018067528A1 (en) * 2016-10-03 2018-04-12 Google Llc Device leadership negotiation among voice interface devices
CN108428452A (zh) * 2018-03-14 2018-08-21 百度在线网络技术（北京）有限公司 终端支架和远场语音交互系统
CN109767773A (zh) * 2019-03-26 2019-05-17 北京百度网讯科技有限公司 基于语音交互终端的信息输出方法和装置

Also Published As

Publication number Publication date
CN110491387A (zh) 2019-11-22

Similar Documents

Publication Publication Date Title
CN110491387B (zh) 一种基于多个终端的交互服务实现方法和系统
EP3382949B1 (en) Smart controlling device and method of controlling therefor
EP3402214B1 (en) Control device, system and control methods
JP5541487B2 (ja) 表示制御装置、及び、表示制御システム
EP2696572B1 (en) Power saving control method and electronic device supporting the same
WO2019007245A1 (zh) 一种处理方法、控制方法、识别方法及其装置和电子设备
EP3104574A1 (en) Operating method of portable device, operating method of content reproducing device, portable device, and content reproducing device
US20130205312A1 (en) Image display device and operation method therefor
CN103916536A (zh) 用于移动终端中的用户界面方法和系统
CN105204357A (zh) 智能家居设备的情景模式调整方法及装置
US20120254909A1 (en) System and method for adjusting presentation characteristics of audio/video content in response to detection of user sleeping patterns
CN110730115B (zh) 语音控制方法及装置、终端、存储介质
TW201338510A (zh) 智慧電視控制系統及方法
CN111128149B (zh) 语音采集控制装置及方法
CN116126510A (zh) 基于多设备提供服务的方法、相关装置及系统
WO2023040827A1 (zh) 一种智能家居控制方法
CN105979311A (zh) 调节电视机亮度的方法、装置及终端
US9392320B1 (en) Adaptive battery life enhancer
CN110410953A (zh) 中央空调智能控制方法、装置及系统
WO2022193633A1 (zh) 基于投影的叫醒方法、装置、投影设备和计算机存储介质
CN108663942B (zh) 一种语音识别设备控制方法、语音识别设备和中控服务器
CN214851273U (zh) 一种基于wifi6路由器的虚拟现实设备控制系统
EP4207924A1 (en) Processing method, device, and storage medium
CN113377323A (zh) 一种音频控制方法及电子设备
CN112631138A (zh) 一种基于智能家居智能控制系统的办公控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant