CN104106290A - 互操作地执行服务的方法和装置以及支持该方法和装置的系统 - Google Patents

互操作地执行服务的方法和装置以及支持该方法和装置的系统 Download PDF

Info

Publication number
CN104106290A
CN104106290A CN201380008392.XA CN201380008392A CN104106290A CN 104106290 A CN104106290 A CN 104106290A CN 201380008392 A CN201380008392 A CN 201380008392A CN 104106290 A CN104106290 A CN 104106290A
Authority
CN
China
Prior art keywords
service
equipment
interoperation
portable terminal
external equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380008392.XA
Other languages
English (en)
Inventor
徐俊奎
姜京我
郭知妍
金贤真
李周妍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN104106290A publication Critical patent/CN104106290A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W48/00—Access restriction; Network selection; Access point selection
    • H04W48/16—Discovering, processing access restriction or access information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • H04L67/303—Terminal profiles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/563—Data redirection of data network streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63—Routing a service request depending on the request content or context
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18—Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W92/00—Interfaces specially adapted for wireless communication networks
    • H04W92/16—Interfaces between hierarchically similar devices
    • H04W92/18—Interfaces between hierarchically similar devices between terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

提供了互操作地执行服务的方法和装置。该方法包括：由便携式终端搜索外部设备；在搜索到的外部设备当中识别与所述服务的特征相对应的服务互操作设备；推荐所述服务互操作设备；以及与推荐的服务互操作设备互操作地执行所述服务。

Description

互操作地执行服务的方法和装置以及支持该方法和装置的系统
技术领域
本发明一般涉及用于与外围设备互操作地提供服务的方法和装置以及支持该方法和装置的系统，并且更具体地，涉及用于针对服务推荐外部设备并且与推荐的外部设备互操作地执行服务的方法和装置以及支持该方法和装置的系统。
背景技术
在便携式终端中，输入设备、显示器、音频处理器和其它设备彼此集成为一体。因此，终端的便携性、便携式终端的大小和重量都受这些部件的限制。因此，在向便携式终端提供服务时，附加的外部设备被用于弥补由于便携式终端的硬件不足所导致的不便。
例如，便携式终端使用具有更大屏幕的外部显示设备、支持更高音质和更大音量的外部扬声器、具有更大输入单元的外部触摸屏、作为外围输入设备的有线/无线键盘和/或鼠标等等。
发明内容
技术问题
然而，取决于所提供的服务，用户使用这些外部设备来操作服务常常是不方便的。另外，一些外部设备不适合输出在执行服务时所生成的数据。
技术方案
涉及本发明以至少解决上述问题和/或上述缺点，并至少提供下面描述的优点。
因此，本发明的一个方面提供了对于在通过使用外部设备与便携式终端互操作地执行服务时所造成的不便的解决方案。
本发明的另一方面提供了考虑所提供的服务的特征，与外部设备互操作的便携式终端和方法。
本发明的另一方面提供了推荐适合服务的特征的外部设备并且与推荐的设备互操作地执行服务的方法和装置，以及支持该方法和装置的系统。
根据本发明的一方面，提供了在便携式终端中执行互操作服务的方法。该方法包括由便携式终端搜索外部设备；在搜索到的外部设备当中识别与所述服务的特征相对应的服务互操作设备；推荐所述服务互操作设备；以及与推荐的服务互操作设备互操作地执行所述服务。
根据本发明的另一方面，提供了在便携式终端中执行互操作服务的方法。该方法包括启动服务；搜索外部设备；根据所述服务的特征推荐搜索到的外部设备；从推荐的外部设备选择服务互操作设备；根据选择的服务互操作设备确定所述便携式终端的功能；以及根据所述便携式终端的功能，执行发送所述服务的数据和接收用于处理所述服务的数据的命令中的至少一个。
根据本发明的另一方面，提供了与服务互操作设备执行服务的装置。该装置包括：通信单元，用于通过向外部设备中的每一个发送简档请求来搜索外部设备；以及控制器，用于在搜索到的外部设备当中识别与所述服务的特征相对应的服务互操作设备，推荐所述服务互操作设备，以及与推荐的服务互操作设备互操作地执行所述服务。
根据本发明的另一方面，提供了执行互操作服务的系统。该系统包括：便携式终端；以及与所述便携式终端通信的外部设备，其中，所述便携式终端从所述外部设备当中推荐与服务特征相对应的服务互操作设备，并且与推荐的服务互操作设备互操作地执行所述服务。
技术效果
因此，根据本发明的实施例，便携式终端方便地与其他设备互操作，并且使得用户容易享受服务。
附图说明
当结合附图阅读以下详细描述时，本发明的某些实施例的以上和其它方面、特征和优点将变得更加明显，在附图中：
图1示出了根据本发明实施例的互操作地执行服务的系统；
图2是示出根据本发明的实施例的互操作地执行服务的方法的流程图；
图3A和图3B是示出根据本发明的实施例的互操作地执行服务的方法的概念图；
图4是示出根据本发明的实施例的由便携式终端互操作地执行服务的方法的流程图；
图5A是示出根据本发明的实施例的推荐服务互操作设备的方法的流程图；
图5B示出了根据本发明的实施例的在执行服务互操作时输出的屏幕显示的例子；
图6A是示出根据本发明的实施例的便携式终端与外部设备互操作地执行服务的过程的信号流图；
图6B是示出根据本发明的实施例的、在外部设备当中确定和推荐服务互操作设备的过程的信号流图；
图7是示出根据本发明的实施例的互操作地执行服务的系统；
图8是示出根据本发明的实施例的便携式终端的框图；以及
图9是示出根据本发明的实施例的便携式终端的控制器的框图。
具体实施方式
下面将参照附图详细描述本发明的各种实施例。贯穿附图使用相同的参考标号来指代相同或相似的部分。此外，可以省略对并入本文的公知功能和结构的详细描述，以避免模糊本发明的主题。
在下面的说明书和权利要求书中使用的术语和词语不限于它们的字典含义，而是仅仅被发明人用来实现对本发明的清楚和一致的理解。因此，对本领域技术人员来说应当明显的是，提供以下对本发明的实施例的描述仅用于图示的目的而非限制如所附权利要求及其等同所定义的本发明的目的。而且，本领域技术人员将认识到，可以对本文所描述的实施例进行各种改变和修改而不脱离本发明的范围和精神。
本文中，术语“服务”指的是从便携式终端提供给用户的应用或特定的例程。例如，服务包括电影播放、查看照片、听音乐、玩游戏、浏览互联网、发文本消息、编辑图片和准备文档。因此，服务可以根据安装在便携式终端中的各种应用被提供给用户。
本文中，术语“外部设备”指的是与便携式终端分离并且能够以无线方式或通过有线连接与便携式终端通信的设备。例如，外部设备可以包括其他便携式终端、平板个人计算机(PC)、电视、台式PC、计算机监视器、键盘/鼠标、操纵杆、扬声器、家庭影院系统等。
另外，便携式终端可以包括移动通信终端、便携式多媒体播放器(PMP)、数字广播播放器、个人数字助理(PDA)、音乐文件播放器(例如，MP3播放器)、便携式游戏终端、平板PC、智能电话等。
本文中，术语“服务互操作设备”指的是与便携式终端互操作地执行服务的外部设备。
按照本发明的实施例，通过基于正在从便携式终端所提供的服务的特征来允许用户将外部设备与便携式终端互操作，向用户提供丰富的用户体验。
图1示出了根据本发明实施例的互操作地执行服务的系统。
参照图1，系统包括便携式终端100和外围外部设备101-104。便携式终端100提供服务，诸如电影播放、查看照片、听音乐、玩游戏、浏览互联网、发文本消息、准备文档、编辑图片等。此外，便携式终端100推荐外部设备101-104之一，然后与推荐的外部设备互操作地执行服务。
特别地，便携式终端100的特征在于，它可以与外部设备101-104中的至少一个进行互操作。例如，在观看电影时，如果确定用户在观看电影时喜欢生动的视觉效果，则便携式终端推荐外周外部设备101-104当中具有相对大尺寸的屏幕的电视101。在这种情况下，便携式终端100可以从预设的用户偏好信息或存储的服务历史中识别偏好的服务特征。因此，便携式终端100可以与具有较大屏幕的推荐的电视101互操作地执行服务(即，观看电影)，以提供高质量和丰富的用户体验。
图2是示出根据本发明的实施例的互操作地执行服务的方法的流程图。
参照图2，在步骤210中便携式终端启动服务。在步骤220中，便携式终端搜索位于便携式终端周围的外部设备。在步骤230中，便携式终端推荐适合于正在执行的服务的服务特征的至少一个服务互操作设备。在步骤240中，便携式终端与推荐的服务互操作设备互操作地执行服务。
图3A和图3B是示出根据本发明的实施例的互操作地执行服务的方法的概念图。
参照图3A，便携式终端的服务具有各种类型的服务，即，电影、照片、音乐、短消息服务(SMS)、游戏、网络浏览器、邮件、文字(Word)处理器、视频共享网站、地图搜索、日历等。
当用户选择并启动所需的服务时，所选择的服务的服务特征被识别，以便推荐至少一个服务互操作设备。例如，服务特征包括服务的类型、服务输出方案、以及控制输入方案。
在识别服务特征之后，便携式终端基于服务特征从外部设备中推荐合适的服务互操作设备，如图3B所示。
更具体地，基于与服务特征相对应的设备特征来推荐至少一个外部设备。例如，可以基于服务类型以及设备的服务输入/控制输出方案来推荐某些外部设备。例如，服务输出方案包括显示和声音，而且控制输入方案包括文本、方向、功能键和运动。
例如，对于网络浏览器服务，便携式终端可以推荐计算机监视器或平板PC作为服务输出设备，然后推荐便携式终端、键盘/鼠标和操纵杆作为控制输入设备。对于游戏服务，便携式终端可以推荐它自身作为服务输出设备，而且推荐另一便携式终端和键盘/鼠标作为控制输入设备。
根据本发明的实施例，与推荐的服务互操作设备互操作地提供服务。例如，当服务是播放电影服务时，电视可以被选择作为输出设备，而且便携式终端自身、遥控器和操纵杆中的至少一个可以被推荐作为控制输入设备，以便与便携式终端互操作地提供服务。
图4是示出根据本发明的实施例的由便携式终端互操作地执行服务的方法的流程图。
参照图4，在步骤410中便携式终端启动服务。例如，便携式终端基于用户输入执行特定的应用或例程。
在步骤420中，例如，便携式终端通过功能键输入确定是否请求服务互操作模式。服务互操作模式控制便携式终端与外围设备进行互操作以执行服务。例如，服务互操作模式可以被配置为特定的应用的一部分，或者在便携式终端自身中提供。
当在步骤420中没有请求服务互操作模式时，在步骤425中，便携式终端根据服务执行功能。
然而，当在步骤420中请求服务互操作模式时，在步骤430中，便携式终端搜索外围外部设备。在步骤440中，便携式终端从搜索到的外部设备中推荐至少一个服务互操作设备。如上所述，服务互操作设备是适合于与便携式终端互操作地执行服务的设备。
在步骤450中，便携式终端确定用户是否选择了至少一个推荐的服务互操作设备之一。当没有选择推荐的服务互操作设备时，便携式终端返回到步骤440并继续推荐服务互操作设备。
例如，便携式终端显示多个服务互操作设备，而且基于用户从推荐的服务互操作设备的选择来执行服务。可替换地，便携式终端可以取决于推荐的服务互操作设备的数目来选择服务互操作设备。
例如，如果只存在一个推荐的服务互操作设备，则便携式终端可以自动地选择该服务互操作设备，然后与所选择的推荐的服务互操作设备互操作地执行服务。但是，当推荐了若干服务互操作设备时，在步骤450中便携式终端请求用户选择推荐的服务互操作设备。
当在步骤450中选择了推荐的服务互操作设备时，在步骤460中便携式终端与所选择的服务互操作设备互操作地执行服务。
在步骤470中，便携式终端在执行服务的时候确定服务互操作模式是否被终止。
当检测到对于终止的请求时，便携式终端继续步骤460中的服务互操作过程。
当检测到对于终止的请求时，便携式终端终止服务互操作过程。当终止服务互操作过程时，便携式终端可以释放与服务互操作设备的连接。随后，便携式终端可以停止执行服务或者继续使用便携式终端的功能单元来执行服务。
可替换地，便携式终端可以在服务结束之后，例如，当电影结束时或者在预设的时间限制之后，终止服务互操作模式。
图5A是示出根据本发明的实施例的推荐服务互操作设备的方法的流程图。具体地，图5A更详细地示出了图4的步骤440。
参照图5A，在步骤510中，便携式终端获得搜索到的外围外部设备的简档。简档包括相对于搜索到的外围外部设备的特征的信息。例如，便携式终端可以从搜索到的外部设备或存储外部设备的简档的简档服务器请求简档。
根据本发明的另一实施例，便携式终端可以向搜索到的外部设备(或简档服务器)发送将要执行的服务的特征，然后接收被搜索到的外部设备(或简档服务器)确定为适合所述服务的特征的外部设备的简档。在本实施例中，便携式终端可以自动地将向该便携式终端发送简档的外部设备推荐为服务互操作设备。由外部设备确定适合于执行服务的过程与下面由便携式终端确定将要推荐的服务互操作设备的过程相同。
在步骤520中，在获得简档之后，便携式终端将外部设备的特征与服务特征进行比较。
下面在表1和表2中示出服务特征和外部设备的特征的例子。表1将服务特征划分为服务类型、输出方案、以及控制输入方案，而且它进一步包括每个项目的例子。表2将外部设备的特征分类为设备类型、功能和性能，而且它还描述了每个项目的例子。使用表1和表2，便携式终端分析简档，以识别外部设备的特征。
表1
服务类型 输出方案 控制输入方案
电影 声音 方向
照片 显示 文本
音乐 运动
SMS 功能
游戏 组合
网络浏览器
消息
文档编辑器(Word)
视频流播放器
地图
日历
表2
表3
例如，当服务类型是电影服务时，便携式终端参照表1识别服务特征中的服务类型是电影服务、输出方案是显示、而且控制输入方案是功能。此后，便携式终端从所获得的简档识别外部设备的特征。
例如，便携式终端参照表2识别外部设备的设备类型、功能和性能。此后，便携式终端参照表3确认电影的服务互操作设备偏好。
因此，便携式终端可以基于服务互操作设备偏好，将外部设备的特征与电影服务的特征进行比较。此外，在执行比较时，便携式终端可以识别，具有较大屏幕的显示输出设备和输出设备的控制器被优选为服务互操作设备。
再次参照图5A，在步骤530，便携式终端确定服务互操作设备。此外，便携式终端可以将一个或多个外部设备确定为服务互操作设备。
例如，当扬声器、平板PC和电视将简档发送到便携式终端时，便携式终端可以将具有较大屏幕的电视确定并推荐为电影服务的显示输出设备。
根据本发明的实施例，可以参考服务互操作设备偏好来确定优先级，以便推荐服务互操作设备。例如，当服务互操作设备偏好是大的显示输出设备时，便携式终端将具有大于预定大小的输出单元的外部显示输出设备推荐为服务互操作设备。此后，便携式终端可以根据所确定的服务互操作设备的屏幕大小来确定优先级。因此，当推荐了多个服务互操作设备时，便携式终端允许用户容易地选择将要进行互操作的外部设备。
图5B示出了根据本发明的实施例的在执行服务互操作时输出的屏幕显示的例子。
参照图5B，屏幕501是被显示以在，例如，图4的步骤440中推荐服务互操作设备的屏幕的例子。屏幕501列出了服务特征，诸如服务类型、输出类型、以及控制输入方案，将外部设备分类为服务类型、控制输入设备和输出设备，并且根据设备类型推荐了若干设备，并且可以允许用户从推荐的服务互操作设备的列表中选择所期望的设备。
图5B的屏幕502是当在，例如，图4的步骤450中选择将要与便携式终端互操作的服务互操作设备时输出的屏幕的例子。当执行服务时，屏幕502将被选择以执行服务的服务互操作设备以及各设备的功能显示为简单的绘图。
例如，服务互操作设备可以操作为控制输入设备和输出设备，而且便携式终端可以用作服务互操作设备之间的中介设备。
因此，屏幕502包括图片，其中，设备A将数据发送给便携式终端(我的电话)而且我的电话将数据发送到设备X。
此外，屏幕502提供了改变配置按钮，其返回到屏幕501以使得用户可以重新选择服务互操作设备。此外，屏幕502提供完成互操作按钮，以使得便携式终端直接终止服务互操作过程，例如，图4的步骤470。
图6A是示出根据本发明的实施例的便携式终端与外围外部设备互操作地执行服务的过程的信号流图。
参照图6A，在步骤605中便携式终端100启动服务。在步骤610中，便携式终端100将设备搜索信号发送到外围外部设备310、320和330。响应于该动作，在步骤620中，外部设备310、320和330将响应信号发送到便携式终端100。
在步骤625中，例如，便携式终端100将外部设备310、320和330中的第一外部设备310和第二外部设备320推荐为服务互操作设备。
在步骤635中，便携式终端100与从推荐的服务互操作设备中选择的设备进行互操作。便携式终端100可以确定第一外部设备310、第二外部设备320和便携式终端100的每个功能，例如，在执行服务时，这些功能可以包括控制输入设备、输出设备以及中介设备。
在确定功能时，便携式终端100可以参考在步骤625中推荐服务互操作设备时获得的简档。便携式终端100可以从简档识别推荐的服务互操作设备的类型。根据本发明的另一实施例，便携式终端100可以存储先前互操作的服务互操作设备的特征。因此，便携式终端100可以确定推荐的服务互操作设备的功能，而不需要接收单独的简档。
在识别设备类型之后，便携式终端100将推荐的服务互操作设备分类为输入设备和输出设备，并确定它们的功能。如果在特定的设备类型中推荐了多个服务互操作设备，则便携式终端100可以根据优先级或用户输入来选择一个服务互操作设备。
如果在推荐的服务互操作设备中存在一个输出设备和一个控制输入设备，则便携式终端100用作该输出设备和该控制输入设备之间的中介设备。
当推荐的服务互操作设备包括一个输出设备时，便携式终端100用作控制输入设备，而且当推荐的服务互操作设备包括一个输入设备时，便携式终端100用作输出设备。
在如上所述确定功能之后，第一外部设备310、第二外部设备320和便携式终端100根据所确定的功能彼此发送和接收服务数据以及用于处理服务数据的命令，如步骤640到683所示。
如果便携式终端100的功能是中介设备，则便携式终端100从具有输入设备的功能的服务互操作设备接收命令。便携式终端100根据接收到的命令来处理服务数据并且将经处理的服务数据发送到具有输出设备的功能的服务互操作设备。
例如，便携式终端100、第一外部设备310和第二外部设备320分别用作中介设备、输出设备和输入设备。
因此，在步骤640中，便携式终端100向第一外部设备310发送将输出的数据。发送的数据可以是用于显示的数据或者用于声音输出的数据。在步骤645中，第一外部设备310输出该数据。如果第二外部设备320如步骤647所示接收命令，则第二外部设备320在步骤650中将命令发送到便携式终端100。
根据本发明的另一实施例，第二外部设备320可以经由第一外部设备310将命令发送到便携式终端100。
在步骤670中，便携式终端100将从第二外部设备320接收到的命令转换为便携式终端100可解释的命令。便携式终端100根据服务处理转换后的命令。便携式终端100将在处理命令时生成的服务数据转换为可与第一外部设备310兼容的数据。在步骤680中，便携式终端100将转换后的数据发送到第二外部设备320。在步骤683中，第一外部设备310输出接收到的数据。
在彼此互操作地执行服务时，便携式终端100、第一外部设备310和第二外部设备320重复步骤640到683。
在步骤685中，便携式终端100在互操作地执行服务的时候接收互操作终止请求。因此，便携式终端100在步骤690中终止与第一外部设备310和第二外部设备320互操作。
当便携式终端100的功能被确定为输入设备时，便携式终端100接收并处理用户输入。便携式终端100将服务数据发送到具有输出设备的功能的服务互操作设备。
当便携式终端100的功能被确定为输出设备时，便携式终端100从具有输入设备的功能的服务互操作设备接收命令。此后，便携式终端100根据命令处理并输出服务数据。
便携式终端100可以根据服务互操作设备的功能，生成并发送输入图形用户界面(GUI)和输出GUI中的至少一个到具有相应功能的服务互操作设备。
图6B是示出根据本发明的实施例的、在外部设备当中确定和推荐服务互操作设备的过程的信号流图。具体地，图6B更详细地示出了推荐服务互操作设备的图6A的步骤625。
参照图6B，在步骤710中，便携式终端100从外部设备310、320和330中的每一个请求简档。便携式终端100在认识到外围外部设备310、320和330存在的时候执行步骤710。
在步骤730中，外部设备310、320和330将简档发送到便携式终端100。当外部设备310、320和330不具有简档时，外部设备310、320和330可以请求简档服务器(未示出)将简档发送到便携式终端100。
根据本发明的另一实施例，便携式终端100可以执行步骤720而不是步骤710。即，便携式终端100可以在步骤720中将服务特征发送到外部设备310、320和330。然后，在步骤725中，外部设备310、320和330可以确定外部设备310、320和330自身是否适合接收到的服务特征。在这种情况下，外部设备310、320和330可以相互比较设备类型、功能、特征、服务类型、输出方案和控制输入方案以确定适合性。然后在步骤730中，外部设备310、320和330可以选择性地将简档发送到便携式终端100。
更具体地，当确定外部设备310、320和330适合服务特征时，外部设备310、320和330可以将简档发送到便携式终端100。
当便携式终端100接收从外部设备310、320和330发送的简档时，便携式终端100在步骤740中分析简档。在便携式终端100在步骤750中识别外部设备的特征之后，便携式终端100执行步骤760以将识别的外部设备的特征与服务特征或服务互操作设备偏好进行比较。在步骤770中，便携式终端100确定与服务特征或服务互操作设备偏好相匹配的外部设备。
尽管图6B示出了便携式终端100从外部设备310、320和330请求简档，但是便携式终端100可以从简档服务器请求外部设备310、320和330的简档。
图7是示出根据本发明的实施例的互操作地执行服务的系统的概念图。具体地，图7示出了与电视(TV)810和TV遥控器820互操作地执行服务的便携式终端100。
参照图7，TV和TV遥控器分别对应于如图6A和图6B所示的第一外部设备310和第二外部设备320。例如，当执行电影服务时，便携式终端100从TV遥控器820接收命令。命令可以通过TV 810传送到便携式终端100或直接发送到便携式终端100。命令可以包括与电影服务相关联的“暂停”、“回放”和“快退”。
如图7所示，便携式终端100可以显示接收到命令“暂停”。便携式终端100处理该命令并根据该命令将数据发送到TV 810。因此，便携式终端100可以根据命令显示暂停的电影屏幕和改变的功能菜单。
根据本发明的另一实施例，便携式终端100可以支持基于云服务器处理的服务。例如，当用于执行服务的应用被安装在云服务器中时，便携式终端100可以将用于该服务的命令发送到云服务器。便携式终端100可以根据命令从云服务器接收处理的服务数据。
例如，对于由云服务器处理的游戏服务，即，安装在云服务器中的游戏应用，便携式终端100可以将游戏控制输入发送到云服务器。在这种情况下，便携式终端100可以根据便携式终端100的功能将从服务互操作设备接收到的命令发送到云服务器。便携式终端100可以转换接收到的命令以用于云服务器，并且将经转换的命令发送到云服务器。作为响应，云服务器可以自己处理游戏控制输入，并且将游戏服务的输出数据，例如，游戏屏幕，发送到便携式终端100。便携式终端100可以输出游戏服务的输出数据。
便携式终端100可以根据便携式终端100的功能将游戏服务的输出数据传送到服务互操作设备。
图8是示出根据本发明的实施例的便携式终端的内部配置的框图。
参照图8，便携式终端包括通信单元110、输入单元120、音频处理器130、显示单元140、存储器160和控制器170。本文中，术语“单元”指的是硬件设备或者硬件设备和软件的组合。
通信单元110在控制器170的控制下，形成用于语音呼叫的通信信道、用于图像呼叫的通信信道、以及用于发送诸如图像或声音的数据的通信信道(被称为“数据通信信道”)。
通信单元110在服务互操作执行模式中，在控制器170的控制下与外围外部设备形成通信信道。通过所形成的通信信道，通信单元110发送用于搜索服务互操作的设备的搜索信号，并且接收对搜索信号的响应。通信单元110可以从外部设备或简档服务器接收简档。
根据本发明的另一实施例，通信单元110可以通过与外部设备形成的通信信道来发送将要执行的服务的特征。通信单元110通过与被确定为互操作地执行服务的服务互操作设备形成的通信信道从被设置为输入设备的服务互操作设备接收命令，并且将根据命令处理的服务数据发送到被设置为输出设备的服务互操作设备。
通信单元110也可以与云服务器形成通信信道。因此，便携式终端100可以基于云服务器提供服务。
输入单元120接收各种文本信息，并且将与便携式终端100的各种功能的设置和功能控制相关联输入的信号传送到控制器170。例如，输入单元120可以是触摸板、通用键排列的键盘和QWERTY型的键盘或者它们的组合。输入单元120还可以包括功能键，如箭头键、音量键、以及被设置为执行特定功能的热键。
特别地，输入单元120生成并传送用于进入服务互操作模式的启动请求信号和用于请求终止服务互操作模式的终止请求信号到控制器170。输入单元120接收对推荐的服务互操作设备当中的特定设备的选择，生成请求与特定设备互操作的信号，并将生成的信号传送到控制器170。输入单元120生成请求改变将要互操作的设备的信号，并将该信号传送到控制器170。
响应于改变请求信号，控制器170可以再次向用户推荐服务互操作设备。
音频处理器130包括用于播放音频数据的扬声器SPK和用于收集音频信号的麦克风MIC。
特别地，音频处理器130可以操作推荐的服务互操作设备、或者输出用于通知互操作状态或终止的声音效果。音频处理器130可以在执行服务互操作程序期间，将关于执行相应服务的指导信息，例如，服务名称或默认功能的名称，输出为语音信号。音频处理器130可以收集用户的语音信号，并且对由控制器170收集到的声音信号进行语音识别以使得用户选择服务互操作设备。
显示单元140根据便携式终端的使用，将由用户输入的信息或者提供给用户的信息显示为各种屏幕。
特别地，显示单元140在服务互操作执行模式中，在控制器170的控制下显示搜索到的外部设备，例如，如图5B所示的输出屏幕。因此，显示单元140可以显示服务特征、推荐的服务互操作设备和设备功能。
例如，显示单元140可以是液晶显示器(LCD)或有机发光二极体(OLED)。
存储器160存储用于功能操作的至少一个应用、由用户生成的用户数据、通过通信信道收发的消息、通过执行应用所产生的数据等。
例如，存储器160可以包括程序区和数据区。程序区存储用于操作便携式终端和组成元件的操作系统(OS)、用于生成数字图像和视频的相机应用、电影播放应用、音乐播放应用、网络浏览器应用、多媒体游戏应用、日历应用、电子邮件应用、文本消息等。注意的是，程序区还存储服务互操作程序161。
服务互操作程序161推荐适合服务特征的服务互操作设备以便与外部设备互操作地执行服务，并且执行服务互操作设备和便携式终端的功能。因此，服务互操作程序161包括外部设备搜索例程、服务互操作设备推荐例程、和服务互操作设备的服务执行例程。推荐例程从外部设备获得简档，并将适合服务特征的外部设备推荐为服务互操作设备。服务执行例行根据服务互操作设备和便携式终端的功能，收发用于执行服务的数据。
数据区存储通过使用便携式终端所生成的数据。
特别地，数据区存储服务特征、简档和服务互操作设备偏好参考。因此，控制器170利用数据区来推荐适合服务特征的服务互操作设备。
数据区还可以存储命令兼容信息，用于将从服务接收到的命令转换为便携式终端可解释的命令。
此外，数据区可以存储服务数据兼容信息，用于把将要发送到服务互操作设备的服务的数据转换为相应的服务互操作设备所支持的数据。
例如，控制器170将从TV遥控器接收到的控制命令转换为便携式终端所支持的电影播放应用的命令，并且将经转换的命令转换为适合TV的标准的数据，并且发送电影数据。
控制器170控制便携式终端的整体操作。
特别地，控制器170从外围外部设备当中推荐服务互操作设备以便与便携式终端一起执行服务，并且与推荐的服务互操作设备互操作地提供服务。当执行服务时，控制器170指定服务互操作设备和便携式终端的功能、以及根据所指定的功能的服务命令和数据。因此，控制器170推荐最合适的外部设备并与之进行互操作，以使得用户可以方便地享受高质量的服务。
图9是示出根据本发明的实施例的控制器的框图。
参照图9，控制器包括通信数据收集器171、数据转换器173和功能执行单元175。虽然为了便于描述在图9中示出了控制器的各种组件，但是控制器不一定包括这些各种组件，而是自己执行这些组件的操作。
通信数据收集器171收集从通信单元110接收到的数据。特别地，通信数据收集器171将从通信单元110接收到的数据传送到功能执行单元175或数据转换器173。如果从简档或外围外部设备接收到搜索响应信号，则通信数据收集器171将接收到的数据传送到功能执行单元175。如果接收到命令，则通信数据收集器171将命令发送到数据转换器173。
数据转换器173根据特定的方案转换各种数据。具体地，数据转换器173参考命令兼容信息，将从数据收集器171接收到的命令转换为功能执行单元175可以处理的命令。数据转换器173将经转换的命令传送到功能执行单元175。
响应于功能执行单元175的请求，数据转换器173将服务数据转换为执行输出设备的功能的服务互操作设备所支持的数据。在这种情况下，数据转换器173可以参考服务数据兼容信息。数据转换器173可以将经转换的数据传送到功能执行单元175。
功能执行单元175执行从便携式终端100提供的各种功能。特别地，功能执行单元175根据来自通信数据收集器171的数据，运行互操作地执行服务的过程。例如，当接收到搜索响应信号时，功能执行单元175从搜索响应信号识别位于外围的外部设备。当接收到简档时，功能执行单元175分析简档，以推荐适合服务特征的服务互操作设备。
功能执行单元175根据从数据转换器173提供的数据运行互操作地执行服务的过程。例如，当接收到经转换的命令时，功能执行单元175根据相应的应用处理命令。功能执行单元175根据处理命令来生成数据，从数据转换器173请求数据转换，以使得所生成的数据被转换为执行输出设备的功能的服务互操作设备所支持的格式，然后将经转换的数据发送到相应的服务互操作设备。在这种情况下，功能执行单元175可以发送由数据通信数据收集器171转换的数据。可替换地，经转换的数据可以被直接发送到数据转换器173。
如上所述，提供了互操作地执行服务的方法和设备以及支持该方法和设备的系统，以便根据便携式终端的服务特征推荐合适的设备来执行服务。因此，即使在陌生环境中用户不知道便携式终端的外围中哪个设备是可用的，用户也可以方便地从推荐的设备选择适合服务的设备。
虽然已经参照本发明的某些实施例具体示出和描述了本发明，但是本领域术人员应当理解，可以在形式和细节上对其做出各种改变而不脱离由所附权利要求及其等同定义的本发明的精神和范围。

Claims (20)

1.一种在便携式终端中与服务互操作设备一起执行服务的方法，该方法包括：
由所述便携式终端搜索外部设备；
在搜索到的外部设备当中识别与所述服务的特征相对应的服务互操作设备；
推荐所述服务互操作设备；以及
与推荐的服务互操作设备互操作地执行所述服务。
2.如权利要求1所述的方法，其中，识别所述服务互操作设备包括：
从搜索到的外部设备或者从存储简档的简档服务器获得每个搜索到的外部设备的简档；以及
基于获得的简档，将与所述服务特征相对应的外部设备确定为所述服务互操作设备。
3.如权利要求2所述的方法，其中，将所述外部设备确定为所述服务互操作设备包括：
从所述简档识别外部设备的特征；
将所述外部设备的特征与所述服务特征进行比较；以及
当所述外部设备的特征与所述服务特征匹配时，将所述外部设备确定为所述服务互操作设备。
4.如权利要求1所述的方法，其中，识别所述服务互操作设备包括：
将所述服务特征发送到搜索到的外部设备；
从搜索到的外部设备当中的适合服务特征的外部设备接收简档；以及
将发送所述简档到所述便携式终端的外部设备确定为所述服务互操作设备。
5.如权利要求4所述的方法，其中，将所述外部设备确定为所述服务互操作设备包括：
从所述简档识别相应的外部设备的特征；
将所述外部设备的特征与所述服务特征进行比较；以及
当所述外部设备的特征与所述服务特征匹配时，将所述外部设备确定为所述服务互操作设备。
6.如权利要求5所述的方法，其中，所述外部设备的特征包括设备类型、提供的功能、以及根据所述提供的功能的性能，以及
其中所述设备类型包括控制输入设备和输出设备中的至少一个。
7.如权利要求5所述的方法，其中，所述服务特征包括先前为所述服务的每个特征设置的服务互操作设备偏好。
8.如权利要求1所述的方法，其中，执行所述服务包括：
确定所述服务互操作设备和所述便携式终端的功能；以及
根据确定的功能，在所述服务互操作设备和所述便携式终端之间收发服务的数据和用于处理所述服务的数据的命令。
9.如权利要求8所述的方法，其中，收发所述服务的数据包括：
当所述便携式终端的功能是中介设备(mediator)时，从具有输入设备的功能的服务互操作设备接收命令，而且根据接收到的命令来处理所述服务的数据，而且将经处理的服务的数据发送到具有输出设备的功能的服务互操作设备；
当所述便携式终端的功能是所述输入设备时，将所述服务的数据发送到具有所述输出设备的功能的服务互操作设备；以及
当所述便携式终端的功能是所述输出设备时，由具有所述输入设备的功能的服务互操作设备接收命令，并且由所述便携式终端根据所述命令处理和输出所述服务的数据。
10.如权利要求8所述的方法，其中，执行所述服务包括由所述便携式终端生成并发送输入图形用户界面(GUI)和输出GUI中的至少一个到具有相应功能的服务互操作设备。
11.如权利要求8所述的方法，其中，收发所述服务的数据包括：
将由所述服务互操作设备接收到的命令转换为所述便携式终端可解释的命令；
处理所述可解释的命令；
将所述服务的数据转换为可与所述服务互操作设备兼容的数据；以及
发送经转换的数据。
12.如权利要求1所述的方法，其中，所述服务包括由所述便携式终端处理的服务和基于云服务器处理的服务中的至少一个。
13.如权利要求12所述的方法，其中，执行所述服务包括：
将针对所述服务的命令发送到所述云服务器；以及
从所述云服务器接收根据所述命令处理的服务的数据。
14.如权利要求1所述的方法，其中，执行所述服务包括：
当只推荐了一个服务互操作设备时，自动地与所述服务互操作设备互操作地执行所述服务；以及
当推荐了两个或更多个服务互操作设备时，与由用户选择的服务互操作设备互操作地执行所述服务。
15.如权利要求1所述的方法，其中，所述服务特征包括所述服务的类型、输出方案和控制输入方案。
16.一种在便携式终端中与服务互操作设备一起执行服务的方法，该方法包括：
启动服务；
搜索外部设备；
根据所述服务的特征推荐搜索到的外部设备；
从推荐的外部设备选择所述服务互操作设备；
根据选择的服务互操作设备确定所述便携式终端的功能；以及
根据确定的所述便携式终端的功能，执行发送所述服务的数据和接收用于处理所述服务的数据的命令中的至少一个。
17.如权利要求16所述的方法，其中，执行发送和接收中的至少一个包括以下中的至少一个：
当选择的服务互操作设备是输出设备时，将所述服务的数据发送到选择的服务互操作设备；以及
当选择的服务互操作设备是输入设备时，接收所述命令。
18.一种与服务互操作设备执行服务的装置，该装置包括：
通信单元，用于通过向外部设备中的每一个发送简档请求来搜索外部设备；以及
控制器，用于在搜索到的外部设备当中识别与所述服务的特征相对应的服务互操作设备，推荐所述服务互操作设备，以及与推荐的服务互操作设备互操作地执行所述服务。
19.如权利要求18所述的装置，其中，所述控制器通过经由所述通信单元从搜索到的外部设备或者从存储简档的简档服务器获得每个搜索到的外部设备的简档来识别所述服务互操作设备，并且基于获得的简档将与所述服务特征相对应的外部设备确定为所述服务互操作设备。
20.一种执行服务的系统，包括：
便携式终端；以及
与所述便携式终端通信的外部设备，
其中，所述便携式终端从所述外部设备中推荐与服务特征相对应的服务互操作设备，并且与推荐的服务互操作设备互操作地执行所述服务。
CN201380008392.XA 2012-02-07 2013-01-24 互操作地执行服务的方法和装置以及支持该方法和装置的系统 Pending CN104106290A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020120012085A KR101900319B1 (ko) 2012-02-07 2012-02-07 서비스 연동 수행 방법과 이를 위한 시스템
KR10-2012-0012085 2012-02-07
PCT/KR2013/000573 WO2013118988A1 (en) 2012-02-07 2013-01-24 Method and apparatus for interoperably performing services and system supporting the same

Publications (1)

Publication Number Publication Date
CN104106290A true CN104106290A (zh) 2014-10-15

Family

ID=48903882

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380008392.XA Pending CN104106290A (zh) 2012-02-07 2013-01-24 互操作地执行服务的方法和装置以及支持该方法和装置的系统

Country Status (5)

Country Link
US (3) US10142194B2 (zh)
EP (1) EP2813109B1 (zh)
KR (1) KR101900319B1 (zh)
CN (1) CN104106290A (zh)
WO (1) WO2013118988A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918132A (zh) * 2020-07-27 2020-11-10 海信视像科技股份有限公司 一种显示设备及多接口设备判断方法

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US20120311585A1 (en) 2011-06-03 2012-12-06 Apple Inc. Organizing task items that represent tasks to perform
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
KR102160123B1 (ko) * 2012-08-02 2020-09-25 삼성전자주식회사 컨텐츠에 대한 영상 후처리를 위한 디스플레이 장치, 영상 후처리 장치 및 방법
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
CN103634683A (zh) * 2013-11-29 2014-03-12 乐视致新电子科技（天津）有限公司 对智能电视进行截屏的方法及装置
CN103780709B (zh) * 2014-02-26 2017-04-05 北京华夏翰科科技有限公司 一种对微信或易信信息进行快捷编辑和发布的方法及系统
JP6311411B2 (ja) 2014-04-02 2018-04-18 ソニー株式会社 接続制御装置および接続制御方法
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10635296B2 (en) * 2014-09-24 2020-04-28 Microsoft Technology Licensing, Llc Partitioned application presentation across devices
US10025684B2 (en) 2014-09-24 2018-07-17 Microsoft Technology Licensing, Llc Lending target device resources to host device computing environment
US9769227B2 (en) 2014-09-24 2017-09-19 Microsoft Technology Licensing, Llc Presentation of computing environment on multiple devices
US10448111B2 (en) 2014-09-24 2019-10-15 Microsoft Technology Licensing, Llc Content projection
WO2016056687A1 (ko) * 2014-10-08 2016-04-14 엘지전자 주식회사 디지털 디바이스 및 그 제어 방법
DE102014017141A1 (de) * 2014-11-20 2016-05-25 Audi Ag Steuern eines Online-Dienstes mittels einer Kraftfahrzeug-Bedieneinrichtung
CN104506907B (zh) * 2014-11-25 2018-03-13 上海众应信息科技有限公司 控制端与多个远程被控终端之间的交互操作方法及系统
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10379808B1 (en) * 2015-09-29 2019-08-13 Amazon Technologies, Inc. Audio associating of computing devices
US11587559B2 (en) * 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
KR102121535B1 (ko) * 2015-11-30 2020-06-10 삼성전자주식회사 전자 장치, 보조 장치 및 전자 장치의 동작 방법
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10749969B2 (en) * 2015-12-29 2020-08-18 Oath Inc. Content presentation using a device set
CN105879391B (zh) * 2016-04-08 2019-04-02 腾讯科技（深圳）有限公司 一种游戏中角色的移动控制方法和服务器以及客户端
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10616061B2 (en) * 2018-05-09 2020-04-07 Dish Network L.L.C. Methods and systems for automated configurations of media presentation devices
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1642126A (zh) * 2004-01-17 2005-07-20 三星电子株式会社 使用数据格式转换设备的有线/无线通信系统
US20110093567A1 (en) * 2009-10-15 2011-04-21 Electronics And Telecommunications Research Institute Mobile terminal for providing mobile cloud service and operation method thereof
US20110131520A1 (en) * 2009-12-02 2011-06-02 Osama Al-Shaykh System and method for transferring media content from a mobile device to a home network

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5787259A (en) * 1996-03-29 1998-07-28 Microsoft Corporation Digital interconnects of a PC with consumer electronics devices
CA2392640A1 (en) 2002-07-05 2004-01-05 Voiceage Corporation A method and device for efficient in-based dim-and-burst signaling and half-rate max operation in variable bit-rate wideband speech coding for cdma wireless systems
WO2005121959A2 (en) 2004-06-08 2005-12-22 Dartdevices Corporation Architecture, apparatus and method for device team recruitment and content renditioning for universal device interoperability platform
US7830826B2 (en) * 2004-07-01 2010-11-09 Nokia Corporation Multicast relay for mobile devices
JP2009123032A (ja) 2007-11-15 2009-06-04 Sharp Corp 携帯端末、および携帯端末の制御方法
US20100169791A1 (en) 2008-12-31 2010-07-01 Trevor Pering Remote display remote control
US8819116B1 (en) * 2010-03-08 2014-08-26 Amazon Technologies, Inc. Providing services using a device capabilities service
JP5005058B2 (ja) 2010-03-18 2012-08-22 シャープ株式会社 情報通信システム、移動体通信端末、制御方法、および情報管理サーバ
CN102255933B (zh) * 2010-05-20 2016-03-30 中兴通讯股份有限公司 云服务中介、云计算方法及云系统
US20120036494A1 (en) * 2010-08-06 2012-02-09 Genwi, Inc. Web-based cross-platform wireless device application creation and management systems, and methods therefor
US8937534B2 (en) * 2010-12-08 2015-01-20 At&T Intellectual Property I, L.P. Remote control of electronic devices via mobile device
KR101850302B1 (ko) * 2011-10-14 2018-04-20 삼성전자주식회사 사용자 단말 장치 및 그 렌더링 장치 제어 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1642126A (zh) * 2004-01-17 2005-07-20 三星电子株式会社 使用数据格式转换设备的有线/无线通信系统
US20110093567A1 (en) * 2009-10-15 2011-04-21 Electronics And Telecommunications Research Institute Mobile terminal for providing mobile cloud service and operation method thereof
US20110131520A1 (en) * 2009-12-02 2011-06-02 Osama Al-Shaykh System and method for transferring media content from a mobile device to a home network

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111918132A (zh) * 2020-07-27 2020-11-10 海信视像科技股份有限公司 一种显示设备及多接口设备判断方法

Also Published As

Publication number Publication date
US11431588B2 (en) 2022-08-30
WO2013118988A1 (en) 2013-08-15
KR101900319B1 (ko) 2018-09-19
EP2813109A4 (en) 2015-11-04
US11032165B2 (en) 2021-06-08
US10142194B2 (en) 2018-11-27
EP2813109B1 (en) 2020-09-02
US20190075034A1 (en) 2019-03-07
US20210297329A1 (en) 2021-09-23
US20130204967A1 (en) 2013-08-08
KR20130090947A (ko) 2013-08-16
EP2813109A1 (en) 2014-12-17

Similar Documents

Publication Publication Date Title
CN104106290A (zh) 互操作地执行服务的方法和装置以及支持该方法和装置的系统
US11349991B2 (en) Systems and methods to present voice message information to a user of a computing device
JP6695092B2 (ja) デバイスがユーザ・インターフェースをディスプレイする方法及びそのデバイス
KR102231754B1 (ko) 디바이스가 사용자 인터페이스를 디스플레이하는 방법 및 그 디바이스
KR102013338B1 (ko) 서비스 페이지 공유 방법과 시스템 및 이를 지원하는 단말기
CN104077026B (zh) 显示用于执行应用的服务页的方法和设备
CN111095892B (zh) 电子装置及其控制方法
US20130268956A1 (en) Real-time collection of audience feedback of a television or radio show
US10091643B2 (en) Method and apparatus for displaying associated information in electronic device
CN111639503B (zh) 会议数据处理方法、装置、存储介质及设备
KR20140119609A (ko) 애플리케이션을 실행하기 위한 페이지를 디스플레이하는 방법 및 디바이스
CN103069374A (zh) 复合属性控制方法及便携式设备
KR20150090357A (ko) 실시간 다국어 번역 서비스 시스템
US8594280B1 (en) Systems and methods for visual presentation and selection of IVR menu
CN111914072A (zh) 一种信息交互方法、设备及装置
KR101336622B1 (ko) 오디오 데이터를 이용한 프레즌스 정보 제공 시스템, 이를 위한 장치 및 이를 위한 방법
US20150052211A1 (en) Message based conversation function execution method and electronic device supporting the same
KR101787918B1 (ko) 검색 방법, 장치, 프로그램 및 저장매체
WO2022072076A1 (en) Context-based voice-related advertisement offers
KR20170124861A (ko) 단말 장치, 검색 서버 및 이에 의한 검색 결과 제공 방법
KR20230091449A (ko) 고객 맞춤형 화면 제공 방법 및 이를 구현하기 위한 시스템
KR20230092291A (ko) 고객 맞춤형 화면 제공 방법 및 이를 구현하기 위한 사용자 단말기
CN116962338A (zh) 对象间互动的方法、装置、电子设备及存储介质
KR20230094683A (ko) 고객 맞춤형 앱 제공 방법 및 이를 구현하기 위한 시스템
CN117640815A (zh) 应用流转方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20141015

RJ01 Rejection of invention patent application after publication