CN110769320B - 一种智能设备分享内容的方法、系统及装置 - Google Patents

一种智能设备分享内容的方法、系统及装置 Download PDF

Info

Publication number
CN110769320B
CN110769320B CN201911133319.0A CN201911133319A CN110769320B CN 110769320 B CN110769320 B CN 110769320B CN 201911133319 A CN201911133319 A CN 201911133319A CN 110769320 B CN110769320 B CN 110769320B
Authority
CN
China
Prior art keywords
content
container
intelligent
client
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911133319.0A
Other languages
English (en)
Other versions
CN110769320A (zh
Inventor
肖鹏
朱昊亮
周智
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN201911133319.0A priority Critical patent/CN110769320B/zh
Publication of CN110769320A publication Critical patent/CN110769320A/zh
Priority to US16/952,313 priority patent/US11936928B2/en
Priority to PCT/KR2020/016386 priority patent/WO2021101275A1/en
Application granted granted Critical
Publication of CN110769320B publication Critical patent/CN110769320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/547—Remote procedure calls [RPC]; Web services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4431—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB characterized by the use of Application Program Interface [API] libraries
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45595—Network integration; Enabling network access in virtual machine instances
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/541—Client-server

Abstract

本发明公开了一种智能设备分享内容的方法、系统及装置，本发明实施例在智能终端中设置虚拟化容器，所述虚拟化容器中安装多个应用程序；在智能媒体设备设置虚拟化容器的客户端；所述智能终端运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备的虚拟化容器的客户端，智能媒体设备播放该内容；智能媒体设备通过该虚拟化容器的客户端，与智能终端的虚拟化容器进行控制交互。这样，在智能设备之间分享内容时，就可以使得其中的智能终端前台无需运行所分享的内容，并且使得其中的智能媒体设备可以播放并操控所分享的内容，提高内容分享的私密性。

Description

一种智能设备分享内容的方法、系统及装置
技术领域
本发明涉及计算机技术领域，特别涉及一种智能设备分享内容的方法、系统及装置。
背景技术
随机计算机技术及互联网技术的发展，越来越多的诸如智能电视及智能手机的智能设备也越来越普及，功能也越来越强大，比如可以将智能手机中的屏幕内容在智能电视中显示。诸如智能电视的智能媒体设备相对于智能终端来说，有着更大的屏幕及更好的观影体验等优势，而智能终端对于智能媒体设备来说又有着便携性、应用程序(APP)生态更完备、强大的中央处理(CPU)、图形处理器(GPU)和内存等优点。将智能终端中诸如音视频内容与智能媒体设备分享，实现智能设备之间的内容分享，成为了一个非常热门的研究课题。
目前，智能设备之间分享内容主要有Miracast技术、数字生活联盟(DLNA)提供的镜像技术、及基于这些技术衍生出来的各种自定义的技术，但是，这些分享内容的技术都不够完美，有其各自的缺陷。以下具体说明。
当采用Miracast技术实现智能设备分享内容时，可以将智能终端的屏幕截屏后的内容投射到智能媒体设备上，智能媒体设备仅仅作为一个显示器，这存在以下缺点：
1)分享内容时，智能终端处于独占状态，用户无法进行其他工作；
2)分享的内容为智能终端的当前屏幕所具有的内容，如果此时智能终端有信息或电话接入显示在智能终端的当前屏幕上，会同步显示在智能媒体设备上，私密性差；
3)内容分享时，用户的视角在智能媒体设备上，显然对于用户来说，操控智能媒体设备更为合理，但此时智能媒体设备仅仅作为显示器存在，没有操控内容的能力；
当采用DLNA技术时，智能终端中设置的应用程序将视频链接传输给智能媒体设备，智能媒体设备只是单纯地播放该视频内容，存在以下缺陷：
1)在智能终端中设置的应用程序需要支持DLNA协议，但是目前很多非视频类的应用程序都不支持，比如office或keep等，其这些不支持DLNA协议的应用程序下的内容无法实现智能终端与智能媒体设备之间的共享；
2)智能媒体设备通过DLNA共享并播放内容时，智能媒体设备无法对智能终端上的运行内容进行操控，比如无法退出当前视频内容播放下一个视频内容等。
综上，智能设备之间分享内容时，存在私密性差、智能终端的前台必须运行分享内容及智能媒体设备无法操控分享内容的缺陷，使得用户的体验度不高。
发明内容
有鉴于此，本发明实施例提供一种智能设备分享内容的方法，该方法在智能设备之间分享内容时，能够使得其中的智能终端前台无需运行分享内容，使得其中的智能媒体设备操控所分享的内容，提高内容分享的私密性。
本发明实施例还提供一种智能设备分享内容的系统，该系统在智能设备之间分享内容时，能够使得其中的智能终端前台无需运行分享内容，使得其中的智能媒体设备操控所分享的内容，提高内容分享的私密性。
本发明实施例还提供一种智能设备分享内容的装置，该装置在智能设备之间分享内容时，能够使得其中的智能终端前台无需运行分享内容，使得其中的智能媒体设备操控所分享的内容，提高内容分享的私密性。
本发明实施例是这样实现的：
一种智能设备分享内容的方法，包括：
在智能终端中设置虚拟化容器，所述虚拟化容器中安装多个应用程序；
智能终端运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端，以使智能媒体设备播放该内容；
智能终端的虚拟化容器接收智能媒体设备设置的虚拟化容器的客户端发送的控制指令，进行控制操作。
所述智能终端中设置虚拟化容器包括：虚拟化容器设置功能、虚拟桌面基础架构服务功能及远程调用服务功能，其中，
虚拟化容器设置功能用于在智能终端设置虚拟化容器；
虚拟桌面基础架构服务功能用于虚拟化容器中运行的应用程序的内容发送到智能媒体设备上；
远程调用服务功能用于接收控制指令，进行控制操作。
所述将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端包括：
该内容进行编码压缩后，通过设置的网络流媒体协议发送给智能媒体设备设置的虚拟化容器的客户端。
所述设置虚拟化容器为多个，分别与不同智能媒体设备所设置的虚拟化容器的客户端之间交互，将不同虚拟化容器中所运行的应用程序的内容发送到对应的智能媒体设备所设置的虚拟化容器的客户端上，分别进行播放及控制。
一种智能设备分享内容的方法，包括：
智能媒体设备设置虚拟化容器的客户端；
智能媒体设备的虚拟化容器的客户端接收智能终端的虚拟化容器中运行的应用程序中的内容，播放该内容；
智能媒体设备的虚拟化容器的客户端发送该内容的控制指令。
在该方法中，所述虚拟化容器的客户端包括设备发现功能、虚拟桌面基础架构客户端功能及远程调用客户端功能，其中，
设备发现功能用于发现同一局域网下设置有虚拟化容器的智能终端；
虚拟桌面基础架构客户端功能用于智能媒体设备在所述虚拟化容器的客户端下接收并播放该内容；
远程调用客户端功能用于智能媒体设备发送该内容的控制指令。
所述发送该内容的控制指令包括：
将该内容的控制指令进行编码后，通过与智能终端之间建立的控制通道发送给智能终端；
所述该内容的控制指令是由智能媒体设备识别智能媒体设备的遥控器的按键事件得到的，或者是智能媒体设备直接生成的。
一种智能设备分享内容的系统，包括：智能媒体设备及智能终端，其中，
智能终端，用于设置虚拟化容器，所述虚拟化容器中安装多个应用程序；运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端；所述虚拟化容器接收智能媒体设备的虚拟化容器的客户端发送的控制指令，进行控制操作；
智能媒体设备，用于设置虚拟化容器的客户端；所述虚拟化容器的客户端接收智能终端的虚拟化容器所运行的应用程序中的内容，播放该内容；所述虚拟化容器的客户端发送该内容的控制指令。
一种智能设备分享内容的装置，包括：第一设置模块及第一处理模块，其中，
第一设置模块，用于设置虚拟化容器，所述虚拟化容器中安装多个应用程序；
第一处理模块，用于运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端；所述虚拟化容器接收智能媒体设备的虚拟化容器的客户端发送的控制指令，进行控制操作。
一种智能设备分享内容的装置，包括：第二设置模块及第二处理模块，其中，
第二设置模块，用于设置虚拟化容器的客户端；
第二处理模块，用于所述虚拟化容器的客户端接收智能终端的虚拟化容器中运行的应用程序中的内容，播放该内容；所述虚拟化容器的客户端发送该内容的控制指令。
如上所见，本发明实施例在智能终端中设置虚拟化容器，所述虚拟化容器中安装多个应用程序；在智能媒体设备设置虚拟化容器的客户端；所述智能终端运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备的虚拟化容器的客户端，智能媒体设备播放该内容；智能媒体设备通过该虚拟化容器的客户端，与智能终端的虚拟化容器进行控制交互。这样，在智能设备之间分享内容时，就可以使得其中的智能终端前台无需运行所分享的内容，并且可以使得其中的智能媒体设备播放并操控所分享的内容，提高内容分享的私密性。
附图说明
图1为本发明实施例提供的智能设备分享内容的方法一流程图；
图2为本发明实施例提供的智能设备分享内容的方法二流程图；
图3为本发明实施例提供的智能设备分享内容的系统结构示意图；
图4为本发明实施例提供的智能设备分享内容的装置一结构示意图；
图5为本发明实施例提供的智能设备分享内容的装置二结构示意图。
图6为本发明实施例提供的具体例子系统架构图；
图7为本发明实施例提供的具体例子处理过程示意图；
图8为本发明实施例提供的虚拟化容器服务后台运行的例子显示示意图；
图9为本发明实施例提供的虚拟化容器服务提供良好私密性的例子显示示意图；
图10为本发明实施例提供的虚拟化容器支持任务多开与电视对内容的控制例子的显示示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白，以下参照附图并举实施例，对本发明进一步详细说明。
从背景技术可以看出，传统的智能设备分享内容时，所分享的内容需要在智能终端的前台运行，所分享内容的私密性差及智能媒体设备无法控制所分享内容。为了解决这个问题，本发明实施例在智能终端中设置虚拟化容器，所述虚拟化容器中安装多个应用程序；在智能媒体设备设置虚拟化容器的客户端；所述智能终端运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备的虚拟化容器的客户端，智能媒体设备播放该内容；智能媒体设备通过该虚拟化容器的客户端，与智能终端的虚拟化容器进行控制交互。这样，在智能设备之间分享内容时，就可以使得其中的智能终端前台无需运行所分享的内容，并且可以使得其中的智能媒体设备播放并操控所分享的内容，提高内容分享的私密性。
智能终端为智能媒体设备提供虚拟化容器服务，所设置的虚拟化容器实际上就是虚拟化容器的服务器端，虚拟化容器是在智能终端中安装并可运行的一个轻量化的虚拟机，可以加载智能终端的操作系统(比如安卓操作系统)的根文件目录(rootfs)，以一个应用程序的形式存在智能终端中。在虚拟化容器中可以安装用户所需的各种类型的应用程序，为智能媒体设备分享所述应用程序相关内容，虚拟化容器服务在智能终端以应用程序(APP)形式存在，在智能终端的后台运行，智能终端在提供虚拟化容器服务时还可以运行其他应用程序。本发明实施例在智能媒体设备上设置的虚拟化容器的客户端具有设备发现功能，该功能运行后发现同一局域网下的智能终端，智能终端通过设置的虚拟化容器与智能媒体设备建立连接后，当虚拟化容器在智能终端的后台运行时，仅将虚拟化容器中运行的应用程序相关内容分享到智能媒体设备的虚拟化容器的客户端上，而不是背景技术中所述的智能终端前台运行的应用程序相关内容或智能终端的用户界面内容，从而很好地保护了用户隐私。
图1为本发明实施例提供的智能设备分享内容的方法一流程图，该方法是由智能终端执行的，其具体步骤为：
步骤101、在智能终端中设置虚拟化容器，所述虚拟化容器中安装多个应用程序；
步骤102、智能终端运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端，以使智能媒体设备播放该内容；
步骤103、智能终端的虚拟化容器接收智能媒体设备设置的虚拟化容器的客户端发送的控制指令，进行控制操作。
所述智能终端中设置虚拟化容器包括：虚拟化容器设置功能、虚拟桌面基础架构服务功能及远程调用服务功能，其中，
虚拟化容器设置功能用于在智能终端设置虚拟化容器；
虚拟桌面基础架构服务功能用于将虚拟化容器中运行的应用程序的内容发送到智能媒体设备上；
远程调用服务功能用于接收控制指令，进行控制操作。
在这里，虚拟桌面基础架构服务功能可以调用智能终端中应用程序编程接口(API)来捕获应用程序在虚拟化容器中运行应用程序的内容，比如捕捉屏幕图片数据，捕捉屏幕方法可以采用多种方式。
举一个例子说明，以应用程序调用surface flinger相关接口为例包括：
虚拟桌面基础架构服务功能调用screenshot.getPixels获取正在运行的应用程序的屏幕图片数据；使用设置的编码方式(比如X264)对这些图片数据进行编码以生成视频流，并使用网络流媒体协议发送给智能媒体设备的虚拟化容器的客户端中，其中的虚拟桌面基础架构客户端功能解码得到视频数据并播放。
在该方法中，所述将其中所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端包括：
该内容进行编码压缩后，通过设置的网络流媒体协议发送给智能媒体设备设置的虚拟化容器的客户端。
在这里，该内容为音视频内容时，则分别在音频和视频打上时间戳，以便智能媒体设备在分享时可以将音视频内容的同步。
在该方法中，所述设置虚拟化容器为多个，分别与不同智能媒体设备所设置的虚拟化容器的客户端之间交互，将不同虚拟化容器下所运行的应用程序的内容发送到对应的智能媒体设备所设置的虚拟化容器的客户端上，进行播放及控制。
在该方法中，所述在智能终端中设置虚拟化容器也可以是在智能媒体设备设置的虚拟化容器的客户端发送的控制指令的控制下完成的。在这种情况下，
智能媒体设备的虚拟化容器的客户端通过所具有的设备发现功能发现同一局域网下的智能终端，然后控制智能终端设置虚拟化容器及后续控制步骤。
在该方法中，所述虚拟化容器可以被设置在智能终端的多种类型的操作系统上，比如安卓操作系统或苹果操作系统等，智能终端可以是手机或平板等，甚至也可以是智能电视。
图2为本发明实施例的智能设备分享内容的方法二流程图，该方法是由智能媒体设备执行的，其具体步骤为：
步骤201、智能媒体设备设置虚拟化容器的客户端；
步骤202、智能媒体设备的虚拟化容器的客户端接收智能终端的虚拟化容器中运行的应用程序中的内容，播放该内容；
步骤203、智能媒体设备的虚拟化容器的客户端发送该内容的控制指令。
在该方法中，所述虚拟化容器的客户端包括设备发现功能、虚拟桌面基础架构客户端功能及远程调用客户端功能，其中，
设备发现功能用于发现同一局域网下设置有虚拟化容器的智能终端；
虚拟桌面基础架构客户端功能使得智能媒体设备在所述虚拟化容器的客户端下接收并播放该内容；
远程调用客户端功能用于智能媒体设备发送该内容的控制指令。
在该方法中，所述发送该内容的控制指令包括：
将该内容的控制指令进行编码后，通过与智能终端之间建立的控制通道发送给智能终端；
所述该内容的控制指令是由由智能媒体设备识别智能媒体设备的遥控器的按键事件得到的，或者是智能媒体设备直接生成的。
在该方法中，所述虚拟化容器的客户端可以被设置在智能媒体设备的多种类型的操作系统上，比如安卓操作系统或苹果操作系统等，智能媒体设备可以是手机、平板或智能电视。
图3为本发明实施例提供的智能设备分享内容的系统结构示意图，包括：智能媒体设备及智能终端，其中，
智能终端，用于设置虚拟化容器，所述虚拟化容器中安装多个应用程序；运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端；所述虚拟化容器接收智能媒体设备的虚拟化容器的客户端发送的控制指令，进行控制操作；
智能媒体设备，用于设置虚拟化容器的客户端；所述虚拟化容器的客户端接收智能终端的虚拟化容器中所运行的应用程序中的内容，播放该内容；所述虚拟化容器的客户端发送该内容的控制指令。
图4为本发明实施例提供的智能设备分享内容的装置一结构示意图，该装置为终端，包括：第一设置模块及第一处理模块，其中，
第一设置模块，用于设置虚拟化容器，所述虚拟化容器中安装多个应用程序；
第一处理模块，用于运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端；所述虚拟化容器接收智能媒体设备的虚拟化容器的客户端发送的控制指令，进行控制操作。
图5为本发明实施例提供的智能设备分享内容的装置二结构示意图，该装置为媒体设备，包括：第二设置模块及第二处理模块，其中，
第二设置模块，用于设置虚拟化容器的客户端；
第二处理模块，用于所述虚拟化容器的客户端接收智能终端的虚拟化容器中运行的应用程序中的内容，播放该内容；所述虚拟化容器的客户端发送该内容的控制指令。
在本发明实施例中，智能终端可以是手机，智能媒体设备可以是电视，以下以手机和电视为例进行详细说明。
以下对本发明实施例进行详细说明。
在手机中设置虚拟化容器，提供虚拟化容器服务。
手机提供的虚拟化容器是虚拟化容器的服务端，主要具有以下三个功能：
虚拟化容器设置功能，运行在手机上的一个虚拟操作系统，能够独立且完整地提供各种类型应用程序的下载、安装、运行、退出或/和删除等一系列操作服务；
虚拟桌面基础架构(VDI，Virtual Desktop Infrastructure)服务(Server)功能，完成虚拟化容器中分享应用程序相关内容的获取，比如分享内容的音视频内容的获取，并通过网络流媒体协议将所述内容发送给电视，由电视基于应用程序完成该内容的渲染和播放；
远程过程调用(RPC，Remote Procedure Call)服务(Server)功能，用于负责处理电视发送的控制指令，将控制指令应用到虚拟化容器中加载的对应应用程序中，进行控制操作。
该例子中，在手机实现虚拟化容器进行内容的分享及控制主要由以下功能完成：
智能终端发现功能，电视发现同一局域网或同一网络下的具有虚拟化容器的手机；
VDI客户端功能，负责接收手机发送的应用程序相关内容，并在媒体中渲染和播放，具体可以负责接收手机发送的音视频内容进行播放，在播放时实现音视频内容的同步；
RPC客户端功能，用于向手机发送控制指令。所述控制指令可以是电视直接发送的，或识别到电视的遥控器的按键事件后生成的，这里不限制。
图6为本发明实施例提供的具体例子系统架构图，在该例子中，假设智能媒体设备为电视，智能终端为手机。
从电视角度来看，一个完整的电视控制手机并完成交互的流程为：
首先，电视和手机需要接入同一局域网中，电视开启MDE服务后，会监测同样接入同一局域网中的具有虚拟化容器的手机，当监测到时，向手机发送设置虚拟化容器的控制消息；
其次，在手机设置虚拟化容器后，电视通过RPC客户端功能发送加载请求到手机上，手机设置的虚拟化容器具有的RPC服务功能接收到该请求后，会控制虚拟化容器运行所需的应用程序。
再次，手机设置的虚拟化容器加载所需应用程序成功后，手机设置的虚拟化容器具有的VDI服务功能同步开始工作，将所述应用程序相关内容，比如音视频内容发送给电视；
最后，电视在虚拟化容器下的VDI客户端功能获取到所述应用程序相关内容后，所述应用程序相关内容播放出来。
在这里，电视在虚拟化容器下的VDI客户端功能也可以识别到电视的遥控器触发的按键事件，生成控制指令发送给手机，手机虚拟化容器下的VDI服务功能处理该控制指令，映射成系统按键事件实现电视对虚拟化容器中运行的应用程序中相关内容的控制。
从手机的角度，一个完整的电视控制手机并完成交互的流程为：
首先，手机设置虚拟化容器，提供虚拟化容器服务，虚拟化容器服务是一个运行在手机的虚拟操作系统，以应用程序的形式存在，支持后台运行；
其次，手机在运行虚拟化容器后，电视通过虚拟化容器下的RPC客户端与手机的虚拟化容器下的RPC服务端之间交互，在虚拟化容器下针对某个应用程序发起下载、安装、运行、退出或/和删除等操作；
最后，手机在虚拟化容器下运行某个应用程序，手机的虚拟化容器下的VDI服务端同步开始工作，向电视提供该应用程序相关内容。手机的虚拟化容器下的VDI服务端主要完成的功能为：将该应用程序相关内容，比如音视频内容编码压缩并通过网络流媒体协议发送给电视，其中的音频流和视频流都需要打上时间戳，以便在电视的播放时可以实现音视频内容的同步。
上述过程的例子如图7所示。
可以看出，整个流程都可以由电视端控制完成，包括流媒体服务器安装、应用程序安装、应用程序播放，应用程序控制，应用程序的卸载，而不需要手机用户参与。
在本发明实施例中，一个智能终端可以设置多个虚拟化容器，每个虚拟化容器提供一个独立的应用程序运行环境，且每个虚拟化容器都可以被同一局域网或同一网络中的智能媒体设备发现，为多个智能媒体设备提供内容。在智能终端设置的多个虚拟化容器后台独立运行，不影响终端用户使用智能终端，一机多用，智能终端当前屏幕不会被分享，保护隐私。
以下举几个具体例子说明本发明实施例。
具体例子一：图8为本发明实施例提供的虚拟化容器服务后台运行的例子显示示意图。在该例子中，人员一在高速公路开车过程中，不方便开启导航，相伴的人员二可以将自己智能终端虚拟化容器中的导航应用程序相关内容投射到人员一的汽车中控屏上；
人员二的智能终端通过虚拟化容器将导航应用程序相关内容投射完成后，则可以将自己智能终端上的虚拟化容器在后台运行，继续使用自己智能终端其他程序，比如在智能终端的用户桌面上播放音视频等。
具体例子二：图8为本发明实施例提供的虚拟化容器服务提供良好私密性的例子显示示意图。在该例子中，会议资料保存在终端的虚拟化容器中，通过虚拟化容器将会议资料投射到大屏幕上；在会议进行中，智能终端的来电或信息不会被投射到大屏幕上，保证智能终端的私密性。
具体例子三：图9为本发明实施例提供的虚拟化容器支持任务多开与电视对内容的控制例子的显示示意图。在该例子中，家中的孩子喜欢看动画片，父母开启其智能终端的一个虚拟化容器，将动画片应用程序投射到电视上给孩子看，孩子可以通过电视遥控器选择自己喜欢的应用程序及视频内容，无需父母在智能终端上的介入；
家中的另一个孩子喜欢打游戏，父母开启智能终端中的另一个虚拟化容器，将游戏应用程序运行后投射到另一台电视中给另一个孩子打游戏。
父母使用智能终端与朋友打电话，彼此互不干扰。
从本发明实施例可以看出，本发明实施例是基于虚拟化容器实现智能媒体设备与智能终端的交互系统，该系统可以支持应用程序后台运行，可以为智能终端用户提供良好的私密性，同时也支持任务多开，而智能终端为主控方，可以很方便地操控智能终端中的应用程序。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (9)

1.一种智能设备分享内容的方法，其特征在于，包括：
在智能终端中设置虚拟化容器，所述虚拟化容器中安装多个应用程序；
智能终端运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端，以使智能媒体设备播放该内容；
智能终端的虚拟化容器接收智能媒体设备设置的虚拟化容器的客户端发送的控制指令，进行控制操作；
所述设置虚拟化容器为多个，分别与不同智能媒体设备所设置的虚拟化容器的客户端之间交互，将不同虚拟化容器中所运行的应用程序的内容发送到对应的智能媒体设备所设置的虚拟化容器的客户端上，分别进行播放及控制。
2.如权利要求1所述的方法，其特征在于，所述智能终端中设置虚拟化容器包括：虚拟化容器设置功能、虚拟桌面基础架构服务功能及远程调用服务功能，其中，
虚拟化容器设置功能用于在智能终端设置虚拟化容器；
虚拟桌面基础架构服务功能用于虚拟化容器中运行的应用程序的内容发送到智能媒体设备上；
远程调用服务功能用于接收控制指令，进行控制操作。
3.如权利要求1所述的方法，其特征在于，所述将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端包括：
该内容进行编码压缩后，通过设置的网络流媒体协议发送给智能媒体设备设置的虚拟化容器的客户端。
4.一种智能设备分享内容的方法，其特征在于，包括：
智能媒体设备设置虚拟化容器的客户端；
智能媒体设备的虚拟化容器的客户端接收智能终端的虚拟化容器中运行的应用程序中的内容，播放该内容；
智能媒体设备的虚拟化容器的客户端发送该内容的控制指令；
其中，智能媒体设备的虚拟化容器的客户端分别与智能终端所设置的对应的虚拟化容器交互，接收智能终端所设置的对应的虚拟化容器中所运行的应用程序的内容，进行播放及控制。
5.如权利要求4所述的方法，其特征在于，在该方法中，所述虚拟化容器的客户端包括设备发现功能、虚拟桌面基础架构客户端功能及远程调用客户端功能，其中，
设备发现功能用于发现同一局域网下设置有虚拟化容器的智能终端；
虚拟桌面基础架构客户端功能用于智能媒体设备在所述虚拟化容器的客户端下接收并播放该内容；
远程调用客户端功能用于智能媒体设备发送该内容的控制指令。
6.如权利要求4所述的方法，其特征在于，所述发送该内容的控制指令包括：
将该内容的控制指令进行编码后，通过与智能终端之间建立的控制通道发送给智能终端；
所述该内容的控制指令是由智能媒体设备识别智能媒体设备的遥控器的按键事件得到的，或者是智能媒体设备直接生成的。
7.一种智能设备分享内容的系统，其特征在于，包括：智能媒体设备及智能终端，其中，
智能终端，用于设置虚拟化容器，所述虚拟化容器中安装多个应用程序；运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端；所述虚拟化容器接收智能媒体设备的虚拟化容器的客户端发送的控制指令，进行控制操作；
智能媒体设备，用于设置虚拟化容器的客户端；所述虚拟化容器的客户端接收智能终端的虚拟化容器所运行的应用程序中的内容，播放该内容；所述虚拟化容器的客户端发送该内容的控制指令；
所述智能终端设置的虚拟化容器为多个，分别与不同智能媒体设备所设置的虚拟化容器的客户端之间交互，将不同虚拟化容器中所运行的应用程序的内容发送到对应的智能媒体设备所设置的虚拟化容器的客户端上，分别进行播放及控制。
8.一种智能设备分享内容的装置，其特征在于，包括：第一设置模块及第一处理模块，其中，
第一设置模块，用于设置虚拟化容器，所述虚拟化容器中安装多个应用程序；
第一处理模块，用于运行所述虚拟化容器中的应用程序，将所述应用程序中的内容发送到智能媒体设备设置的虚拟化容器的客户端；所述虚拟化容器接收智能媒体设备的虚拟化容器的客户端发送的控制指令，进行控制操作；
所述设置的虚拟化容器为多个，分别与不同智能媒体设备所设置的虚拟化容器的客户端之间交互，将不同虚拟化容器中所运行的应用程序的内容发送到对应的智能媒体设备所设置的虚拟化容器的客户端上，分别进行播放及控制。
9.一种智能设备分享内容的装置，其特征在于，包括：第二设置模块及第二处理模块，其中，
第二设置模块，用于设置虚拟化容器的客户端；
第二处理模块，用于所述虚拟化容器的客户端接收智能终端的虚拟化容器中运行的应用程序中的内容，播放该内容；所述虚拟化容器的客户端发送该内容的控制指令；
其中，所述设置的虚拟化容器的客户端分别与智能终端所设置的对应的虚拟化容器交互，接收智能终端所设置的对应的虚拟化容器中所运行的应用程序的内容，进行播放及控制。
CN201911133319.0A 2019-11-19 2019-11-19 一种智能设备分享内容的方法、系统及装置 Active CN110769320B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201911133319.0A CN110769320B (zh) 2019-11-19 2019-11-19 一种智能设备分享内容的方法、系统及装置
US16/952,313 US11936928B2 (en) 2019-11-19 2020-11-19 Method, system and device for sharing contents
PCT/KR2020/016386 WO2021101275A1 (en) 2019-11-19 2020-11-19 Method, system and device for sharing contents

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911133319.0A CN110769320B (zh) 2019-11-19 2019-11-19 一种智能设备分享内容的方法、系统及装置

Publications (2)

Publication Number Publication Date
CN110769320A CN110769320A (zh) 2020-02-07
CN110769320B true CN110769320B (zh) 2021-10-15

Family

ID=69338564

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911133319.0A Active CN110769320B (zh) 2019-11-19 2019-11-19 一种智能设备分享内容的方法、系统及装置

Country Status (3)

Country Link
US (1) US11936928B2 (zh)
CN (1) CN110769320B (zh)
WO (1) WO2021101275A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11461119B2 (en) * 2020-09-15 2022-10-04 Bank Of America Corporation Virtual containers configured to support multiple machine learning models
CN114722384B (zh) * 2022-06-02 2022-08-19 南京中成越科技有限公司 端对端远程通讯的风险数据传输处理方法、系统

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101754466B (zh) * 2008-12-10 2012-09-05 运软网络科技(上海)有限公司 移动虚拟化的基础设施以及基础平台
US9277021B2 (en) * 2009-08-21 2016-03-01 Avaya Inc. Sending a user associated telecommunication address
CN107122168A (zh) * 2010-10-01 2017-09-01 Z124 多操作系统
US10976981B2 (en) * 2011-07-15 2021-04-13 Vmware, Inc. Remote desktop exporting
US20150046599A1 (en) * 2011-09-27 2015-02-12 Google Inc. Multichannel communication systems and methods of using the same
CN102685572B (zh) * 2012-04-28 2017-02-15 Tcl集团股份有限公司 一种电视媒体播放与交互方法及系统
CN102752369B (zh) * 2012-06-04 2015-11-25 北京联诚智胜信息技术有限公司 电视应用服务的提供方法及虚拟化内容服务平台
KR20140011857A (ko) * 2012-07-20 2014-01-29 삼성전자주식회사 이동 단말에서 디스플레이 장치의 디스플레이를 제어하기 위한 방법 및 이를 위한 이동 단말
US9124668B2 (en) * 2013-05-20 2015-09-01 Citrix Systems, Inc. Multimedia redirection in a virtualized environment using a proxy server
US9451043B2 (en) * 2013-09-13 2016-09-20 Evie Labs, Inc. Remote virtualization of mobile apps
EP2996346A1 (en) * 2014-09-12 2016-03-16 Samsung Electronics Co., Ltd. Multi-screen control method and device supporting multiple window applications
CN104391581B (zh) * 2014-12-15 2017-11-21 华勤通讯技术有限公司 移动终端及其应用程序的操作界面的投影方法
US9329762B1 (en) * 2015-06-02 2016-05-03 Interactive Memories, Inc. Methods and systems for reversing editing operations in media-rich projects
KR102651875B1 (ko) * 2016-05-04 2024-03-27 삼성전자주식회사 전자 장치가 외부 장치를 제어하는 방법 및 그 전자 장치
WO2018010023A1 (en) 2016-07-11 2018-01-18 Light Wave Technology Inc. Command relay device, system and method for providing remote assistance / remote control
US10469893B2 (en) * 2016-09-13 2019-11-05 Dvdo, Inc. Integrated cast and sling system and method of its operation in an interoperable multiple display device environment
US10321182B2 (en) * 2016-09-13 2019-06-11 Dvdo, Inc. System and method for real-time transfer and presentation multiple internet of things (IoT) device information on an electronic device based on casting and slinging gesture command
CN109791498A (zh) * 2016-10-06 2019-05-21 伟视达电子工贸有限公司 移动虚拟化
CN106658103A (zh) * 2016-11-15 2017-05-10 乐视控股（北京）有限公司 一种分享视频流数据的方法、源设备及电子设备
US10834164B2 (en) * 2017-02-08 2020-11-10 Wyse Technology L.L.C. Virtualizing audio and video devices using synchronous A/V streaming
US10389832B2 (en) * 2017-02-17 2019-08-20 Wyse Technology L.L.C. Remote casting of media content
US10210030B2 (en) * 2017-07-13 2019-02-19 Cyberark Software Ltd. Securely operating remote cloud-based applications
AU2018217241B2 (en) * 2017-08-14 2023-03-09 Honeywell International Inc. Computer systems, computer implemented methods and computer executable code configured to provide secure PC solutions based on a virtual desktop infrastructure (VDI), including IPTV via VDI
US10609333B2 (en) * 2018-02-19 2020-03-31 Albert Roy Leatherman, III System for interactive online collaboration
US11070630B2 (en) * 2018-05-04 2021-07-20 Citrix Systems, Inc. Computer system providing SAAS application session state migration features and related methods
KR102527824B1 (ko) * 2018-07-31 2023-05-02 삼성전자주식회사 복수의 출력 화면 환경에서 가상 입력 인터페이스의 표시를 제어하기 위한 전자 장치 및 그의 동작 방법
CN109889885A (zh) * 2019-02-27 2019-06-14 努比亚技术有限公司 一种投屏控制方法、终端及计算机可读存储介质
CN111796909B (zh) * 2020-06-24 2024-04-02 浙江大学 一种轻量级移动应用虚拟化系统
KR20220017193A (ko) * 2020-08-04 2022-02-11 삼성전자주식회사 전자 장치 및 전자 장치가 외부 장치 디스플레이 상에 어플리케이션 화면을 제공하는 방법

Also Published As

Publication number Publication date
US11936928B2 (en) 2024-03-19
WO2021101275A1 (en) 2021-05-27
CN110769320A (zh) 2020-02-07
US20210152857A1 (en) 2021-05-20

Similar Documents

Publication Publication Date Title
CN111741372B (zh) 一种视频通话的投屏方法、显示设备及终端设备
US10284644B2 (en) Information processing and content transmission for multi-display
CN110874959B (zh) 一种多终端同屏教学系统及教学方法
CN107371044B (zh) 电子设备互动方法、电子设备、用户终端及服务器
CN111050199B (zh) 显示设备及显示设备蓝牙通信资源的调度方法
CN111803940B (zh) 游戏的处理方法、装置、电子设备及计算机可读存储介质
CN111263233B (zh) 电视多窗口处理方法、装置、计算机设备和存储介质
US9521366B2 (en) Method and apparatus for playing conference signal, video conference terminal, and mobile device
EP3185545A1 (en) Video conference control method and system
CN109194972B (zh) 直播流获取方法、装置、计算机设备及存储介质
CN111478930B (zh) Stb云化方法、系统、瘦stb、虚拟stb及平台、存储介质
CN113209632A (zh) 一种云游戏的处理方法、装置、设备及存储介质
CN112383803B (zh) 信息处理方法及相关装置
CN110769320B (zh) 一种智能设备分享内容的方法、系统及装置
CN103516882B (zh) 一种基于多屏互动场景图片播放方法及系统
WO2022111421A1 (zh) 应用界面投屏方法、装置、设备以及存储介质
CN116366796A (zh) 一种视频通话方法和显示设备
WO2023093698A1 (zh) 游戏直播的交互方法、存储介质、程序产品及电子设备
CN113286190A (zh) 一种跨网络同屏控制方法、装置和跨网络同屏系统
US11671556B2 (en) Method of performing video call and display device
CN112770078B (zh) 一种视频会议终端融合方法、装置及可读存储介质
CN105573180A (zh) 终端控制方法和系统
CN109086123A (zh) 应用会话的迁移方法、装置、终端、服务器及存储介质
CN115379279A (zh) 多屏联动的交互方法及装置、系统、存储介质、电子设备
CN113891162A (zh) 直播间加载方法、装置及计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant