CN113038180A - 智能镜像投屏方法、装置、设备及存储介质 - Google Patents
智能镜像投屏方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113038180A CN113038180A CN202110222520.7A CN202110222520A CN113038180A CN 113038180 A CN113038180 A CN 113038180A CN 202110222520 A CN202110222520 A CN 202110222520A CN 113038180 A CN113038180 A CN 113038180A
- Authority
- CN
- China
- Prior art keywords
- screen projection
- mirror image
- network environment
- video coding
- intelligent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 238000005457 optimization Methods 0.000 claims description 19
- 230000008569 process Effects 0.000 claims description 17
- 238000013507 mapping Methods 0.000 claims description 11
- 230000000694 effects Effects 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000003068 static effect Effects 0.000 description 4
- 238000012795 verification Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000000060 site-specific infrared dichroism spectroscopy Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
本发明属于镜像投屏技术领域，公开了一种智能镜像投屏方法、装置、设备及存储介质。该方法包括：获取当前网络环境信息，根据当前网络环境信息确定镜像投屏模式，根据镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数，将目标投屏参数发送至投屏端，以使投屏端根据目标投屏参数反馈视频编码结果，根据视频编码结果进行镜像投屏。由于本发明是根据网络环境信息确定投屏模式，进而对投屏参数进行调整，以使投屏端根据投屏参数反馈视频编码结果，根据视频编码结果进行镜像投屏，相对于现有的采用固定的投屏参数进行投屏的方式，本发明上述方式能够使镜像投屏的效果更加流畅、降低延迟、提高用户体验。
Description
技术领域
本发明涉及镜像投屏的技术领域，尤其涉及一种智能镜像投屏方法、装置、设备及存储介质。
背景技术
投屏技术是将一个终端(以下称为投屏终端)的屏幕镜像到另一个终端(以下称为被投屏终端)上,例如,将移动终端的屏幕投屏到电脑或电视等终端设备上。这样可以将投屏终端的小屏幕的内容显示到被投屏终端的大屏幕上,并且充分利用小屏幕设备的各种应用，使用户的体验感更强，且保护用户的视力，手机、pad、电脑屏幕镜像到电视上显示是实时音视频投送，对网络环境要求常高，为了低延迟一般情况下没有缓冲和平滑，容易发生卡顿。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供了一种智能镜像投屏方法、装置、设备及存储介质，旨在解决现有技术中镜像投屏时高延迟、不流畅和用户体验不高的技术问题。
为实现上述目的，本发明提供了一种智能镜像投屏方法，所述方法包括以下步骤：
获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式；
根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；
将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果；
根据所述视频编码结果进行镜像投屏。
优选地，所述根据所述视频编码结果进行镜像投屏的步骤之后，还包括：
实时获取镜像投屏过程中的网络动态信息；
根据所述网络动态信息确定预调整投屏参数，并将所述预调整投屏参数发送至所述投屏端，以使所述投屏端根据所述预调整投屏参数进行视频编码并反馈动态视频编码结果；
根据所述动态视频编码结果进行镜像投屏。
优选地，所述目标投屏参数包括：图像分辨率和视频编码码率；
所述将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果的步骤，包括：
将所述图像分辨率和所述视频编码码率通过预设投屏协议发送至所述投屏端，以使所述投屏端根据所述图像分辨率和所述视频编码码率进行视频编码并通过所述预设投屏协议反馈视频编码结果。
优选地，所述获取当前网络环境信息的步骤之前，还包括：
在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式；
在处于智能优化模式时，执行所述获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式的步骤。
优选地，所述在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式的步骤之前，还包括：
获取历史网络信息中的网络吞吐量和网络拓扑信息
所述根据所述当前网络环境信息确定镜像投屏模式，包括：
根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式。
优选地，所述在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式的步骤之后，还包括：
在未处于所述智能优化模式时，获取所述投屏端基于内置投屏编码参数进行视频编码后对应的原始视频编码结果；
根据所述原始视频编码结果进行镜像投屏。
优选地，所述根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式的步骤，包括：
根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景；
获取所述网络环境场景对应的场景标识，根据所述场景标识在预设映射关系表中查找对应的镜像投屏模式。
此外，为实现上述目的，本发明还提供一种智能镜像投屏装置，所述装置包括获取模块、调整模块、编码模块和投屏模块；
所述获取模块，用于获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式；
所述调整模块，用于根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；
所述编码模块，用于将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果；
所述投屏模块，用于根据所述视频编码结果进行镜像投屏。
此外，为实现上述目的，本发明还提出一种智能镜像投屏设备，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的智能镜像投屏程序，所述智能镜像投屏程序配置为实现如上文所述的智能镜像投屏方法的步骤。
此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有智能镜像投屏程序，所述智能镜像投屏程序被处理器执行时实现如上文所述的智能镜像投屏方法的步骤。
本发明获取当前网络环境信息，根据当前网络环境信息确定镜像投屏模式；根据镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；将目标投屏参数发送至投屏端，以使投屏端根据目标投屏参数反馈视频编码结果；根据视频编码结果进行镜像投屏。由于本发明是根据网络环境信息确定投屏模式，进而对投屏参数进行调整，以使投屏端根据投屏参数反馈视频编码结果，根据视频编码结果进行镜像投屏，相对于现有的采用固定的投屏参数进行投屏的方式，本发明上述方式能够使镜像投屏的效果更加流畅、降低延迟、提高用户体验。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的智能镜像投屏设备的结构示意图；
图2为本发明智能镜像投屏方法第一实施例的流程示意图；
图3为本发明智能镜像投屏方法第二实施例的流程示意图；
图4为本发明智能镜像投屏方法第三实施例的流程示意图；
图5为本发明智能镜像投屏装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
参照图1，图1为本发明实施例方案涉及的硬件运行环境的智能镜像投屏设备结构示意图。
如图1所示，该智能镜像投屏设备可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(WIreless-FIdelity，WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory，RAM)存储器，也可以是稳定的非易失性存储器(Non-Volatile Memory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的结构并不构成对智能镜像投屏设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、数据存储模块、网络通信模块、用户接口模块以及智能镜像投屏程序。
在图1所示的智能镜像投屏设备中，网络接口1004主要用于与网络服务器进行数据通信；用户接口1003主要用于与用户进行数据交互；本发明智能镜像投屏设备中的处理器1001、存储器1005可以设置在智能镜像投屏设备中，所述智能镜像投屏设备通过处理器1001调用存储器1005中存储的智能镜像投屏程序，并执行本发明实施例提供的智能镜像投屏方法。
基于上述智能镜像投屏设备，本发明实施例提供了一种智能镜像投屏方法，参照图2，图2为本发明智能镜像投屏方法第一实施例的流程示意图。
本实施例中，所述智能镜像投屏方法包括以下步骤：
步骤S10：获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式。
需要说明的是，本实施例的执行主体可以是一种具有网络通信以及程序运行的显示设备，例如手机、电脑、电视以及智能大屏等。以下以所述智能大屏为例，对本实施例及下述各实施例进行说明。
需要说明的是，所述当前网络环境信息可以是所述当前网络环境中的静态信息和动态信息，所述静态信息可以是路由器SSID信息、路由器BSSID/MAC信息、Wi-Fi工作频段信息、Wi-Fi工作信道信息、所述智能大屏支持的协议信息以及协议的加密类型、所述智能大屏支持的网关信息以及网络拓扑信息等，或者是所述智能大屏所处于的当前网络环境中的网络设备的静态参数信息等，所述动态信息可以是所述智能大屏当前的信号强度、连接速度、网络延迟、网络吞吐量以及可能影响智能镜像投屏的投屏效果的信息等，本实施例在此不加以限制，所述镜像投屏模式可以是匹配当前的网络环境信息的投屏模式。所述镜像投屏模式可以包括为了使在当前网络环境下的镜像投屏效果更好，更加流畅所对应的镜像投屏参数，所述镜像投屏参数可以是图像分辨率参数信息以及视频编码码率等参数信息。
步骤S20：根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数。
需要说明的是，所述预设投屏参数可以是所述镜像投屏模式中对应的为了使在当前网络环境下的镜像投屏效果更好，更加流畅所对应的镜像投屏参数以及对应的参数值，所述当前投屏参数可以是所述智能大屏中当前的投屏参数以及参数值，所述根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整可以是用所述预设投屏参数替换所述当前投屏参数，将替换后的投屏参数作为所述目标投屏参数。
步骤S30：将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果。
需要说明的是，所述投屏端可以是手机，电脑等具有网络通信的计算机服务设备，也可以是其他需要将内容投屏至所述智能大屏的设备，本实施例在此不加以限制，所述目标投屏参数包括：图像分辨率和视频编码码率。所述目标投屏参数的作用是使所述投屏端根据所述目标投屏参数进行视频编码，得到视频编码结果，所述视频编码可以是通过压缩技术，将原始视频格式的文件转换成另一种视频格式文件。
进一步的，为了使镜像投屏的效果更加流畅并降低延迟，所述将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果的步骤，包括：将所述图像分辨率和所述视频编码码率通过预设投屏协议发送至所述投屏端，以使所述投屏端根据所述图像分辨率和所述视频编码码率进行视频编码并通过所述预设投屏协议反馈视频编码结果。
需要说明的是，所述预设投屏协议可以是Airplay、MirrorMiracast以及私有自定义协议等，所述图像分辨率可以是图像中存储的信息量，是每英寸图像内有多少个像素点，图像分辨率用来改变图像的清晰度。所述视频编码码率就是数据传输时单位时间传送的数据位数，单位是千位每秒。所述根据所述目标投屏参数反馈视频编码结果可以是使所述投屏端根据所述图像分辨率和所述视频编码码率进行视频编码，从而获得编码后的视频编码结果，其中，若镜像投屏内容为带声音的视频投屏时，所述目标投屏参数还可以包括音频编码格式，采样率等参数，当采用私有的视频编码器时还可以采用其他的编码规格和编码工具等，本实施例在此不加以限制。
在具体实施中，智能大屏将所述目标投屏参数通过预设投屏协议发送至所述投屏端，所述投屏端接收所述目标投屏参数，根据所述目标投屏参数将需要进行镜像投屏的视频以及音频进行视频编码，获得视频编码结果，将所述视频编码结果反馈至所述智能大屏。
步骤S40：根据所述视频编码结果进行镜像投屏。
在具体实施中，智能大屏接收所述投屏端反馈的视频编码结果，并根据所述视频编码结果进行镜像投屏。
进一步的，为了提高用户体验感，在所述获取当前网络环境信息的步骤之前，还包括：在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式；在处于智能优化模式时，执行所述获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式的步骤。
需要说明的是，所述投屏请求指令可以是投屏端发送的请求连接智能大屏的指令，所述指令可以包括验证信息，所述智能大屏接收到所述投屏请求指令时，根据里面包含的验证信息进行验证，验证通过后，与所述投屏端建立连接，所述智能优化模式即为本实施例中所述的智能镜像投屏方法对应的模式，只有在智能优化模式下，才执行本实施例中的获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式的步骤。在未处于所述智能优化模式时，获取所述投屏端基于内置投屏编码参数进行视频编码后对应的原始视频编码结果，根据所述原始视频编码结果进行镜像投屏。
进一步的，为了节约智能大屏获取以及测量当前网络环境信息的时间和使获取的网络环境信息准确性更高，所述在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式的步骤之前，还包括：
步骤S01：获取历史网络信息中的网络吞吐量和网络拓扑信息。
需要说明的是，所述历史网络信息可以包括所述当前网络环境信息中的静态信息以及动态信息，所述网络吞吐量表示在单位时间内通过某个网络(或信道、接口)的数据量。吞吐量受网络的带宽或网络的额定速率的限制。网络吞吐量非常依赖于当前的网络负载情况。因此，不同运行时间测试的吞吐量结果不同。所述网络拓信息指当前的网络拓扑结构，可以是用传输媒体互连各种设备的物理布局，即用什么方式把网络中的计算机等设备连接起来，因为在实际测量过程中，所述网络吞吐量和网络拓扑信息可能会浪费大量的时间，所述可以采用历史网络信息中测量的网络吞吐量和网络拓扑信息，从而节约智能大屏获取以及测量当前网络环境信息的时间。
相应的，所述步骤S10，包括：
步骤S101：获取当前网络环境信息。
步骤S102：根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式。
需要说明的是，为了获得更加符合当前网络环境的网络吞吐量和网络拓扑信息，也可以不使用历史网络信息中测量的网络吞吐量和网络拓扑信息，而选择重新测量当前网络环境信息中的网络吞吐量和网络拓扑信息，本实施例在此不加以限制。所述网络环境场景可以是根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息的特征进行分析而划分的网络场景，预置的典型网络场景示例：家庭环境采用最新协议路由器高带宽低延迟场景、家庭环境2.4G路由器带宽一般场景、工作环境wifi环境复杂，信号干扰大场景等，因为所述当前网络环境信息是不断变化的，所述网络场景也不可能一一提前列举，因此，所述网络场景也可以是根据当前网络环境的信息重新生成的网络环境场景，所述镜像投屏模式包括各个投屏参数以及所对应的参数值，例如，当网络环境场景为2.4G路由器带宽一般场景时，其对应的镜像投屏模式为以图像分辨率1280*720，视频编码码率600kbps进行视频编码。
应理解的是，所述根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式可以是获取所述网络环境场景对应的场景标识，根据所述场景标识在预设映射关系表中查找对应的镜像投屏模式。
需要说明的是，所述场景标识可以是所述网络环境场景对应的唯一标识，可以是所述网络环境场景对应的序号，分类号等，本实施例在此不加以限制，所述预设映射关系表可以是存储所述网络环境场景和镜像投屏模式的关系表。
本实施例通过获取当前网络环境信息，根据当前网络环境信息确定镜像投屏模式；根据镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；将目标投屏参数发送至投屏端，以使投屏端根据目标投屏参数反馈视频编码结果；根据视频编码结果进行镜像投屏。由于本实施例是根据网络环境信息确定投屏模式，进而对投屏参数进行调整，以使投屏端根据投屏参数反馈视频编码结果，根据视频编码结果进行镜像投屏，相对于现有的采用固定的投屏参数进行投屏的方式，本实施例能够使镜像投屏的效果更加流畅、降低延迟、提高用户体验。
参考图3，图3为本发明智能镜像投屏方法第二实施例的流程示意图。
基于上述第一实施例，在本实施例中，在所述步骤S40之后，所述智能镜像投屏方法包括：
步骤S50：实时获取镜像投屏过程中的网络动态信息。
需要说明的是，所述网络动态信息可以是投屏过程中的信号强度、连接速度、网络延迟、网络吞吐量以及投屏过程中的显示效果信息等，
应理解的是，在镜像投屏过程中，所述网络动态信息可能发生改变，进而导致镜像投屏效果可能发生波动，因此，此实施例在镜像投屏过程中实时获取网络动态信息，保证镜像投屏过程中的投屏效果。
步骤S60：根据所述网络动态信息确定预调整投屏参数，并将所述预调整投屏参数发送至所述投屏端，以使所述投屏端根据所述预调整投屏参数进行视频编码并反馈动态视频编码结果。
需要说明的是，所述预调整投屏参数包括：图像分辨率和视频编码码率。所述预调整投屏参数的作用是在投屏过程中使所述投屏端根据所述预调整投屏参数进行视频编码，得到动态视频编码结果，所述动态视频编码结果可以是在投屏过程中所述投屏端根据智能大屏发送的预调整投屏参数进行视频编码而获得的视频编码结果。
步骤S70：根据所述动态视频编码结果进行镜像投屏。
在具体实施中，当智能大屏检测到当前的信号强度有所降低，或者是网络出现了延迟，则分析在当前的信号强度下保证视频不出现延迟以及卡顿时，可以接受的最高图像分辨率为多少，例如，当前信号强度为-67dBm，当前图像分辨率为1920*1080，当智能大屏检测到信号强度降低为-90dBm时，为了保证镜像投屏过程的连续性，当前的图像分辨率最少需要降为1280*720，此时，将所述图像分辨率1280*720发送至投屏端，以使所述投屏端根据分辨率1280*720进行视频编码，获得视频编码结果，并将所述视频编码结果发送至智能大屏。
本实施例实时获取镜像投屏过程中的网络动态信息；根据所述网络动态信息确定预调整投屏参数，并将所述预调整投屏参数发送至所述投屏端，以使所述投屏端根据所述预调整投屏参数进行视频编码并反馈动态视频编码结果；根据所述动态视频编码结果进行镜像投屏。本实施例通过在投屏过程中获取网络动态信息，根据网络动态信息确定预调整投屏参数，进而使投屏端根据所述预调整投屏参数进行视频编码，使得镜像投屏过程中，即使网络状态发生波动，也能较好的保证镜像投屏的效果，优化投屏过程中出现延迟、卡顿的现象，提高用户体验感。
参考图4，图4为本发明智能镜像投屏方法第三实施例的流程示意图。
基于上述各实施例，在本实施例中，在所述步骤S102之后,所述方法还包括：
步骤S103：若否，则根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息生成新网络环境场景。
应理解的是，在根据所述网络环境场景从所述映射关系表中未匹配到所述网络环境场景对应的镜像投屏模式时，此时，需要根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息生成新网络环境场景。
步骤S104：根据所述新网络环境场景对应的场景特征匹配满足预设条件的目标镜像投屏参数。
应理解的是，所述新网络环境场景对应的场景特征可以是所述新网络环境场景的信号强度以及路由器的规格等特征，所述预设条件可以是自定义的使镜像投屏过程流畅，不出现卡顿，或者是分辨率达到一定值等条件，本实施例在此不加以限制，所述目标镜像投屏参数可以是满足所述预设条件的投屏参数。
步骤S105：将所述新网络环境场景和所述目标镜像投屏参数进行关联后存储至所述预设映射关系表中。
需要说明的是，所述将所述新网络环境场景和所述目标镜像投屏参数进行关联可以是将所述新网络环境场景和目标镜像投屏参数对应的新镜像投屏模式进行一一对应的关联，并存储至所述预设映射关系表中。以使可以根据所述新网络环境场景从所述映射关系表中查找到所述新网络环境场景对应的新镜像投屏模式，进而获得所述新镜像投屏模式对应的所述目标镜像投屏参数，使得下次若有相同的网络环境场景，可以直接匹配对应的镜像投屏模式。
本实施例在根据所述网络环境场景从所述映射关系表中未匹配到所述网络环境场景对应的镜像投屏模式时，根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息生成新网络环境场景；根据所述新网络环境场景对应的场景特征匹配满足预设条件的目标镜像投屏参数；将所述新网络环境场景和所述目标镜像投屏参数进行关联后存储至所述预设映射关系表中。本实施例通过上述方式，不仅生成了当前的镜像投屏模式，还将所述新网络环境场景和对应的镜像投屏模式存储至所述预设映射关系表中，使得下次若有相同的网络环境场景，可以直接匹配对应的镜像投屏模式。
参照图5，图5为本发明智能镜像投屏装置第一实施例的结构框图。
如图5所示，本发明实施例提出的智能镜像投屏装置包括获取模块10、调整模块20、编码模块30和投屏模块40；
所述获取模块10，用于获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式；
所述调整模块20，用于根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；
所述编码模块30，用于将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果；
所述投屏模块40，用于根据所述视频编码结果进行镜像投屏。
本实施例通过获取当前网络环境信息，根据当前网络环境信息确定镜像投屏模式；根据镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；将目标投屏参数发送至投屏端，以使投屏端根据目标投屏参数反馈视频编码结果；根据视频编码结果进行镜像投屏。由于本实施例是根据网络环境信息确定投屏模式，进而对投屏参数进行调整，以使投屏端根据投屏参数反馈视频编码结果，根据视频编码结果进行镜像投屏，相对于现有的采用固定的投屏参数进行投屏的方式，本实施例能够使镜像投屏的效果更加流畅、降低延迟、提高用户体验。
需要说明的是，以上所描述的工作流程仅仅是示意性的，并不对本发明的保护范围构成限定，在实际应用中，本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的，此处不做限制。
另外，未在本实施例中详尽描述的技术细节，可参见本发明任意实施例所提供的参数运行方法，此处不再赘述。
基于本发明上述智能镜像投屏装置第一实施例，提出本发明智能镜像投屏装置的第二实施例。
在本实施例中，所述投屏模块40，还用于实时获取镜像投屏过程中的网络动态信息；根据所述网络动态信息确定预调整投屏参数，并将所述预调整投屏参数发送至所述投屏端，以使所述投屏端根据所述预调整投屏参数进行视频编码并反馈动态视频编码结果；根据所述动态视频编码结果进行镜像投屏。
进一步的，所述编码模块30，还用于将所述图像分辨率和所述视频编码码率通过预设投屏协议发送至所述投屏端，以使所述投屏端根据所述图像分辨率和所述视频编码码率进行视频编码并通过所述预设投屏协议反馈视频编码结果。
进一步的，所述获取模块10，还用于在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式；在处于智能优化模式时，执行所述获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式的步骤。
进一步的，所述获取模块10，还用于根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式。
进一步的，所述获取模块10，还用于在未处于所述智能优化模式时，获取所述投屏端基于内置投屏编码参数进行视频编码后对应的原始视频编码结果；根据所述原始视频编码结果进行镜像投屏。
进一步的，所述获取模块10，还用于根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景；获取所述网络环境场景对应的场景标识，根据所述场景标识在预设映射关系表中查找对应的镜像投屏模式。
本发明智能镜像投屏装置的其他实施例或具体实现方式可参照上述各方法实施例，此处不再赘述。
此外，本发明实施例还提出一种存储介质，所述存储介质上存储有智能镜像投屏程序，所述智能镜像投屏程序被处理器执行时实现如上文所述的智能镜像投屏方法的步骤。
此外，本发明实施例还提出一种智能镜像投屏设备，所述智能镜像投屏设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的智能镜像投屏程序，所述智能镜像投屏程序被所述处理器执行时实现上文所述的智能镜像投屏方法的步骤。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种智能镜像投屏方法，其特征在于，所述智能镜像投屏方法包括以下步骤：
获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式；
根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；
将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果；
根据所述视频编码结果进行镜像投屏。
2.如权利要求1所述的智能镜像投屏方法，其特征在于，所述根据所述视频编码结果进行镜像投屏的步骤之后，还包括：
实时获取镜像投屏过程中的网络动态信息；
根据所述网络动态信息确定预调整投屏参数，并将所述预调整投屏参数发送至所述投屏端，以使所述投屏端根据所述预调整投屏参数进行视频编码并反馈动态视频编码结果；
根据所述动态视频编码结果进行镜像投屏。
3.如权利要求1所述的智能镜像投屏方法，其特征在于，所述目标投屏参数包括：图像分辨率和视频编码码率；
所述将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果的步骤，包括：
将所述图像分辨率和所述视频编码码率通过预设投屏协议发送至所述投屏端，以使所述投屏端根据所述图像分辨率和所述视频编码码率进行视频编码并通过所述预设投屏协议反馈视频编码结果。
4.如权利要求1所述的智能镜像投屏方法，其特征在于，所述获取当前网络环境信息的步骤之前，还包括：
在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式；
在处于智能优化模式时，执行所述获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式的步骤。
5.如权利要求4所述的智能镜像投屏方法，其特征在于，所述在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式的步骤之前，还包括：
获取历史网络信息中的网络吞吐量和网络拓扑信息；
所述根据所述当前网络环境信息确定镜像投屏模式，包括：
根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式。
6.如权利要求5所述的智能镜像投屏方法，其特征在于，所述在接收到投屏端的投屏请求指令时，判断当前投屏模式是否处于智能优化模式的步骤之后，还包括：
在未处于所述智能优化模式时，获取所述投屏端基于内置投屏编码参数进行视频编码后对应的原始视频编码结果；
根据所述原始视频编码结果进行镜像投屏。
7.如权利要求6所述的智能镜像投屏方法，其特征在于，所述根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景，并匹配所述网络环境场景对应的镜像投屏模式的步骤，包括：
根据所述当前网络环境信息、所述网络吞吐量和所述网络拓扑信息确定网络环境场景；
获取所述网络环境场景对应的场景标识，根据所述场景标识在预设映射关系表中查找对应的镜像投屏模式。
8.一种智能镜像投屏装置，其特征在于，所述智能镜像投屏装置包括获取模块、调整模块、编码模块和投屏模块；
所述获取模块，用于获取当前网络环境信息，根据所述当前网络环境信息确定镜像投屏模式；
所述调整模块，用于根据所述镜像投屏模式对应的预设投屏参数对当前投屏参数进行调整，获得目标投屏参数；
所述编码模块，用于将所述目标投屏参数发送至所述投屏端，以使所述投屏端根据所述目标投屏参数反馈视频编码结果；
所述投屏模块，用于根据所述视频编码结果进行镜像投屏。
9.一种智能镜像投屏设备，其特征在于，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的智能镜像投屏程序，所述智能镜像投屏程序配置为实现如权利要求1至7中任一项所述的智能镜像投屏方法的步骤。
10.一种存储介质，其特征在于，所述存储介质上存储有智能镜像投屏程序，所述智能镜像投屏程序被处理器执行时实现如权利要求1至7任一项所述的智能镜像投屏方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110222520.7A CN113038180A (zh) | 2021-02-26 | 2021-02-26 | 智能镜像投屏方法、装置、设备及存储介质 |
| PCT/CN2021/141874 WO2022179288A1 (zh) | 2021-02-26 | 2021-12-28 | 智能镜像投屏方法、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110222520.7A CN113038180A (zh) | 2021-02-26 | 2021-02-26 | 智能镜像投屏方法、装置、设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113038180A true CN113038180A (zh) | 2021-06-25 |
Family
ID=76464858
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110222520.7A Pending CN113038180A (zh) | 2021-02-26 | 2021-02-26 | 智能镜像投屏方法、装置、设备及存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113038180A (zh) |
| WO (1) | WO2022179288A1 (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113992967A (zh) * | 2021-10-25 | 2022-01-28 | 北京字节跳动网络技术有限公司 | 一种投屏数据传输方法、装置、电子设备及存储介质 |
| CN114339183A (zh) * | 2021-12-30 | 2022-04-12 | 深圳迈瑞动物医疗科技有限公司 | 一种内窥镜系统及其投屏方法 |
| CN114501122A (zh) * | 2022-01-30 | 2022-05-13 | 深圳创维－Rgb电子有限公司 | 音频数据的投屏方法、装置、存储介质和投屏器 |
| WO2022179288A1 (zh) * | 2021-02-26 | 2022-09-01 | 深圳创维－Rgb电子有限公司 | 智能镜像投屏方法、设备及存储介质 |
| CN116055693A (zh) * | 2022-07-21 | 2023-05-02 | 荣耀终端有限公司 | 投屏方法、电子设备、系统及计算机可读存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20200014963A1 (en) * | 2018-07-03 | 2020-01-09 | Qualcomm Incorporated | Latency improvement via frame latency feedback |
| CN111147892A (zh) * | 2018-11-02 | 2020-05-12 | 北京松果电子有限公司 | 用于视频传输的方法和装置，存储介质和电子设备 |
| CN111417006A (zh) * | 2020-04-28 | 2020-07-14 | 广州酷狗计算机科技有限公司 | 视频投屏方法、装置、终端及存储介质 |
| CN111506282A (zh) * | 2020-04-21 | 2020-08-07 | 深圳市鸿合创新信息技术有限责任公司 | 一种显示参数调整方法、装置、连接设备及存储介质 |
| CN112346692A (zh) * | 2020-11-09 | 2021-02-09 | 深圳康佳电子科技有限公司 | 一种投屏数据处理方法、设备及存储介质 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9648363B2 (en) * | 2012-09-28 | 2017-05-09 | Marvell World Trade Ltd. | Enhanced user experience for miracast devices |
| CN112399215A (zh) * | 2020-10-26 | 2021-02-23 | 努比亚技术有限公司 | 一种投屏参数调控方法、设备及计算机可读存储介质 |
| CN113038180A (zh) * | 2021-02-26 | 2021-06-25 | 深圳创维－Rgb电子有限公司 | 智能镜像投屏方法、装置、设备及存储介质 |
-
2021
- 2021-02-26 CN CN202110222520.7A patent/CN113038180A/zh active Pending
- 2021-12-28 WO PCT/CN2021/141874 patent/WO2022179288A1/zh active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20200014963A1 (en) * | 2018-07-03 | 2020-01-09 | Qualcomm Incorporated | Latency improvement via frame latency feedback |
| CN111147892A (zh) * | 2018-11-02 | 2020-05-12 | 北京松果电子有限公司 | 用于视频传输的方法和装置，存储介质和电子设备 |
| CN111506282A (zh) * | 2020-04-21 | 2020-08-07 | 深圳市鸿合创新信息技术有限责任公司 | 一种显示参数调整方法、装置、连接设备及存储介质 |
| CN111417006A (zh) * | 2020-04-28 | 2020-07-14 | 广州酷狗计算机科技有限公司 | 视频投屏方法、装置、终端及存储介质 |
| CN112346692A (zh) * | 2020-11-09 | 2021-02-09 | 深圳康佳电子科技有限公司 | 一种投屏数据处理方法、设备及存储介质 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022179288A1 (zh) * | 2021-02-26 | 2022-09-01 | 深圳创维－Rgb电子有限公司 | 智能镜像投屏方法、设备及存储介质 |
| CN113992967A (zh) * | 2021-10-25 | 2022-01-28 | 北京字节跳动网络技术有限公司 | 一种投屏数据传输方法、装置、电子设备及存储介质 |
| CN113992967B (zh) * | 2021-10-25 | 2022-11-01 | 北京字节跳动网络技术有限公司 | 一种投屏数据传输方法、装置、电子设备及存储介质 |
| CN114339183A (zh) * | 2021-12-30 | 2022-04-12 | 深圳迈瑞动物医疗科技有限公司 | 一种内窥镜系统及其投屏方法 |
| CN114501122A (zh) * | 2022-01-30 | 2022-05-13 | 深圳创维－Rgb电子有限公司 | 音频数据的投屏方法、装置、存储介质和投屏器 |
| CN116055693A (zh) * | 2022-07-21 | 2023-05-02 | 荣耀终端有限公司 | 投屏方法、电子设备、系统及计算机可读存储介质 |
| CN116055693B (zh) * | 2022-07-21 | 2024-04-02 | 荣耀终端有限公司 | 投屏方法、电子设备、系统及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2022179288A1 (zh) | 2022-09-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113038180A (zh) | 智能镜像投屏方法、装置、设备及存储介质 | |
| US8856349B2 (en) | Connection priority services for data communication between two devices | |
| US10194180B2 (en) | Systems and methods for transmitting video data over a network | |
| AU2021277736A1 (en) | Pdu type setting method, ue policy setting method, and related entity | |
| US8478236B2 (en) | User profile based content delivery between a standard handset and a Femtocell device | |
| US10575300B2 (en) | Bandwidth control method and bandwidth control device | |
| KR101706388B1 (ko) | 어플리케이션 서비스 제공 방법, 장치 및 이를 제공하는 시스템 | |
| CN109041140B (zh) | 快速切换无线网络方法、智能硬件及终端设备 | |
| JP2004128860A (ja) | 記憶容量管理装置、記憶容量管理システム、記憶容量管理方法および記憶容量管理プログラム | |
| EP2137883A2 (en) | Method of transmitting data in a communication system | |
| CN109379498B (zh) | 电磁干扰控制方法及相关装置 | |
| CN103702061A (zh) | 一种智能终端视频通话分辨率自动调节方法 | |
| EP2445142A1 (en) | Dynamic bandwidth adjustment for multiple service support | |
| US20160294711A1 (en) | Method and apparatus for acquiring video bitstream | |
| US9204483B1 (en) | Methods for obtaining a mobile internet protocol address | |
| CN111742530B (zh) | 流传输数据的方法、提供网络辅助的方法以及用户设备 | |
| KR101500118B1 (ko) | 데이터 공유 방법 및 이를 이용한 데이터 공유 시스템 | |
| KR102047846B1 (ko) | 통신 시스템에서 콘텐츠 제공 방법 및 장치 | |
| US20160157104A1 (en) | Spectrum update usage method and system, and white space device | |
| KR101897539B1 (ko) | 데이터 전송 방법 및 장치 | |
| CN114466230B (zh) | 显示设备功能拓展方法、装置、投屏器及存储介质 | |
| CN111163493B (zh) | 通信配置方法、系统和相关设备 | |
| CN112738568B (zh) | 码率的调整方法、音视频服务器端、接收端及发送端 | |
| US20230041047A1 (en) | Method and apparatus for acquiring location information, device, and storage medium | |
| JP2014241552A (ja) | 圧縮指示装置、配信システム、圧縮指示方法、及び、圧縮指示プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210625 |