CN115767159A - 投屏方法、装置、电子设备及存储介质 - Google Patents
投屏方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN115767159A CN115767159A CN202211437996.3A CN202211437996A CN115767159A CN 115767159 A CN115767159 A CN 115767159A CN 202211437996 A CN202211437996 A CN 202211437996A CN 115767159 A CN115767159 A CN 115767159A
- Authority
- CN
- China
- Prior art keywords
- screen projection
- playing
- video data
- screen
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 94
- 238000012545 processing Methods 0.000 claims abstract description 69
- 238000005266 casting Methods 0.000 claims description 42
- 230000015654 memory Effects 0.000 claims description 31
- 238000004590 computer program Methods 0.000 claims description 8
- 230000006835 compression Effects 0.000 claims description 7
- 238000007906 compression Methods 0.000 claims description 7
- 238000012546 transfer Methods 0.000 claims description 5
- 230000006870 function Effects 0.000 description 13
- 230000001502 supplementing effect Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000001360 synchronised effect Effects 0.000 description 4
- 239000000872 buffer Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013145 classification model Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Abstract
本公开实施例涉及一种投屏方法、装置、电子设备及存储介质，上述方法包括：获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。由此方法，无需依赖投屏发送端的倍速播放功能，也可以实现目标视频的倍速播放。
Description
技术领域
本公开涉及计算机技术领域，尤其涉及一种投屏方法、装置、电子设备及存储介质。
背景技术
投屏，是将投屏发送端(如手机、电脑)的画面实时地显示在投屏接收端(如投影机、会议平板、拼接屏、电子白板、电视机)上的技术。
现有的投屏方案，通常只能将投屏内容实时传输到投屏接收端进行播放。这种方案无法对投屏内容进行降速或者加速播放。但倍速播放在诸如线上学习或者快速浏览视频内容的场景下，是一种常用的功能。此外，目前的倍速播放功能通常设置于投屏发送端，因而，使用倍速播放功能对投屏发送端的软硬件等方面的要求较高。
可见，如何不依赖投屏发送端的倍速播放功能实现倍速播放，是一个值得关注的问题。
发明内容
鉴于此，为解决上述部分或全部技术问题，本公开实施例提供一种投屏方法、装置、电子设备及存储介质。
第一方面，本公开实施例提供一种投屏方法，所述方法应用于投屏中转端，所述方法包括：
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
在一个可能的实施方式中，所述视频数据包括图像数据和音频数据；以及
所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据。
在一个可能的实施方式中，所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的视频数据。
在一个可能的实施方式中，所述基于预先确定的播放倍速信息，对所述视频数据进行帧处理，包括：
获取预先确定的播放倍速信息；
确定所述播放倍速信息指示的播放倍数；
在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理；
在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理。
在一个可能的实施方式中，所述播放倍速信息采用如下方式确定：
获取用户图像；
对所述用户图像进行图像识别，生成表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息；
基于所述识别信息，确定所述目标视频的播放倍数信息。
在一个可能的实施方式中，所述目标视频包括以下至少一项：
所述投屏发送端的主屏幕的屏幕图像、所述投屏发送端显示的文档的文档图像、所述投屏发送端后台运行的应用中的应用图像。
第二方面，本公开实施例提供一种投屏方法，所述方法应用于投屏接收端，所述方法包括：
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
第三方面，本公开实施例提供一种投屏装置，所述装置设置于投屏中转端，所述装置包括：
第一获取单元，用于获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
第一处理单元，用于基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
发送单元，用于将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
在一个可能的实施方式中，所述视频数据包括图像数据和音频数据；以及
所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据。
在一个可能的实施方式中，所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的视频数据。
在一个可能的实施方式中，所述基于预先确定的播放倍速信息，对所述视频数据进行帧处理，包括：
获取预先确定的播放倍速信息；
确定所述播放倍速信息指示的播放倍数；
在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理；
在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理。
在一个可能的实施方式中，所述播放倍速信息采用如下方式确定：
获取用户图像；
对所述用户图像进行图像识别，生成表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息；
基于所述识别信息，确定所述目标视频的播放倍数信息。
在一个可能的实施方式中，所述目标视频包括以下至少一项：
所述投屏发送端的主屏幕的屏幕图像、所述投屏发送端显示的文档的文档图像、所述投屏发送端后台运行的应用中的应用图像。
第四方面，本公开实施例提供一种投屏装置，所述装置应用于投屏接收端，所述装置包括：
第二获取单元，用于获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
第二处理单元，用于基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
播放单元，用于按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
第五方面，本公开实施例提供一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行上述存储器中存储的计算机程序，且上述计算机程序被执行时，实现本公开上述第一方面或第二方面的投屏方法中任一实施例的方法。
第六方面，本公开实施例提供一种计算机可读存储介质，该计算机程序被处理器执行时，实现如上述第一方面或第二方面的投屏方法中任一实施例的方法。
第七方面，本公开实施例提供一种计算机程序，该计算机程序包括计算机可读代码，当该计算机可读代码在设备上运行时，使得该设备中的处理器执行用于实现如上述第一方面或第二方面的投屏方法中任一实施例的方法中各步骤的指令。
本公开实施例提供的应用于投屏中转端的投屏方法，可以获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频，之后，基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据，然后，将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。由此方法，无需依赖投屏发送端的倍速播放功能，也可以实现目标视频的倍速播放。
本公开实施例提供的应用于投屏接收端的投屏方法，可以获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频，之后，基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据，最后，按照所述播放倍速信息指示的播放倍数，播放所述目标视频。由此方法，无需依赖投屏发送端的倍速播放功能，也可以实现目标视频的倍速播放。
附图说明
图1为本公开实施例提供的一种应用于投屏中转端的投屏方法的流程示意图；
图2为本公开实施例提供的另一种应用于投屏中转端的投屏方法的流程示意图；
图3为本公开实施例提供的一种应用于投屏接收端的投屏方法的流程示意图；
图4A为本公开实施例提供的一种设置于投屏中转端的投屏装置的结构示意图；
图4B为本公开实施例提供的一种设置于投屏接收端的投屏装置的结构示意图；
图5为本公开实施例提供的一种电子设备的结构示意图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值并不限制本公开的范围。
本领域技术人员可以理解，本公开实施例中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等对象，既不代表任何特定技术含义，也不表示它们之间的逻辑顺序。
还应理解，在本实施例中，“多个”可以指两个或两个以上，“至少一个”可以指一个、两个或两个以上。
还应理解，对于本公开实施例中提及的任一部件、数据或结构，在没有明确限定或者在前后文给出相反启示的情况下，一般可以理解为一个或多个。
另外，本公开中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本公开中字符“/”，一般表示前后关联对象是一种“或”的关系。
还应理解，本公开对各个实施例的描述着重强调各个实施例之间的不同之处，其相同或相似之处可以相互参考，为了简洁，不再一一赘述。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，上述技术、方法和设备应当被视为说明书的一部分。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
需要说明的是，在不冲突的情况下，本公开中的实施例及实施例中的特征可以相互组合。为便于对本公开实施例的理解，下面将参考附图并结合实施例来详细说明本公开。显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本公开保护的范围。
图1为本公开实施例提供的一种应用于投屏中转端的投屏方法的流程示意图。如图1所示，该方法具体包括：
101、获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频。
在本实施例中，投屏发送端可以是用于发送待投屏的目标视频的视频数据的一端。作为示例，投屏发送端，可以是具有发送上述视频数据的功能的软件或硬件。例如，投屏发送端可以是手机或电脑。
目标视频，可以是待通过后文所描述的投屏接收端进行播放的视频。
投屏接收端，可以在接收到视频数据(例如处理后数据)之后，对所接收到的视频数据表示的视频进行播放。作为示例，投屏接收端，可以是投影机、会议平板、拼接屏、电子白板、电视机等。
视频数据，可以是待投屏的目标视频的下载链接，也可以是投屏发送端呈现的图像的图像数据和/或音频数据的集合，还可以是投屏发送端后台运行而未呈现的界面的图像数据和/或音频数据的集合。
在本实施例的一些可选的实现方式中，所述目标视频包括以下至少一项：
所述投屏发送端的主屏幕的屏幕图像、所述投屏发送端显示的文档的文档图像、所述投屏发送端后台运行的应用中的应用图像。
可以理解，上述可选的实现方式中，目标视频可以包括投屏发送端的主屏幕的屏幕图像、投屏发送端显示的文档的文档图像、投屏发送端后台运行的应用中的应用图像中的至少一项。现有技术中，通常只能实现对视频播放器中的视频进行倍速播放。由此，上述可选的实现方式扩展了投屏发送端支持倍速播放的资源的种类。
在本实施例的一些可选的实现方式中，所述视频数据包括图像数据和音频数据。在此基础上，还可以采用如下方式，来执行上述步骤101：
获取投屏发送端以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据。
可以理解，上述可选的实现方式中，投屏发送端可以以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据，这样，可以实现具有安卓系统的投屏发送端的视频数据的发送，从而利用投屏发送端的视频资源，在视频发送端播放视频卡顿的场景下，基于安卓系统的投屏中转端的倍速播放功能，实现更为流畅的视频倍速投屏播放。
在本实施例的一些可选的实现方式中，也可以采用如下方式，来执行上述步骤101：
获取投屏发送端以帧序列的形式发送的视频数据。
可以理解，上述可选的实现方式中，投屏发送端可以以帧序列的形式直接发送的视频数据，这样，可以实现运行有ios系统的投屏发送端的视频数据的发送，从而利用投屏发送端的视频资源，在视频发送端播放视频卡顿的场景下，基于ios系统的投屏中转端的倍速播放功能，实现更为流畅的视频倍速投屏播放。
102、基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据。
在本实施例中，播放倍速信息，可以用于指示针对目标视频的播放倍数。
作为示例，在播放倍速信息指示对目标视频按照0.5倍速模式进行播放的情况下，可以将原音画按每1帧补1帧的方式，进行补帧处理并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照0.75倍速模式进行播放的情况下，可以将原音画按每3帧补1帧的方式，进行补帧处理并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照1.25倍速模式进行播放的情况下，可以将原音画按每1.25帧压缩到1帧进行处理，并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照1.5倍速模式进行播放的情况下，可以将原音画按每1.5帧压缩到1帧进行处理，并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照1.75倍速模式进行播放的情况下，可以将原音画按每1.75帧压缩到1帧进行处理，并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照2倍速模式进行播放的情况下，可以将原音画按每2帧压缩到1帧进行处理，并重新编码，得到处理后数据。
在本实施例的一些可选的实现方式中，所述播放倍速信息采用如下方式确定：
步骤一，获取用户图像。
其中，上述用户图像，可以经由设置于投屏接收端上的摄像头获得。或者，也可以经由设置于投屏接收端的固定方位的摄像头获得。
步骤二，对所述用户图像进行图像识别，生成表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息。
作为示例，可以将上述用户图像输入至预先训练的识别模型，从而获得表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息。其中，上述识别模型，可以是采用机器学习算法训练得到的二分类模型。
步骤三，基于所述识别信息，确定所述目标视频的播放倍数信息。
具体地，如果上述识别信息表征所述用户图像指示的用户，注视所述投屏接收端，那么，可以将所述目标视频的播放倍数信息确定为预设播放倍数信息。例如，该预设播放倍数信息，可以表示按照预设倍速(例如2倍、3倍)播放目标视频。如果上述识别信息表征所述用户图像指示的用户，并未注视所述投屏接收端，那么，可以将所述目标视频的播放倍数信息确定为一个初始播放倍数信息。例如，该初始播放倍数信息，可以表示用户针对目标视频设置的播放倍数(例如1倍)。其中，上述预设播放倍数信息指示的播放倍数大于初始播放倍数信息指示的播放倍数。在一些情况下，预设播放倍数信息指示的播放倍数，可以是初始播放倍数信息指示的播放倍数预设倍数(例如2倍)。
可以理解，上述可选的实现方式中，当用户注视投屏接收端的情况下，可以以较快速度播放目标视频，在用户并未注视投屏接收端的情况下，可以以较慢速度播放目标视频，由此，提高了倍速播放的灵活性。并且，在用户未注视投屏接收端的情况下，可能说明用户对此时播放的视频不感兴趣，由此，可以对当前播放的视频进行倍速播放。
在上述可选的实现方式中的一些应用场景下，如果上述识别信息表征所述用户图像指示的用户，并未注视所述投屏接收端，并且，未注视所述投屏接收端的时长超过预设时长阈值(例如10秒钟)，在此场景下，才将所述目标视频的播放倍数信息确定为上述预设播放倍数信息，以使投屏接收端按照预设播放倍速信息指示的播放倍数播放所述目标视频。
可选的，播放倍速信息(包括初始播放倍数信息和预设播放倍数信息)还可以经由用户设定。
103、将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
在一些情况下，投屏中转端，可以为独立于投屏发送端和投屏接收端之外的另一设备。
本公开实施例提供的应用于投屏中转端的投屏方法，可以获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频，之后，基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据，然后，将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。由此方法，无需依赖投屏发送端的倍速播放功能，也可以实现目标视频的倍速播放。
图2为本公开实施例提供的另一种应用于投屏中转端的投屏方法的流程示意图。如图2所示，该方法具体包括：
201、获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频。
在本实施例中，步骤201与图1对应实施例中的步骤101基本一致，这里不再赘述。
202、获取预先确定的播放倍速信息。
在本实施例中，播放倍速信息，可以用于指示针对目标视频的播放倍数。
203、确定所述播放倍速信息指示的播放倍数。
204、在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理，得到处理后数据。
作为示例，在播放倍速信息指示对目标视频按照1.25倍速模式进行播放的情况下，可以将原音画按每1.25帧压缩到1帧进行处理，并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照1.5倍速模式进行播放的情况下，可以将原音画按每1.5帧压缩到1帧进行处理，并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照1.75倍速模式进行播放的情况下，可以将原音画按每1.75帧压缩到1帧进行处理，并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照2倍速模式进行播放的情况下，可以将原音画按每2帧压缩到1帧进行处理，并重新编码，得到处理后数据。
205、在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理，得到处理后数据。
作为示例，在播放倍速信息指示对目标视频按照0.5倍速模式进行播放的情况下，可以将原音画按每1帧补1帧的方式，进行补帧处理并重新编码，得到处理后数据。在播放倍速信息指示对目标视频按照0.75倍速模式进行播放的情况下，可以将原音画按每3帧补1帧的方式，进行补帧处理并重新编码，得到处理后数据。
206、将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
在本实施例中，步骤206与图1对应实施例中的步骤103基本一致，这里不再赘述。
下面对本公开实施例进行示例性说明，但需要注意的是，本公开实施例可以具有以下所描述的特征，但以下描述并不构成对本公开实施例保护范围的限定。
在本示例中，倍速模式的工作流程可以包括如下阶段：
首先在开启阶段：
用户选择进入倍速模式，界面提示该模式下投屏画面和手机(也即上述投屏发送端)实际画面略有延迟，以便完成音画的倍数预处理。
然后进入传输阶段：
第一类，投屏过程中音画分别传输：发射端(也即上述投屏发送端)分别将画面按帧顺序的形式，音频按数据包的形式发送到接收端(也即上述投屏接收端)，接收端接收并缓冲数据(也即上述处理后数据)。
第二类，投屏过程中音画合并传输：发射端将音画按帧顺序的形式发送到接收端，接收端接收并缓冲数据。
之后进入倍数处理及显示阶段：
具体地，在播放倍速信息指示对目标视频按照0.5倍速模式进行播放的情况下，可以将原音画按每1帧补1帧的方式，进行补帧处理，并重新编码投屏显示。在播放倍速信息指示对目标视频按照0.75倍速模式进行播放的情况下，可以将原音画按每3帧补1帧的方式，进行补帧处理并重新编码投屏显示。在播放倍速信息指示对目标视频按照1.25倍速模式进行播放的情况下，可以将原音画按每1.25帧压缩到1帧进行处理，并重新编码投屏显示。在播放倍速信息指示对目标视频按照1.5倍速模式进行播放的情况下，可以将原音画按每1.5帧压缩到1帧进行处理，并重新编码投屏显示。在播放倍速信息指示对目标视频按照1.75倍速模式进行播放的情况下，可以将原音画按每1.75帧压缩到1帧进行处理，并重新编码投屏显示。在播放倍速信息指示对目标视频按照2倍速模式进行播放的情况下，可以将原音画按每2帧压缩到1帧进行处理，并重新编码投屏显示。
由此，上述示例中，通过获取手机的画面的序列帧图片和音频数据包，传输到接收端，接收端根据设定的倍数对音画数据进行帧倍数处理后再重新编码投屏显示，进而实现对投屏内容进行倍数播放的效果。
需要说明的是，除以上所记载的内容之外，本实施例还可以包括与图1对应的实施例中所描述的技术特征，进而实现图1所示投屏方法的技术效果，具体请参照图1相关描述，为简洁描述，在此不作赘述。
本公开实施例提供的应用于投屏中转端的投屏方法，可以在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理，在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理。由此，提高了倍速播放投屏视频的精细程度。
图3为本公开实施例提供的一种应用于投屏接收端的投屏方法的流程示意图。
具体而言，如图3所示，该方法具体包括：
301、获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频。
302、基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据。
303、按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
在本实施例的一些可选的实现方式中，所述视频数据包括图像数据和音频数据；以及
所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据。
在本实施例的一些可选的实现方式中，所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的视频数据。
在本实施例的一些可选的实现方式中，所述基于预先确定的播放倍速信息，对所述视频数据进行帧处理，包括：
获取预先确定的播放倍速信息；
确定所述播放倍速信息指示的播放倍数；
在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理；
在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理。
在本实施例的一些可选的实现方式中，所述播放倍速信息采用如下方式确定：
获取用户图像；
对所述用户图像进行图像识别，生成表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息；
基于所述识别信息，确定所述目标视频的播放倍数信息。
在本实施例的一些可选的实现方式中，所述目标视频包括以下至少一项：
所述投屏发送端的主屏幕的屏幕图像、所述投屏发送端显示的文档的文档图像、所述投屏发送端后台运行的应用中的应用图像。
需要说明的是，本公开实施例提供的应用于投屏接收端的投屏方法的执行主体，可以是上述应用于投屏中转端的投屏方法中所描述的投屏接收端。和/或，本公开实施例提供的应用于投屏接收端的投屏方法的执行主体，可以与上述应用于投屏中转端的投屏方法的执行主体执行相同的步骤。因此，除以上所记载的内容之外，本实施例还可以包括与图1和/或图2对应的实施例中所描述的技术特征，进而实现图1和/或图2所示投屏方法的技术效果，具体请参照图1和/或图2相关描述，为简洁描述，在此不作赘述。
本公开实施例提供的应用于投屏接收端的投屏方法，可以获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频，之后，基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据，最后，按照所述播放倍速信息指示的播放倍数，播放所述目标视频。由此方法，无需依赖投屏发送端的倍速播放功能，也可以实现目标视频的倍速播放。
图4A为本公开实施例提供的一种应用于投屏中转端的投屏装置的结构示意图。具体包括：
第一获取单元401，用于获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
第一处理单元402，用于基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
发送单元403，用于将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
在一个可能的实施方式中，所述视频数据包括图像数据和音频数据；以及
所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据。
在一个可能的实施方式中，所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的视频数据。
在一个可能的实施方式中，所述基于预先确定的播放倍速信息，对所述视频数据进行帧处理，包括：
获取预先确定的播放倍速信息；
确定所述播放倍速信息指示的播放倍数；
在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理；
在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理。
在一个可能的实施方式中，所述播放倍速信息采用如下方式确定：
获取用户图像；
对所述用户图像进行图像识别，生成表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息；
基于所述识别信息，确定所述目标视频的播放倍数信息。
在一个可能的实施方式中，所述目标视频包括以下至少一项：
所述投屏发送端的主屏幕的屏幕图像、所述投屏发送端显示的文档的文档图像、所述投屏发送端后台运行的应用中的应用图像。
本实施例提供的投屏装置可以是如图4A中所示的投屏装置，可执行以上所述的各应用于投屏中转端的投屏方法的所有步骤，进而实现以上所述的各应用于投屏中转端的投屏方法的技术效果，具体请参照以上相关描述，为简洁描述，在此不作赘述。
图4B为本公开实施例提供的一种设置于投屏接收端的投屏装置的结构示意图。具体包括：
第二获取单元411，用于获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
第二处理单元412，用于基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
播放单元413，用于按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
本实施例提供的投屏装置可以是如图4B中所示的投屏装置，可执行以上所述的各应用于投屏接收端的投屏方法的所有步骤，进而实现以上所述的各应用于投屏接收端的投屏方法的技术效果，具体请参照以上相关描述，为简洁描述，在此不作赘述。
图5为本公开实施例提供的一种电子设备的结构示意图，图5所示的电子设备500包括：至少一个处理器501、存储器502、至少一个网络接口504和其他用户接口503。电子设备500中的各个组件通过总线系统505耦合在一起。可理解，总线系统505用于实现这些组件之间的连接通信。总线系统505除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图5中将各种总线都标为总线系统505。
其中，用户接口503可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者触摸屏等。
可以理解，本公开实施例中的存储器502可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，DRRAM)。本文描述的存储器502旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中，存储器502存储了如下的元素，可执行单元或者数据结构，或者他们的子集，或者他们的扩展集：操作系统5021和应用程序5022。
其中，操作系统5021，包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序5022，包含各种应用程序，例如媒体播放器(Media Player)、浏览器(Browser)等，用于实现各种应用业务。实现本公开实施例方法的程序可以包含在应用程序5022中。
在本实施例中，通过调用存储器502存储的程序或指令，具体的，可以是应用程序5022中存储的程序或指令，处理器501用于执行各方法实施例所提供的方法步骤，例如包括：
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
或者，
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
上述本公开实施例揭示的方法可以应用于处理器501中，或者由处理器501实现。处理器501可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器501可以是通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本公开实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本公开实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件单元组合执行完成。软件单元可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器502，处理器501读取存储器502中的信息，结合其硬件完成上述方法的步骤。
可以理解的是，本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits，ASIC)、数字信号处理器(Digital Signal Processing，DSP)、数字信号处理设备(DSPDevice，DSPD)、可编程逻辑设备(Programmable LogicDevice，PLD)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本公开的上述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本文上述功能的单元来实现本文上述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
本实施例提供的电子设备可以是如图5中所示的电子设备，可执行以上所述的各投屏方法的所有步骤，进而实现以上所述的各投屏方法的技术效果，具体请参照以上相关描述，为简洁描述，在此不作赘述。
本公开实施例还提供了一种存储介质(计算机可读存储介质)。这里的存储介质存储有一个或者多个程序。其中，存储介质可以包括易失性存储器，例如随机存取存储器；存储器也可以包括非易失性存储器，例如只读存储器、快闪存储器、硬盘或固态硬盘；存储器还可以包括上述种类的存储器的组合。
当存储介质中一个或者多个程序可被一个或者多个处理器执行，以实现上述在电子设备侧执行的投屏方法。
上述处理器用于执行存储器中存储的投屏程序，以实现以下在电子设备侧执行的投屏方法的步骤：
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
或者，
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本公开的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上所述的具体实施方式，对本公开的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本公开的具体实施方式而已，并不用于限定本公开的保护范围，凡在本公开的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本公开的保护范围之内。此外，对于前述的各实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作和模块并不一定是本发明所必须的。
Claims (11)
1.一种投屏方法，其特征在于，所述方法应用于投屏中转端，所述方法包括：
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
2.根据权利要求1所述的方法，其特征在于，所述视频数据包括图像数据和音频数据；以及
所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的图像数据，以及以数据包的形式发送的音频数据。
3.根据权利要求1所述的方法，其特征在于，所述获取投屏发送端发送的视频数据，包括：
获取投屏发送端以帧序列的形式发送的视频数据。
4.根据权利要求1所述的方法，其特征在于，所述基于预先确定的播放倍速信息，对所述视频数据进行帧处理，包括：
获取预先确定的播放倍速信息；
确定所述播放倍速信息指示的播放倍数；
在所述播放倍数大于1的情况下，对所述视频数据进行帧压缩处理；
在所述播放倍数小于1的情况下，对所述视频数据进行补帧处理。
5.根据权利要求1所述的方法，其特征在于，所述播放倍速信息采用如下方式确定：
获取用户图像；
对所述用户图像进行图像识别，生成表征所述用户图像指示的用户是否注视所述投屏接收端的识别信息；
基于所述识别信息，确定所述目标视频的播放倍数信息。
6.根据权利要求1-5之一所述的方法，其特征在于，所述目标视频包括以下至少一项：
所述投屏发送端的主屏幕的屏幕图像、所述投屏发送端显示的文档的文档图像、所述投屏发送端后台运行的应用中的应用图像。
7.一种投屏方法，其特征在于，所述方法应用于投屏接收端，所述方法包括：
获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
8.一种投屏装置，其特征在于，所述装置设置于投屏中转端，所述装置包括：
第一获取单元，用于获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
第二处理单元，用于基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
发送单元，用于将所述处理后数据发送至投屏接收端，其中，所述投屏接收端用于按照所述播放倍速信息指示的播放倍数播放所述目标视频。
9.一种投屏装置，其特征在于，所述装置应用于投屏接收端，所述装置包括：
第二获取单元，用于获取投屏发送端发送的视频数据，其中，所述视频数据表征待投屏的目标视频；
第二处理单元，用于基于预先确定的播放倍速信息，对所述视频数据进行帧处理，得到处理后数据；
播放单元，用于按照所述播放倍速信息指示的播放倍数，播放所述目标视频。
10.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述存储器中存储的计算机程序，且所述计算机程序被执行时，实现上述权利要求1-7任一所述的方法。
11.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现上述权利要求1-7任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211437996.3A CN115767159A (zh) | 2022-11-16 | 2022-11-16 | 投屏方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211437996.3A CN115767159A (zh) | 2022-11-16 | 2022-11-16 | 投屏方法、装置、电子设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115767159A true CN115767159A (zh) | 2023-03-07 |
Family
ID=85372355
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211437996.3A Pending CN115767159A (zh) | 2022-11-16 | 2022-11-16 | 投屏方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115767159A (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101828390A (zh) * | 2007-11-02 | 2010-09-08 | 索尼公司 | 信息呈现设备和信息呈现方法 |
| CN112019897A (zh) * | 2020-08-27 | 2020-12-01 | 北京字节跳动网络技术有限公司 | 投屏方法、装置、电子设备及计算机可读介质 |
| CN112261467A (zh) * | 2020-10-09 | 2021-01-22 | 深圳市锐尔觅移动通信有限公司 | 投屏内容展示方法、装置、电子设备和可读存储介质 |
| CN112416284A (zh) * | 2020-12-10 | 2021-02-26 | 三星电子（中国）研发中心 | 用于共享屏幕的方法、装置、设备以及存储介质 |
| US20210181838A1 (en) * | 2019-12-13 | 2021-06-17 | Samsung Electronics Co., Ltd. | Information providing method and electronic device for supporting the same |
| CN113301021A (zh) * | 2021-04-23 | 2021-08-24 | 深圳乐播科技有限公司 | 一对多投屏方法、系统、设备及存储介质 |
| CN114040232A (zh) * | 2021-11-01 | 2022-02-11 | 北京奇艺世纪科技有限公司 | 投屏系统、方法、电子设备和存储介质 |
| CN115278313A (zh) * | 2022-07-12 | 2022-11-01 | 杭州座头鲸科技有限公司 | 一种高倍率多路数的视频并发倍速方法 |
-
2022
- 2022-11-16 CN CN202211437996.3A patent/CN115767159A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101828390A (zh) * | 2007-11-02 | 2010-09-08 | 索尼公司 | 信息呈现设备和信息呈现方法 |
| US20210181838A1 (en) * | 2019-12-13 | 2021-06-17 | Samsung Electronics Co., Ltd. | Information providing method and electronic device for supporting the same |
| CN112019897A (zh) * | 2020-08-27 | 2020-12-01 | 北京字节跳动网络技术有限公司 | 投屏方法、装置、电子设备及计算机可读介质 |
| CN112261467A (zh) * | 2020-10-09 | 2021-01-22 | 深圳市锐尔觅移动通信有限公司 | 投屏内容展示方法、装置、电子设备和可读存储介质 |
| CN112416284A (zh) * | 2020-12-10 | 2021-02-26 | 三星电子（中国）研发中心 | 用于共享屏幕的方法、装置、设备以及存储介质 |
| CN113301021A (zh) * | 2021-04-23 | 2021-08-24 | 深圳乐播科技有限公司 | 一对多投屏方法、系统、设备及存储介质 |
| CN114040232A (zh) * | 2021-11-01 | 2022-02-11 | 北京奇艺世纪科技有限公司 | 投屏系统、方法、电子设备和存储介质 |
| CN115278313A (zh) * | 2022-07-12 | 2022-11-01 | 杭州座头鲸科技有限公司 | 一种高倍率多路数的视频并发倍速方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112714330B (zh) | 基于连麦直播的礼物赠送方法、装置及电子设备 | |
| US20200105307A1 (en) | Video recording method and apparatus for mobile terminal | |
| US10271105B2 (en) | Method for playing video, client, and computer storage medium | |
| WO2017185641A1 (zh) | 一种语音弹幕的生成、播放方法及其装置、客户端 | |
| CN104602133A (zh) | 多媒体文件共享方法和终端及服务器 | |
| CN105357562A (zh) | 一种信息处理方法及终端 | |
| US20170195617A1 (en) | Image processing method and electronic device | |
| CN109819268B (zh) | 视频直播中的直播间播放控制方法、装置、介质及设备 | |
| CN112399249A (zh) | 多媒体文件生成方法、装置、电子设备及存储介质 | |
| US11889135B2 (en) | Video stream playing control method and apparatus, and storage medium | |
| CN112423013B (zh) | 在线互动方法、客户端、服务器、计算设备和存储介质 | |
| CN111629222B (zh) | 一种视频处理方法、设备及存储介质 | |
| CN112866782A (zh) | 视频播放方法、视频播放装置及电子设备 | |
| CN111343503A (zh) | 视频的转码方法、装置、电子设备及存储介质 | |
| CN108769806B (zh) | 媒体内容的展示方法和装置 | |
| CN108882004B (zh) | 视频录制方法、装置、设备及存储介质 | |
| CN115767159A (zh) | 投屏方法、装置、电子设备及存储介质 | |
| EP3522525B1 (en) | Method and apparatus for processing video playing | |
| CN113727125B (zh) | 直播间的截图方法、装置、系统、介质以及计算机设备 | |
| CN113596583A (zh) | 视频流子弹时间数据处理方法及装置 | |
| CN112055238B (zh) | 视频播放的控制方法、设备及系统 | |
| CN108769565B (zh) | 画面布局自动切换方法、服务器及本地录播系统 | |
| KR20130077246A (ko) | 스마트디바이스 상에서 파노라마 동영상 재생시 ｃｐｕ에 의한 과도 처리 경감방법 및 과도 처리 경감시스템 | |
| CN115412736A (zh) | 多路视频的播放控制方法、装置、电子设备及存储介质 | |
| CN111813969A (zh) | 多媒体数据处理方法、装置、电子设备及计算机存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |