CN111093088B - 一种数据处理方法及装置 - Google Patents

一种数据处理方法及装置 Download PDF

Info

Publication number
CN111093088B
CN111093088B CN201911424010.7A CN201911424010A CN111093088B CN 111093088 B CN111093088 B CN 111093088B CN 201911424010 A CN201911424010 A CN 201911424010A CN 111093088 B CN111093088 B CN 111093088B
Authority
CN
China
Prior art keywords
video frame
electronic device
shared
identification information
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911424010.7A
Other languages
English (en)
Other versions
CN111093088A (zh
Inventor
丰海燕
罗蒙
魏森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Beijing Ltd
Original Assignee
Lenovo Beijing Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Beijing Ltd filed Critical Lenovo Beijing Ltd
Priority to CN201911424010.7A priority Critical patent/CN111093088B/zh
Publication of CN111093088A publication Critical patent/CN111093088A/zh
Application granted granted Critical
Publication of CN111093088B publication Critical patent/CN111093088B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43632Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了一种处理方法及装置,方法包括:在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,待分享视频帧至少包括一标识信息;将待分享视频帧发送至至少一第二电子设备;至少基于第二电子设备反馈的对标识信息的识别结果确定待分享视频帧在第二电子设备上的显示状态。所述方法及装置在向第二电子设备传输的视频帧中设置标识信息,后续接收第二电子设备反馈的对标识信息的识别结果确定分享状态,如识别出标识信息时确定第二电子设备已正常显示传输的视频帧,不能识别出标识信息时确定第二电子设备未正常显示传输的视频帧,从而使得视频分享端侧及时了解内容分享情况,有利于及时进行分享相关管理和控制,有利于提升内容分享效果。

Description

一种数据处理方法及装置
技术领域
本申请涉及数据处理技术,更具体的说,是涉及一种数据处理方法及装置。
背景技术
在一些工作和学习的场景中,经常需要用到直播或投屏技术,以将分享内容更方便的传送至接收者。
但在直播或投屏的实际应用中,由于网络原因或其他一些硬件原因,会出现接收端(如直播接收端或投屏端)不能够正常显示分享内容的情况;这种情况对于直播或投屏操作者来说可能并不会被知晓,从而导致分享端持续分享,而接收端无法获取相关内容的情况,影响内容分享效果。
发明内容
有鉴于此,本申请提供提供如下技术方案:
一种处理方法,应用于第一电子设备,所述方法包括:
在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;
将所述待分享视频帧发送至所述至少一第二电子设备;
至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。
可选的,所述获得待分享视频帧,包括:
在与至少一第二电子设备建立连接的情况下,确定所述第一电子设备的待分享区域;
按照确定的处理策略在所述待分享区域添加标识信息,得到所述待分享视频帧。
可选的,所述按照确定的处理策略在所述待分享区域添加标识信息,包括:
获得所述标识信息的属性参数及第一电子设备与至少一第二电子设备之间的连接参数;
至少基于所述属性参数和/或所述连接参数在所述待分享区域确定至少一添加位置;
在所述至少一添加位置添加所述标识信息。
可选的,所述至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态,包括:
在所述识别结果表征所述第二电子设备识别出所述标识信息,或,所述第二电子设备识别到的信息与所述标识信息表征的信息之间的匹配度符合第一阈值的情况下,确定所述待分享视频帧正常显示于所述第二电子设备;
在所述识别结果表征所述第二电子设备未识别出所述标识信息,或,所述第二电子设备识别到的信息与所述标识信息表征的信息之间的匹配度符合第二阈值的情况下,确定所述待分享视频帧未正常显示于所述第二电子设备。
可选的,还包括:
在第一时间段内分别获得第一电子设备上的第一视频帧图像和第二电子设备上显示的第二视频帧图像;
计算所述第一视频帧图像与所述第二视频帧图像之间的匹配率;
基于所述匹配率和所述识别结果确定所述待分享视频帧是否正常显示于所述第二电子设备。
可选的,还包括:
基于所述识别结果中的时间信息与本地时间之间的时间差确定所述待分享视频帧在所述第二电子设备显示时的延迟参数;其中,所述标识信息或所述待分享视频帧中编码有时间信息。
可选的,还包括:
基于确定的更新周期更新所述标识信息。
可选的,还包括:基于确定的所述显示状态输出提示信息或调整所述待分享视频帧的帧率。
本申请还提供了一种处理方法,应用于第二电子设备,所述方法包括:
在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息;
对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态。
本申请还提供了一种处理装置,应用于第一电子设备,包括:
视频帧获取模块,用于在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;
视频帧发送模块,用于将所述待分享视频帧发送至所述至少一第二电子设备;
状态确定模块,用于至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。
本申请还提供了一种处理装置,应用于第二电子设备,包括:
视频帧接收模块,用于在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息。
结果识别反馈模块,用于对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态。
本申请还提供了一种第一电子设备,所述第一电子设备包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述可执行指令包括:在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;将所述待分享视频帧发送至所述至少一第二电子设备;至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。
本申请还提供了一种第二电子设备,所述第二电子设备包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述可执行指令包括:在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息;对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态。
经由上述的技术方案可知,与现有技术相比,本申请实施例公开了一种处理方法及装置,方法包括:在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;将所述待分享视频帧发送至所述至少一第二电子设备;至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。所述方法及装置在向第二电子设备传输的视频帧中设置有标识信息,这样,后续接收第二电子设备反馈的对标识信息的识别结果,若第二电子设备解析的识别结果正确或识别出所述标识信息,则可以确定第二电子设备已正常显示传输的视频帧,若识别结果不正确或未识别出所述标识信息,则确定第二电子设备未正常显示传输的视频帧,从而使得视频分享端侧及时了解内容分享情况,有利于及时进行分享相关管理和控制,有利于提升内容分享效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例公开的一种处理方法的流程图;
图2为待分享视频帧在第二电子设备上正常显示的画面示意图;
图3为待分享视频帧在第二电子设备未正常显示的画面示意图;
图4为本申请实施例公开的在待分享区域添加标识信息的流程图;
图5本申请实施例公开的为标识信息的一种添加实现的画面示意图;
图6为本申请实施例公开的标识信息的另一种添加实现的画面示意图;
图7为本申请实施例公开的标识信息的又一种添加实现的画面示意图;
图8为本申请实施例公开的确定待分享内容在第二电子设备显示状态的另一种实现流程图;
图9为本申请实施例公开的另一种处理方法的流程图;
图10为本申请实施例公开的一种处理装置的结构示意图;
图11为本申请实施例公开的另一种处理装置的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
图1为本申请实施例公开的一种处理方法的流程图,图1所示处理方法可应用于第一电子设备,参见图1所示,处理方法可以包括如下步骤:
步骤101:在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息。
本申请实施例中,第一电子设备可以与至少一个第二电子设备建立通信连接,并向至少一个第二电子设备分享内容。例如,一个具体场景中,第一电子设备可以为教师电子设备终端,至少一个第二电子设备对应的为至少一个学生的电子设备终端,教师可通过第一电子设备同时向多个第二电子设备侧的学生分享教学内容,实现远程在线教学。
在远程会议或远程教学的实现场景中,通常都是将会议现场或教学现场的现场视频,或者会议现场或教学现场的第一电子设备终端上的文件数据结合现场的声音以视频流的形式传送给第二电子设备。共享的视频流内容可以以持续发送多张帧图像的形式实现,因此,本申请实施例中,首先获得待分享视频帧。
所述待分享视频帧中至少包括一标识信息,该标识信息可以但不限制为包括二维码、图像、水印图像等。在待分享视频帧中,可以带有一个标识信息,也可以带有至少两个标识信息,具体可以根据实际应用场景自主配置。当待分享视频帧中带有至少两个标识信息的情况下,至少两个标识信息可以为相同的标识信息,也可以为不同的标识信息。具体实现中,可以通过在视频帧的不同位置多放置几个标识信息,或者放置一个整个视频帧范围的水印形式的标识信息的方式避免第二设备上视频帧只加载到一半画面但已经识别出标识信息的情况。
标识信息在添加到视频帧后,属于视频帧的一部分,形成待分享视频帧,后续待分享视频帧在显示时,不会出现标识信息显示出而视频帧没有显示出来的情况。
步骤102:将所述待分享视频帧发送至所述至少一第二电子设备。
在获取到待分享视频帧后,可以通过与至少一第二电子设备建立的连接将待分享视频帧发送至所述至少一第二电子设备,以实现共享内容的分享。第一电子设备与点儿电子设备的连接,可以为有线的通信连接,也可以为无线的通信连接,对应的,待分享视频帧的传送可以基于有线网络连接实现,也可以基于无线的网络连接实现,具体可根据第一电子设备和第二电子设备的网络配置信息确定。
步骤103:至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。
在将待分享视频帧发送给至少一第二电子设备后,可以接收来自于第二电子设备的反馈信息,该反馈信息中带有第二电子设备对前述标识信息的识别结果。第一电子设备可以基于第二电子设备对标识信息的识别结果确定前述待分享视频帧在第二电子设备的显示状态,即确定待分享视频帧是否在第二电子设备正常显示。
例如,第一电子设备可以确定上述识别结果是否正确或是否识别出标识信息,在识别结果正确或识别出所述标识信息的情况下,确定待分享视频帧在第二电子设备正常显示;在识别结果不正确或未识别出所述标识信息的情况下,确定待分享视频帧在第二电子设备未正常显示。其中,未正常显示可以包括待分享视频帧完全没有显示,或待分享视频帧在第二电子设备上显示的效果很差,如信号差导致部分视频帧丢失或视频帧中噪音较大。图2为待分享视频帧在第二电子设备上正常显示的画面示意图,图3为待分享视频帧在第二电子设备未正常显示的画面示意图,可结合图2和图3理解前述部分场景。需要说明的是,图2和图3旨在示出正常显示和非正常显示的画面场景,其中并没有添加标识信息。具体关于标识信息的具体实现,将在后面的实施例中详细介绍。
本实施例中,所述方法在向第二电子设备传输的视频帧中设置有标识信息,这样,后续接收第二电子设备反馈的对标识信息的识别结果,若第二电子设备解析的识别结果正确或识别出所述标识信息,则可以确定第二电子设备已正常显示传输的视频帧,若识别结果不正确或未识别出所述标识信息,则确定第二电子设备未正常显示传输的视频帧,从而使得视频分享端侧及时了解内容分享情况,有利于及时进行分享相关管理和控制,有利于提升内容分享效果。
上述实施例中,获得待分享视频帧的具体实现可以包括:在与至少一第二电子设备建立连接的情况下,确定所述第一电子设备的待分享区域;按照确定的处理策略在所述待分享区域添加标识信息,得到所述待分享视频帧。
在与至少一第二电子设备建立连接的情况下,确定进入内容共享状态,可以开始确定第一电子设备的待分享区域。其中的待分享区域可以对应为整个显示屏的显示范围,或者是第一电子设备的扩展屏的至少部分显示区域,也可以为显示屏中部分的显示区域,如截屏区域。
确定了待分享区域后,可以按照确定的处理策略在待分享区域添加一个或至少两个标识信息,添加上标识信息的视频帧为待分享视频帧。
图4为本申请实施例公开的在待分享区域添加标识信息的流程图,如图4所示,可以包括:
步骤401:获得所述标识信息的属性参数及第一电子设备与至少一第二电子设备之间的连接参数。
其中,所述属性参数可以但不限制为包括尺寸、大小、分辨率、显示形状等;所述连接参数可以但不限制为网速、连接稳定性等。
步骤402:至少基于所述属性参数和/或所述连接参数在所述待分享区域确定至少一添加位置。
标识信息的添加位置可以有多种不同的实现,例如,添加位置可以铺满整个待分享区域,或者在待分享区域的一个或多个边角,或者在待分享区域的上方、下方、左方、右方等。
在连接参数如网速较高时,可以选取分辨率较高、尺寸较大的的标识信息添加到待分享区域,对应的添加位置就需要为尺寸较大的添加位置,如以水印图像的方式将尺寸较大的标识信息添加在整个待分享区域,参见图5所示,为标识信息的一种添加实现的画面示意图。在连接参数如连接稳定性较差时,可以选择尺寸较小的标识信息添加到待分享区域,对应的添加位置可以为待分享区域的右下角,参见图6所示,为标识信息的另一种添加实现的画面示意图。当然,本申请实施例并不对如何确定添加位置做固定限制,具体实现中可根据实际情况,依据标识信息的上述尺寸、大小、分辨率、显示形状等以及第一电子设备和第二电子设备之间的连接网速、连接稳定性等,依据一定的策略合理确定标识信息的添加位置。
步骤403:在所述至少一添加位置添加所述标识信息。
确定好至少一添加位置后,可以控制直接在确定的添加位置添加相应的标识信息,以得到待分享视频帧。如图7所示,为标识信息的又一种添加实现的画面示意图,可结合上述图5、图6和图7理解标识信息的添加实现。
本实施例中,详细记载了标识信息的选取到添加位置的确定的具体实现,依据本实施例公开的内容,使得本领域技术人员能够更好的理解本申请实施例公开的处理方法的具体实现。
上述实施例中,所述至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态,可以包括:在所述识别结果表征所述第二电子设备识别出所述标识信息,或,所述第二电子设备识别到的信息与所述标识信息表征的信息之间的匹配度符合第一阈值的情况下,确定所述待分享视频帧正常显示于所述第二电子设备。
一个实现中,在标识信息为二维码的情况下,可以将一些验证信息(如春天)编码进二维码,这样,第二电子设备在接收到待分享视频帧后,解析所述二维码得到其中编码的验证信息,将解码得到验证信息反馈给第一电子设备,若反馈的验证信息为“春天”,则确定待分享视频帧正常显示于第二电子设备。
另一个实现中,在标识信息为图像的情况下,第二电子设备接收到待分享视频帧,识别出指定位置的图像数据,将该图像数据反馈给第一电子设备,若该图像数据与标识信息对应的图像的匹配度达到第一预设阈值,可以确定待分享视频帧正常显示于第二电子设备。其中的指定位置可以为第一电子设备在传送待分享视频帧时附带上的信息。
由于受网速和其他信号干扰,待分享图像帧在第二电子设备显示时,其中可能会出现一些噪音点,在噪音较小的情况下,不影响待分享图像帧内容的准确输出;而当噪音较大的情况下,待分享图像帧的内容可能不会被准确完整的被第二电子设备的用户识别,因此本实现中,确定在图像数据与标识信息对应的图像的匹配度达到第一预设阈值的情况下,确定待分享视频帧正常显示于第二电子设备。
在所述识别结果表征所述第二电子设备未识别出所述标识信息,或,所述第二电子设备识别到的信息与所述标识信息表征的信息之间的匹配度符合第二阈值的情况下,确定所述待分享视频帧未正常显示于所述第二电子设备。
沿用前述的例子,在标识信息为二维码时,若第二电子设备反馈到第一电子设备的验证信息不是“春天”,则确定待分享视频帧未正常显示于第二电子设备。
沿用前述的例子,在标识信息为图像时,若第二电子设备反馈到第一电子设备的图像数据与标识信息对应的图像的匹配度没有达到第一预设阈值,可以确定待分享视频帧未正常显示于第二电子设备。
本实施例对基于第二电子设备反馈的对标识信息的识别结果确定待分享视频帧在第二电子设备上的显示状态的实现做了详细介绍,本领域技术人员依据本实施例公开内容能够更好的实时本申请所记载的处理方法。
在其他的实现中,除了基于标识信息确定待分享视频帧在第二电子设备上的显示状态,还可以以其他方式判断待分享视频帧在第二电子设备上的显示状态。图8为本申请实施例公开的确定待分享内容在第二电子设备显示状态的另一种实现流程图,结合图8所示,方法可以包括:
步骤801:在第一时间段内分别获得第一电子设备上的第一视频帧图像和第二电子设备上显示的第二视频帧图像。
其中,第一视频帧图像和第二视频帧图像可以是确定的待分享区域的视频帧图像。
由于相邻视频帧之间往往具有极大的相似度,因此步骤801中的第一时间段不宜设置的过大。正常情况下,第一时间段应不小于第一电子设备到第二电子设备的数据通信延迟时间,以使得第一视频帧图像和第二视频帧图像为间隔时间不长的视频帧图像。
步骤802:计算所述第一视频帧图像与所述第二视频帧图像之间的匹配率。
理想状态下,如果第一视频帧和第二视频帧对应到原始待分享视频内容时,为间隔时间不长的视频帧,则第一视频帧和第二视频帧的匹配率可以很高甚至完全相同,例如,第一电子设备侧的共享内容为一个PPT文件,针对每一页PPT,第一电子设备的用户都要对其进行讲解,即需要在一页PPT中停留一段时间;这段时间里,对应到视频帧中的内容是完全不变的,或仅有鼠标位置的不同,因此第一视频帧和第二视频帧的匹配率可以很高甚至完全相同。
步骤803:基于所述匹配率和所述识别结果确定所述待分享视频帧是否正常显示于所述第二电子设备。
本实现中,同时基于第二电子设备反馈的识别结果和上述匹配率确定待分享视频帧是否正常显示于第二电子设备,能够使得确定的结果更加准确,提升处理方法的实施效果。
在其他实现中,处理方法还可以包括基于所述识别结果中的时间信息与本地时间之间的时间差确定所述待分享视频帧在所述第二电子设备显示时的延迟参数的步骤。
本实现中,所述标识信息或所述待分享视频帧中可以编码有时间信息,该时间信息可以为生成待分享视频帧或发送待分享视频帧的时间信息;第二电子设备在获取到待分享视频帧后,对其中的时间信息或标识信息中的时间信息进行解码识别,将解码得到的时间信息反馈给第一电子设备,第一电子设备依据第二电子设备反馈的时间信息与本地时间信息的差值,确定待分享视频帧在第二电子设备显示时的延迟参数。
需要说明的是,若第一电子设备编码的时间信息为生成待分享视频帧的时间信息,由于生成待分享视频帧到发送待分享视频帧之间也存在一定时间差值,且第二电子设备将识别结果反馈给第一电子设备的传输过程也需要一定的时间,因此,在后续基于识别结果中的时间信息与本地时间之间的时间差确定待分享视频帧在第二电子设备显示时的延迟参数时,可以合理的去除上述生成待分享视频帧到发送待分享视频帧之间,以及第二电子设备将识别结果反馈给第一电子设备的传输过程所需的时间。
在其他的实现中,处理方法还可以包括基于确定的更新周期更新所述标识信息的步骤。其中的更新周期至少可基于所述连接参数确定,例如,在第一电子设备和第二电子设备之间的网速较高时,可以将更新周期设置的短一些;在第一电子设备和第二电子设备之间网速较低或连接稳定性较差时,可以将更新周期设置的长一点,以免因网速慢或连接稳定性差影响本申请处理方法的准确实施。
其中,更新标识信息,具体可以包括更新标识信息的标识内容和/或标识信息的添加位置。例如,仅更新标识信息对应的图像、仅更新标识信息的添加位置,或同时更新标识信息对应的图像和标识信息的添加位置。
在其他实现中,处理方法还可以包括基于确定的所述显示状态输出提示信息或调整所述待分享视频帧的帧率的步骤。
例如,确定的显示状态指示第二电子设备不能正常显示的情况下,可以提示第一电子设备侧的用户,如内容分享人,放慢PPT中不同页内容之间的切换速度,或在不同的展示节点间增加延迟,以使得第二电子设备能够完整的接收到待分享视频帧。其中,在分享的PPT处于自动播放模式时,如自动翻页模式时,第一电子设备也可以自动控制减小PPT的自动翻页速度,以达到降低视频帧的帧率的目的,从而减小第一电子设备到第二电子设备的延迟影响。
图9为本申请实施例公开的另一种处理方法的流程图,图9所示方法应用于第二电子设备,如图9所示,处理方法可以包括:
步骤901:在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息。
步骤902:对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态。
本申请实施例所述处理方法,首先对接收到的视频帧中的标识信息进行识别,然后将识别结果反馈给第一电子设备,以使得第一电子设备依据识别结果确定视频帧在第二电子设备侧的显示状态,具体第一电子设备可以通过确定识别结果是否正确或是否识别出标识信息确定视频帧在第二电子设备的显示状态,从而使得第一电子设备端及时了解内容分享在第二电子设备侧的进行情况,有利于及时进行分享相关管理和控制,有利于提升内容分享效果。
在一个实现中,所述视频帧为第一电子设备在与第二电子设备建立连接的情况下,首先确定第一电子设备的待分享区域,然后按照确定的处理策略在待分享区域添加标识信息得到的视频帧。
其中的待分享区域可以对应为整个显示屏的显示范围,或者是第一电子设备的扩展屏的至少部分显示区域,也可以为显示屏中部分的显示区域,如截屏区域。
在一个实现中,标识信息的添加过程包括:第一电子设备获得标识信息的属性参数及第一电子设备与至少一第二电子设备之间的连接参数;至少基于属性参数和/或连接参数在待分享区域确定至少一添加位置;在至少一添加位置添加所述标识信息。
在一个实现中,第一电子设备基于识别结果确定视频帧在第二电子设备的显示状态可以包括:在识别结果表征第二电子设备识别出标识信息,或,第二电子设备识别到的信息与标识信息表征的信息之间的匹配度符合第一阈值的情况下,确定视频帧正常显示于所述第二电子设备;在识别结果表征第二电子设备未识别出标识信息,或,第二电子设备识别到的信息与标识信息表征的信息之间的匹配度符合第二阈值的情况下,确定视频帧未正常显示于所述第二电子设备。
在一个实现中,第二电子设备还会将第二视频帧图像发送给第一电子设备,以使的第一电子设备在第一时间段内分别获得第一电子设备上的第一视频帧图像和第二电子设备上显示的第二视频帧图像;计算第一视频帧图像与第二视频帧图像之间的匹配率;基于匹配率和识别结果确定待分享视频帧是否正常显示于所述第二电子设备。
在一个实现中,第二电子设备的识别结果中还包括从标识信息或视频帧中解码出的时间信息,则第一电子设备还可以基于识别结果中的时间信息与本地时间之间的时间差确定视频帧在第二电子设备显示时的延迟参数;其中,标识信息或视频帧中编码有时间信息。
在一个实现中,第一电子设备发送的视频帧中的标识信息为第一电子设备基于确定的更新周期更新的标识信息。
在一个实现中,第一电子设备还可以基于确定的显示状态输出提示信息或调整所述待分享视频帧的帧率的步骤,以使得第二电子设备能够更好地接收到第一电子设备分享的完整的视频帧,消除第一电子设备传输数据到第二电子设备的延时影响。
上述各个实现的具体内容,可参见第一电子设备的处理方法中相应部分的内容记载,在此不再重复赘述。
对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
上述本申请公开的实施例中详细描述了方法,对于本申请的方法可采用多种形式的装置实现,因此本申请还公开了一种装置,下面给出具体的实施例进行详细说明。
图10为本申请实施例公开的一种处理装置的结构示意图,图10所示处理装置应用于第一电子设备,如图10所述,处理装置100可以包括:
视频帧获取模块1001,用于在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息。
视频帧发送模块1002,用于将所述待分享视频帧发送至所述至少一第二电子设备。
状态确定模块1003,用于至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。
本实施例所述的处理装置,在向第二电子设备传输的视频帧中设置有标识信息,这样,后续接收第二电子设备反馈的对标识信息的识别结果,若第二电子设备解析的识别结果正确或识别出所述标识信息,则可以确定第二电子设备已正常显示传输的视频帧,若识别结果不正确或未识别出所述标识信息,则确定第二电子设备未正常显示传输的视频帧,从而使得视频分享端侧及时了解内容分享情况,有利于及时进行分享相关管理和控制,有利于提升内容分享效果。
图11为本申请实施例公开的另一种处理装置的结构示意图,图11所示处理装置应用于第二电子设备,参见图11所示,处理装置110可以包括:
视频帧接收模块1101,用于在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息。
结果识别反馈模块1102,用于对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态。
本实施例所述处理装置,首先对接收到的视频帧中的标识信息进行识别,然后将识别结果反馈给第一电子设备,以使得第一电子设备依据识别结果确定视频帧在第二电子设备侧的显示状态,从而使得第一电子设备端及时了解内容分享在第二电子设备侧的进行情况,有利于及时进行分享相关管理和控制,有利于提升内容分享效果。
上述处理装置的具体实现可参见方法实施例中相关部分的内容介绍,在此不再重复赘述。
进一步地,本申请还公开了一种第一电子设备,所述第一电子设备包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述可执行指令包括:在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;将所述待分享视频帧发送至所述至少一第二电子设备;至少基于所述第二电子设备反馈的对所述标识信息的识别结果确定所述待分享视频帧在所述第二电子设备上的显示状态。
上述实施例中的所述的任意一种处理装置包括处理器和存储器,上述实施例中的视频帧获取模块、视频帧发送模块、状态确定模块等均可以作为程序模块存储在存储器中,由处理器执行存储在所述存储器中的上述程序模块来实现相应的功能。
本申请还公开了一种第二电子设备,所述第二电子设备包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述可执行指令包括:在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息;对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态。
上述实施例中的所述的任意一种处理装置包括处理器和存储器,上述实施例中的视频帧接收模块和结果识别反馈模块均可以作为程序模块存储在存储器中,由处理器执行存储在所述存储器中的上述程序模块来实现相应的功能。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质中存储有计算机可执行指令,所述可执行指令被处理器执行时,使得所述处理器执行本申请上述实施例所述的处理方法的步骤。
处理器中包含内核,由内核去存储器中调取相应的程序模块。内核可以设置一个或多个,通过调整内核参数来实现回访数据的处理。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本申请实施例提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述实施例中所述的处理方法。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种处理方法,应用于第一电子设备,所述方法包括:
在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;
将所述待分享视频帧发送至所述至少一第二电子设备;
至少基于所述第二电子设备反馈的对所述标识信息的识别结果与所述标识信息表征的信息是否相同或相似确定所述待分享视频帧在所述第二电子设备上的显示状态,所述显示状态包括待分享视频帧在所述第二电子设备上正常显示的状态,或待分享视频帧在所述第二电子设备上未正常显示的状态。
2.根据权利要求1所述的方法,所述获得待分享视频帧,包括:
在与至少一第二电子设备建立连接的情况下,确定所述第一电子设备的待分享区域;
按照确定的处理策略在所述待分享区域添加标识信息,得到所述待分享视频帧。
3.根据权利要求2所述的方法,所述按照确定的处理策略在所述待分享区域添加标识信息,包括:
获得所述标识信息的属性参数及第一电子设备与至少一第二电子设备之间的连接参数;
至少基于所述属性参数和/或所述连接参数在所述待分享区域确定至少一添加位置;
在所述至少一添加位置添加所述标识信息。
4.根据权利要求1所述的方法,所述至少基于所述第二电子设备反馈的对所述标识信息的识别结果与所述标识信息表征的信息是否相同或相似确定所述待分享视频帧在所述第二电子设备上的显示状态,包括:
在所述识别结果表征所述第二电子设备识别出所述标识信息,或,所述第二电子设备识别到的信息与所述标识信息表征的信息之间的匹配度符合第一阈值的情况下,确定所述待分享视频帧正常显示于所述第二电子设备;
在所述识别结果表征所述第二电子设备未识别出所述标识信息,或,所述第二电子设备识别到的信息与所述标识信息表征的信息之间的匹配度符合第二阈值的情况下,确定所述待分享视频帧未正常显示于所述第二电子设备。
5.根据权利要求1至4任一项所述的方法,还包括:
在第一时间段内分别获得第一电子设备上的第一视频帧图像和第二电子设备上显示的第二视频帧图像;
计算所述第一视频帧图像与所述第二视频帧图像之间的匹配率;
基于所述匹配率和所述识别结果确定所述待分享视频帧是否正常显示于所述第二电子设备。
6.根据权利要求1至4任一项所述的方法,还包括:
基于所述识别结果中的时间信息与本地时间之间的时间差确定所述待分享视频帧在所述第二电子设备显示时的延迟参数;其中,所述标识信息或所述待分享视频帧中编码有时间信息。
7.根据权利要求1至3任一项所述的方法,还包括:
基于确定的更新周期更新所述标识信息。
8.根据权利要求1至4任一项所述的方法,还包括:基于确定的所述显示状态输出提示信息或调整所述待分享视频帧的帧率。
9.一种处理方法,应用于第二电子设备,所述方法包括:
在与第一电子设备建立连接的情况下,接收所述第一电子设备发送的视频帧,所述视频帧至少包括一标识信息;
对接收到的所述视频帧中的标识信息进行识别,并将识别结果反馈给所述第一电子设备,以使所述第一电子设备至少基于所述第二电子设备反馈的对所述标识信息的识别结果与所述标识信息表征的信息是否相同或相似确定所述视频帧在所述第二电子设备上的显示状态,其中,所述识别结果表征所述视频帧在所述第二电子设备上的显示状态,所述显示状态包括视频帧在所述第二电子设备上正常显示的状态,或视频帧在所述第二电子设备上未正常显示的状态。
10.一种处理装置,应用于第一电子设备,包括:
视频帧获取模块,用于在与至少一第二电子设备建立连接的情况下,获得待分享视频帧,所述待分享视频帧至少包括一标识信息;
视频帧发送模块,用于将所述待分享视频帧发送至所述至少一第二电子设备;
状态确定模块,用于至少基于所述第二电子设备反馈的对所述标识信息的识别结果与所述标识信息表征的信息是否相同或相似确定所述待分享视频帧在所述第二电子设备上的显示状态,所述显示状态包括待分享视频帧在所述第二电子设备上正常显示的状态,或待分享视频帧在所述第二电子设备上未正常显示的状态。
CN201911424010.7A 2019-12-31 2019-12-31 一种数据处理方法及装置 Active CN111093088B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911424010.7A CN111093088B (zh) 2019-12-31 2019-12-31 一种数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911424010.7A CN111093088B (zh) 2019-12-31 2019-12-31 一种数据处理方法及装置

Publications (2)

Publication Number Publication Date
CN111093088A CN111093088A (zh) 2020-05-01
CN111093088B true CN111093088B (zh) 2021-07-16

Family

ID=70398705

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911424010.7A Active CN111093088B (zh) 2019-12-31 2019-12-31 一种数据处理方法及装置

Country Status (1)

Country Link
CN (1) CN111093088B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116325764A (zh) * 2020-10-16 2023-06-23 华为技术有限公司 无线投屏方法、装置及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546801A (zh) * 2013-10-24 2014-01-29 深圳创维-Rgb电子有限公司 一种视频转换控制方法、装置及系统
CN104618741A (zh) * 2015-03-02 2015-05-13 浪潮软件集团有限公司 一种基于视频内容的信息推送系统及方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7917583B2 (en) * 2006-02-17 2011-03-29 Verizon Patent And Licensing Inc. Television integrated chat and presence systems and methods
US7988549B2 (en) * 2006-09-26 2011-08-02 Lightning Box Games Pty Limited Electronic system for playing of reel-type games
US20120151542A1 (en) * 2010-12-13 2012-06-14 Arris Group, Inc. Bandwidth Sharing and Statistical Multiplexing between Video and Data Streams
CN102693242B (zh) * 2011-03-25 2015-05-13 开心人网络科技(北京)有限公司 一种网络评论信息的共享方法和系统
CN103297842B (zh) * 2012-03-05 2016-12-28 联想(北京)有限公司 一种数据处理方法及电子设备
US9454789B2 (en) * 2013-05-03 2016-09-27 Digimarc Corporation Watermarking and signal recognition for managing and sharing captured content, metadata discovery and related arrangements

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546801A (zh) * 2013-10-24 2014-01-29 深圳创维-Rgb电子有限公司 一种视频转换控制方法、装置及系统
CN104618741A (zh) * 2015-03-02 2015-05-13 浪潮软件集团有限公司 一种基于视频内容的信息推送系统及方法

Also Published As

Publication number Publication date
CN111093088A (zh) 2020-05-01

Similar Documents

Publication Publication Date Title
CN110418153B (zh) 水印添加方法、装置、设备及存储介质
CN109299326B (zh) 视频推荐方法及装置、系统、电子设备以及存储介质
WO2018054360A1 (zh) 一种在线直播视频质量测试方法和装置
CN107509115A (zh) 一种获取游戏直播中精彩时刻画面的方法及装置
US20170188093A1 (en) Method and electronic device for grading-based program playing based on face recognition
CN105430247A (zh) 一种利用摄像设备拍摄照片的方法与设备
CN113055709B (zh) 视频发布方法、装置、设备、存储介质及程序产品
CN112004046A (zh) 一种基于视频会议的图像处理方法和装置
CN111093088B (zh) 一种数据处理方法及装置
CN108156469A (zh) 一种直播合法性的检测方法和装置
US10553254B2 (en) Method and device for processing video
CN111031359A (zh) 视频播放方法、装置、电子设备和计算机可读存储介质
CN113784084A (zh) 一种处理方法及装置
EP4088206A1 (en) Content authentication based on intrinsic attributes
CN106412492B (zh) 视频数据处理方法和装置
CN113542909A (zh) 视频处理方法、装置、电子设备及计算机存储介质
CN107483855B (zh) 电视音频控制方法、电视及计算机可读存储介质
CN114945079A (zh) 在线笔试的视频录制及监考方法、电子设备及存储介质
CN107516307A (zh) 一种判断上传照片清晰度的处理方法及装置
CN108769525B (zh) 一种图像调整方法、装置、设备及存储介质
CN112601048A (zh) 在线考试监控方法、电子装置及存储介质
CN112102195A (zh) 美颜方法、参数维护方法、装置、电子设备及存储介质
CN111343391A (zh) 影片撷取方法与使用此方法的电子装置
US20230099691A1 (en) Watermark adding method and apparatus, storage medium, and device
US20240205033A1 (en) Image pickup apparatus capable of guaranteeing authenticity of content distributed in real time while photographing, content management apparatus, control method for image pickup apparatus, control method for content management apparatus, and storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant