CN112533014B - 视频直播中目标物品信息处理和显示方法、装置及设备 - Google Patents

视频直播中目标物品信息处理和显示方法、装置及设备 Download PDF

Info

Publication number
CN112533014B
CN112533014B CN202011355176.0A CN202011355176A CN112533014B CN 112533014 B CN112533014 B CN 112533014B CN 202011355176 A CN202011355176 A CN 202011355176A CN 112533014 B CN112533014 B CN 112533014B
Authority
CN
China
Prior art keywords
information
target object
client
real
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011355176.0A
Other languages
English (en)
Other versions
CN112533014A (zh
Inventor
杨昊
刘飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202011355176.0A priority Critical patent/CN112533014B/zh
Publication of CN112533014A publication Critical patent/CN112533014A/zh
Application granted granted Critical
Publication of CN112533014B publication Critical patent/CN112533014B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2542—Management at additional data server, e.g. shopping server, rights management server for selling goods, e.g. TV shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815—Electronic shopping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Abstract

本公开提供了一种视频直播中目标物品信息处理和显示方法、装置及设备，涉及网络通信技术领域。视频直播中目标物品信息处理方法应用于第一客户端，包括：获取视频采集设备采集的实时视频数据；周期地识别实时视频数据的当前帧图像是否包含预设目标物品；当识别到当前帧图像包含预设目标物品时，获取预设目标物品在当前帧图像中的位置信息，并在编码实时视频数据时，插入预设目标物品在当前帧图像中的位置信息，生成实时视频数据的编码视频流；以及向第二客户端发送实时视频数据的编码视频流。

Description

视频直播中目标物品信息处理和显示方法、装置及设备
技术领域
本公开涉及网络通信技术领域，尤其涉及一种视频直播中目标物品信息处理和显示方法、装置及设备。
背景技术
随着视频直播购物应用的迅猛发展，各种购物直播的场景需求也越来越多。视频直播的观看者不再希望受限于被动观看直播和按照传统购物车方式来选择商品。
现有的购物直播方式一般分为两种：一种为隐藏购物按钮的全屏直播，当观看者想要购买产品时，先需要点击屏幕来唤醒应用界面，显示出购物按钮，然后才能点击购物按钮来进行购物，降低了观看者的购物体验；另一种为购物按钮全程覆盖直播画面，影响了观看者的感官。
需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的目的在于提供一种视频直播中目标物品信息处理和显示方法、装置及设备。
本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。
根据本公开的一个方面，提供一种视频直播中目标物品信息处理方法，应用于第一客户端，包括：获取视频采集设备采集的实时视频数据；周期地识别实时视频数据的当前帧图像是否包含预设目标物品；当识别到当前帧图像包含预设目标物品时，获取预设目标物品在当前帧图像中的位置信息，并在编码实时视频数据时，插入预设目标物品在当前帧图像中的位置信息，生成实时视频数据的编码视频流；以及向第二客户端发送实时视频数据的编码视频流。
根据本公开的一实施方式，在编码实时视频数据时，插入预设目标物品在当前帧图像中的位置信息，包括：将位置信息封装在预设格式信息数据包中，并将预设格式信息数据包插入在实时视频数据的编码视频流中。
根据本公开的一实施方式，第一客户端和第二客户端包括：WebRTC客户端。
根据本公开的一实施方式，采用H.264编码器对实时视频数据进行编码；预设格式信息数据包包括：H.264SEI数据包。
根据本公开的一实施方式，识别周期为H.264GOP长度；将预设格式信息数据包插入在实时视频数据的编码视频流中，包括：将H.264SEI数据包插入到H.264GOP的第一帧中。
根据本公开的一实施方式：预设目标物品包括多个；周期地识别实时视频数据的当前帧图像是否包含预设目标物品，包括：周期地识别实时视频数据的当前帧图像是否包含多个预设目标物品的至少其中之一。
根据本公开的另一方面，提供一种视频直播中目标物品信息显示方法，应用于第二客户端，包括：周期地监听并存储用户对屏幕的定位信息；接收从第一客户端获取的编码视频流；对编码视频流进行解码，以获取并播放实时视频数据；检测编码视频流是否包含目标物品信息，目标物品信息包括：目标物品在所在帧图像中的位置信息及目标物品的相关信息；以及当从编码视频流中检测到目标物品信息时，判断最新存储的定位信息是否在位置信息的范围之内；当最新存储的定位信息在位置信息的范围之内时，显示目标物品的相关信息。
根据本公开的一实施方式，检测编码视频流是否包含目标物品信息，包括：检测编码视频流是否包含预设格式信息数据包，及当检测到编码视频流包含预设格式信息数据包时，从预设格式信息数据包中解析出目标物品信息。
根据本公开的一实施方式，第一客户端和第二客户端包括：WebRTC客户端。
根据本公开的一实施方式，编码视频流包括格式为H.264的编码视频流；预设格式信息数据包包括：H.264SEI数据包。
根据本公开的一实施方式，定位信息包括：用户触摸屏幕时的触摸位置信息，和/或，追踪到用户眼球在屏幕上的聚焦位置信息。
根据本公开的一实施方式，显示目标物品的相关信息包括：通过弹出窗口方式显示目标物品的相关信息。
根据本公开的又一方面，提供一种视频直播中目标物品信息处理装置，应用于第一客户端，包括：视频数据获取模块，用于获取视频采集设备采集的实时视频数据；预设物品识别模块，用于周期地识别实时视频数据的当前帧图像是否包含预设目标物品；物品信息添加模块，用于当预设物品识别模块识别到当前帧图像包含预设目标物品时，获取预设目标物品在当前帧图像中的位置信息，并在编码实时视频数据时，插入预设目标物品在当前帧图像中的位置信息，生成实时视频数据的编码视频流；以及编码视频发送模块，用于向第二客户端发送实时视频数据的编码视频流。
根据本公开的再一方面，提供一种视频直播中目标物品信息显示装置，应用于第二客户端，包括：定位信息监听模块，用于周期地监听并存储用户对屏幕的定位信息；编码视频接收模块，用于接收从第一客户端获取的编码视频流；编码视频解码模块，用于对编码视频流进行解码，以获取并播放实时视频数据；目标物品检测模块，用于检测编码视频流是否包含目标物品信息，目标物品信息包括：目标物品在所在帧图像中的位置信息及目标物品的相关信息；以及目标物品显示模块，用于当目标物品从编码视频流中检测到目标物品信息时，判断最新存储的定位信息是否在位置信息的范围之内；当最新存储的定位信息在位置信息的范围之内时，显示目标物品的相关信息。
根据本公开的再一方面，提供一种电子设备，包括：处理器；以及存储器，用于存储处理器的可执行指令；其中，处理器配置为经由执行可执行指令来执行上述任意一种视频直播中目标物品信息处理方法，或者，来执行上述任意一种视频直播中目标物品信息显示方法。
根据本公开的再一方面，提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述任意一种视频直播中目标物品信息处理方法，或者，来执行上述任意一种视频直播中目标物品信息显示方法。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本公开一个示例性实施例提供的视频直播系统的结构示意图。
图2示出本公开实施例中一种视频直播中目标物品信息处理方法的流程图。
图3为根据一示例示出的H.264SEI消息头部格式示意图。
图4示出本公开实施例中一种视频直播中目标物品信息显示方法的流程图。
图5是根据一示例示出的在视频直播过程中通过弹窗方式显示目标物品的相关信息的示意图。
图6示出本公开实施例中一种视频直播中目标物品信息处理装置示意图。
图7示出本公开实施例中一种视频直播中目标物品信息显示装置示意图。
图8示出了适于用来实现本公开示例性实施方式的终端设备的示意图。
图9示出本公开实施例中一种计算机可读存储介质的示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
此外，在本公开的描述中，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。
本公开实施例提供的方案，应用于在线视频直播技术领域，尤其可应用于在线直播购物场景，具体通过如下实施例进行说明：
图1是本公开一个示例性实施例提供的视频直播系统的结构示意图。该视频直播系统包括：第一终端101和第二终端102。
第一终端101和/或第二终端102例如可以为个人计算机(Personal Computer，PC)，比如膝上型便携计算机和台式计算机等；或者，也可以为移动终端，如手机、游戏主机、平板电脑、电子书阅读器、智能眼镜、MP4(MovingPicture Experts Group Audio LayerIV，动态影像专家压缩标准音频层面4)播放器、智能家居设备、AR(Augmented Reality，增强现实)设备、VR(Virtual Reality，虚拟现实)设备等。
其中，第一终端101中例如安装有提供直播过程推流服务的客户端(如视频直播中的主播端客户端)。第二终端102中例如安装有提供直播过程中拉流服务的客户端(如视频直播中观看直播的客户端)。
在一些实施例中，第一终端101和第二终端102之间基于WebRTC(Web Real-TimeCommunication，网页即时通信)技术进行视频直播。WebRTC是一个支持网页浏览器进行实时语音对话或视频对话的API。WebRTC建立了一个多互联网浏览器间健壮的实时通信的平台，提供了视频会议的核心技术，包括音视频的采集、编解码、网络传输、显示等功能，并且还支持跨平台，如：Windows、Linux、Mac、Android等。
可选地，不同的第二终端102中安装的应用程序的客户端是相同的，或两个第二终端102上安装的应用程序的客户端是不同控制系统平台的同一类型应用程序的客户端。基于终端平台的不同，该应用程序的客户端的具体形态也可以不同，比如，该应用程序客户端可以是手机客户端、PC客户端或者全球广域网(World Wide Web，Web)客户端等。
本领域技术人员可以知晓，上述第二终端102的数量可以更多或更少。比如上述终端可以仅为一个，或者上述终端为几十个或几百个，或者更多数量。本公开实施例对终端的数量和设备类型不加以限定。
第一终端101与第二终端102之间通过通信网络连接。可选的，通信网络可以是有线网络，也可以是无线网络。
可选的，上述的无线网络或有线网络使用标准通信技术和/或协议。网络通常为因特网、但也可以是任何网络，包括但不限于局域网(Local Area Network，LAN)、城域网(Metropolitan Area Network，MAN)、广域网(Wide Area Network，WAN)、移动、有线或者无线网络、专用网络或者虚拟专用网络的任何组合)。在一些实施例中，使用包括超文本标记语言(Hyper Text Mark-up Language，HTML)、可扩展标记语言(ExtensibleMarkupLanguage，XML)等的技术和/或格式来代表通过网络交换的数据。此外还可以使用诸如安全套接字层(Secure Socket Layer，SSL)、传输层安全(Transport Layer Security，TLS)、虚拟专用网络(Virtual Private Network，VPN)、网际协议安全(InternetProtocolSecurity，IPsec)等常规加密技术来加密所有或者一些链路。在另一些实施例中，还可以使用定制和/或专用数据通信技术取代或者补充上述数据通信技术。
在一些可选的实施例中，通信网络还可以包括通信服务器，用于建立第一终端101与第二终端102之间的数据传输通路。通信服务器如可以是一台服务器，或者是由若干台服务器组成的服务器集群，再或者是一个虚拟化平台，再或者是一个云计算服务中心。
下面，将结合附图及实施例对本公开示例实施例中的视频直播中目标物品信息处理方法及视频直播中目标物品信息显示方法的各个步骤进行更详细的说明。
图2示出本公开实施例中一种视频直播中目标物品信息处理方法的流程图。本公开实施例提供的方法可以由任意具备计算处理能力的电子设备执行，例如如图1中的第一终端101，其中安装有提供直播过程推流服务的第一客户端。
如图2所示，视频直播中目标物品信息处理方法20包括：
在步骤S202中，获取视频采集设备采集的实时视频数据。
视频采集设备如可以为第一终端101中的摄像头等设备，其用于拍摄视频，得到实时视频数据。需要说明的时，本公开对视频采集设备采集到的实时视频数据的格式不作限定，其可以为任意可播放的视频格式。
第一客户端从视频采集设备中获取实时视频数据。为了适于网络传输，第一客户端对实时视频数据进行编码，并将编码后的编码视频流发送给第二终端102。如上述，第二终端102中安装有提供视频直播播放功能的第二客户端。
在步骤S204中，周期地识别实时视频数据的当前帧图像是否包含预设目标物品。
以视频直播购物应用场景为例，主播在视频直播之前，如可以将本次直播待售卖的一种或多种目标物品的相关信息通过第一客户端进行配置。相关信息包括：待售卖的目标物品的图片及其他相关信息，如物品名称及购买链接等信息。
第一客户端周期地识别获取到的实时视频数据中的当前帧图像是否包含预设目标物品。第一客户端如可以在当前帧图像中，识别其中是否包含预先配置的目标物品中的图片。需要说明的是，本公开不限定所采用的图片识别方法。
在步骤S206中，当识别到当前帧图像包含预设目标物品时，获取预设目标物品在当前帧图像中的位置信息，并在编码实时视频数据时，插入预设目标物品在当前帧图像中的位置信息，生成实时视频数据的编码视频流。
位置信息如可以为预设目标物品在当前帧图像中的坐标区间。
在一些实施例中，如可以将识别到的位置信息封装在预设格式信息数据包中，并将预设格式信息数据包插入在实时视频数据的编码视频流中。
以第一客户端和第二客户端均为WebRTC客户端为例。第一客户端采用H.264编码器对实时视频数据进行编码。H.264是由ITU-T视频编码专家组(VCEG)和ISO/IEC动态图像专家组(MPEG)联合组成的联合视频组(JVT，Joint Video Team)提出的高度压缩数字视频编解码器标准。H.264标准各主要部分有访问单元分割符(Access Unit delimiter)，附加增强信息(Supplemental Enhancement Information，SEI)，基本图像编码(primary codedpicture)，冗余图像编码(Redundant Coded Picture)。还有即时解码刷新(InstantaneousDecoding Refresh，IDR)、假想参考解码(Hypothetical Reference Decoder，HRD)、假想码流调度器(Hypothetical Stream Scheduler，HSS)。
第一客户端如可以将识别到的位置信息及预先配置的该目标物品的其他相关信息封装在H.264SEI数据包中。
图3为根据一示例示出的H.264SEI消息头部格式示意图。
如图3所示，F、NRI及类型字段为H.264的固定头部语法，具体数据码如可以为“0x0000000106”。
“负荷类型(payloadType)”字段用于指示SEI数据包的数据类型。在本公开中，该SEI数据包为自定义消息，该字段如可以设置为“0x05”，表示当前SEI数据包是未注册的用户信息数据包。
“负荷尺寸(payloadSize)”字段用于指示SEI数据包的长度大小。在本公开中，该SEI数据包为自定义消息，长度为预先设定好的，在该字段中可以填写预先设定的大小值。
“uuid_iso_iec_11578”字段为SEI数据包的UUID(Universally UniqueIdentifier，通用唯一识别码)，为固定信息。在本公开中，例如可以固定写为“0X01020304010203040506070805060708”。
在如图3所示的头部格式之后，为数据字段定义。在本公开中，数据字段例如可以定义为：第0位字节表示图像中商品总数，第1到第2字节表示商品序号，第3到第4字节表示商品是否出现在图像中，第5字节到第10字节表示商品在图像中的长宽，第11到第15字节表示商品在图像中的起始位置坐标，第16到第30字节表示商品的购买链接字符串。此后循环1到30位字节的定义，直到所有商品信息表述完毕。设定数量N等于第0位字节表示的商品总数，则第N*30+1位字节固定写为“0x80”。需要说明的是，上述对自定义SEI数据包数据字段的定义仅为示例，而非限制本公开，该数据字段可以根据实际应用需要而定义。
在一些实施例中，上述的识别周期为H.264GOP(Group of picture，组群图片)长度，也即每间隔GOP长度进行一次识别，并将识别得到的SEI数据包插入到H.264GOP的第一帧中。
此外，第一客户端也可以直接将识别到的预设目标物品的位置信息及其他相关信息直接插入到视频数据包中(如未使用的字段中)，以发送给第二客户端。
如上述，在一些实施例中，当预先配置的目标物品有多个时，第一客户端周期地识别实时视频数据的当前帧图像是否包含多个预设目标物品的至少其中之一。例如，有时候，主播可能同时在画面中展示多个目标物品，这时第一客户端在进行目标物品识别时，会识别到多个目标物品。在当前周期的帧图像中，当第一客户端识别到当前帧图像包含多个预设目标物品的至少其中之一时，获取识别到的一个或多个目标物品在当前帧图像中的位置信息，并在编码实时视频数据时，插入该位置信息，生成实时视频数据的编码视频流。例如，如上述将位置信息封装在H.264SEI数据包中。
在步骤S208中，向第二客户端发送实时视频数据的编码视频流。
第一客户端将对实时视频数据进行编码后的编码视频流发送给第二客户端。此外，如上述该编码视频流中还包含有插入的预设目标物品在其所在帧图像中的位置信息、购买链接信息等。从而使得第二客户端在接收到该编码视频流后，可以在解码后，得到预设目标物品在帧图像中的位置信息。关于第二客户端的操作，将在下文中具体说明。
根据本公开实施例提供的视频直播中目标物品信息处理方法，通过推流客户端对采集的实时视频数据进行预设目标物品识别，并将识别到的信息插入到编码视频流中，发送给拉流客户端。该方法由于在推流客户端端执行，可以统一识别标准，并且仅需推流端一个客户端来执行，拉流客户端仅需利用推流客户端的识别结果进行相应操作即可。此外，因为通过将识别到的信息插入到编码视频流中，主播可以更方便的添加需要传达给观看用户的信息，而不需要对建立额外的交互通道。
图4示出本公开实施例中一种视频直播中目标物品信息显示方法的流程图。本公开实施例提供的方法可以由任意具备计算处理能力的电子设备执行，例如如图1中的第二终端102，其中安装有提供直播过程拉流服务的第二客户端。
如图4所示，视频直播中目标物品信息显示方法40包括：
在步骤S402中，周期地监听并存储用户对屏幕的定位信息。
该定位信息例如包括：用户触摸屏幕时的触摸位置信息，和/或，追踪到用户眼球在屏幕上的聚焦位置信息等。
以触屏场景为例，第二客户端周期地监听第二终端102操作系统发出的触屏消息。当监听到有触屏消息时，便将根据触碰消息获取的触屏位置信息存储起来。例如可以按照时间先后分别存储，或者也可以将每次最新获得触屏位置信息覆盖原有的存储记录。
此外，第二客户端还可以周期地监听诸如摄像头等设备捕捉到的用户观看视频时眼球在屏幕上的聚焦消息。当监听到聚焦消息时，将根据该聚焦消息获取的触屏位置信息存储起来。如上述，可以按照时间先后分别存储，也可以将每次最新获得的聚焦位置信息覆盖原有的存储记录。
该定位信息如以其在屏幕中的坐标区间来表示。
在步骤S404中，接收从第一客户端获取的编码视频流。
如上述，第一客户端如为提供直播过程推流服务的客户端，第一客户端将实时视频数据编码为编码视频流，推送给各第一客户端，从而实现视频实时直播。此外，在本公开中，编码视频流中还插入有第一客户端识别到的预设目标物品在其所在帧图像中的位置信息等。
在步骤S406中，对编码视频流进行解码，以获取并播放实时视频数据。
如上述，编码视频流例如采用H.264编码方式进行编码，第二客户端接收到编码视频流后，相应地进行解码，获取到实时视频数据，并相应地进行播放。该实时视频数据的格式可以为任意可由第二客户端播放的格式，本公开不以此为限。
在步骤S408中，检测所述编码视频流是否包含目标物品信息。
所述目标物品信息包括：目标物品在其所在帧图像中的位置信息及其他相关信息。
如上述，第二客户端如可以检测编码视频流是否包含预设格式信息数据包，或者检测视频数据的数据包里是否插入有目标物品的相关信息。
仍以第一客户端和第二客户端均为WebRTC客户端为例，第一客户端将目标物品的位置信息等封装在H.264SEI数据包中。第二客户端检测编码视频流是否包含H.264SEI数据包。例如，第二客户端以如图3所示的格式来解析编码视频流中是否包含H.264SEI数据包，并从其中解析出各字段的数据，来获得目标物品的位置信息等。
在步骤S410中，当从编码视频流中检测到目标物品信息时，判断最新存储的定位信息是否在检测到的目标物品的位置信息的范围之内。当最新存储的定位信息在位置信息的范围之时，显示检测到的目标物品的相关信息。
例如，可以判断定位信息的坐标区间是否在位置信息的坐标区间之内，如果在，则判断该定位信息落在位置信息的范围之内。
例如，第二客户端可以通过弹窗方式显示目标物品的相关信息，如上述的目标物品的购买链接等。
图5是根据一示例示出的在视频直播过程中通过弹窗方式显示目标物品的相关信息的示意图。
如图5中所示，相关信息以该目标物品的购买链接为例，用户通过点选购买按钮，则可以跳转到对应的购买链接，以购买该目标物品。
此外，图5还示出了当同时检测到在一帧图像中出现了多个目标物品时，分别在各目标物品的周围进行弹窗，以便用户方便区分不同的目标物品的购买链接。
需要说明的是，图5的弹窗示意图仅为一示例，而非限制本公开。
根据本公开提供的视频直播中目标物品信息显示方法，用户不再受限于被动观看直播和以传统购物车方式来选择商品。用户能够通过诸如点击方式来进行视频互动，选择需要购买的商品。在不需要购物链接的时候可以全屏的观看视频直播，达成了购物体验加观看体验的良好平衡。
需要注意的是，上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。
下述为本公开装置实施例，可以用于执行本公开方法实施例。对于本公开装置实施例中未披露的细节，请参照本公开方法实施例。
图6示出本公开实施例中一种视频直播中目标物品信息处理装置示意图。该视频直播中目标物品信息处理装置例如可以应用于如图1中的第一终端101中，尤其应用于其中安装的提供直播过程推流服务的第一客户端中。
如图6所示，视频直播中目标物品信息处理装置60包括：视频数据获取模块601、预设物品识别模块602、物品信息添加模块603及编码视频发送模块604。
其中，视频数据获取模块601用于获取视频采集设备采集的实时视频数据。
预设物品识别模块602用于周期地识别实时视频数据的当前帧图像是否包含预设目标物品。
物品信息添加模块603用于当预设物品识别模块识别到当前帧图像包含预设目标物品时，获取预设目标物品在当前帧图像中的位置信息，并在编码实时视频数据时，插入预设目标物品在当前帧图像中的位置信息，生成实时视频数据的编码视频流。
编码视频发送模块604用于向第二客户端发送实时视频数据的编码视频流。
在一些实施例中，物品信息添加模块603进一步用于将位置信息封装在预设格式信息数据包中，并将预设格式信息数据包插入在实时视频数据的编码视频流中。
在一些实施例中，第一客户端和第二客户端包括：WebRTC客户端。
在一些实施例中，采用H.264编码器对实时视频数据进行编码；预设格式信息数据包包括：H.264SEI数据包。
在一些实施例中，识别周期为H.264GOP长度；物品信息添加模块603进一步用于将H.264SEI数据包插入到H.264GOP的第一帧中。
在一些实施例中，预设目标物品包括多个；预设物品识别模块602进一步用于周期地识别实时视频数据的当前帧图像是否包含多个预设目标物品的至少其中之一。
根据本公开实施例提供的视频直播中目标物品信息处理装置，通过推流客户端对采集的实时视频数据进行预设目标物品识别，并将识别到的信息插入到编码视频流中，发送给拉流客户端。该方法由于在推流客户端端执行，可以统一识别标准，并且仅需推流端一个客户端来执行，拉流客户端仅需利用推流客户端的识别结果进行相应操作即可。此外，因为通过将识别到的信息插入到编码视频流中，主播可以更方便的添加需要传达给观看用户的信息，而不需要对建立额外的交互通道。
图7示出本公开实施例中一种视频直播中目标物品信息显示装置示意图。该视频直播中目标物品信息显示装置例如可以应用于如图1中的第二终端102中，尤其应用于其中安装的提供直播过程拉流服务的第二客户端中。
如图7所示，视频直播中目标物品信息显示装置70包括：定位信息监听模块701、编码视频接收模块702、编码视频解码模块703、目标物品检测模块704及目标物品显示模块705。
其中，定位信息监听模块701用于周期地监听并存储用户对屏幕的定位信息。
编码视频接收模块702用于接收从第一客户端获取的编码视频流。
编码视频解码模块703用于对编码视频流进行解码，以获取并播放实时视频数据。
目标物品检测模块704用于检测编码视频流是否包含目标物品信息，目标物品信息包括：目标物品在所在帧图像中的位置信息及目标物品的相关信息。
目标物品显示模块705用于当目标物品从编码视频流中检测到目标物品信息时，判断最新存储的定位信息是否在位置信息的范围之内；当最新存储的定位信息在位置信息的范围之内时，显示目标物品的相关信息。
在一些实施例中，目标物品检测模块704进一步用于检测编码视频流是否包含预设格式信息数据包，及当检测到编码视频流包含预设格式信息数据包时，从预设格式信息数据包中解析出目标物品信息。
在一些实施例中，第一客户端和第二客户端包括：WebRTC客户端。
在一些实施例中，编码视频流包括格式为H.264的编码视频流；预设格式信息数据包包括：H.264SEI数据包。
在一些实施例中，定位信息包括：用户触摸屏幕时的触摸位置信息，和/或，追踪到用户眼球在屏幕上的聚焦位置信息。
在一些实施例中，目标物品显示模块705进一步用于通过弹出窗口方式显示目标物品的相关信息。
根据本公开提供的视频直播中目标物品信息显示装置，用户不再受限于被动观看直播和以传统购物车方式来选择商品。用户能够通过诸如点击方式来进行视频互动，选择需要购买的商品。在不需要购物链接的时候可以全屏的观看视频直播，达成了购物体验加观看体验的良好平衡。
所属技术领域的技术人员能够理解，本公开的各个方面可以实现为系统、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。
图8示出了适于用来实现本公开示例性实施方式的终端设备的示意图。本公开所述的第一终端设备101和第二终端设备102均可以配置为如图8所示的终端设备80。需要说明的是，图8示出的终端设备80仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。
本公开的终端设备至少包括处理器和存储器，存储器用于存储一个或多个程序，当一个或多个程序被处理器执行时，使得处理器可以实现本公开示例性实施方式的视频直播中目标物品信息处理方法，或者，来实现视频直播中目标物品信息显示方法。
具体的，如图8所示，终端设备80可以包括：处理器810、内部存储器821、外部存储器接口822、通用串行总线(Universal Serial Bus，USB)接口830、充电管理模块840、电源管理模块841、电池842、移动通信模块850、天线851、无线通信模块860、天线861、音频模块870、扬声器871、受话器872、麦克风873、耳机接口874、传感器模块880、显示屏890、摄像模组891、指示器892、马达893、按键894以及用户标识模块(Subscriber IdentificationModule，SIM)卡模块895等。其中传感器模块880可以包括深度传感器8801、压力传感器8802、陀螺仪传感器8803、气压传感器8804、磁传感器8805、加速度传感器8806、距离传感器8807、接近光传感器8808、指纹传感器8809、温度传感器8810、触摸传感器8811、环境光传感器8812及骨传导传感器8813等。
可以理解的是，本申请实施例示意的结构并不构成对终端设备80的具体限定。在本申请另一些实施例中，终端设备800可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。
处理器810可以包括一个或多个处理单元，例如：处理器810可以包括应用处理器(Application Processor，AP)、调制解调处理器、图形处理器(Graphics ProcessingUnit，GPU)、图像信号处理器(Image Signal Processor，ISP)、控制器、视频编解码器、数字信号处理器(Digital Signal Processor，DSP)、基带处理器和/或神经网络处理器(Neural-etwork Processing Unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。另外，处理器810中还可以设置存储器，用于存储指令和数据。
USB接口830是符合USB标准规范的接口，具体可以是MiniUSB接口，MicroUSB接口，USBType-C接口等。USB接口830可以用于连接充电器为终端设备80充电，也可以用于终端设备80与外围设备之间传输数据。也可以用于连接耳机，通过耳机播放音频。该接口还可以用于连接其他电子设备，例如AR设备等。
充电管理模块840用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。电源管理模块841用于连接电池842、充电管理模块840与处理器810。电源管理模块841接收电池842和/或充电管理模块840的输入，为处理器810、内部存储器821、显示屏890、摄像模组891和无线通信模块860等供电。
终端设备80的无线通信功能可以通过天线851、天线861、移动通信模块850、无线通信模块860、调制解调处理器以及基带处理器等实现。
移动通信模块850可以提供应用在终端设备80上的包括2G/3G/4G/5G等无线通信的解决方案。
无线通信模块860可以提供应用在终端设备80上的包括无线局域网(WirelessLocal Area Networks，WLAN)(如无线保真(Wireless Fidelity，Wi-Fi)网络)、蓝牙(Bluetooth，BT)、全球导航卫星系统(Global Navigation Satellite System，GNSS)、调频(Frequency Modulation，FM)、近距离无线通信技术(Near Field Communication，NFC)、红外技术(Infrared，IR)等无线通信的解决方案。
终端设备80通过GPU、显示屏890及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏890和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器810可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。
终端设备80可以通过ISP、摄像模组891、视频编解码器、GPU、显示屏890及应用处理器等实现拍摄功能。在一些实施例中，终端设备80可以包括1个或N个摄像模组891，N为大于1的正整数，若终端设备80包括N个摄像头，N个摄像头中有一个是主摄像头。
内部存储器821可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。内部存储器821可以包括存储程序区和存储数据区。外部存储器接口822可以用于连接外部存储卡，例如Micro SD卡，实现扩展终端设备80的存储能力。
终端设备80可以通过音频模块870、扬声器871、受话器872、麦克风873、耳机接口874及应用处理器等实现音频功能。例如音乐播放、录音等。
音频模块870用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块870还可以用于对音频信号编码和解码。在一些实施例中，音频模块870可以设置于处理器810中，或将音频模块870的部分功能模块设置于处理器810中。
扬声器871，也称“喇叭”，用于将音频电信号转换为声音信号。终端设备80可以通过扬声器871收听音乐，或收听免提通话。受话器872，也称“听筒”，用于将音频电信号转换成声音信号。当终端设备80接听电话或语音信息时，可以通过将受话器872靠近人耳接听语音。麦克风873，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风873发声，将声音信号输入到麦克风873。终端设备80可以设置至少一个麦克风873。耳机接口874用于连接有线耳机。
针对终端设备80包括的传感器，深度传感器8801用于获取景物的深度信息。压力传感器8802用于感受压力信号，可以将压力信号转换成电信号。陀螺仪传感器8803可以用于确定终端设备80的运动姿态。气压传感器8804用于测量气压。磁传感器8805包括霍尔传感器。终端设备80可以利用磁传感器8805检测翻盖皮套的开合。加速度传感器8806可检测终端设备80在各个方向上(一般为三轴)加速度的大小。距离传感器8807用于测量距离。接近光传感器8808可以包括例如发光二极管(LED)和光检测器，例如光电二极管。指纹传感器8809用于采集指纹。温度传感器8810用于检测温度。触摸传感器8811可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏890提供与触摸操作相关的视觉输出。环境光传感器8812用于感知环境光亮度。骨传导传感器8813可以获取振动信号。
按键894包括开机键，音量键等。按键894可以是机械按键。也可以是触摸式按键。马达893可以产生振动提示。马达893可以用于来电振动提示，也可以用于触摸振动反馈。指示器892可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示消息，未接来电，通知等。
SIM卡模块895用于连接SIM卡，例如Nano SIM、Micro SIM等。终端设备80通过SIM卡和网络交互，实现语音业务通信以及数据业务通信等功能。语音业务通信如可以包括：接打电话、视频通话等业务，数据业务如可以包括：浏览网页、网络游戏、视频缓冲、下载/上传数据、即时通信等。需要说明的是，SIM卡模块895也可以实现为虚拟的SIM卡功能，或者SIM卡模块也可以为软SIM卡。
通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。
在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中，本公开的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。
参考图9所示，描述了根据本公开的实施方式的用于实现上述方法的程序产品90，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本公开的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由所附的权利要求指出。

Claims (16)

1.一种视频直播中目标物品信息处理方法，应用于第一客户端，其特征在于，包括：
获取视频采集设备采集的实时视频数据；
周期地识别所述实时视频数据的当前帧图像是否包含预设目标物品，所述预设目标物品为根据一种或多种目标物品的相关信息进行预先配置得到；
当识别到所述当前帧图像包含所述预设目标物品时，获取所述预设目标物品在所述当前帧图像中的位置信息，并在编码所述实时视频数据时，插入所述预设目标物品在所述当前帧图像中的位置信息和所述预设目标物品的相关信息，生成所述实时视频数据的编码视频流；以及
向第二客户端发送所述实时视频数据的编码视频流；
其中，所述预设目标物品在所述当前帧图像中的位置信息用于与所述第二客户端最新存储的用户对屏幕的定位信息进行比较，并在所述最新存储的定位信息在所述位置信息的范围之内时，在所述第二客户端播放所述编码视频流对应的实时视频数据时显示所述预设目标物品的相关信息。
2.根据权利要求1所述的方法，其特征在于，在编码所述实时视频数据时，插入所述预设目标物品在所述当前帧图像中的位置信息，包括：将所述位置信息和所述预设目标物品的相关信息封装在预设格式信息数据包中，并将所述预设格式信息数据包插入在所述实时视频数据的编码视频流中。
3.根据权利要求2所述的方法，其特征在于，所述第一客户端和所述第二客户端包括：WebRTC客户端。
4.根据权利要求3所述的方法，其特征在于，采用H.264编码器对所述实时视频数据进行编码；所述预设格式信息数据包包括：H.264SEI数据包。
5.根据权利要求4所述的方法，其特征在于，识别周期为H.264GOP长度；将所述预设格式信息数据包插入在所述实时视频数据的编码视频流中，包括：将所述H.264SEI数据包插入到H.264GOP的第一帧中。
6.根据权利要求1-5任一项所述的方法，其特征在于：所述预设目标物品包括多个；周期地识别所述实时视频数据的当前帧图像是否包含预设目标物品，包括：周期地识别所述实时视频数据的当前帧图像是否包含多个所述预设目标物品的至少其中之一。
7.一种视频直播中目标物品信息显示方法，应用于第二客户端，其特征在于，包括：
周期地监听并存储用户对屏幕的定位信息；
接收从第一客户端获取的编码视频流，所述编码视频流中插入有所述第一客户端识别到的预设目标物品在所在帧图像中的位置信息和所述预设目标物品的相关信息；
对所述编码视频流进行解码，以获取并播放实时视频数据；
检测所述编码视频流是否包含目标物品信息，所述目标物品信息包括：目标物品在所在帧图像中的位置信息及所述目标物品的相关信息；以及
当从所述编码视频流中检测到所述目标物品信息时，判断最新存储的所述定位信息是否在所述位置信息的范围之内；当最新存储的所述定位信息在所述位置信息的范围之内时，显示所述目标物品的相关信息。
8.根据权利要求7所述的方法，其特征在于，检测所述编码视频流是否包含目标物品信息，包括：检测所述编码视频流是否包含预设格式信息数据包，及当检测到所述编码视频流包含所述预设格式信息数据包时，从所述预设格式信息数据包中解析出所述目标物品信息。
9.根据权利要求8所述的方法，其特征在于，所述第一客户端和所述第二客户端包括：WebRTC客户端。
10.根据权利要求9所述的方法，其特征在于，所述编码视频流包括格式为H.264的编码视频流；所述预设格式信息数据包包括：H.264SEI数据包。
11.根据权利要求7-10任一项所述的方法，其特征在于，所述定位信息包括：用户触摸所述屏幕时的触摸位置信息，和/或，追踪到用户眼球在所述屏幕上的聚焦位置信息。
12.根据权利要求11所述的方法，其特征在于，显示所述目标物品的相关信息包括：通过弹出窗口方式显示所述目标物品的相关信息。
13.一种视频直播中目标物品信息处理装置，应用于第一客户端，其特征在于，包括：
视频数据获取模块，用于获取视频采集设备采集的实时视频数据；
预设物品识别模块，用于周期地识别所述实时视频数据的当前帧图像是否包含预设目标物品，所述预设目标物品为根据一种或多种目标物品的相关信息进行预先配置得到；
物品信息添加模块，用于当所述预设物品识别模块识别到所述当前帧图像包含所述预设目标物品时，获取所述预设目标物品在所述当前帧图像中的位置信息，并在编码所述实时视频数据时，插入所述预设目标物品在所述当前帧图像中的位置信息和所述预设目标物品的相关信息，生成所述实时视频数据的编码视频流；以及
编码视频发送模块，用于向第二客户端发送所述实时视频数据的编码视频流；
其中，所述预设目标物品在所述当前帧图像中的位置信息用于与所述第二客户端最新存储的用户对屏幕的定位信息进行比较，并在所述最新存储的定位信息在所述位置信息的范围之内时，在所述第二客户端播放所述编码视频流对应的实时视频数据时显示所述预设目标物品的相关信息。
14.一种视频直播中目标物品信息显示装置，应用于第二客户端，其特征在于，包括：
定位信息监听模块，用于周期地监听并存储用户对屏幕的定位信息；
编码视频接收模块，用于接收从第一客户端获取的编码视频流，所述编码视频流中插入有所述第一客户端识别到的预设目标物品在所在帧图像中的位置信息和所述预设目标物品的相关信息；
编码视频解码模块，用于对所述编码视频流进行解码，以获取并播放实时视频数据；
目标物品检测模块，用于检测所述编码视频流是否包含目标物品信息，所述目标物品信息包括：目标物品在所在帧图像中的位置信息及所述目标物品的相关信息；以及
目标物品显示模块，用于当所述目标物品从所述编码视频流中检测到所述目标物品信息时，判断最新存储的所述定位信息是否在所述位置信息的范围之内；当最新存储的所述定位信息在所述位置信息的范围之内时，显示所述目标物品的相关信息。
15.一种电子设备，其特征在于，包括：
处理器；以及
存储器，用于存储所述处理器的可执行指令；
其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1-6中任一项所述的视频直播中目标物品信息处理方法，或者，来执行权利要求7-12中任一项所述的视频直播中目标物品信息显示方法。
16.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1-6中任一项所述的视频直播中目标物品信息处理方法，或者，来执行权利要求7-12中任一项所述的视频直播中目标物品信息显示方法。
CN202011355176.0A 2020-11-26 2020-11-26 视频直播中目标物品信息处理和显示方法、装置及设备 Active CN112533014B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011355176.0A CN112533014B (zh) 2020-11-26 2020-11-26 视频直播中目标物品信息处理和显示方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011355176.0A CN112533014B (zh) 2020-11-26 2020-11-26 视频直播中目标物品信息处理和显示方法、装置及设备

Publications (2)

Publication Number Publication Date
CN112533014A CN112533014A (zh) 2021-03-19
CN112533014B true CN112533014B (zh) 2023-06-09

Family

ID=74994586

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011355176.0A Active CN112533014B (zh) 2020-11-26 2020-11-26 视频直播中目标物品信息处理和显示方法、装置及设备

Country Status (1)

Country Link
CN (1) CN112533014B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113645486A (zh) * 2021-07-16 2021-11-12 北京爱笔科技有限公司 视频数据的处理方法、装置、计算机设备和存储介质
CN113596496A (zh) * 2021-07-28 2021-11-02 广州博冠信息科技有限公司 虚拟直播间的交互控制方法、装置、介质及电子设备
CN113949887A (zh) * 2021-09-24 2022-01-18 支付宝(杭州)信息技术有限公司 对于网络直播数据的处理方法及装置
CN115866254A (zh) * 2022-11-24 2023-03-28 亮风台（上海）信息科技有限公司 一种传输视频帧及摄像参数信息的方法与设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011259184A (ja) * 2010-06-09 2011-12-22 Nippon Hoso Kyokai <Nhk> リンク機能付動画再生装置およびリンク機能付動画再生プログラム
CN108462889A (zh) * 2017-02-17 2018-08-28 阿里巴巴集团控股有限公司 直播过程中的信息推荐方法及装置
CN111652678A (zh) * 2020-05-27 2020-09-11 腾讯科技（深圳）有限公司 物品信息显示方法、装置、终端、服务器及可读存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3491811A2 (en) * 2016-08-01 2019-06-05 Zone V Ltd Smartphone accessory for visually impaired or elderly users
EP3444791A3 (en) * 2017-08-13 2019-04-24 IATAS Automatic Air Traffic Control Ltd System and methods for automated airport air traffic control services
CN110019961A (zh) * 2017-08-24 2019-07-16 北京搜狗科技发展有限公司 视频处理方法和装置、用于视频处理的装置
CN108833937B (zh) * 2018-05-30 2021-03-23 华为技术有限公司 视频处理方法和装置
CN108985421B (zh) * 2018-08-14 2021-05-07 上海掌门科技有限公司 编码信息的生成方法和识别方法
CN110475150B (zh) * 2019-09-11 2021-10-08 广州方硅信息技术有限公司 虚拟礼物特效的渲染方法和装置、直播系统
CN111898416A (zh) * 2020-06-17 2020-11-06 绍兴埃瓦科技有限公司 视频流处理方法、装置、计算机设备和存储介质
CN111949826B (zh) * 2020-08-21 2023-11-28 上海连尚网络科技有限公司 在视频中添加和显示物品信息的方法、电子设备及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011259184A (ja) * 2010-06-09 2011-12-22 Nippon Hoso Kyokai <Nhk> リンク機能付動画再生装置およびリンク機能付動画再生プログラム
CN108462889A (zh) * 2017-02-17 2018-08-28 阿里巴巴集团控股有限公司 直播过程中的信息推荐方法及装置
CN111652678A (zh) * 2020-05-27 2020-09-11 腾讯科技（深圳）有限公司 物品信息显示方法、装置、终端、服务器及可读存储介质

Also Published As

Publication number Publication date
CN112533014A (zh) 2021-03-19

Similar Documents

Publication Publication Date Title
CN112533014B (zh) 视频直播中目标物品信息处理和显示方法、装置及设备
CN110109636B (zh) 投屏方法、电子设备以及系统
US10271009B2 (en) Method and apparatus for providing additional information of video using visible light communication
CN108833963B (zh) 显示界面画面的方法、计算机设备、可读存储介质和系统
CN109874043B (zh) 视频流发送方法、播放方法及装置
EP3792731A1 (en) Multimedia information transmission method and apparatus, and terminal
CN108769738B (zh) 视频处理方法、装置、计算机设备和存储介质
WO2022022019A1 (zh) 投屏数据处理方法和装置
CN113986177A (zh) 投屏方法、投屏装置、存储介质与电子设备
CN110996117A (zh) 视频转码方法、装置、电子设备和存储介质
TW200418327A (en) Real-time video conferencing method, system and storage medium in web game
KR20220144857A (ko) 멀티미디어 데이터 퍼블리싱 방법 및 장치, 및 디바이스와 기록 매체
KR20150116220A (ko) 미디어 스트리밍 방법 및 그 전자 장치
KR20110139782A (ko) 이동통신 단말기 간 실시간 스트리밍을 위한 장치 및 방법
CN111478915B (zh) 直播数据的推流方法、装置、终端及存储介质
US20230025664A1 (en) Data processing method and apparatus for immersive media, and computer-readable storage medium
US11943492B2 (en) Method and system for adding subtitles and/or audio
CN111478914B (zh) 时间戳处理方法、装置、终端及存储介质
CN110913213B (zh) 视频质量评测处理的方法、装置及系统
CN114840283A (zh) 多媒体资源显示方法、装置、终端及介质
CN117406654B (zh) 音效处理方法和电子设备
CN114173157B (zh) 视频流传输方法及装置、电子设备、存储介质
CN112653900A (zh) 视频直播中的目标显示方法、装置及设备
CN113473180B (zh) 一种基于无线的Cloud XR数据传输方法以及装置、存储介质、电子装置
CN115102932B (zh) 点云媒体的数据处理方法、装置、设备、存储介质及产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant