CN111885393A - 一种直播方法、系统、存储介质及设备 - Google Patents

一种直播方法、系统、存储介质及设备 Download PDF

Info

Publication number
CN111885393A
CN111885393A CN202010760538.8A CN202010760538A CN111885393A CN 111885393 A CN111885393 A CN 111885393A CN 202010760538 A CN202010760538 A CN 202010760538A CN 111885393 A CN111885393 A CN 111885393A
Authority
CN
China
Prior art keywords
video signal
live video
format
hdr
hdr format
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010760538.8A
Other languages
English (en)
Inventor
张文杰
林绪虹
闫理
朱明亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huaduo Network Technology Co Ltd
Original Assignee
Guangzhou Huaduo Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huaduo Network Technology Co Ltd filed Critical Guangzhou Huaduo Network Technology Co Ltd
Priority to CN202010760538.8A priority Critical patent/CN111885393A/zh
Publication of CN111885393A publication Critical patent/CN111885393A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本说明书提供一种直播方法、系统、存储介质及设备，该直播方法中，主播客户端将HDR格式的直播视频信号编码后传输到服务器，以使观众客户端可以通过从服务器拉流获得该直播视频信号，进而渲染后观看；观众客户端在展示该HDR格式的直播视频信号时，先对本地所在设备进行检测，确定其是否支持HDR格式，是则直接渲染，否则转换成SDR格式之后再渲染，这样，HDR视频源向下兼容了不支持HDR显示的设备，基于对显示设备检测的结果，准确地对应的屏幕上播放合适的直播内容，有利于给观众带来更好的体验。

Description

一种直播方法、系统、存储介质及设备
技术领域
本说明书涉及互联网直播技术领域，尤其涉及一种直播方法、系统、存储介质及设备。
背景技术
HDR(High-Dynamic Range，高动态范围)是近年来在影视行业出现的一种新技术。相比较于SDR(Standard-Dynamic Range，标准动态范围)而言，HDR具有更宽的色彩范围，更高数量级的亮度差，因此，HDR能够创建更真实的影响并且保留更多场景的细节，可以给体验者带来更具沉浸式的感受。目前，HDR技术主要应用于电视领域。如何将HDR技术应用于直播领域以提高直播视频体验，是一个亟待解决的问题。
发明内容
为克服相关技术中存在的问题，本说明书提供了一种直播方法、系统、存储介质及设备。
根据本说明书实施例的第一方面，提供一种直播方法，包括：
主播客户端获取HDR格式的直播视频信号；
所述主播客户端将所述HDR格式的直播视频信号编码成直播视频流，并发送给服务器后，所述服务器将所述直播视频流分发给观众客户端；
当所述观众客户端对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则将所述HDR格式的直播视频信号转换成SDR格式的直播视频信号，再将所述SDR格式的直播视频信号渲染到所述显示设备。
在某些例子中，观众客户端检测所在的显示设备是否支持HDR格式包括：
观众客户端将所获得的HDR格式的直播视频信号中的一帧渲染在显示设备上；
调用所述显示设备的API捕获屏幕，获得屏幕图像；
根据所述屏幕图像的数据格式判断所述显示设备是否支持HDR格式。
在某些例子中，主播客户端获取HDR格式的直播视频信号包括：
主播客户端采集HDR格式的第一直播视频信号和SDR格式的第一直播视频信号，将所述SDR格式的第一直播视频信号转换成HDR格式的第二直播视频信号，将所述HDR格式的第一直播视频信号和所述HDR格式的第二直播视频信号进行拼接。
根据本说明书实施例的第二方面，提供一种直播方法，包括：
主播客户端获取HDR格式的直播视频信号，并将所述HDR格式的直播视频信号编码成直播视频流，发送给服务器；
所述服务器将所述直播视频流分发给观众客户端，以及，将所述直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述档位包括以下至少一项：码率、帧率、分辨率；
所述观众客户端对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则向所述服务器请求拉取指定档位的直播视频流。在某些例子中，观众客户端检测所在的显示设备是否支持HDR格式包括：
观众客户端将所获得的HDR格式的直播视频信号中的一帧渲染在显示设备上；
调用所述显示设备的API捕获屏幕，获得屏幕图像；
根据所述屏幕图像的数据格式判断所述显示设备是否支持HDR格式。
在某些例子中，主播客户端获取HDR格式的直播视频信号包括：
主播客户端采集HDR格式的第一直播视频信号和SDR格式的第一直播视频信号，将所述SDR格式的第一直播视频信号转换成HDR格式的第二直播视频信号，将所述HDR格式的第一直播视频信号和所述HDR格式的第二直播视频信号进行拼接。
根据本说明书实施例的第三方面，提供一种直播系统，所述系统包括服务器、主播客户端和观众客户端；其中，所述主播客户端用于获取HDR格式的直播视频信号；以及，将所述HDR格式的直播视频信号编码成直播视频流发送给服务器；
所述服务器用于接收所述主播客户端发送的直播视频流，以及将所述直播视频流分发给观众客户端；
所述观众客户端用于对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则将所述HDR格式的直播视频信号转换成SDR格式的直播视频信号，再将所述SDR格式的直播视频信号渲染到所述显示设备。
根据本说明书实施例的第四方面，提供一种直播系统，所述系统包括服务器、主播客户端和观众客户端；其中，所述主播客户端用于获取HDR格式的直播视频信号，并将所述HDR格式的直播视频信号编码成直播视频流，发送给服务器；
所述服务器用于将所述直播视频流分发给观众客户端，以及，将所述直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述档位包括以下至少一项：码率、帧率、分辨率；
所述观众客户端用于对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则向所述服务器请求拉取指定档位的直播视频流。
根据本说明书实施例的第五方面，提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现说明书实施例中任一项方法。
根据本说明书实施例的第六方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述程序时实现说明书实施例中任一项方法。
本说明书的实施例提供的技术方案可以包括以下有益效果：
本说明书实施例中，公开了一种直播方法、系统、存储介质及设备，该直播方法中，主播客户端将HDR格式的直播视频信号编码后传输到服务器，以使观众客户端可以通过从服务器拉流获得该直播视频信号，进而渲染后观看；观众客户端在展示该HDR格式的直播视频信号时，先对本地所在设备进行检测，确定其是否支持HDR格式，是则直接渲染，否则转换成SDR格式之后再渲染，这样，HDR视频源向下兼容了不支持HDR显示的设备，基于对显示设备检测的结果，准确地对应的屏幕上播放合适的直播内容，有利于给观众带来更好的体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本说明书。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本说明书的实施例，并与说明书一起用于解释本说明书的原理。
图1是本说明书根据一示例性实施例示出的一种直播方法的示意图；
图2是本说明书根据一示例性实施例示出的另一种直播方法的示意图；
图3是本说明书根据一示例性实施例示出的一种直播方法的流程图；
图4是本说明书根据一示例性实施例示出的一种直播系统的示意图；
图5是本说明书实施例直播装置所在计算机设备的一种硬件结构图；
图6是本说明书根据一示例性实施例示出的一种直播装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本说明书的一些方面相一致的装置和方法的例子。
在本说明书使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书。在本说明书和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本说明书可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
当在强光源照射下的高亮度区域及阴影、逆光等相对亮度较低的区域在图像中同时存在时，摄像机输出的图像会出现明亮区域因曝光过度成为白色，而黑色区域因曝光不足成为黑色，严重影响图像质量。摄像机在同一场景中对最亮区域及较暗区域的表现是存在局限的，这种局限就是动态范围。动态范围的概念是指图像中所包含的最亮部分和最暗部分之间的相对比值，也就是图像从“最亮”到“最暗”之间灰度划分的等级数；动态范围越大，所能表达的层次越丰富，所包含的色彩空间也越广。
顾名思义，HDR(High-Dynamic Range，高动态范围)就是该相对比值可以达到非常高的一种技术。HDR图像就是根据不同曝光时间的LDR(Low-Dynamic Range，低动态范围)，并利用每个曝光时间相对应最佳细节的LDR图像合成而得到的。相比较于SDR(Standard-Dynamic Range，标准动态范围)而言，HDR具有更宽的色彩范围，更高数量级的亮度差，因此，HDR能够创建更真实的影响并且保留更多场景的细节，可以给体验者带来更具沉浸式的感受。目前，HDR技术主要应用于电视领域，而在直播领域并未广泛应用。经过研究发现，其中较为重要的一个原因是部分的直播设备并不能支持HDR显示，如果将HDR视频源发给这些移动设备，则HDR视频源的图像原本的亮度信息和颜色信息会丢失，导致图像显示效果差，对用户体验来说是极为不利的。
接下来对本说明书实施例进行详细说明。
如图1所示，图1是本说明书根据一示例性实施例示出的一种直播方法的示意图，所述方法包括：
主播客户端获取HDR格式的直播视频信号；
所述主播客户端将所述HDR格式的直播视频信号编码成直播视频流，并发送给服务器后，所述服务器将所述直播视频流分发给观众客户端；
当所述观众客户端对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则将所述HDR格式的直播视频信号转换成SDR格式的视频信号，再将所述SDR格式的直播视频信号渲染到所述显示设备。
参见图1，主播客户端11、服务器12、观众客户端13的交互过程可以包括以下S101-S108等步骤，其中，S101-S103是主播客户端将直播内容经服务器传输至观众客户端的过程，S104-S108是观众客户端观看直播内容的过程；其中：
S101、主播客户端11获取HDR格式的直播视频信号；
S102、主播客户端11将该HDR格式的直播视频信号编码成直播视频流，并发送给服务器12；
S103、服务器12将该直播视频流分发给观众客户端13；
S104、观众客户端将接收到的直播视频流进行解码，获得HDR格式的直播视频信号；
S105、观众客户端13检测所在的显示设备是否支持HDR格式，是则执行S106，否则执行S107；
S106、观众客户端13将该HDR格式的直播视频信号渲染到该显示设备；
S107、观众客户端13将该HDR格式的直播视频信号转换成SDR格式的直播视频信号，并执行S108；
S108、观众客户端13将该SDR格式的直播视频信号渲染到该显示设备。
在某些例子中，S105这一过程可以包括：观众客户端13将所获得的HDR格式的直播视频信号中的一帧渲染在显示设备上；调用所述显示设备的API捕获屏幕，获得屏幕图像；根据所述屏幕图像的数据格式判断所述显示设备是否支持HDR格式。也就是说，先渲染HDR信号的一帧，再调用显示设备的API进行屏幕捕获，如果捕获到的屏幕图像的数据格式是对应HDR格式的数据格式，则表明该显示设备支持HDR格式，反之则表明不支持。
另外，可以理解的，直播时往往有多个输入源拼接的需求，像主播连麦模式、游戏直播镜头拼接等场景，这样容易存在一方的视频源是HDR格式，另一方的视频源是SDR格式的情况。因此，在某些例子中，S101这一过程可以包括：主播客户端11采集HDR格式的第一直播视频信号和SDR格式的第一直播视频信号，将所述SDR格式的第一直播视频信号转换成HDR格式的第二直播视频信号，将所述HDR格式的第一直播视频信号和所述HDR格式的第二直播视频信号进行拼接。这样，可以使得拼接后的视频源可以在基于HDR内容的直播中正常显示。
本说明书实施例，主播客户端将HDR格式的直播视频信号在编码后传输到服务器，以使观众客户端可以通过从服务器拉流获得视频信号，进而渲染后观看。观众客户端在展示HDR格式的直播视频信号时，先对本地所在设备进行检测，确定其是否支持HDR格式，是则直接渲染，否则转换成SDR格式之后再渲染，这样，HDR视频源向下兼容了不支持HDR显示的设备，对于同一HDR格式的直播视频源，准确地对应屏幕上播放合适的直播内容，所有移动设备都能正常显示播放。
考虑到观众的观看体验，进一步地，本说明书还提供了如图2所示的另一种直播方法。具体地，本说明书实施例的方法包括：
主播客户端获取HDR格式的直播视频信号，并将所述HDR格式的直播视频信号编码成直播视频流，发送给服务器；
所述服务器将所述直播视频流分发给观众客户端，以及，将所述直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述档位包括以下至少一项：码率、帧率、分辨率；
所述观众客户端对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则向所述服务器请求拉取指定档位的直播视频流。参见图2，主播客户端21、服务器22、观众客户端23的交互过程可以包括以下S201-S208等步骤，其中，S201-S202是主播客户端将直播内容经服务器传输至观众客户端的过程，S203-S204是服务器处理直播内容的过程，S205-S208是观众客户端观看直播内容的过程；其中：
S201、主播客户端21获取HDR格式的直播视频信号；
S202、主播客户端21将该HDR格式的直播视频信号编码成直播视频流，并发送给服务器22；
S203、服务器22将该直播视频流分发给观众客户端23，同时执行S204；
S204、服务器22将该直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述的档位包括以下至少一项：码率、帧率、分辨率；
S205、观众客户端23对接收到的直播视频流进行解码，获得HDR格式的直播视频信号；
S206、观众客户端23检测所在的显示设备是否支持HDR格式，是则执行S207，否则执行S208；
S207、观众客户端23将该HDR格式的直播视频信号渲染到该显示设备；
S208、观众客户端23向服务器22请求拉取指定档位的直播视频流。
与图1所示的直播方法不同，本说明书实施例的直播方法可以由服务器将直播视频流中HDR格式的视频信号转码为SDR格式，并设置成不同档位。这样，当观众端检测到所在的设备不支持HDR格式时，可以向服务器请求拉取指定档位的直播视频流，用以渲染播放。如此，对于观众的体验感来说可以得到提升。而且可以理解的，图1所示的直播方法中屏幕识别和视频源拼接的方案也同样适用于本说明书实施例的直播方法，在此不再赘述。
接下来针对各个步骤的具体细节展开描述：
如图3所示，图3是本说明书根据一示例性实施例示出的一种直播方法的流程图，所述方法应用于直播客户端，包括：
在步骤301、获取HDR格式的视频信号；
本说明书实施例的方法是应用于直播客户端，这里的直播客户端可以是指主播客户端(简称为主播端)，也可以是指观众客户端(简称为观众端)。主播可以通过主播端预览视频信号的呈现效果，便于针对直播内容作出调整；观众可以通过观众端展示视频信号，从而观看到直播内容。
在直播领域中，主播端的视频信号会传输到服务器，以使观众端可以从服务器获取到该视频信号。因此，当直播客户端为主播端时，本步骤可以是指采集HDR格式的视频信号，可以是基于HDR摄像机进行采集，也可以是从本地HDR源中进行读取。而当直播客户端为观众端时，本步骤可以是指从服务器获取到直播视频流，进行解码，获得HDR格式的视频信号；所述直播视频流为主播端对HDR格式的视频信号编码而成。
在某些例子中，本步骤中提到的HDR格式可以是指HDR10。当然，在其他实施例中，也可以根据其他标准选择相应的HDR格式，比如Dolby Vision(杜比视界)、HLG(Hybrid LogGamma，混合对数伽玛)、SL-HDR1。
在步骤302、检测本端所在的显示设备是否支持HDR格式；是则执行步骤303，否则执行步骤304；
本步骤中提到的显示设备可以是指智能手机、智能平板等便携式设备，也可以是指智能电视、台式电脑之类的非便捷式设备。一个显示设备要支持HDR格式，通常需要满足能够支持HDR显示模式，以及具有10bit码流的编/解码能力。这里所说的支持HDR显示模式，并没有一个相对统一的标准，只是对显示屏幕的亮度和色域有所要求，以HDR10为例，则针对智能手机，手机屏幕就需要满足能够显示10位色深。显示屏幕的亮度的单位是cd/m2(坎德拉每平方米)，也称为nit(尼特)，一般来说，传统显示屏幕的峰值亮度不超过100nit，而能支持HDR显示的屏幕的峰值亮度可以是1000nit以上。
在某些例子中，本步骤可以包括：将所获得的HDR格式的视频信号中的一帧渲染在显示设备上；调用所述显示设备的API捕获屏幕，获得屏幕图像；根据所述屏幕图像的数据格式判断所述显示设备是否支持HDR格式。这里的API(Application ProgrammingInterface，应用程序接口)是一些预先定义函数，用来提供应用程序与开发人员基于某软件或者某硬件得以访问一组例程，并且无需访问源码或理解内部工作机制细节。这里的屏幕图像是指渲染后的图像，数据格式可以是指纹理格式，传统的显示设备的渲染一般采用8位色深的纹理格式，比如RGB888(每个像素3字节，RGB通道各占用8位，无透明通道)、RGBA8888(每个像素4字节，RGBA通道各占用8位)；而对于支持HDR格式的显示设备的渲染，色深需要达到10位或以上，其纹理格式可以包括FP16、FP32等。先渲染HDR信号的一帧，再调用显示设备的API进行屏幕捕获，若该显示设备支持HDR格式，则捕获到的屏幕图像的数据格式应该同样是对应HDR格式的数据格式，同理，若该屏幕图像的数据格式不是对应HDR格式的数据格式，则可以确定该显示设备不支持HDR格式。并且，由于渲染的是视频信号的一帧，也排除了不同标准的HDR格式的干扰。换言之，基于这一步骤，可以以一简易的方式预先对本端所在设备进行检测。另外，由于有些设备会将屏幕的位深度、颜色格式、颜色空间等显示信息记录在设备的配置信息中，因此，在其他实施例中，也可以通过调用本端所在设备的API获取显示信息，根据该显示信息判断该显示设备是否支持HDR格式。
在步骤303、若所述显示设备支持HDR格式，则将所述HDR格式的视频信号渲染到所述显示设备；
在检测得显示设备支持HDR格式后，直播客户端可以将步骤201获取到的HDR格式的视频信号渲染到所在的显示设备上。由于针对的是HDR格式的视频信号，渲染时需要遵循HDR标准，将该视频信号在BT.2020的色域内进行转换显示。这里的BT.2020也可以称为Rec.2020，其全称是ITU-R Recommendation BT.2020，是基于国际电信联盟无线电通信部门制定的超高清电视(UHDTV-UHD)的色彩标准。其具体的渲染过程与相关技术一致，在此不再赘述。
在步骤304、若所述显示设备不支持HDR格式，则将所述HDR格式的视频信号转换成SDR格式的视频信号，再将所述SDR格式的视频信号渲染到所述显示设备上。
在检测得显示设备不支持HDR格式后，直播客户端先将HDR格式的视频信号转换成SDR格式的视频信号，再将SDR格式的视频信号渲染到所在的显示设备上。这里所提到的将HDR格式的视频信号转换成SDR格式的视频信号，可以采用的技术是色调映射技术。色调映射技术是指通过色调映射算法对图像颜色进行映射变换的技术，其算法包括直方图均衡化、Gamma校正、分段灰度变化、分块中值直方图等。在本步骤中，其是指将HDR格式的视频信号的各帧图像的色度、亮度、动态范围等，全部映射到SDR格式的标准范围内。在转换成SDR格式之后，直播客户端对SDR格式的视频信号进行渲染，其渲染是将该视频信号在BT.709的色域内进行转换显示。这里的BT.709也可以称为Rec.709，其全称是ITU-R RecommendationBT.709，是基于国际电信联盟无线电通信部门BT.709制定的高清电视(HDTV-HD)的色彩标准。同样的，本步骤中色调映射、渲染SDR信号的具体过程与相关技术一致，在此不再赘述。另外，在某些例子中，所采用的色调映射算法可以根据HDR格式的视频信号中不同场景的图像特征，对色调映射算法参数做适当调整，从而能够适应不同风格的视频。
在直播场景中，由于是视频信号是经由网络进行传输，通常来说视频信号的体积较大，不压缩处理的话对网络会造成负担，所以在主播端需要编码来形成直播视频流，观众端要观看时也需要将直播视频流解码出来。因此，直播客户端为主播端时，还包括：将HDR格式的视频信号编码成指定编码标准的直播视频流。这里所提到的指定编码标准可以是H.265/HEVC、AV1等编码标准。编码的时候，除了视频信号外还会加入编码参数一并处理，编码参数包括原色、传递函数、颜色空间、量化范围，以及视频可用性信息，这里的视频可用性信息可以包括元数据，比如HDR视频信号的颜色信息或者亮度信息等。HDR格式的视频信号被编码成直播视频流，传输至服务器，那么相应地，在观众端一侧，获取HDR格式的视频信号的步骤包括：从服务器获取直播视频流，进行解码，获得HDR格式的视频信号。可以理解的，由于直播内容中往往还包括音频、字幕等，因此主播端在将直播视频流传输至服务器的过程中还包括封装、推流等过程。封装相当于一种储存视频、音频、字幕等视频信息的容器，是将已经编码压缩好的视频轨和音频轨按照一定的格式放在一个文件中，其常见格式包括AVI、MKV等。与之相应的，观众端需要对直播视频流进行解封装、解码，从而获得视频信号。
另外，采集到的视频信号通常是RGB格式，因此需要对视频信号进行第一次压缩，并且，在进行编码的时候，对视频信号的数据格式也有对应的标准。因此，在主播端一侧，检测本端所在的显示设备是否支持HDR格式之前还包括：将获取的HDR格式的视频信号转换成预设的数据格式。这里的预设的数据格式是指对HDR格式的视频信号编码时所需要的数据格式，比如YUV420P10LE、YUVP010LE等。以YUV420P10LE为例，该格式的色彩空间为YUV，YUV是一种颜色编码方法，其中，Y分量表示明亮度，即灰阶值，U分量和V分量表示的是色度；该格式的色度抽样为4:2:0，即对每行扫描线来说，只有一种色度分量以2:1的抽样率存储，从而降低了色度的带宽。这样，一方面便于后续的编码步骤，另一方面也可以使得预览的时候在主播端呈现的是与观众端一致的画面，便于调整。
本说明书实施例的方法，在获取HDR格式的视频信号后，检测显示设备是否支持HDR格式，是则将该HDR格式的视频信号渲染到该显示设备上，否则将该HDR格式的视频信号转换为SDR格式的视频信号，再将该SDR格式的视频信号渲染到该显示设备上。这样，能够准确地在对应的显示设备上显示合适类型的直播内容，既支持了HDR内容的直播，也向下兼容了SDR内容，为观众带来了更好的体验。
另外，限制HDR在直播领域的普及的重要因素还包括HDR内容的短缺。例如，直播时往往有多个输入源拼接的需求，像主播连麦模式、游戏直播镜头拼接等场景，这样容易存在一方的视频源是HDR格式，另一方的视频源是SDR格式的情况。针对这一情况，本说明书实施例作出适应性的改进，则步骤301包括：采集HDR格式的第一视频信号和SDR格式的第一视频信号，将所述SDR格式的第一视频信号转换成HDR格式的第二视频信号，将所述HDR格式的第一视频信号和所述HDR格式的第二视频信号进行拼接。这里所提到的将SDR格式的视频信号转换成HDR格式的视频信号，所采用的技术是逆色调映射技术。逆色调映射技术是通过逆色调映射算法，经线性化、动态范围扩展、过曝/欠曝区域重建、去噪、颜色校正等步骤，将SDR内容变换为HDR内容。也就是说，通过先对SDR视频源的处理，转换成HDR格式，再将同样是HDR格式的视频源进行融合拼接，使得拼接后的视频源可以在基于HDR内容的直播中正常显示。
还有，在某些例子中，本说明书实施例的方法还包括：所述直播客户端为Web客户端。这里的Web客户端可以是指Web浏览器，其主要功能是将用户向服务器请求的Web资源呈现出来，显示在浏览器窗口中。Web客户端可以对HDR格式的视频信号进行展示，这样，用户可以不用安装应用软件，直接通过浏览器观看到直播内容。换言之，这样可以实现HDR内容在PC端、移动端和Web端的全链路网络直播。
此外，服务器负责转码分发直播视频流，因此，服务器会转码各个档位的视频流，这里所提到的档位是指码率、帧率和分辨率。为了向下兼容SDR设备，在某些例子中，可以由服务器将直播视频流中HDR格式的视频信号转码为SDR格式，并设置成不同档位。这样，当观众端检测到所在的设备不支持HDR格式时，可以向服务器请求拉取指定档位的直播视频流，用以渲染播放。如此，提升了观众的观看体验。
如图4所示，图4是本说明书根据一示例性实施例示出的一种直播系统的示意图，所述系统包括主播客户端41、服务器42和观众客户端43，本说明书实施例提供了如下两种形式：
第一种形式：
所述主播客户端41用于获取HDR格式的直播视频信号；以及，将所述直播视频信号编码成直播视频流发送给服务器42；
所述服务器42用于接收所述主播客户端41发送的直播视频流，以及将所述直播视频流分发给观众客户端43；
所述观众客户端43用于对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则将所述HDR格式的直播视频信号转换成SDR格式的视频信号，再将所述SDR格式的直播视频信号渲染到所述显示设备。
第二种形式：
所述主播客户端41用于获取HDR格式的直播视频信号，并将所述HDR格式的直播视频信号编码成直播视频流，发送给服务器42；
所述服务器42用于将所述直播视频流分发给观众客户端43，以及，将所述直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述档位包括以下至少一项：码率、帧率、分辨率；
所述观众客户端43用于对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则向所述服务器42请求拉取指定档位的直播视频流。
本说明书实施例的直播系统，无论哪种形式，都可以为具有支持HDR显示终端的用户提供HDR格式的直播内容，给用户带来了更具沉浸式的感受；同时为其他用户提供向下兼容的SDR格式的直播内容，不影响直播内容的展示，提高其观看体验。
与前述方法的实施例相对应，本说明书还提供了直播装置及其所应用的终端的实施例。
本说明书直播装置的实施例可以应用在计算机设备上，例如服务器或终端设备。装置实施例可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为一个逻辑意义上的装置，是通过其所在文件处理的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，如图5所示，为本说明书实施例直播装置所在计算机设备的一种硬件结构图，除了图5所示的处理器510、内存530、网络接口520、以及非易失性存储器540之外，实施例中装置531所在的服务器或电子设备，通常根据该计算机设备的实际功能，还可以包括其他硬件，对此不再赘述。
相应地，本说明书实施例还提供一种计算机存储介质，所述存储介质中存储有程序，所述程序被处理器执行时实现上述任一实施例中的方法。
本说明书实施例可采用在一个或多个其中包含有程序代码的存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机可用存储介质包括永久性和非永久性、可移动和非可移动媒体，可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于：相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
如图6所示，图6是本说明书根据一示例性实施例示出的一种直播装置的框图，所述装置应用于直播客户端，包括：
获取模块61，用于获取HDR格式的视频信号；
检测模块62，用于检测本端所在的显示设备是否支持HDR格式；
第一渲染模块63，用于若所述显示设备支持HDR格式，则将所述HDR格式的视频信号渲染到所述显示设备；
第二渲染模块64，用于若所述显示设备不支持HDR格式，则将所述HDR格式的视频信号转换成SDR格式的视频信号，再将所述SDR格式的视频信号渲染到所述显示设备。
上述装置中各个模块的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程，在此不再赘述。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本说明书方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。
本领域技术人员在考虑说明书及实践这里申请的发明后，将容易想到本说明书的其它实施方案。本说明书旨在涵盖本说明书的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本说明书的一般性原理并包括本说明书未申请的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本说明书的真正范围和精神由下面的权利要求指出。
应当理解的是，本说明书并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本说明书的范围仅由所附的权利要求来限制。
以上所述仅为本说明书的较佳实施例而已，并不用以限制本说明书，凡在本说明书的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本说明书保护的范围之内。

Claims (10)

1.一种直播方法，其特征在于，包括：
主播客户端获取HDR格式的直播视频信号；
所述主播客户端将所述HDR格式的直播视频信号编码成直播视频流，并发送给服务器后，所述服务器将所述直播视频流分发给观众客户端；
所述观众客户端对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则将所述HDR格式的直播视频信号转换成SDR格式的直播视频信号，再将所述SDR格式的直播视频信号渲染到所述显示设备。
2.根据权利要求1所述的直播方法，其特征在于，观众客户端检测所在的显示设备是否支持HDR格式包括：
观众客户端将所获得的HDR格式的直播视频信号中的一帧渲染在显示设备上；
调用所述显示设备的API捕获屏幕，获得屏幕图像；
根据所述屏幕图像的数据格式判断所述显示设备是否支持HDR格式。
3.根据权利要求1所述的直播方法，其特征在于，主播客户端获取HDR格式的直播视频信号包括：
主播客户端采集HDR格式的第一直播视频信号和SDR格式的第一直播视频信号，将所述SDR格式的第一直播视频信号转换成HDR格式的第二直播视频信号，将所述HDR格式的第一直播视频信号和所述HDR格式的第二直播视频信号进行拼接。
4.一种直播方法，其特征在于，包括：
主播客户端获取HDR格式的直播视频信号，并将所述HDR格式的直播视频信号编码成直播视频流，发送给服务器；
所述服务器将所述直播视频流分发给观众客户端，以及，将所述直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述档位包括以下至少一项：码率、帧率、分辨率；
所述观众客户端对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则向所述服务器请求拉取指定档位的直播视频流。
5.根据权利要求4所述的直播方法，其特征在于，观众客户端检测所在的显示设备是否支持HDR格式包括：
观众客户端将所获得的HDR格式的直播视频信号中的一帧渲染在显示设备上；
调用所述显示设备的API捕获屏幕，获得屏幕图像；
根据所述屏幕图像的数据格式判断所述显示设备是否支持HDR格式。
6.根据权利要求4所述的直播方法，其特征在于，主播客户端获取HDR格式的直播视频信号包括：
主播客户端采集HDR格式的第一直播视频信号和SDR格式的第一直播视频信号，将所述SDR格式的第一直播视频信号转换成HDR格式的第二直播视频信号，将所述HDR格式的第一直播视频信号和所述HDR格式的第二直播视频信号进行拼接。
7.一种直播系统，其特征在于，所述系统包括服务器、主播客户端和观众客户端；其中，所述主播客户端用于获取HDR格式的直播视频信号；以及，将所述HDR格式的视频信号编码成直播视频流发送给服务器；
所述服务器用于接收所述主播客户端发送的直播视频流，以及将所述直播视频流分发给观众客户端；
所述观众客户端用于对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则将所述HDR格式的直播视频信号转换成SDR格式的直播视频信号，再将所述SDR格式的直播视频信号渲染到所述显示设备。
8.一种直播系统，其特征在于，所述系统包括服务器、主播客户端和观众客户端；其中，所述主播客户端用于获取HDR格式的直播视频信号，并将所述HDR格式的直播视频信号编码成直播视频流，发送给服务器；
所述服务器用于将所述直播视频流分发给观众客户端，以及，将所述直播视频流进行解码，获得HDR格式的直播视频信号后，转码为不同档位的SDR格式的直播视频信号，并分别编码成不同档位的直播视频流；所述档位包括以下至少一项：码率、帧率、分辨率；
所述观众客户端用于对接收到的直播视频流进行解码，获得HDR格式的直播视频信号后，检测所在的显示设备是否支持HDR格式；若所述显示设备支持HDR格式，则将所述HDR格式的直播视频信号渲染到所述显示设备；若所述显示设备不支持HDR格式，则向所述服务器请求拉取指定档位的直播视频流。
9.一种计算机设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述程序时实现如权利要求1～6任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，该计算机程序被处理器执行时实现权利要求1～6任一项所述的方法。
CN202010760538.8A 2020-07-31 2020-07-31 一种直播方法、系统、存储介质及设备 Pending CN111885393A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010760538.8A CN111885393A (zh) 2020-07-31 2020-07-31 一种直播方法、系统、存储介质及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010760538.8A CN111885393A (zh) 2020-07-31 2020-07-31 一种直播方法、系统、存储介质及设备

Publications (1)

Publication Number Publication Date
CN111885393A true CN111885393A (zh) 2020-11-03

Family

ID=73204983

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010760538.8A Pending CN111885393A (zh) 2020-07-31 2020-07-31 一种直播方法、系统、存储介质及设备

Country Status (1)

Country Link
CN (1) CN111885393A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113676773A (zh) * 2021-08-16 2021-11-19 广州虎牙信息科技有限公司 一种视频播放方法、系统、装置、计算机设备和存储介质
CN115393197A (zh) * 2022-10-27 2022-11-25 摩尔线程智能科技(北京)有限责任公司 图像合成方法、装置以及图形处理设备

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103491377A (zh) * 2012-06-08 2014-01-01 索尼公司 图像处理设备、方法和程序
CN103582911A (zh) * 2011-05-10 2014-02-12 皇家飞利浦有限公司 高动态范围图像信号生成和处理
CN105100673A (zh) * 2015-06-10 2015-11-25 努比亚技术有限公司 基于VoLTE的桌面共享方法和装置
CN106454537A (zh) * 2016-10-14 2017-02-22 广州华多网络科技有限公司 一种视频直播方法及相关设备
CN106713907A (zh) * 2017-02-21 2017-05-24 京东方科技集团股份有限公司 一种显示器的hdr图像显示性能评测方法及装置
CN106791865A (zh) * 2017-01-20 2017-05-31 杭州当虹科技有限公司 基于高动态范围视频的自适应格式转换的方法
CN108781312A (zh) * 2016-03-31 2018-11-09 夏普株式会社 内容处理装置、电视接收装置、内容处理装置的信息处理方法、程序
CN110401837A (zh) * 2018-04-25 2019-11-01 安华高科技股份有限公司 用于图形帧缓冲器的像素存储
CN110460870A (zh) * 2019-08-27 2019-11-15 四开花园网络科技(广州)有限公司 4k-hdr现场节目制作及直播方法
JP2020039118A (ja) * 2018-09-03 2020-03-12 キヤノン株式会社 画像処理装置およびその制御方法
CN111193936A (zh) * 2019-12-27 2020-05-22 腾讯科技（深圳）有限公司 视频流传输方法、装置、电子设备及计算机可读存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103582911A (zh) * 2011-05-10 2014-02-12 皇家飞利浦有限公司 高动态范围图像信号生成和处理
CN103491377A (zh) * 2012-06-08 2014-01-01 索尼公司 图像处理设备、方法和程序
CN105100673A (zh) * 2015-06-10 2015-11-25 努比亚技术有限公司 基于VoLTE的桌面共享方法和装置
CN108781312A (zh) * 2016-03-31 2018-11-09 夏普株式会社 内容处理装置、电视接收装置、内容处理装置的信息处理方法、程序
CN106454537A (zh) * 2016-10-14 2017-02-22 广州华多网络科技有限公司 一种视频直播方法及相关设备
CN106791865A (zh) * 2017-01-20 2017-05-31 杭州当虹科技有限公司 基于高动态范围视频的自适应格式转换的方法
CN106713907A (zh) * 2017-02-21 2017-05-24 京东方科技集团股份有限公司 一种显示器的hdr图像显示性能评测方法及装置
CN110401837A (zh) * 2018-04-25 2019-11-01 安华高科技股份有限公司 用于图形帧缓冲器的像素存储
JP2020039118A (ja) * 2018-09-03 2020-03-12 キヤノン株式会社 画像処理装置およびその制御方法
CN110460870A (zh) * 2019-08-27 2019-11-15 四开花园网络科技(广州)有限公司 4k-hdr现场节目制作及直播方法
CN111193936A (zh) * 2019-12-27 2020-05-22 腾讯科技（深圳）有限公司 视频流传输方法、装置、电子设备及计算机可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113676773A (zh) * 2021-08-16 2021-11-19 广州虎牙信息科技有限公司 一种视频播放方法、系统、装置、计算机设备和存储介质
CN113676773B (zh) * 2021-08-16 2023-11-14 广州虎牙信息科技有限公司 一种视频播放方法、系统、装置、计算机设备和存储介质
CN115393197A (zh) * 2022-10-27 2022-11-25 摩尔线程智能科技(北京)有限责任公司 图像合成方法、装置以及图形处理设备

Similar Documents

Publication Publication Date Title
US11588998B2 (en) Conversion method and conversion apparatus
JP7179443B2 (ja) 拡張された高ダイナミックレンジ（“ｈｄｒ”）－ｈｄｒトーンマッピングのための方法、装置、及びシステム
US10484657B2 (en) Reproduction method and reproduction apparatus
US11949891B2 (en) Systems and methods for region-of-interest tone remapping
US10720091B2 (en) Content mastering with an energy-preserving bloom operator during playback of high dynamic range video
US9894314B2 (en) Encoding, distributing and displaying video data containing customized video content versions
US11032579B2 (en) Method and a device for encoding a high dynamic range picture, corresponding decoding method and decoding device
US20140037206A1 (en) Method and apparatus for generating an image coding signal
CN111885393A (zh) 一种直播方法、系统、存储介质及设备
Vaz et al. HDR10+ Advantages for the Next-Generation of Brazilian Broadcasting System (TV 3.0)
Vaz et al. HDR10+ Concepts, Principles, Capabilities and Advantages for the Next-Generation of Brazilian Broadcasting System (TV 3.0)
US20240037764A1 (en) High dynamic range scene cut detection
Bae et al. Study on HDR/WCG Service Model for UHD Service
WO2023150074A1 (en) Beta scale dynamic display mapping
WO2023150193A1 (en) Supporting multiple target display types

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201103

RJ01 Rejection of invention patent application after publication