CN113938572A - 图片传输方法、显示方法、装置、电子设备及存储介质 - Google Patents

图片传输方法、显示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN113938572A
CN113938572A CN202111152552.0A CN202111152552A CN113938572A CN 113938572 A CN113938572 A CN 113938572A CN 202111152552 A CN202111152552 A CN 202111152552A CN 113938572 A CN113938572 A CN 113938572A
Authority
CN
China
Prior art keywords
picture
data
color value
transmitted
transparent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111152552.0A
Other languages
English (en)
Inventor
徐世炎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huya Technology Co Ltd
Original Assignee
Guangzhou Huya Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huya Technology Co Ltd filed Critical Guangzhou Huya Technology Co Ltd
Priority to CN202111152552.0A priority Critical patent/CN113938572A/zh
Publication of CN113938572A publication Critical patent/CN113938572A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Color Image Communication Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

本申请实施例提供了图片传输方法、显示方法、装置、电子设备及存储介质,涉及图像处理领域。图片传输方法包括:获取待传输图片;在确定待传输图片满足预设的图片属性条件时,基于待传输图片分离出由待传输图片的RGB数据生成的色值图片以及由待传输图片的透明度数据生成的透明图片;传输色值图片和透明图片。图片显示方法包括:接收待显示图片数据,待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据;显示基于色值图片数据和透明图片数据合成的待显示图片。本申请实施例用于解决在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片数据量大的技术问题。

Description

图片传输方法、显示方法、装置、电子设备及存储介质
技术领域
本申请涉及图像处理技术领域,具体而言,本申请涉及一种图片传输方法、显示方法、装置、电子设备及存储介质。
背景技术
随着客户端发展,用户对UI(user interface,用户界面)的显示体验要求越来越高。在UI交互的过程中需要一些复杂的即时动画交互展示,比如直播客户端用户向主播端用户赠送礼物时,根据礼物的等级,需向用户展示不同的炫酷动画。这样,对网络图片(或动画)传输提出了以下需求:1、支持alpha透明通道,高色域的图片;2、显示解码速度快;3、系统兼容性高;4、素材包体尽量小/下载速度快。
针对上述需求,目前通常使用PNG格式的图片序列帧,通过切换图片来显示具体的播放动画。但由于PNG格式图片压缩率不高导致素材包过大,会产生一系列不良的后果,如下载失败或下载时间过长,以致于在直播客户端用户赠送礼物时,礼物交互动画展示失败。因此,在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片数据量较大,导致传输效率低。
发明内容
本申请实施例提供了一种图片传输方法、显示方法、装置、电子设备及存储介质,用于解决在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片数据量大的技术问题。
根据本申请实施例的一个方面,提供了一种图片传输方法,用于第一客户端,包括:
获取待传输图片;
在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片;
传输所述色值图片和所述透明图片。
在一些实施例中,所述基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片,包括;
获取所述待传输图片中每个像素的RGBA数据;
将所述RGBA数据分离出所述RGB数据和所述透明度数据;
分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片。
在一些实施例中,所述方法还包括所述色值图片的生成步骤:
建立第一图像缓冲区;
将所述待传输图片中每个像素的RGB数据写入所述第一图像缓冲区中所述像素对应的字节位置,以合成原始色值图片数据;
对所述原始色值图片数据进行编码,得到所述色值图片。
在一些实施例中,所述方法还包括所述透明图片的生成步骤:
建立第二图像缓冲区;
将所述待传输图片中每个像素的透明度数据写入所述第二图像缓冲区中所述像素对应的字节位置,以合成原始透明图片数据;
对所述原始透明图片数据进行编码,得到所述透明图片。
在一些实施例中,通过如下步骤确定所述待传输图片满足预设的图片属性条件,包括:
当判断到所述待传输图片的色域在预设高色域内,且具备Alpha通道时,则确定所述待传输图片满足所述图片属性条件。
在一些实施例中,所述分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片,包括:
按照JPEG编码算法分别对所述RGB数据和所述透明度数据进行编码,得到JPEG格式的色值图片和透明图片。
根据本申请实施例的另一个方面,提供了一种图片显示方法,用于第二客户端,包括:
接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据;
显示基于所述色值图片数据和所述透明图片数据合成的待显示图片。
在一些实施例中,所述显示基于所述色值图片数据和所述透明图片数据合成的待显示图片,包括:
建立第三图像缓冲区;
分别对所述色值图片数据和所述透明图片数据进行解码,获得待显示图片的RGB数据和透明度数据;
将所述待显示图片中每个像素对应的所述RGB数据和所述透明度数据进行合并,生成所述待显示图片中每个像素的RGBA数据;
将每个像素的RGBA数据写入所述第三图像缓冲区中所述像素对应的字节位置,以合成所述待显示图片对应的原始图片数据;
对所述原始图片数据进行编码,以获得待显示图片,并显示所述待显示图片。
在一些实施例中,所述显示基于所述色值图片数据和所述透明图片数据合成的待显示图片,包括:
将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,以获得待显示图片,并显示所述待显示图片。
在一些实施例中,所述将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,包括:
调整alpha混合的百分比;或,
调整所述透明度数据的属性参数,所述属性参数包括alpha纹理参数。
根据本申请实施例的另一个方面,提供了一种图片传输装置,用于第一客户端,包括:
图片获取模块,用于获取待传输图片;
图片处理模块,用于在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片;
传输模块,用于传输所述色值图片和所述透明图片。
根据本申请实施例的另一个方面,提供了一种图片显示装置,用于第二客户端,包括:
接收模块,用于接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据;
显示模块,用于显示基于所述色值图片数据和所述透明图片数据合成的待显示图片。
根据本申请实施例的另一个方面,提供了一种电子设备,包括存储器、处理器及存储在存储器上的计算机程序,所述处理器执行所述计算机程序以实现上述实施例所述的图片传输方法或实现上述实施例所述的图片显示方法。
根据本申请实施例的另一个方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述实施例所述的图片传输方法的步骤或实现上述实施例所述的图片显示方法的步骤。
本申请实施例提供的技术方案带来的有益效果是:通过获取待传输图片,在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片,传输所述色值图片和所述透明图片,以使得大大减少了待传输图片素材包的数据量,并提高了网络图片在传输过程中的传输效率,同时在图片传输过程中完整保留了图片的RGB数据和透明度数据,保证了图片的质量,从而能够解决在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片数据量较大的技术问题。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的一种图片传输系统的架构示意图;
图2为本申请实施例提供的一种图片传输方法的流程示意图;
图3为本申请实施例提供的图片传输系统的图片传输流程示意图;
图4为本申请实施例提供的一种图片传输方法中的色值图片和透明图片的生成流程示意图;
图5为本申请实施例提供的一种图片显示方法的流程示意图;
图6为本申请实施例提供的一种图片显示方法中合成待显示图片的一流程示意图;
图7为本申请实施例提供的一种图片显示方法中合成待显示图片的另一流程示意图;
图8为本申请实施例提供的一种图片传输装置的结构示意图;
图9为本申请实施例提供的一种图片显示装置的结构示意图;
图10为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面结合本申请中的附图描述本申请的实施例。应理解,下面结合附图所阐述的实施方式,是用于解释本申请实施例的技术方案的示例性描述,对本申请实施例的技术方案不构成限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本申请实施例所使用的术语“包括”以及“包含”是指相应特征可以实现为所呈现的特征、信息、数据、步骤、操作、元件和/或组件,但不排除实现为本技术领域所支持其他特征、信息、数据、步骤、操作、元件、组件和/或它们的组合等。应该理解,当我们称一个元件被“连接”或“耦接”到另一元件时,该一个元件可以直接连接或耦接到另一元件,也可以指该一个元件和另一元件通过中间元件建立连接关系。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的术语“和/或”指示该术语所限定的项目中的至少一个,例如“A和/或B”指示实现为“A”,或者实现为“B”,或者实现为“A和B”。
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
图1为本申请实施例提供的一种图片传输系统的架构示意图,该图片传输系统,包括:服务器3000、第一客户端1000以及第二客户端2000;
所述第一客户端1000,用于执行本申请实施例所述的图片传输方法;
所述服务器3000,分别与所述第一客户端1000、所述第二客户端2000通讯连接,用于接收所述第一客户端1000发送的色值图片和透明图片,并将所述色值图片和所述透明图片发送至所述第二客户端2000;
所述第二客户端2000,用于执行本申请实施例所述的图片显示方法。
具体的,第一客户端1000可以为具有图像处理功能的电子设备,第二客户端2000可以为具有图像处理、显示功能的电子设备,如具有显示屏和处理器的显示装置。第一客户端1000与服务器3000连接,以便于第一客户端1000执行本申请实施例的图片传输方法步骤,获得色值图片和透明图片,并将该色值图片和该透明图片发送至服务器。服务器3000与第二客户端2000连接,以便于服务器将该色值图片和该透明图片转发至第二客户端2000,使得第二客户端2000执行本申请实施例所述的图片显示方法步骤。其中,服务器3000与第一客户端1000、第二客户端2000建立的连接,可以是有线网络连接,也可以是无线网络连接,其中,有线网络包括但不限于:通用串行总线,无线网络包括但不限于:WiFi、蓝牙等。
图2为本申请实施例提供的一种图片传输方法的流程示意图,所述图片传输方法用于第一客户端1000,所述方法包括步骤S101至S103。
S101、获取待传输图片。
S102、在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片。
在一些实施例中,通过如下步骤确定所述待传输图片满足预设的图片属性条件,包括:
当判断到所述待传输图片的色域在预设高色域内,且具备Alpha通道时,则确定所述待传输图片满足所述图片属性条件。
在本申请中,RGB数据是代表Red(红色)、Green(绿色)、Blue(蓝色)三个通道的颜色数据,透明度数据为Alpha通道值,代表图片中各个素点透明度的通道信息。第一客户端在获取待传输图片后,判断该待传输图片是否为高色域且具有Alpha通道的图片。优选地,本申请中其色域在预设高色域内,且具备Alpha通道的待传输图片可以是TIF、TAG、PNG等格式的图片,不仅支持红绿蓝三色通道,还支持Alpha通道。其次,本申请不对预设高色域的阈值作出限定。若该待传输图片为高色域且具有Alpha通道的图片,则通过解析该图片,提取出该图片的RGB数据和Alpha通道对应的透明度数据,并相应地生成色值图片和透明图片。此时,将待传输图片拆分成色值图片和透明图片,色值图片和透明图片的数据量小于该待传输图片的数据量,即大大降低了图片文件在传输过程中的传输数据量,以及降低了所传输的图片文件大小及占用空间,从而提高了待传输图片在传输过程中的传输效率。
S103、传输所述色值图片和所述透明图片。
示例性的,图3为本申请实施例提供的图片传输系统的图片传输流程示意图,第一客户端(即图3中客户端A)上载待传输的图片,进而分析图片,判断图片是否为满足条件,该条件为32位色,即Red(红色)、Green(绿色)、Blue(蓝色)、A(Alpha)四个通道各占8位共24位,用以保存颜色数据。若满足,标记使用新方案传输,即本申请实施例的图片传输方法,具体为分解图片的透明度数据和RGB数据,生成对应的透明图片和RGB图片,并采用zip等压缩文件格式来压缩打包图片,以将图片传输至服务器。若不满足,则认为该待传输图片的色域不在预设高色域内,和/或具备Alpha通道,此时执行传统方案,直接将该图片传输至服务器。例如,该待传输图片为JPEG、BMP、GIF等格式,不支持Alpha通道,故认为不满足预设的图片属性条件,将该待传输图片直接传输到服务器。
在一些实施例中,所述基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片,包括;
获取所述待传输图片中每个像素的RGBA数据;
将所述RGBA数据分离出所述RGB数据和所述透明度数据;
分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片。
在本实施例中,RGBA数据是代表Red(红色)、Green(绿色)、Blue(蓝色)和Alpha的色彩空间数据。需要说明的是,待传输图片由多个像素点组成,每个像素点对应一个RGBA数据,将待传输图片中每个像素点对应的RGBA数据分离成每个像素点对应的RGB数据和透明度数据,因此由N个像素点组成的待传输图片包含N个RGBA数据,相应地色值图片包含N个RGB数据,透明图片包含N个透明度数据。其次,待传输图片、色值图片以及透明图片的像素点一一对应,而且每个像素点中的像素数据一一对应,因此,待传输图片由N个像素点组成,色值图片以及透明图片亦由N个像素点组成。进一步,按照预设图片编码规则分别对RGB数据和透明度数据进行编码,获得对应的色值图片和透明图片。因此,本实施例通过将待传输图像的RGBA数据拆分成RGB数据和透明度数据,降低了图片的内存占用率,同时保留了图片颜色信息的完整性,保证在传输过程中图片的高质量。
在一些实施例中,所述分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片,包括:
按照JPEG编码算法分别对所述RGB数据和所述透明度数据进行编码,得到JPEG格式的色值图片和透明图片。
在本实施例中,针对高色域且具有Alpha通道的图片,可以是TIF、TAG、PNG等格式的图片,但该图片在传输过程中存在压缩效率低等问题,如PNG格式的图片压缩效率低导致素材包过大。本申请按照预设图片编码规则对RGB数据和透明度数据进行编码,得到对应图片格式的色值图片和透明图片,预设图片编码规则包括但不限于JPEG编码算法。示例性的,由于JPEG格式的图片在网络图片传输过程中具有色域广、压缩比高、兼容性好、解码效率高的特点,但该图片为有损压缩,且不支持Alpha通道。因此,本实施例按照JPEG编码算法将RGB数据和透明度数据进行图像编码压缩,使得传输JPEG格式的色值图片和透明图片,以便于在降低了图片文件的传输数据量的基础上,提高了图片的压缩效率,进一步降低了图片文件在传输过程中的数据量。
示例性的,本实施例中待传输图片(即原图)为PNG格式,满足预设的图片属性条件,其文件大小为8.74MB,分辨率为1000*3286。进一步,针对在高色域且具备Alpha(透明)通道的原图,解析该原图,分离出RGB数据域与Alpha数据域,并进行JPEG编码压缩,对应生成两张JPG格式的图片。具体的,由该原图的RGB数据域生成rgb图片(即色值图片),该rgb图片为JPG格式,其文件大小为688KB,分辨率为1000*3286。以及由该原图的Alpha数据域生成alpha图片(即透明图片),该alpha图片为JPG格式,其文件大小为225KB,分辨率为1000*3286。可见,待传输图片经处理后图片的总文件大小为913KB,远小于原图8.74MB的文件大小,减少了约90%的图片数据大小。
在一些实施例中,所述方法还包括所述色值图片的生成步骤:
建立第一图像缓冲区;
将所述待传输图片中每个像素的RGB数据写入所述第一图像缓冲区中所述像素对应的字节位置,以合成原始色值图片数据;
对所述原始色值图片数据进行编码,得到所述色值图片。
在本实施例中,第一图像缓冲区用以缓存待传输图片的RGB数据,以便于读取第一图像缓冲区的字节数据,并经图像编码后获得色值图片。具体的,逐行获取待传输图片中每个像素点的RGB数据,写入第一图像缓冲区中对应像素的字节位置,使得第一图像缓冲区存储待传输图片的颜色索引,组合成原始色值图片数据,如原始图像格式的色值图片的像素数据。更具体的,第一图像缓冲区的前三个字节对应待传输图片第一行第一个像素点的三个通道值(即RGB数据),接下来的三个字节对应第一行的第二个像素点的三个通道值,以此类推。进一步,将第一图像缓冲区所存储的原始色值图片数据按照图像数据结构进行编码压缩处理,以获得色值图片。
在一些实施例中,所述方法还包括所述透明图片的生成步骤:
建立第二图像缓冲区;
将所述待传输图片中每个像素的透明度数据写入所述第二图像缓冲区中所述像素对应的字节位置,以合成原始透明图片数据;
对所述原始透明图片数据进行编码,得到所述透明图片。
在本实施例中,第二图像缓冲区用以缓存待传输图片的透明度数据,以便于读取第二图像缓冲区的字节数据,并经图像编码后获得透明图片。具体的,逐行获取待传输图片中每个像素点的透明度数据,写入第二图像缓冲区中对应像素的字节位置,使得第二图像缓冲区存储待传输图片的颜色索引,组合成原始透明图片数据,如原始图像格式的透明图片的像素数据。更具体的,第二图像缓冲区的第一个字节对应待传输图片第一行第一个像素点的Alpha通道值(即透明度数据),而后的一个字节对应第一行的第二个像素点的透明度数据,以此类推。进一步,将第二图像缓冲区所存储的原始透明图片数据按照图像数据结构进行编码压缩处理,以获得透明图片。
示例性的,参见图4,为本申请实施例提供的一种图片传输方法中的色值图片和透明图片的生成流程示意图,获取并打开原图,分析该原图的格式,如PNG格式。进一步,对该原图进行解码,获得图像原始格式的图片,此时新建透明图片内存缓冲区(即第二图像缓冲区)及RGB图片内存缓冲区(即色值图片对应的第一图像缓冲区)。逐行分析该原图中每个像素点的RGBA数据,即Alpha/R/G/B数据,并对每个像素点的RGBA数据进行数据分离,以获得透明度数据和RGB数据。一方面,将分离出该原图中每个像素点的透明度数据填充透明图片内存缓冲区对应像素位置,直至完成该原图中所有像素点的透明度数据的写入。进一步,读取透明图片内存缓冲区的图像数据进行JPEG编码,以获得黑白的透明图片,即图4中文件名为Alpha.Jpeg的图片。另一方面,将分离出该原图中每个像素点的RGB数据填充RGB图片内存缓冲区对应像素位置,直至完成该原图中所有像素点的RGB数据的写入。进一步,读取RGB图片内存缓冲区的图像数据进行JPEG编码,以获得彩色的色值图片,即图4中文件名为色值图片.Jpeg的图片。
本申请实施例提供的一种图片传输方法,通过获取待传输图片,在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片,传输所述色值图片和所述透明图片,以使得大大减少了待传输图片素材包的数据量,提高了待传输图片的压缩效率,并提高了网络图片在传输过程中的传输效率,同时在图片传输过程中完整保留了图片的RGB数据和透明度数据,保证了图片的质量,从而能够解决在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片压缩效率低的技术问题。
图5为本申请实施例提供的一种图片显示方法的流程示意图,所述图片显示方法由第二客户端2000执行,所述方法包括步骤S201至S202。
S201、接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据。
其中,第二客户端接收服务器发送的待显示图片数据,待显示图片数据为由第一客户端发送给服务器的图片数据。具体的,第一客户端基于待显示图片分离出该图片中Red(红色)、Green(绿色)、Blue(蓝色)三个通道对应的RGB数据以及Alpha通道对应的透明度数据,所述色值图片数据为由该RGB数据所生成的色值图片对应的图像数据,所述透明图片数据为由该透明度数据所生成的透明图片对应的图像数据。进一步,第一客户端将色值图片数据和透明图片数据打包发送给服务器,以便于在第二客户端接收到服务器发送的上述图片数据后,对图像数据做显示处理。
S202、显示基于所述色值图片数据和所述透明图片数据合成的待显示图片。
其中,第二客户端将色值图片数据中的RGB数据与透明图片数据中的透明度数据进行像素合成,以获得待显示图片。进一步,第二客户端设有显示屏等具有显示功能的设备,以使得通过显示屏显示所合成的待显示图片。
示例性的,请参见图3,第一客户端(即图3中客户端A)向服务器传输图片数据,服务器向第二客户端(即图3中客户端B)通知并发送该图片数据。客户端B接收到图片数据后,按照标记信息判断第一客户端是否使用新方案传输,即本申请上述实施例的图片传输方法。若使用新方案传输,则下载来自服务器的图片包,并对该图片包进行信息校验,该图片包为zip等压缩文件格式,包括有透明图片数据和RGB图片数据。在完成校验后,读取该图片包的透明图片数据和RGB图片数据,对透明图片数据和RGB图片数据进行解码,以获得原始图像格式的图片的像素数据。进一步,对该图片的像素数据进行合并像素,或使用着色器(shader)对图片的像素数据进行图像渲染,从而显示第一客户端向第二客户端传输的图片。若未使用新方案传输,该第一客户端所上传的图片的色域不在预设高色域内,和/或具备Alpha通道,则下载该图片,并对该图片进行校验,而后对该图片进行解码及显示处理。
在一实施例中,步骤S202包括:
建立第三图像缓冲区;
分别对所述色值图片数据和所述透明图片数据进行解码,获得待显示图片的RGB数据和透明度数据;
将所述待显示图片中每个像素对应的所述RGB数据和所述透明度数据进行合并,生成所述待显示图片中每个像素的RGBA数据;
将每个像素的RGBA数据写入所述第三图像缓冲区中所述像素对应的字节位置,以合成所述待显示图片对应的原始图片数据;
对所述原始图片数据进行编码,以获得待显示图片,并显示所述待显示图片。
在本实施例中,第二客户端中的解码装置按照预设图片解码规则对色值图片数据和透明图片数据进行解码。例如,以预设图片编码规则为JPEG编码算法为例进行说明,若色值图片数据和透明图片数据为JPEG图片格式,则采用JPEG解码算法对色值图片数据进行解码,以获得待显示图片中每个像素的RGB数据,以及采用JPEG解码算法对透明图片数据进行解码,以获得待显示图片中每个像素的透明度数据。本实施例中的预设图片解码规则与上述实施例中第一客户端执行图片编码操作步骤中的预设图片编码规则一一对应。此外,色值图片数据和透明图片数据的解码步骤在执行过程中并无先后顺序之分。
需要说明的是,待显示图片、色值图片以及透明图片的像素点一一对应,而且每个像素点中的像素数据一一对应,因此,待显示图片由N个像素点组成,色值图片以及透明图片亦由N个像素点组成。由于图片中每个像素点对应一个RGBA数据,将待显示图片中每个像素点对应的RGB数据和透明度数据合并成对应像素点的RGBA数据。示例性的,以待显示图片中第一行第一个像素点为例,读取由色值图片数据经解码得到原始图像格式的色值图片中该像素点的RGB数据(即待显示图片中该像素点的RGB数据),以及由透明图片数据经解码得到原始图像格式的透明图片中该像素点的透明度数据(即待显示图片中该像素点的透明度数据),这样将该像素点的RGB数据和透明度数据进行合并,以得到该像素点的RGBA数据。
第三图像缓冲区用以缓存待显示图片的RGBA数据,以便于读取第三图像缓冲区的字节数据,并经图像编码后获得待显示图片。具体的,逐行获取待显示图片中每个像素点的RGBA数据,写入第三图像缓冲区中对应像素的字节位置,使得第三图像缓冲区存储待显示图片的颜色索引,组合成原始图片数据,如原始图像格式的待显示图片的像素数据。更具体的,第三图像缓冲区的前四个字节对应待显示图片第一行第一个像素点的四个通道值(即RGBA数据),接下来的四个字节对应第一行第二个像素点的四个通道值,以此类推。进一步,将第三图像缓冲区所存储的原始图片数据按照图像数据结构进行编码压缩处理,以获得色值图片。
示例性的,图6为本申请实施例提供的一种图片显示方法中合成待显示图片的一流程示意图,读取并获取待显示图片数据,根据待显示图片的宽高图像信息创建内存缓冲区(即第三图像缓冲区)。进一步,读取文件名为Alpha.jpg的图片(即透明图片),采用JPEG图片解码算法对该透明图片进行JPEG解码,以获得原始图像格式的原始透明图片,逐行分析该原始透明图片中每个像素点的透明度数据。与此同时,读取文件名为RGB.jpg的图片(即色值图片),采用JPEG图片解码算法对该色值图片进行JPEG解码,以获得原始图像格式的原始色值图片,逐行分析该原始色值图片中每个像素点的RGB数据。更进一步,将每个像素点对应的RGB数据和透明度数据进行合并像素,以获得每个像素点对应的RGBA数据,将该待显示图片中每个像素点的RGBA数据填充内存缓冲区对应像素位置,直至完成该待显示图片中所有像素点的RGBA数据的写入,获得原始图片数据。进一步,将内存缓冲区所存储的原始图片数据进行PNG/BMP编码,以获得待显示图片,并显示该图片。
在另一实施例中,步骤S202包括:
将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,以获得待显示图片,并显示所述待显示图片。
在本实施例中,将色值图片数据和透明图片数据输入到着色器,并通过着色器在显示过程中通过alpha混合显示原图效果。示例性的,图7为本申请实施例提供的一种图片显示方法中合成待显示图片的另一流程示意图,读取待显示图片数据,即色值图片数据和透明图片数据,根据待显示图片的宽高图像信息创建内存缓冲区(即第三图像缓冲区)。进一步,将色值图片数据和透明图片数据输入到着色器shader或图像处理器Effect进行图像处理,如alpha混合,从而输出待显示图片,并显示该图片。因此,本实施例采用着色器等图像处理模型进行图像处理,无需占用CPU过多的资源,提高了图像处理的效率。
需要说明的是,本实施例中着色器执行以下图像处理步骤:输入背景图或其他元素,输入色值图像数据和透明图像数据;拓展应用,如调整alpha混合的百分比;获取像素点,输入该像素点的背景图RGB数据、色值图像数据中该像素点的RGB数据以及透明图像数据中该像素点的透明度数据;以此进行alpha混合,输出混合后的像素点。
在上述实施例的基础上,在一些实施例中,所述将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,包括:
调整alpha混合的百分比;或,
调整所述透明度数据的属性参数,所述属性参数包括alpha纹理参数。
在本实施例中,通过调整alpha混合的百分比,即拓展输入参数,实现更多的动画效果,保证网络图片在传输过程中具有良好的展示效果。其次,通过调整所述透明度数据的属性参数,实现产生不同的混合效果,丰富了动画、图片的展示效果。
本申请实施例提供的图片显示方法,通过接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明度图片数据,显示基于所述色值图片数据和所述透明图片数据合成的待显示图片,这样大大减少了待传输图片素材包的数据量,并提高了网络图片在传输过程中的传输效率,同时在图片传输过程中完整保留了图片的RGB数据和透明度数据,保证了图片的质量,从而能够解决在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片数据量较大的技术问题。
图8为本申请实施例提供的一种图片传输装置的结构示意图,所述图片传输装置300,包括:
图片获取模块301,用于获取待传输图片;
图片处理模块302,用于在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片;
传输模块303,用于传输所述色值图片和所述透明图片。
在一些实施例中,图片处理模块302包括:
RGBA数据获取单元,用于获取所述待传输图片中每个像素的RGBA数据;
图片数据分离单元,用于将所述RGBA数据分离出所述RGB数据和所述透明度数据;
第一编码单元,用于分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片。
在一些实施例中,图片处理模块302还包括:
第一图像缓冲区建立单元,用于建立第一图像缓冲区;
RGB数据写入单元,用于将所述待传输图片中每个像素的RGB数据写入所述第一图像缓冲区中所述像素对应的字节位置,以合成原始色值图片数据;
第二编码单元,用于对所述原始色值图片数据进行编码,得到所述色值图片。
在一些实施例中,图片处理模块302还包括:
第二图像缓冲区建立单元,用于建立第二图像缓冲区;
透明度数据写入单元,用于将所述待传输图片中每个像素的透明度数据写入所述第二图像缓冲区中所述像素对应的字节位置,以合成原始透明图片数据;
第三编码单元,用于对所述原始透明图片数据进行编码,得到所述透明图片。
在一些实施例中,图片处理模块302还包括:
条件判断单元,用于当判断到所述待传输图片的色域在预设高色域内,且具备Alpha通道时,则确定所述待传输图片满足所述图片属性条件。
在一些实施例中,第一编码单元包括:
JPEG编码单元,用于按照JPEG编码算法分别对所述RGB数据和所述透明度数据进行编码,得到JPEG格式的色值图片和透明图片。
本申请实施例的图片传输装置可执行本申请实施例所提供的图片传输方法,其实现原理相类似,本申请各实施例的图片传输装置中的各模块所执行的动作是与本申请各实施例的图片传输方法中的步骤相对应的,对于装置的各模块的详细功能描述具体可以参见前文中所示的对应方法中的描述,此处不再赘述。
图9为本申请实施例提供的一种图片显示装置的结构示意图,所述图片显示装置400,包括:
接收模块401,用于接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据;
显示模块402,用于显示基于所述色值图片数据和所述透明图片数据合成的待显示图片。
在一些实施例中,所述显示模块402包括:
第三图像缓冲区建立单元,用于建立第三图像缓冲区;
解码单元,用于分别对所述色值图片数据和所述透明图片数据进行解码,获得待显示图片的RGB数据和透明度数据;
像素合并单元,用于将所述待显示图片中每个像素对应的所述RGB数据和所述透明度数据进行合并,生成所述待显示图片中每个像素的RGBA数据;
RGBA数据写入单元,用于将每个像素的RGBA数据写入所述第三图像缓冲区中所述像素对应的字节位置,以合成所述待显示图片对应的原始图片数据;
第四编码单元,用于对所述原始图片数据进行编码,以获得待显示图片,并显示所述待显示图片。
在一些实施例中,所述显示模块402还包括:
alpha混合单元,用于将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,以获得待显示图片,并显示所述待显示图片。
在一些实施例中,所述alpha混合单元包括:
alpha混合参数调整单元,用于调整alpha混合的百分比;或,
透明度属性参数调整单元,用于调整所述透明度数据的属性参数,所述属性参数包括alpha纹理参数。
本申请实施例的图片显示装置可执行本申请实施例所提供的图片显示方法,其实现原理相类似,本申请各实施例的图片显示装置中的各模块所执行的动作是与本申请各实施例的图片显示方法中的步骤相对应的,对于装置的各模块的详细功能描述具体可以参见前文中所示的对应方法中的描述,此处不再赘述。
本申请实施例中提供了一种电子设备,包括存储器、处理器及存储在存储器上的计算机程序,该处理器执行上述计算机程序以实现图片传输方法或图片显示方法的步骤,与现有技术相比可实现:大大减少了待传输图片素材包的数据量,并提高了网络图片在传输过程中的传输效率,同时在图片传输过程中完整保留了图片的RGB数据和透明度数据,保证了图片的质量,从而能够解决在保证网络图片具有良好的展示效果的情况下,网络图片传输过程中图片数据量较大的技术问题。
在一个可选实施例中提供了一种电子设备5000,如图10所示,图10所示的电子设备5000包括:处理器5001和存储器5003。其中,处理器5001和存储器5003相连,如通过总线5002相连。可选地,电子设备5000还可以包括收发器5004,收发器5004可以用于该电子设备与其他电子设备之间的数据交互,如数据的发送和/或数据的接收等。需要说明的是,实际应用中收发器5004不限于一个,该电子设备5000的结构并不构成对本申请实施例的限定。
处理器5001可以是CPU(Central Processing Unit,中央处理器),通用处理器,DSP(Digital Signal Processor,数据信号处理器),ASIC(Application SpecificIntegrated Circuit,专用集成电路),FPGA(Field Programmable Gate Array,现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器5001也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等。
总线5002可包括一通路,在上述组件之间传送信息。总线5002可以是PCI(Peripheral Component Interconnect,外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture,扩展工业标准结构)总线等。总线5002可以分为地址总线、数据总线、控制总线等。为便于表示,图10中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
存储器5003可以是ROM(Read Only Memory,只读存储器)或可存储静态信息和指令的其他类型的静态存储设备,RAM(Random Access Memory,随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备,也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory,电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory,只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质、其他磁存储设备、或者能够用于携带或存储计算机程序并能够由计算机读取的任何其他介质,在此不做限定。
存储器5003用于存储执行本申请实施例的计算机程序,并由处理器5001来控制执行。处理器5001用于执行存储器5003中存储的计算机程序,以实现前述方法实施例所示的步骤。
本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时可实现前述图片传输方法或图片显示方法实施例的步骤及相应内容。
应该理解的是,虽然本申请实施例的流程图中通过箭头指示各个操作步骤,但是这些步骤的实施顺序并不受限于箭头所指示的顺序。除非本文中有明确的说明,否则在本申请实施例的一些实施场景中,各流程图中的实施步骤可以按照需求以其他的顺序执行。此外,各流程图中的部分或全部步骤基于实际的实施场景,可以包括多个子步骤或者多个阶段。这些子步骤或者阶段中的部分或全部可以在同一时刻被执行,这些子步骤或者阶段中的每个子步骤或者阶段也可以分别在不同的时刻被执行。在执行时刻不同的场景下,这些子步骤或者阶段的执行顺序可以根据需求灵活配置,本申请实施例对此不限制。
以上所述仅是本申请部分实施场景的可选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请的方案技术构思的前提下,采用基于本申请技术思想的其他类似实施手段,同样属于本申请实施例的保护范畴。

Claims (14)

1.一种图片传输方法,其特征在于,用于第一客户端,包括:
获取待传输图片;
在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片;
传输所述色值图片和所述透明图片。
2.根据权利要求1所述的图片传输方法,其特征在于,所述基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片,包括;
获取所述待传输图片中每个像素的RGBA数据;
将所述RGBA数据分离出所述RGB数据和所述透明度数据;
分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片。
3.根据权利要求2所述的图片传输方法,其特征在于,所述方法还包括所述色值图片的生成步骤:
建立第一图像缓冲区;
将所述待传输图片中每个像素的RGB数据写入所述第一图像缓冲区中所述像素对应的字节位置,以合成原始色值图片数据;
对所述原始色值图片数据进行编码,得到所述色值图片。
4.根据权利要求2所述的图片传输方法,其特征在于,所述方法还包括所述透明图片的生成步骤:
建立第二图像缓冲区;
将所述待传输图片中每个像素的透明度数据写入所述第二图像缓冲区中所述像素对应的字节位置,以合成原始透明图片数据;
对所述原始透明图片数据进行编码,得到所述透明图片。
5.根据权利要求1所述的图片传输方法,其特征在于,通过如下步骤确定所述待传输图片满足预设的图片属性条件,包括:
当判断到所述待传输图片的色域在预设高色域内,且具备Alpha通道时,则确定所述待传输图片满足所述图片属性条件。
6.根据权利要求2所述的图片传输方法,其特征在于,所述分别对所述RGB数据和所述透明度数据进行编码,得到色值图片和透明图片,包括:
按照JPEG编码算法分别对所述RGB数据和所述透明度数据进行编码,得到JPEG格式的色值图片和透明图片。
7.一种图片显示方法,其特征在于,用于第二客户端,包括:
接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据;
显示基于所述色值图片数据和所述透明图片数据合成的待显示图片。
8.根据权利要求7所述的图片显示方法,其特征在于,所述显示基于所述色值图片数据和所述透明图片数据合成的待显示图片,包括:
建立第三图像缓冲区;
分别对所述色值图片数据和所述透明图片数据进行解码,获得待显示图片的RGB数据和透明度数据;
将所述待显示图片中每个像素对应的所述RGB数据和所述透明度数据进行合并,生成所述待显示图片中每个像素的RGBA数据;
将每个像素的RGBA数据写入所述第三图像缓冲区中所述像素对应的字节位置,以合成所述待显示图片对应的原始图片数据;
对所述原始图片数据进行编码,以获得待显示图片,并显示所述待显示图片。
9.根据权利要求7所述的图片显示方法,其特征在于,所述显示基于所述色值图片数据和所述透明图片数据合成的待显示图片,包括:
将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,以获得待显示图片,并显示所述待显示图片。
10.根据权利要求9所述的图片显示方法,其特征在于,所述将所述色值图片数据中每个像素的RGB数据与所述透明图片数据中对应像素的透明度数据进行alpha混合,包括:
调整alpha混合的百分比;或,
调整所述透明度数据的属性参数,所述属性参数包括alpha纹理参数。
11.一种图片传输装置,其特征在于,用于第一客户端,包括:
图片获取模块,用于获取待传输图片;
图片处理模块,用于在确定所述待传输图片满足预设的图片属性条件时,基于所述待传输图片分离出由所述待传输图片的RGB数据生成的色值图片以及由所述待传输图片的透明度数据生成的透明图片;
传输模块,用于传输所述色值图片和所述透明图片。
12.一种图片显示装置,其特征在于,用于第二客户端,包括:
接收模块,用于接收待显示图片数据,所述待显示图片数据包括基于待显示图片的RGB数据与透明度数据进行图片分离得到的色值图片数据和透明图片数据;
显示模块,用于显示基于所述色值图片数据和所述透明图片数据合成的待显示图片。
13.一种电子设备,包括存储器、处理器及存储在存储器上的计算机程序,其特征在于,所述处理器执行所述计算机程序以实现权利要求1-6任一项所述的图片传输方法或实现权利要求7-10任一项所述的图片显示方法。
14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-6任一项所述的图片传输方法的步骤或实现权利要求7-10任一项所述的图片显示方法的步骤。
CN202111152552.0A 2021-09-29 2021-09-29 图片传输方法、显示方法、装置、电子设备及存储介质 Pending CN113938572A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111152552.0A CN113938572A (zh) 2021-09-29 2021-09-29 图片传输方法、显示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111152552.0A CN113938572A (zh) 2021-09-29 2021-09-29 图片传输方法、显示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN113938572A true CN113938572A (zh) 2022-01-14

Family

ID=79277357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111152552.0A Pending CN113938572A (zh) 2021-09-29 2021-09-29 图片传输方法、显示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113938572A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115297312A (zh) * 2022-08-04 2022-11-04 深圳市瑞云科技有限公司 一种传输图像透明度信息的方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106937132A (zh) * 2017-04-08 2017-07-07 腾讯科技(深圳)有限公司 一种图片文件处理方法
CN107370714A (zh) * 2016-05-13 2017-11-21 吉林纪元时空动漫游戏科技集团股份有限公司 面向云渲染的高效通讯方法
WO2020087968A1 (zh) * 2018-10-31 2020-05-07 中国银联股份有限公司 一种图片显示方法、图片处理方法及其系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107370714A (zh) * 2016-05-13 2017-11-21 吉林纪元时空动漫游戏科技集团股份有限公司 面向云渲染的高效通讯方法
CN106937132A (zh) * 2017-04-08 2017-07-07 腾讯科技(深圳)有限公司 一种图片文件处理方法
WO2020087968A1 (zh) * 2018-10-31 2020-05-07 中国银联股份有限公司 一种图片显示方法、图片处理方法及其系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115297312A (zh) * 2022-08-04 2022-11-04 深圳市瑞云科技有限公司 一种传输图像透明度信息的方法

Similar Documents

Publication Publication Date Title
CN106611435B (zh) 动画处理方法和装置
CN109005426B (zh) 一种图片文件处理方法
TWI725299B (zh) 圖片檔處理方法、設備及儲存介質
CN111193876B (zh) 视频中添加特效的方法及装置
US10129385B2 (en) Method and apparatus for generating and playing animated message
CN111899322B (zh) 视频处理方法、动画渲染sdk和设备及计算机存储介质
CN109089162B (zh) 一种图片文件处理方法及系统
CN109040789B (zh) 一种图片文件处理方法
KR102617258B1 (ko) 이미지 프로세싱 방법 및 장치
JP2020174358A (ja) ビットストリーム内で、ldrピクチャのピクチャ/ビデオ・フォーマットと、このldrピクチャおよびイルミネーション・ピクチャから取得された復号済みのhdrピクチャのピクチャ/ビデオ・フォーマットとをシグナリングする方法および装置
CN113946402A (zh) 基于渲染分离的云手机加速方法、系统、设备及存储介质
CN114040246A (zh) 图形处理器的图像格式转换方法、装置、设备及存储介质
CN111885346A (zh) 画面码流合成方法、终端、电子设备和存储介质
CN107767437B (zh) 一种多层混合异步渲染方法
CN112714357A (zh) 视频播放方法、视频播放装置、电子设备和存储介质
CN113938572A (zh) 图片传输方法、显示方法、装置、电子设备及存储介质
CN111064986B (zh) 带透明度的动画数据发送方法、播放方法和计算机设备
CN114245027B (zh) 一种视频数据混合处理方法、系统、电子设备和存储介质
CN114079823A (zh) 基于Flutter的视频渲染方法、装置、设备及介质
CN104737225B (zh) 用于存储器带宽有效的显示合成的系统及方法
WO2024051394A1 (zh) 视频处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品
CN116095262B (zh) 用于处理视频信号源的移动处理设备、处理方法及系统
US9361860B2 (en) Display apparatus, image post-processing apparatus and method for image post-processing of contents
CN114760525A (zh) 视频生成及播放方法、装置、设备、介质
CN116824007A (zh) 动画播放方法、动画生成方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination