CN108683900A - 一种图像数据处理方法及装置 - Google Patents
一种图像数据处理方法及装置 Download PDFInfo
- Publication number
- CN108683900A CN108683900A CN201810538412.9A CN201810538412A CN108683900A CN 108683900 A CN108683900 A CN 108683900A CN 201810538412 A CN201810538412 A CN 201810538412A CN 108683900 A CN108683900 A CN 108683900A
- Authority
- CN
- China
- Prior art keywords
- primary
- image
- data
- rendering
- datas
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本发明实施例提供了一种图像数据处理方法及装置。在本发明实施例中,由于第二终端对原生3D图像数据使用帧序列编码,从而使得得到的3D图像编码数据的数据量较低,进而无需使得3D图像编码数据在从服务器向第一终端传输的过程中高速传输,低速传输也可以使得第一终端能够流畅地且高分辨率地播放3D视频,因此,即使服务器与第一终端之间的带宽较低,也不影响第一终端流畅地且高分辨率地播放3D视频,从而可以避免降低用户的观看体验。其次,由于服务器同时存储2D图像数据编码和3D图像数据编码,因此还可以兼顾不同用户的个性化需求。
Description
技术领域
本发明涉及互联网技术领域,特别是涉及一种图像数据处理方法及装置。
背景技术
VR(Virtual Reality,虚拟现实)技术是一种计算机仿真技术,它使用VR头盔产生逼真的图像、声音和其他感觉,给用户提供沉浸式的体验。在观看过程中,用户能看到全方位的视频,感受到身临其境的感觉。
秀场直播是近年来流行的全新互联网业务,不仅让有才艺的人可以有一个展现自我的舞台,还可以让更多的人认识和发现主播的精彩,并且也让许多人找到一个可以放松解压的方式,广受用户欢迎。
VR与秀场直播相结合可以拉近主播和用户之间的距离,提供身临其境的参与体验。用户可以通过佩戴VR头盔观看主播的3D表演视频,进一步提升观看体验。
其中,主播可以使用主播终端采集3D表演视频,主播终端对3D表演视频中的原生3D图像数据编码得到3D图像编码数据,然后将得到的3D图像编码数据发送给服务器存储。
当用户需要观看主播的3D表演视频时,可以通过用户终端获取服务器存储的3D图像编码数据,并对3D图像编码数据解码得到3D表演视频中的原生3D图像数据,然后显示原生3D图像数据供用户观看。
然而,发明人发现,对3D表演视频中的原生3D图像数据编码得到3D图像编码数据的数据量较大,如果用户终端需要流畅地且高分辨率地播放3D表演视频,则需要使得3D图像编码数据在从服务器向用户终端传输的过程中高速传输,但是,如果服务器与用户终端之间的带宽较低,则无法使得3D图像编码数据在从服务器向用户终端传输的过程中的高速传输,而只能以较低速率传输,进而导致用户终端无法流畅地且高分辨率地播放3D表演视频,进而会降低用户的观看体验。
发明内容
为解决上述技术问题,本发明实施例示出了一种图像数据处理方法及装置。
第一方面,本发明实施例示出了一种图像数据处理方法,所述方法包括:
获取3D图像编码数据并存储所述3D图像编码数据,所述3D图像编码数据是对原生3D图像数据使用帧序列编码后得到的;
对3D图像编码数据解码得到所述原生3D图像数据,所述原生3D图像数据包括多个原生2D图像数据;
将所述原生3D图像数据拆分为所述多个原生2D图像数据;
对至少一个所述原生2D图像数据编码得到2D图像编码数据;
存储所述2D图像编码数据。
其中,所述方法还包括:
接收第一终端发送的用于获取图像编码数据的获取请求;
如果所述获取请求用于获取2D图像编码数据,则获取已存储的所述2D图像编码数据,并向所述第一终端发送获取的2D图像编码数据;
如果所述获取请求用于获取3D图像编码数据,则获取已存储的所述3D图像编码数据,并向所述第一终端发送获取的3D图像编码数据。
其中,所述对至少一个所述原生2D图像数据编码得到2D图像编码数据,包括:
从所述多个原生2D图像数据中选择对应的图像质量最高的原生2D图像数据;
对选择的原生2D图像数据编码得到2D图像编码数据。
第二方面,本发明实施例示出了一种图像数据处理方法,应用于第二终端,所述方法包括:
采集原生3D图像数据;
对原生3D图像数据使用帧序列编码得到3D图像编码数据;
向服务器发送所述3D图像编码数据。
其中,所述原生3D图像数据包括多个原生2D图像数据;
所述对原生3D图像数据使用帧序列编码得到3D图像编码数据,包括:
将所述原生3D图像数据拆分为所述多个原生2D图像数据;
将所述多个原生2D图像数据划分为第一原生2D图像数据和第二原生2D图像数据;
获取所述第二原生2D图像数据之间相同的图像数据;
在所述第二原生2D图像数据中去除相同的图像数据;
对所述第一原生2D图像数据与去除了所述相同的图像数据的第二原生2D图像数据编码,得到3D图像编码数据。
第三方面,本发明实施例示出了一种图像数据处理方法,应用于第一终端,所述方法包括:
向服务器发送用于获取图像编码数据的获取请求;
如果所述获取请求用于获取2D图像编码数据,则接收所述服务器根据所述获取请求返回的2D图像编码数据,对所述2D图像编码数据解码得到原生2D图像数据,显示所述原生2D图像数据;
如果所述获取请求用于获取3D图像编码数据,则接收所述服务器根据所述获取请求返回的3D图像编码数据,所述3D图像编码数据是对原生3D图像数据中包括的多个原生2D图像数据使用帧序列编码后得到的,对所述3D图像编码数据解码得到所述多个原生2D图像数据,渲染所述多个原生2D图像数据。
其中,所述渲染所述多个原生2D图像数据,包括:
在所述多个原生2D图像数据中,确定未曾被去除图像数据的第一原生2D图像数据;
将所述多个原生2D图像数据中的除第一原生2D图像数据以外的图像数据确定为曾被去除图像数据的第二原生2D图像数据;
在所述第一原生2D图像数据中获取用于补全第二原生2D图像数据的图像数据;
使用用于补全第二原生2D图像数据的图像数据补全所述第二原生2D图像数据;
渲染第一原生2D图像数据和补全后的第二原生2D图像数据。
第四方面,本发明实施例示出了一种图像数据处理装置,应用于服务器,所述装置包括:
第一获取模块,用于获取3D图像编码数据并存储所述3D图像编码数据,所述3D图像编码数据是对原生3D图像数据使用帧序列编码后得到的;
第一解码模块,用于对3D图像编码数据解码得到所述原生3D图像数据,所述原生3D图像数据包括多个原生2D图像数据;
拆分模块,用于将所述原生3D图像数据拆分为所述多个原生2D图像数据;
第一编码模块,用于对至少一个所述原生2D图像数据编码得到2D图像编码数据;
存储模块,用于存储所述2D图像编码数据。
其中,所述装置还包括:
第一接收模块,用于接收第一终端发送的用于获取图像编码数据的获取请求;
第一发送模块,用于如果所述获取请求用于获取2D图像编码数据,则获取已存储的所述2D图像编码数据,并向所述第一终端发送获取的2D图像编码数据;
第二发送模块,用于如果所述获取请求用于获取3D图像编码数据,则获取已存储的所述3D图像编码数据,并向所述第一终端发送获取的3D图像编码数据。
其中,所述第一编码模块包括:
选择单元,用于从所述多个原生2D图像数据中选择对应的图像质量最高的原生2D图像数据;
第一编码单元,用于对选择的原生2D图像数据编码得到2D图像编码数据。
第五方面,本发明实施例示出了一种图像数据处理装置,应用于第二终端,所述装置包括:
采集模块,用于采集原生3D图像数据;
第二编码模块,用于对原生3D图像数据使用帧序列编码得到3D图像编码数据;
第三发送模块,用于向服务器发送所述3D图像编码数据。
其中,所述原生3D图像数据包括多个原生2D图像数据;
所述第二编码模块包括:
拆分单元,用于将所述原生3D图像数据拆分为所述多个原生2D图像数据;
划分单元,用于将所述多个原生2D图像数据划分为第一原生2D图像数据和第二原生2D图像数据;
第一获取单元,用于获取所述第二原生2D图像数据之间相同的图像数据;
去除单元,用于在所述第二原生2D图像数据中去除相同的图像数据;
第二编码单元,用于对所述第一原生2D图像数据与去除了所述相同的图像数据的第二原生2D图像数据编码,得到3D图像编码数据。
第六方面,本发明实施例示出了一种图像数据处理装置,应用于第一终端,所述装置包括:
第四发送模块,用于向服务器发送用于获取图像编码数据的获取请求;
第二接收模块,用于如果所述获取请求用于获取2D图像编码数据,则接收所述服务器根据所述获取请求返回的2D图像编码数据,第二解码模块,用于对所述2D图像编码数据解码得到原生2D图像数据,显示模块,用于显示所述原生2D图像数据;
第三接收模块,用于如果所述获取请求用于获取3D图像编码数据,则接收所述服务器根据所述获取请求返回的3D图像编码数据,所述3D图像编码数据是对原生3D图像数据中包括的多个原生2D图像数据使用帧序列编码后得到的,第三解码模块,用于对所述3D图像编码数据解码得到所述多个原生2D图像数据,渲染模块,用于渲染所述多个原生2D图像数据。
其中,所述渲染模块包括:
第一确定单元,用于在所述多个原生2D图像数据中,确定未曾被去除图像数据的第一原生2D图像数据;
第二确定单元,用于将所述多个原生2D图像数据中的除第一原生2D图像数据以外的图像数据确定为曾被去除图像数据的第二原生2D图像数据;
第二获取单元,用于在所述第一原生2D图像数据中获取用于补全第二原生2D图像数据的图像数据;
补全单元,用于使用用于补全第二原生2D图像数据的图像数据补全所述第二原生2D图像数据;
渲染单元,用于渲染第一原生2D图像数据和补全后的第二原生2D图像数据。
与现有技术相比,本发明实施例包括以下优点:
在本发明实施例中,由于第二终端对原生3D图像数据使用帧序列编码,从而使得得到的3D图像编码数据的数据量较低,进而无需使得3D图像编码数据在从服务器向第一终端传输的过程中高速传输,低速传输也可以使得第一终端能够流畅地且高分辨率地播放3D视频,因此,即使服务器与第一终端之间的带宽较低,也不影响第一终端流畅地且高分辨率地播放3D视频,从而可以避免降低用户的观看体验。其次,由于服务器同时存储2D图像数据编码和3D图像数据编码,因此还可以兼顾不同用户的个性化需求。
附图说明
图1是本发明的一种图像数据处理系统实施例的结构框图;
图2是本发明的一种图像数据处理方法实施例的步骤流程图;
图3是本发明的一种图像数据处理装置实施例的结构框图;
图4是本发明的一种图像数据处理装置实施例的结构框图;
图5是本发明的一种图像数据处理装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,示出了本发明的一种图像数据处理系统实施例的结构框图,该系统包括第一终端01、第二终端02和服务器03,第一终端01与服务器03之间通信连接,第二终端02与服务器03之间通信连接。
第二终端02可以采集原生3D图像数据。第一终端01可以从服务器03中获取编码图像数据,以及对编码图像数据解码得到原生图像数据,并显示原生图像数据。
第一终端01可以为手机、平板电脑或笔记本电脑等设备。第二终端02也可以为手机、平板电脑或笔记本电脑等设备。
参照图2,示出了本发明的一种图像数据处理方法实施例的步骤流程图,该方法应用于1所示的系统中,该方法具体可以包括如下步骤:
在步骤S101中,第二终端采集原生3D图像数据。
在本发明实施例中,为了使得用户能够以3D视频的形式观看表演,技术人员可以使用第二终端采集原生3D图像数据。
其中,原生3D图像数据可以为视频图像的图像数据等。
在步骤S102中,第二终端对原生3D图像数据使用帧序列编码得到3D图像编码数据。
在本发明实施例中,原生3D图像数据包括多个原生2D图像数据,由于多个原生2D图像数据均是由第二终端采集同一画面而得到的,因此多个原生2D图像数据之间相同的图像数据有很多。
其中,该多个原生2D图像数据的长宽相同,且包括的像素点的数量也相同,每一个像素点均具备灰度值,以及每一个像素点在图像数据中均具备坐标且坐标唯一,因此,任意两个原生2D图像数据之间相同的图像数据包括灰度值相同且坐标相同的像素点的信息。
如果对原生3D图像数据直接编码得到3D图像编码数据,则相当于对原生3D图像数据中的每一个原生2D图像数据中的全部图像数据均编码,也即,该多个原生2D图像数据之间的相同的图像数据被编码多次,编码的次数为得到的原生2D图像数据的数量,3D图像编码数据中包括多份对该相同的图像数据编码后得到的编码数据,从而导致最终得到的3D图像编码数据的数据量非常大。
因此,为了减少最终得到的3D图像编码数据的数据量,在本发明实施例中,无需对原生3D图像数据中的每一个原生2D图像数据中的全部图像数据均编码,只需对该多个原生2D图像数据中的部分原生2D图像数据中的该相同的图像数据编码。
具体地,本步骤可以为:将原生3D图像数据拆分为多个原生2D图像数据;将多个原生2D图像数据划分为第一原生2D图像数据和第二原生2D图像数据,第一原生2D图像数据为多个原生2D图像数据中的至少一个,第一原生2D图像数据为多个原生2D图像数据中的至少一个;获取第二原生2D图像数据之间相同的图像数据;在第二原生2D图像数据中去除相同的图像数据;对第一原生2D图像数据与去除了相同的图像数据的第二原生2D图像数据编码,得到3D图像编码数据,由于在编码过程中,并未对第二原生2D图像数中的该相同的图像数据编码,从而使得最终得到的3D图像编码数据中包括的对该相同的图像数据编码后得到的编码数据的份数较少,从而可以减少最终得到的3D图像编码数据的数据量。
进一步地,为了最大程度地减少最终得到的3D图像编码数据的数据量,在一个可选的实现方式中,第一原生2D图像数据可以为该多个原生2D图像数据中的一个图像数据,第二原生2D图像数据可以包括该多个原生2D图像数据中除第一原生2D图像数据以外的其他原生2D图像数据。
在步骤S103中,第二终端向服务器发送3D图像编码数据。
其中,第二终端可以通过与服务器之间的通信连接向服务器发送3D图像编码数据。
在步骤S104中,服务器获取3D图像编码数据并存储3D图像编码数据。
在本发明实施例中,服务器可以接收第二终端发送的3D图像编码数据,然后存储3D图像编码数据,如此,之后用户如果需要观看3D图像数据,则可以将已存储的3D图像编码数据发送给用户使用的第一终端,以使用户能够观看到原生3D图像数据。
然而,在本发明实施例中,第二终端采集得到的是原生3D图像数据,如此,当之后用户需要观看图像数据时,只能观看3D图像数据,而无法观看2D图像数据。
因此,为了兼顾用户的个性化需求,例如,为了支持用户既能够观看3D图像数据,又能够观看2D图像数据,在本发明实施例中,服务器也需要存储3D图像编码数据对应的2D图像编码数据,具体地,可以通过如下步骤S105至步骤S108的流程实现,包括:
在步骤S105中,服务器对3D图像编码数据解码得到原生3D图像数据;原生3D图像数据包括多个原生2D图像数据。
在步骤S106中,服务器将原生3D图像数据拆分为多个原生2D图像数据。
在步骤S107中,服务器对至少一个原生2D图像数据编码得到2D图像编码数据。
其中,服务器可以从多个原生2D图像中选择一个原生2D图像数据,例如,随机选择一个原生2D图像数据,并对选择的原生2D图像编码得到2D图像编码数据,然后存储2D图像编码数据。如此,之后用户如果需要观看2D图像数据,则可以将已存储的2D图像编码数据发送给用户使用的第一终端,以使用户能够观看到原生2D图像数据。
然而,由于有时候不同的原生2D图像数据对应的图像质量往往不全相同,因此,为了提高用户观看2D图像数据时的观看体验,在本发明实施例中,在对至少一个原生2D图像数据编码得到2D图像编码数据时,可以从多个原生2D图像数据中选择对应的图像质量最高的原生2D图像数据,然后对选择的原生2D图像数据编码得到2D图像编码数据。
如此,使得之后用户能够观看到图像质量最高的原生2D图像数据,从而可以提高用户的观看体验。
然而,如果仅仅存储对一个原生2D图像数据编码得到2D图像编码数据,如果存储的2D图像编码数据损坏或丢失,则之后就无法向用户使用的第一终端发送2D图像编码数据,导致用户无法再观看到原生2D图像数据。
因此,为了避免由于存储的一个2D图像编码数据损坏或丢失而导致用户无法再观看到原生2D图像数据,在本发明另一实施例中,服务器可以对至少两个原生2D图像分别编码,并存储得到的每一个2D图像编码数据,以实现备份至少两个2D图像编码数据,之后用户如果需要观看2D图像数据,则可以选择一个2D图像编码数据并发送给用户使用的第一终端,如果某一2D图像编码数据损坏或丢失,还可以将其他2D图像编码数据发送给用户使用的第一终端。
在步骤S108中,服务器存储2D图像编码数据。
在服务器存储了3D图像编码数据和2D图像编码数据之后,用户既可以观看3D图像数据,也可以观看2D图像数据。
当用户需要观看图像数据时,可以通过如下步骤S109至步骤S115的流程实现,包括:
在步骤S109中,第一终端向服务器发送用于获取图像编码数据的获取请求。
在本发明实施例中,当用户需要观看图像数据时,可以使用第一终端向服务器发送用于获取图像编码数据的获取请求,该获取请求用于获取3D图像编码数据或获取2D图像编码数据。
其中,如果用户需要观看3D图像数据,则可以使用第一终端向服务器发送用于获取3D图像编码数据的获取请求;
如果用户需要观看2D图像数据,则可以使用第一终端向服务器发送用于获取2D图像编码数据的获取请求。
其中,可以在获取请求中的预设字段中添加不同的标记符来标识该获取请求用于获取2D图像编码数据还是用于获取3D图像编码数据。
在步骤S110中,服务器接收该获取请求。
在步骤S111中,服务器判断该获取请求用于获取3D图像编码数据或获取2D图像编码数据。
如果该获取请求用于获取2D图像编码数据,则执行步骤S112,如果该获取请求用于获取3D图像编码数据,则执行步骤S114。
如果该获取请求用于获取2D图像编码数据,在步骤S112中,服务器获取已存储的2D图像编码数据,并向第一终端发送获取的2D图像编码数据。
在步骤S113中,第一终端接收服务器根据该获取请求返回的2D图像编码数据,对2D图像编码数据解码得到原生2D图像数据,然后显示原生2D图像数据。
如此用户就可以在第一终端上就可以看到2D图像数据。
如果该获取请求用于获取3D图像编码数据,在步骤S114中,服务器获取已存储的3D图像编码数据,并向第一终端发送获取的3D图像编码数据。
在步骤S115中,第一终端接收服务器根据该获取请求返回的3D图像编码数据,然后对3D图像编码数据解码得到多个原生2D图像数据,并渲染多个原生2D图像数据。
从而实现显示原生3D图像数据,如此用户就可以在第一终端上就可以看到3D图像数据。
其中,由于3D图像编码数据是对原生3D图像数据使用帧序列编码后得到的,因此,在渲染多个原生2D图像数据时,需要在多个原生2D图像数据中,确定未曾被去除图像数据的第一原生2D图像数据,其中,由于曾被去除图像数据的原生2D图像数据存在像素点信息的缺失,未曾被去除图像数据的原生2D图像数据不存在像素点信息的缺失。
因此,可以在多个原生2D图像数据中,将包含的像素点信息最多的原生2D图像数据确定为第一原生2D图像数据,然后将多个原生2D图像中的除第一原生2D图像数据以外的图像数据确定为曾被去除图像数据的第二原生2D图像数据。
之后可以在第一原生2D图像数据中获取用于补全第二原生2D图像数据的图像数据,其中,可以获取第一原生2D图像数据与第二原生2D图像数据之间的差异数据,并作为用于补全第二原生2D图像数据的图像数据,该差异数据为位于第一原生2D图像数据中但不位于第二原生2D图像数据中的像素点信息。之后使用用于补全第二原生2D图像数据的图像数据补全第二原生2D图像数据,其中,可以将位于第一原生2D图像数据中但不位于第二原生2D图像数据中的像素点信息添加到第二原生2D图像数据中。
再渲染第一原生2D图像数据和补全后的第二原生2D图像数据,从而实现显示原生3D图像数据。
在本发明另一实施例中,用户往往并不是仅仅需要观看一帧3D图像数据,而是需要观看3D视频,3D视频包括多帧具有先后顺序的原生3D图像数据。因此,当用户需要观看3D视频时,服务器需要将视频中的具有先后顺序的原生3D图像数据分别对应的3D图像编码数据均发送给用户的第一终端。
第一终端可以同时或者按照该先后顺序对多个3D图像编码数据解码,但得到的原生3D图像数据可能是乱序得到的,进而对原生3D图像数据拆分后得到的原生2D图像数据也是乱序得到的,因此,对于得到的任意一个原生2D图像数据,需要在得到的其他原生2D图像数据中确定哪些原生2D图像数据与该原生2D图像数据对应于同一原生3D图像数据,对于得到的其他每一个原生2D图像数据,同样如此。
在本发明实施例中,在3D视频中,不同原生3D图像数据对应的3D图像编码数据的数据标识不同,数据标识可以为数据编号或者显示时刻。
其中,3D视频中的先后顺序靠前的原生3D图像数据对应的3D图像编码数据的数据编号小于先后顺序靠前的原生3D图像数据对应的3D图像编码数据的数据编号,且3D视频中的先后顺序靠前的原生3D图像数据对应的3D图像编码数据的显示时刻小于先后顺序靠前的原生3D图像数据对应的3D图像编码数据的显示时刻。因此,3D视频中的先后顺序靠前的原生3D图像数据的数据编号小于先后顺序靠前的原生3D图像数据的数据编号,且3D视频中的先后顺序靠前的原生3D图像数据的显示时刻小于先后顺序靠前的原生3D图像数据的显示时刻。
由于原生3D图像数据中包括多个原生2D图像数据,因此,原生3D图像数据的数据标识与其包括多个原生2D图像数据的数据标识相同。由于不同的原生3D图像数据的数据标识不同,因此不同的原生3D图像数据包括原生2D图像数据的数据标识也相同。
每一个原生3D图像数据的数据标识在该原生3D图像数据生成时就存储在该原生3D图像数据中了。每一个原生2D图像数据的数据标识在该原生2D图像数据生成时就根据包括该原生2D图像数据的该原生3D图像数据的数据标识确定出并存储在该原生2D图像数据中了。
因此,在得到的其他原生2D图像数据中确定哪些原生2D图像数据与该原生2D图像数据对应于同一原生3D图像数据时,可以获取该原生2D图像数据中存储的数据标识,在原生2D图像数据队列中查找是否存在该数据标识所对应的原生2D图像数据,如果存在该数据标识所对应的原生2D图像数据,则确定该数据标识所对应的原生2D图像数据与该原生2D图像数据对应于同一原生3D图像数据,否则,将该原生2D图像数据存储在原生2D图像数据队列中。
进一步地,在渲染该原生2D图像数据以及渲染与该原生2D图像数据对应于同一原生3D图像数据的原生2D图像数据之后,可以从原生2D图像数据队列删除该数据标识所对应的原生2D图像数据。
在本发明实施例中,由于第二终端对原生3D图像数据使用帧序列编码,从而使得得到的3D图像编码数据的数据量较低,进而无需使得3D图像编码数据在从服务器向第一终端传输的过程中高速传输,低速传输也可以使得第一终端能够流畅地且高分辨率地播放3D视频,因此,即使服务器与第一终端之间的带宽较低,也不影响第一终端流畅地且高分辨率地播放3D视频,从而可以避免降低用户的观看体验。其次,由于服务器同时存储2D图像数据编码和3D图像数据编码,因此还可以兼顾不同用户的个性化需求。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图3,示出了本发明一种图像数据处理装置实施例的结构框图,该装置具体可以包括如下模块:
第一获取模块11,用于获取3D图像编码数据并存储所述3D图像编码数据,所述3D图像编码数据是对原生3D图像数据使用帧序列编码后得到的;
第一解码模块12,用于对3D图像编码数据解码得到所述原生3D图像数据,所述原生3D图像数据包括多个原生2D图像数据;
拆分模块13,用于将所述原生3D图像数据拆分为所述多个原生2D图像数据;
第一编码模块14,用于对至少一个所述原生2D图像数据编码得到2D图像编码数据;
存储模块15,用于存储所述2D图像编码数据。
其中,所述装置还包括:
第一接收模块,用于接收第一终端发送的用于获取图像编码数据的获取请求;
第一发送模块,用于如果所述获取请求用于获取2D图像编码数据,则获取已存储的所述2D图像编码数据,并向所述第一终端发送获取的2D图像编码数据;
第二发送模块,用于如果所述获取请求用于获取3D图像编码数据,则获取已存储的所述3D图像编码数据,并向所述第一终端发送获取的3D图像编码数据。
其中,所述第一编码模块14包括:
选择单元,用于从所述多个原生2D图像数据中选择对应的图像质量最高的原生2D图像数据;
第一编码单元,用于对选择的原生2D图像数据编码得到2D图像编码数据。
在本发明实施例中,由于第二终端对原生3D图像数据使用帧序列编码,从而使得得到的3D图像编码数据的数据量较低,进而无需使得3D图像编码数据在从服务器向第一终端传输的过程中高速传输,低速传输也可以使得第一终端能够流畅地且高分辨率地播放3D视频,因此,即使服务器与第一终端之间的带宽较低,也不影响第一终端流畅地且高分辨率地播放3D视频,从而可以避免降低用户的观看体验。其次,由于服务器同时存储2D图像数据编码和3D图像数据编码,因此还可以兼顾不同用户的个性化需求。
参照图4,示出了本发明一种图像数据处理装置实施例的结构框图,该装置具体可以包括如下模块:
采集模块21,用于采集原生3D图像数据;
第二编码模块22,用于对原生3D图像数据使用帧序列编码得到3D图像编码数据;
第三发送模块23,用于向服务器发送所述3D图像编码数据。
其中,所述原生3D图像数据包括多个原生2D图像数据;
所述第二编码模块22包括:
拆分单元,用于将所述原生3D图像数据拆分为所述多个原生2D图像数据;
划分单元,用于将所述多个原生2D图像数据划分为第一原生2D图像数据和第二原生2D图像数据;
第一获取单元,用于获取所述第二原生2D图像数据之间相同的图像数据;
去除单元,用于在所述第二原生2D图像数据中去除相同的图像数据;
第二编码单元,用于对所述第一原生2D图像数据与去除了所述相同的图像数据的第二原生2D图像数据编码,得到3D图像编码数据。
在本发明实施例中,由于第二终端对原生3D图像数据使用帧序列编码,从而使得得到的3D图像编码数据的数据量较低,进而无需使得3D图像编码数据在从服务器向第一终端传输的过程中高速传输,低速传输也可以使得第一终端能够流畅地且高分辨率地播放3D视频,因此,即使服务器与第一终端之间的带宽较低,也不影响第一终端流畅地且高分辨率地播放3D视频,从而可以避免降低用户的观看体验。其次,由于服务器同时存储2D图像数据编码和3D图像数据编码,因此还可以兼顾不同用户的个性化需求。
参照图5,示出了本发明一种图像数据处理装置实施例的结构框图,该装置具体可以包括如下模块:
第四发送模块31,用于向服务器发送用于获取图像编码数据的获取请求;
第二接收模块32,用于如果所述获取请求用于获取2D图像编码数据,则接收所述服务器根据所述获取请求返回的2D图像编码数据,第二解码模块33,用于对所述2D图像编码数据解码得到原生2D图像数据,显示模块34,用于显示所述原生2D图像数据;
第三接收模块35,用于如果所述获取请求用于获取3D图像编码数据,则接收所述服务器根据所述获取请求返回的3D图像编码数据,所述3D图像编码数据是对原生3D图像数据中包括的多个原生2D图像数据使用帧序列编码后得到的,第三解码模块36,用于对所述3D图像编码数据解码得到所述多个原生2D图像数据,渲染模块37,用于渲染所述多个原生2D图像数据。
其中,所述渲染模块37包括:
第一确定单元,用于在所述多个原生2D图像数据中,确定未曾被去除图像数据的第一原生2D图像数据;
第二确定单元,用于将所述多个原生2D图像数据中的除第一原生2D图像数据以外的图像数据确定为曾被去除图像数据的第二原生2D图像数据;
第二获取单元,用于在所述第一原生2D图像数据中获取用于补全第二原生2D图像数据的图像数据;
补全单元,用于使用用于补全第二原生2D图像数据的图像数据补全所述第二原生2D图像数据;
渲染单元,用于渲染第一原生2D图像数据和补全后的第二原生2D图像数据。
在本发明实施例中,由于第二终端对原生3D图像数据使用帧序列编码,从而使得得到的3D图像编码数据的数据量较低,进而无需使得3D图像编码数据在从服务器向第一终端传输的过程中高速传输,低速传输也可以使得第一终端能够流畅地且高分辨率地播放3D视频,因此,即使服务器与第一终端之间的带宽较低,也不影响第一终端流畅地且高分辨率地播放3D视频,从而可以避免降低用户的观看体验。其次,由于服务器同时存储2D图像数据编码和3D图像数据编码,因此还可以兼顾不同用户的个性化需求。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种图像数据处理方法及装置,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (14)
1.一种图像数据处理方法,其特征在于,应用于服务器,所述方法包括:
获取3D图像编码数据并存储所述3D图像编码数据,所述3D图像编码数据是对原生3D图像数据使用帧序列编码后得到的;
对3D图像编码数据解码得到所述原生3D图像数据,所述原生3D图像数据包括多个原生2D图像数据;
将所述原生3D图像数据拆分为所述多个原生2D图像数据;
对至少一个所述原生2D图像数据编码得到2D图像编码数据;
存储所述2D图像编码数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收第一终端发送的用于获取图像编码数据的获取请求;
如果所述获取请求用于获取2D图像编码数据,则获取已存储的所述2D图像编码数据,并向所述第一终端发送获取的2D图像编码数据;
如果所述获取请求用于获取3D图像编码数据,则获取已存储的所述3D图像编码数据,并向所述第一终端发送获取的3D图像编码数据。
3.根据权利要求1所述的方法,其特征在于,所述对至少一个所述原生2D图像数据编码得到2D图像编码数据,包括:
从所述多个原生2D图像数据中选择对应的图像质量最高的原生2D图像数据;
对选择的原生2D图像数据编码得到2D图像编码数据。
4.一种图像数据处理方法,其特征在于,应用于第二终端,所述方法包括:
采集原生3D图像数据;
对原生3D图像数据使用帧序列编码得到3D图像编码数据;
向服务器发送所述3D图像编码数据。
5.根据权利要求4所述的方法,其特征在于,所述原生3D图像数据包括多个原生2D图像数据;
所述对原生3D图像数据使用帧序列编码得到3D图像编码数据,包括:
将所述原生3D图像数据拆分为所述多个原生2D图像数据;
将所述多个原生2D图像数据划分为第一原生2D图像数据和第二原生2D图像数据;
获取所述第二原生2D图像数据之间相同的图像数据;
在所述第二原生2D图像数据中去除相同的图像数据;
对所述第一原生2D图像数据与去除了所述相同的图像数据的第二原生2D图像数据编码,得到3D图像编码数据。
6.一种图像数据处理方法,其特征在于,应用于第一终端,所述方法包括:
向服务器发送用于获取图像编码数据的获取请求;
如果所述获取请求用于获取2D图像编码数据,则接收所述服务器根据所述获取请求返回的2D图像编码数据,对所述2D图像编码数据解码得到原生2D图像数据,显示所述原生2D图像数据;
如果所述获取请求用于获取3D图像编码数据,则接收所述服务器根据所述获取请求返回的3D图像编码数据,所述3D图像编码数据是对原生3D图像数据中包括的多个原生2D图像数据使用帧序列编码后得到的,对所述3D图像编码数据解码得到所述多个原生2D图像数据,渲染所述多个原生2D图像数据。
7.根据权利要求6所述的方法,其特征在于,所述渲染所述多个原生2D图像数据,包括:
在所述多个原生2D图像数据中,确定未曾被去除图像数据的第一原生2D图像数据;
将所述多个原生2D图像数据中的除第一原生2D图像数据以外的图像数据确定为曾被去除图像数据的第二原生2D图像数据;
在所述第一原生2D图像数据中获取用于补全第二原生2D图像数据的图像数据;
使用用于补全第二原生2D图像数据的图像数据补全所述第二原生2D图像数据;
渲染第一原生2D图像数据和补全后的第二原生2D图像数据。
8.一种图像数据处理装置,其特征在于,应用于服务器,所述装置包括:
第一获取模块,用于获取3D图像编码数据并存储所述3D图像编码数据,所述3D图像编码数据是对原生3D图像数据使用帧序列编码后得到的;
第一解码模块,用于对3D图像编码数据解码得到所述原生3D图像数据,所述原生3D图像数据包括多个原生2D图像数据;
拆分模块,用于将所述原生3D图像数据拆分为所述多个原生2D图像数据;
第一编码模块,用于对至少一个所述原生2D图像数据编码得到2D图像编码数据;
存储模块,用于存储所述2D图像编码数据。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
第一接收模块,用于接收第一终端发送的用于获取图像编码数据的获取请求;
第一发送模块,用于如果所述获取请求用于获取2D图像编码数据,则获取已存储的所述2D图像编码数据,并向所述第一终端发送获取的2D图像编码数据;
第二发送模块,用于如果所述获取请求用于获取3D图像编码数据,则获取已存储的所述3D图像编码数据,并向所述第一终端发送获取的3D图像编码数据。
10.根据权利要求8所述的装置,其特征在于,所述第一编码模块包括:
选择单元,用于从所述多个原生2D图像数据中选择对应的图像质量最高的原生2D图像数据;
第一编码单元,用于对选择的原生2D图像数据编码得到2D图像编码数据。
11.一种图像数据处理装置,其特征在于,应用于第二终端,所述装置包括:
采集模块,用于采集原生3D图像数据;
第二编码模块,用于对原生3D图像数据使用帧序列编码得到3D图像编码数据;
第三发送模块,用于向服务器发送所述3D图像编码数据。
12.根据权利要求11所述的装置,其特征在于,所述原生3D图像数据包括多个原生2D图像数据;
所述第二编码模块包括:
拆分单元,用于将所述原生3D图像数据拆分为所述多个原生2D图像数据;
划分单元,用于将所述多个原生2D图像数据划分为第一原生2D图像数据和第二原生2D图像数据;
第一获取单元,用于获取所述第二原生2D图像数据之间相同的图像数据;
去除单元,用于在所述第二原生2D图像数据中去除相同的图像数据;
第二编码单元,用于对所述第一原生2D图像数据与去除了所述相同的图像数据的第二原生2D图像数据编码,得到3D图像编码数据。
13.一种图像数据处理装置,其特征在于,应用于第一终端,所述装置包括:
第四发送模块,用于向服务器发送用于获取图像编码数据的获取请求;
第二接收模块,用于如果所述获取请求用于获取2D图像编码数据,则接收所述服务器根据所述获取请求返回的2D图像编码数据,第二解码模块,用于对所述2D图像编码数据解码得到原生2D图像数据,显示模块,用于显示所述原生2D图像数据;
第三接收模块,用于如果所述获取请求用于获取3D图像编码数据,则接收所述服务器根据所述获取请求返回的3D图像编码数据,所述3D图像编码数据是对原生3D图像数据中包括的多个原生2D图像数据使用帧序列编码后得到的,第三解码模块,用于对所述3D图像编码数据解码得到所述多个原生2D图像数据,渲染模块,用于渲染所述多个原生2D图像数据。
14.根据权利要求13所述的装置,其特征在于,所述渲染模块包括:
第一确定单元,用于在所述多个原生2D图像数据中,确定未曾被去除图像数据的第一原生2D图像数据;
第二确定单元,用于将所述多个原生2D图像数据中的除第一原生2D图像数据以外的图像数据确定为曾被去除图像数据的第二原生2D图像数据;
第二获取单元,用于在所述第一原生2D图像数据中获取用于补全第二原生2D图像数据的图像数据;
补全单元,用于使用用于补全第二原生2D图像数据的图像数据补全所述第二原生2D图像数据;
渲染单元,用于渲染第一原生2D图像数据和补全后的第二原生2D图像数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810538412.9A CN108683900B (zh) | 2018-05-30 | 2018-05-30 | 一种图像数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810538412.9A CN108683900B (zh) | 2018-05-30 | 2018-05-30 | 一种图像数据处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108683900A true CN108683900A (zh) | 2018-10-19 |
CN108683900B CN108683900B (zh) | 2020-04-14 |
Family
ID=63809032
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810538412.9A Active CN108683900B (zh) | 2018-05-30 | 2018-05-30 | 一种图像数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108683900B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110210230A (zh) * | 2019-05-14 | 2019-09-06 | 深圳市腾讯网域计算机网络有限公司 | 提高系统安全性的方法、装置、电子设备及存储介质 |
CN110267026A (zh) * | 2019-07-05 | 2019-09-20 | 浙江开奇科技有限公司 | 基于5g网络的数据处理方法、移动终端及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103069813A (zh) * | 2010-06-16 | 2013-04-24 | 索尼公司 | 信号发送方法、信号发送装置和信号接收装置 |
CN105472374A (zh) * | 2015-11-19 | 2016-04-06 | 广州华多网络科技有限公司 | 一种3d视频直播方法、装置及系统 |
CN105791851A (zh) * | 2016-04-07 | 2016-07-20 | 贵阳动视云科技有限公司 | 一种视频压缩、解码方法及装置 |
US20170085866A1 (en) * | 2015-09-18 | 2017-03-23 | Samsung Electronics Co., Ltd. | Displaying apparatus and method |
CN107800946A (zh) * | 2016-09-02 | 2018-03-13 | 丰唐物联技术(深圳)有限公司 | 一种直播方法及系统 |
-
2018
- 2018-05-30 CN CN201810538412.9A patent/CN108683900B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103069813A (zh) * | 2010-06-16 | 2013-04-24 | 索尼公司 | 信号发送方法、信号发送装置和信号接收装置 |
US20170085866A1 (en) * | 2015-09-18 | 2017-03-23 | Samsung Electronics Co., Ltd. | Displaying apparatus and method |
CN105472374A (zh) * | 2015-11-19 | 2016-04-06 | 广州华多网络科技有限公司 | 一种3d视频直播方法、装置及系统 |
CN105791851A (zh) * | 2016-04-07 | 2016-07-20 | 贵阳动视云科技有限公司 | 一种视频压缩、解码方法及装置 |
CN107800946A (zh) * | 2016-09-02 | 2018-03-13 | 丰唐物联技术(深圳)有限公司 | 一种直播方法及系统 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110210230A (zh) * | 2019-05-14 | 2019-09-06 | 深圳市腾讯网域计算机网络有限公司 | 提高系统安全性的方法、装置、电子设备及存储介质 |
CN110210230B (zh) * | 2019-05-14 | 2021-10-22 | 深圳市腾讯网域计算机网络有限公司 | 提高系统安全性的方法、装置、电子设备及存储介质 |
CN110267026A (zh) * | 2019-07-05 | 2019-09-20 | 浙江开奇科技有限公司 | 基于5g网络的数据处理方法、移动终端及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN108683900B (zh) | 2020-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102533555B1 (ko) | 감축된 해상도 이미지들을 생성 및 이용하고 및/또는 재생 또는 컨텐트 분배 디바이스에 이러한 이미지들을 통신하기 위한 방법들 및 장치 | |
CN101273635B (zh) | 使用相机参数对多视图画面编码和解码的设备和方法 | |
CN102067615B (zh) | 图像产生方法和设备以及图像处理方法和设备 | |
CN109819272B (zh) | 视频发送方法、装置、计算机可读存储介质及电子设备 | |
CN109391825A (zh) | 一种视频转码方法及其装置、服务器、可读存储介质 | |
CN104364754A (zh) | 信息处理设备、信息处理方法及程序 | |
CN108881894B (zh) | Vr多媒体的体验质量确定方法及装置 | |
US9912714B2 (en) | Sending 3D image with first video image and macroblocks in the second video image | |
CN111836076B (zh) | 视频分辨率切换方法及装置、电子设备 | |
CN114009012B (zh) | 内容分发方法、图像捕获和处理系统、回放系统、操作回放系统的方法及计算机可读介质 | |
US20170171271A1 (en) | Video streaming | |
CN115103175B (zh) | 图像传输方法、装置、设备及介质 | |
CN109905629A (zh) | 音视频会议时实现文档共享的方法、装置、介质和设备 | |
CN110650357B (zh) | 视频解码方法及装置 | |
CN108683900A (zh) | 一种图像数据处理方法及装置 | |
CN110519607B (zh) | 视频解码方法及装置,视频编码方法及装置 | |
CN110708569B (zh) | 一种视频处理方法、装置、电子设备及存储介质 | |
CN106791829B (zh) | 虚拟参考帧的建立方法及设备 | |
CN110679146B (zh) | 根据视频进行的图像生成 | |
CN116567228A (zh) | 编码方法、实时通信方法、装置、设备及存储介质 | |
CN106937127B (zh) | 一种智能搜索准备的显示方法及其系统 | |
CN104506866A (zh) | 一种适用于多码流的视频编码处理方法和视频编码器 | |
CN103621063A (zh) | 用于控制视频流中的数据图像的呈现的系统、方法与介质 | |
CN114466224B (zh) | 视频数据的编解码方法和装置、存储介质及电子设备 | |
CN115988269A (zh) | 一种视频播放方法、装置、系统、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |