CN108401184A - Vr全景画面的显示方法、vr显示终端 - Google Patents

Vr全景画面的显示方法、vr显示终端 Download PDF

Info

Publication number
CN108401184A
CN108401184A CN201810181551.0A CN201810181551A CN108401184A CN 108401184 A CN108401184 A CN 108401184A CN 201810181551 A CN201810181551 A CN 201810181551A CN 108401184 A CN108401184 A CN 108401184A
Authority
CN
China
Prior art keywords
picture
processing
area
panoramas
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810181551.0A
Other languages
English (en)
Inventor
李光煌
罗辉
洪瑞乾
覃国秘
李耀军
钟志威
朱鹏惠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Saiyi Technology Development Co Ltd
Original Assignee
Shenzhen Saiyi Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Saiyi Technology Development Co Ltd filed Critical Shenzhen Saiyi Technology Development Co Ltd
Priority to CN201810181551.0A priority Critical patent/CN108401184A/zh
Publication of CN108401184A publication Critical patent/CN108401184A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了一种VR全景画面的显示方法，方法：在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；根据观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。本发明还公开了一种VR显示终端。本发明的VR显示终端、VR全景画面显示的方法，减少了VR全景视频画面显示过程中的运算量，功耗小，画面显示更为流畅，减低用户观看画面时的眩晕感。

Description

VR全景画面的显示方法、VR显示终端
技术领域
本发明涉及通讯技术领域，尤其涉及一种VR全景画面的显示方法、VR显示终。
背景技术
目前，VR全景视频一般采用Equirectangular projection投影方式(https://en.wikipedia.org/wiki/Equirectangular_projection)，每一帧画面为矩形画面，VR全景视频播放过程具体如下：VR服务器按照顺序将VR全景视频通过流媒体方式下发给VR显示终端；VR显示终端通过相应流媒体协议进行下载，解析和解码后获取到每一帧矩形视频画面后，首先将相应的矩形画面按Equirectangular Projection方式渲染为球状画面；然后根据用户眼睛观看方向确定用户在所述球状画面中所能观看到的区域，并从所述球状画面中获取所述区域的画面；最后对所获取的画面进行桶形反畸变处理，并将处理后的画面渲染至显示屏中进行显示。
现有的这种VR全景视频画面显示方法，VR全景视频画面显示过程中每一帧VR全景视频画面的运算量非常大，所需带宽占用量大，VR显示终端功耗大，VR全景视频画面显示容易卡，用户观看VR全景视频时容易产生眩晕感。
发明内容
本发明的主要目的在于解决现有技术VR全景视频画面显示过程中每一帧VR全景视频画面的运算量非常大，所需带宽占用量大，VR显示终端功耗大，VR全景视频画面显示容易卡，用户观看VR全景视频时容易产生眩晕感的技术问题。
为实现上述目的，本发明提供的一种VR全景画面的显示方法，所述VR全景画面的显示方法包括：
在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；
根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；
根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；
对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；
根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。
优选地，所述对所述画面第一区域进行图像增强处理具体包括：
对所述画面第一区域进行纹理、色彩、亮度、饱和度、和/或对比度进行增强处理。
优选地，所述VR全景画面的显示方法，当所述第一区域图像为人物脸部图像，则对所述画面第一区域进行图像增强处理具体还包括：
对所述画面第一区域进行美颜、和/或美肤处理。
优选地，所述VR全景画面的显示方法，对所述画面其他区域进行虚化处理具体包括：对所述画面其他区域进行高斯模糊处理。
此外，为实现上述目的，本发明还提供一种VR显示终端，所述VR显示终端包括：
确定模块，用于在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；
获取模块，用于根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；
第一确定模块，用于根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；
处理模块，用于对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；
显示模块，用于根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。
优选地，所述处理模块，具体用于对所述画面第一区域进行纹理、色彩、亮度、饱和度、和/或对比度进行增强处理。
优选地，所述处理模块，当所述第一区域图像为人物脸部图像，具体还用于对所述画面第一区域进行美颜、和/或美肤处理。
优选地，所述处理模块，具体还用于对所述画面其他区域进行高斯模糊处理。
本发明所提供的VR显示终、VR全景画面的显示方法，通过在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示的方式，大大地减少了VR全景视频画面显示过程中的运算量，VR显示终端功耗小，VR全景视频画面显示更为流畅，能够有效地减低用户观看VR全景视频画面时的眩晕感。
附图说明
图1为本发明的VR全景画面的显示方法一实施例的流程示意图；
图2为本发明的VR显示终端一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
以下结合说明书附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明，并且在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
本发明提供一种VR全景画面的显示方法。参照图1，图1为本发明的VR全景画面的显示方法一实施例的流程示意图。在一实施例中，所述VR全景画面的显示方法包括：
步骤S10：在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向。
本发明的VR显示终端采用现有的常规技术确定用户眼睛的观看方向和关注点方向，在此不再对其进行展开描述。
步骤S20：根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面。
针对通过2K屏幕播放的全景视频中某一矩形画面渲染到球面，用户能够观看到的区域尺寸大小一般为1024*1024像素；本实施例针对2K屏幕，所述区域的尺寸大小可设置为1024*1024像素。
针对通过1080P屏幕播放的全景视频中某一矩形画面渲染到球面，用户能够观看到的区域尺寸大小一般为960*960像素；本实施例针对1080P屏幕，所述区域的尺寸大小可设置为960*960像素。
步骤S30：根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域。
本实施例中所述第一区域是指以所述关注点为原点，以设定的像素值为半径的圆形区域，其中所述设定的像素值取值范围为：150像素至300像素，如可以设置为150像素、178像素、200像素、285像素、300像素；优选设置为200像素。
步骤S40：对所述画面第一区域进行图像增强处理，其他区域进行虚化处理。
所述对所述画面第一区域进行图像增强处理具体包括：对所述画面第一区域进行纹理、色彩、亮度、饱和度、和/或对比度进行增强处理。
本实施例中当所述第一区域图像为人物脸部图像，则对所述画面第一区域进行图像增强处理具体还包括：对所述画面第一区域进行美颜、和/或美肤处理。
本实施例中对所述画面其他区域进行虚化处理具体包括：对所述画面其他区域进行高斯模糊处理。所述高斯模糊处理是现有的常规技术，在此不再展开描述。
步骤S50：根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。
本实施例中在对所述弧状画面显示之前还需对所述弧状画面进行反畸变、反色散等处理。
上述实施例所提供的VR全景画面的显示方法，通过在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示的方式，大大地减少了VR全景视频画面显示过程中的运算量，VR显示终端功耗小，VR全景视频画面显示更为流畅，能够有效地减低用户观看VR全景视频画面时的眩晕感。
本发明进一步提供一种VR显示终端。参照图2，图2为本发明的VR显示终端一实施例的功能模块示意图。在一实施例中，所述VR显示终端100包括：确定模块110、获取模块120、第一确定模块130、处理模块140、显示模块150。其中，所述确定模块110，用于在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向。所述获取模块120，用于根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面。所述第一确定模块130，用于根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域。所述处理模块140，用于对所述画面第一区域进行图像增强处理，其他区域进行虚化处理。所述显示模块150，用于根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。
上述实施例中所述处理模块140，具体用于对所述画面第一区域进行纹理、色彩、亮度、饱和度、和/或对比度进行增强处理；以及对所述画面其他区域进行高斯模糊处理。当所述第一区域图像为人物脸部图像，所述处理模块140，还用于对所述画面第一区域进行美颜、和/或美肤处理。其中，所述高斯模糊处理是现有的常规技术，在此不再展开描述。
本发明的VR显示终端采用现有的常规技术确定用户眼睛的观看方向和关注点方向，在此不再对其进行展开描述。
针对通过2K屏幕播放的全景视频中某一矩形画面渲染到球面，用户能够观看到的区域尺寸大小一般为1024*1024像素；本实施例针对2K屏幕，所述区域的尺寸大小可设置为1024*1024像素。
针对通过1080P屏幕播放的全景视频中某一矩形画面渲染到球面，用户能够观看到的区域尺寸大小一般为960*960像素；本实施例针对1080P屏幕，所述区域的尺寸大小可设置为960*960像素。
本实施例中所述第一区域是指以所述关注点为原点，以设定的像素值为半径的圆形区域，其中所述设定的像素值取值范围为：150像素至300像素，如可以设置为150像素、178像素、200像素、285像素、300像素；优选设置为200像素。
本实施例中在对所述弧状画面显示之前还需对所述弧状画面进行反畸变、反色散等处理。
上述实施例所提供的VR显示终端100，通过在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示的方式，大大地减少了VR全景视频画面显示过程中的运算量，VR显示终端功耗小，VR全景视频画面显示更为流畅，能够有效地减低用户观看VR全景视频画面时的眩晕感。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种VR全景画面的显示方法，其特征在于，所述VR全景画面的显示方法包括：
在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；
根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；
根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；
对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；
根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。
2.根据权利要求1所述的VR全景画面的显示方法，其特征在于，所述对所述画面第一区域进行图像增强处理具体包括：
对所述画面第一区域进行纹理、色彩、亮度、饱和度、和/或对比度进行增强处理。
3.根据权利要求2所述的VR全景画面的显示方法，其特征在于，当所述第一区域图像为人物脸部图像，则对所述画面第一区域进行图像增强处理具体还包括：
对所述画面第一区域进行美颜、和/或美肤处理。
4.根据权利要求1所述的VR全景画面的显示方法，其特征在于，对所述画面其他区域进行虚化处理具体包括：对所述画面其他区域进行高斯模糊处理。
5.一种VR显示终端，其特征在于，所述VR显示终端包括：
确定模块，用于在接收到VR服务器下发的VR全景画面后，确定用户眼睛的观看方向和关注点方向；
获取模块，用于根据所述观看方向确定用户在所述矩形画面所能够观看到的区域，从所述矩形画面中获取所述区域的画面；
第一确定模块，用于根据所述关注点方向在所述画面中确定与所述关注点方向对应的第一区域；
处理模块，用于对所述画面第一区域进行图像增强处理，其他区域进行虚化处理；
显示模块，用于根据所述观看方向将处理后的所述画面渲染成相应方位的弧状画面，并对所述弧状画面进行显示。
6.根据权利要求5所述的VR显示终端，其特征在于，
所述处理模块，具体用于对所述画面第一区域进行纹理、色彩、亮度、饱和度、和/或对比度进行增强处理。
7.根据权利要求6所述的VR显示终端，其特征在于，
所述处理模块，当所述第一区域图像为人物脸部图像，具体还用于对所述画面第一区域进行美颜、和/或美肤处理。
8.根据权利要求5所述的VR显示终端，其特征在于，
所述处理模块，具体还用于对所述画面其他区域进行高斯模糊处理。
CN201810181551.0A 2018-03-06 2018-03-06 Vr全景画面的显示方法、vr显示终端 Pending CN108401184A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810181551.0A CN108401184A (zh) 2018-03-06 2018-03-06 Vr全景画面的显示方法、vr显示终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810181551.0A CN108401184A (zh) 2018-03-06 2018-03-06 Vr全景画面的显示方法、vr显示终端

Publications (1)

Publication Number Publication Date
CN108401184A true CN108401184A (zh) 2018-08-14

Family

ID=63091859

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810181551.0A Pending CN108401184A (zh) 2018-03-06 2018-03-06 Vr全景画面的显示方法、vr显示终端

Country Status (1)

Country Link
CN (1) CN108401184A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114374832A (zh) * 2020-10-14 2022-04-19 中国移动通信有限公司研究院 虚拟现实体验的控制方法、装置、用户设备及网络设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107027071A (zh) * 2017-03-14 2017-08-08 深圳市创达天盛智能科技有限公司 一种视频播放的方法和装置
CN107274469A (zh) * 2017-06-06 2017-10-20 清华大学 面向虚拟现实的协同渲染方法
CN107317960A (zh) * 2016-04-27 2017-11-03 深圳看到科技有限公司 视频图像获取方法及获取装置
CN107396077A (zh) * 2017-08-23 2017-11-24 深圳看到科技有限公司 虚拟现实全景视频流投影方法和设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107317960A (zh) * 2016-04-27 2017-11-03 深圳看到科技有限公司 视频图像获取方法及获取装置
CN107027071A (zh) * 2017-03-14 2017-08-08 深圳市创达天盛智能科技有限公司 一种视频播放的方法和装置
CN107274469A (zh) * 2017-06-06 2017-10-20 清华大学 面向虚拟现实的协同渲染方法
CN107396077A (zh) * 2017-08-23 2017-11-24 深圳看到科技有限公司 虚拟现实全景视频流投影方法和设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114374832A (zh) * 2020-10-14 2022-04-19 中国移动通信有限公司研究院 虚拟现实体验的控制方法、装置、用户设备及网络设备

Similar Documents

Publication Publication Date Title
CN105657494B (zh) 一种虚拟影院及其实现方法
KR102162339B1 (ko) 전자 디스플레이들의 근시유발적 효과를 감소시키기 위한 방법 및 장치
JP2006146178A (ja) 適応コントラスト向上のための伝達曲線の発生方法
TW200920123A (en) Dynamic backlight adaptation
CN107077830B (zh) 适用于无人机控制端的屏幕亮度调整方法及无人机控制端
CN108735169B (zh) 视频显示的方法及显示装置
CN109741289A (zh) 一种图像融合方法和vr设备
JP2011033978A (ja) 液晶映像表示装置及びその表示制御方法
CN106561044B (zh) 一种安卓系统上竖屏视频黑边的处理方法及系统
US11804194B2 (en) Virtual reality display device and display method
CN108401183A (zh) Vr全景视频显示的实现方法和系统、vr服务器
CN109788312A (zh) 一种视频中人物的替换方法
CN108391166A (zh) 超高清电视及其显示方法，和计算机可读存储介质
CN107454434A (zh) 虚拟现实视频直播方法及视频播放终端
CN106997608A (zh) 一种生成光晕效果图的方法及装置
CN108401184A (zh) Vr全景画面的显示方法、vr显示终端
CN106550261A (zh) 提升视频图像清晰度的展现方法及系统
CN112348736B (zh) 一种去除黑眼圈的方法、存储介质、设备及系统
CN105635789B (zh) 降低视频图像中osd亮度的方法和装置
CN101197911B (zh) 图像边缘强化方法及其装置
CN102100060A (zh) 视频信号处理装置和视频显示装置
JP2009103826A (ja) 液晶表示装置
CN116781878A (zh) 像素参量的调整方法、装置、计算机设备及存储介质
CN108401182A (zh) Vr全景视频画面显示的方法和系统、vr显示终端
CN112201191B (zh) 显示屏控制方法、装置、电子设备和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180814