CN110166760A - 基于全景视频影像的影像处理方法及终端设备 - Google Patents

基于全景视频影像的影像处理方法及终端设备 Download PDF

Info

Publication number
CN110166760A
CN110166760A CN201910443796.0A CN201910443796A CN110166760A CN 110166760 A CN110166760 A CN 110166760A CN 201910443796 A CN201910443796 A CN 201910443796A CN 110166760 A CN110166760 A CN 110166760A
Authority
CN
China
Prior art keywords
panoramic video
model points
video image
model
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910443796.0A
Other languages
English (en)
Inventor
张玉峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Kaiqi Technology Co Ltd
Original Assignee
Zhejiang Kaiqi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Kaiqi Technology Co Ltd filed Critical Zhejiang Kaiqi Technology Co Ltd
Priority to CN201910443796.0A priority Critical patent/CN110166760A/zh
Publication of CN110166760A publication Critical patent/CN110166760A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/133Equalising the characteristics of different image components, e.g. their average brightness or colour balance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/15Processing image signals for colour aspects of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/257Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/275Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于全景视频影像的影像处理方法及终端设备,所述终端设备包括一显示屏,所述影像处理方法包括:在所述显示屏上显示全景视频影像,所述全景视频影像内设有一指示模型;在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,获取所述模型点在全景视频影像中的光影信息;根据所述光影信息对所述模型点进行调色。本发明的基于全景视频影像的影像处理方法及终端设备能够使基于全景视频影像的数字导览显示效果更逼真,为用户提供更良好的使用体验。

Description

基于全景视频影像的影像处理方法及终端设备
技术领域
本发明涉及一种基于全景视频影像的影像处理方法及终端设备。
背景技术
全景,英文名(Panorama),又被称为3D实景,是一种新兴的富媒体技术,其与视频,声音,图片等传统的流媒体最大的区别是“可操作,可交互”。全景分为虚拟现实和3D实景两种。虚拟现实是利用软件,制作出来的模拟现实的场景,例如,虚拟紫禁城,河北虚拟旅游,泰山虚拟游等;3D实景是利用单反相机或街景车拍摄实景照片,经过特殊的拼合,处理,让作者立于画境中,让最美的一面展现出来。
随着科技的发展,数字媒体的迅猛发展正为旅游行业带来活力,越来越多的数字媒体技术用于场馆、景区导览导引系统设计中,通过智能播控平台实现聚合,从对功能的满足进一步上升到对人的精神关怀,打破空间局限和时间界限实现与用户互动、引导,为用户带来便利。
现有的全域数字导览中,存在用户上手困难,显示效果差的缺陷。
发明内容
本发明要解决的技术问题是为了克服现有技术的全域数字导览中,存在用户上手困难,显示效果差的缺陷,提供一种能够使基于全景视频影像的数字导览显示效果更逼真,为用户提供更良好的使用体验的基于全景视频影像的影像处理方法及终端设备。
本发明是通过下述技术方案来解决上述技术问题:
一种基于全景视频影像的影像处理方法,所述影像处理方法用于一终端设备,所述终端设备包括一显示屏,其特点在于,所述影像处理方法包括:
在所述显示屏上显示全景视频影像,所述全景视频影像内设有一指示模型;
在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,获取所述模型点在全景视频影像中的光影信息;
根据所述光影信息对所述模型点进行调色。
较佳地,所述获取所述模型点在全景视频影像中的光影信息,包括:
获取所述模型点的法线;
根据所述法线获取与所述模型点对应的影像点,所述影像点为全景视频影像球形幕上的影像点,所述影像点和模型点的连线与全景视频影像的观测点和模型点的连线到所述法线的夹角相同,所述影像点、模型点以及所述法线在同一平面上;
获取所述影像点的灰度信息,所述光影信息包括所述灰度信息以及所述模型点的预设颜色。
较佳地,所述获取所述影像点的灰度信息包括:
以所述影像点为中心获取所述一帧影像上一影像区域;
获取所述影像区域中全部像素点的亮度平均值作为所述灰度信息。
较佳地,所述光影信息包括一调色值,所述调色值等于所述预设颜色的色调值和饱和度值以及所述灰度信息的亮度值,所述终端设备根据所述亮度值对所述模型点进行调色。
较佳地,所述全景视频影像中的每一帧影像包括所述观测点的观测方向、拍摄时间以及地理位置信息,所述影像处理方法包括:
根据所述观测方向、拍摄时间以及地理位置信息获取指示模型与太阳的位置关系;
根据所述位置关系获取太阳到所述模型点的向量与所述法线向量的夹角;
根据所述夹角获取亮度补偿值,所述光影信息包括所述亮度补偿值、灰度信息以及所述模型点的预设颜色。
本发明还提供一种终端设备,所述终端设备包括一显示屏,其特点在于,所述终端设备包括一获取模块以及一处理模块,
所述显示屏用于显示全景视频影像,所述全景视频影像内设有一指示模型;
在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,所述获取模块用于获取所述模型点在全景视频影像中的光影信息;
所述处理模块用于根据所述光影信息对所述模型点进行调色。
较佳地,所述终端设备还包括一计算模块,
所述计算模块用于获取所述模型点的法线;
所述计算模块还用于根据所述法线获取与所述模型点对应的影像点,所述影像点为全景视频影像球形幕上的影像点,所述影像点和模型点的连线与全景视频影像的观测点和模型点的连线到所述法线的夹角相同,所述影像点、模型点以及所述法线在同一平面上;
所述获取模块用于获取所述影像点的灰度信息,所述光影信息包括所述灰度信息以及所述模型点的预设颜色。
较佳地,
所述获取模块用于以所述影像点为中心获取所述一帧影像上一影像区域;
所述获取模块还用于获取所述影像区域中全部像素点的亮度平均值作为所述灰度信息。
较佳地,所述光影信息包括一调色值,所述调色值等于所述预设颜色的色调值和饱和度值以及所述灰度信息的亮度值,所述终端设备根据所述亮度值对所述模型点进行调色。
较佳地,所述全景视频影像中的每一帧影像包括所述观测点的观测方向、拍摄时间以及地理位置信息,所述获取模块还用于
根据所述观测方向、拍摄时间以及地理位置信息获取指示模型与太阳的位置关系;
所述计算模块用于根据所述位置关系获取太阳到所述模型点的向量与所述法线向量的夹角;
所述获取模块用于根据所述夹角获取亮度补偿值,所述光影信息包括所述亮度补偿值、灰度信息以及所述模型点的预设颜色。
在符合本领域常识的基础上,上述各优选条件,可任意组合,即得本发明各较佳实例。
本发明的积极进步效果在于:本发明的基于全景视频影像的影像处理方法及终端设备能够使基于全景视频影像的数字导览显示效果更逼真,为用户提供更良好的使用体验。
附图说明
图1为本发明实施例1的终端设备的原理示意图。
图2为本发明实施例1的终端设备的另一原理示意图。
图3为本发明实施例1的影像处理方法的流程图。
具体实施方式
下面通过实施例的方式进一步说明本发明,但并不因此将本发明限制在所述的实施例范围之中。
实施例1
本实施例提供一种基于全景视频影像的终端设备,本实施例中的终端设备是指手机,所述终端设备还可以为平板电脑、台式机等智能终端设备。
所述终端设备包括一显示屏,所述终端设备包括一获取模块、一计算模块以及一处理模块。
所述显示屏用于显示全景视频影像,所述全景视频影像内设有一指示模型。
在本实施例中所述指示模型可以为人物模型、动物模型、卡通模型等,在本实施例中所述指示模型为人物模型。
在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,所述获取模块用于获取所述模型点在全景视频影像中的光影信息。
本实施例能够采集影像中的光影信息。
所述处理模块用于根据所述光影信息对所述模型点进行调色。
本实施例将光影信息添加到所述人物模型上,让人物模型更加真实,使人物模型更接近真人,为用户带来更好地体验。
具体地,本实施例提供具体的光影信息获取方案,包括:
所述计算模块用于获取所述模型点的法线;
所述法线为所述影像点的切面的法线,如头顶最上面的点的切面为是水平面,所述水平面过所述模型点的垂线为所述法线。
参见图1、图2,所述计算模块还用于根据所述法线获取与所述模型点对应的影像点,所述影像点为全景视频影像球形幕11上的影像点12,所述影像点和模型点的连线与全景视频影像的观测点13和模型点14的连线到所述法线的夹角相同,所述影像点、模型点以及所述法线15在同一平面上。
从局部来看,从观测点发出的观测线16(入射线)在所述模型点14上反射,反射线17、入射线16以及法线15位于同一平面,反射角等于入射角。所述法线与模型点处的切面垂直。
所述影像点的亮度能够反映出所述模型点应该有的亮度,如所述影像点接近阳光,则所述模型点接受阳光照射,则模型点上的反光会更加强烈。
所述球形幕用于显示所述全景视频影像,所述观测点就是指所述全景视频影像的摄像机。
当指示模型前进时,全景视频影像正序播放,所述指示模型显示行走的动画,使用户体验身临其境的感觉。
在前进时,获取时间线上每一帧的光影信息,或有规律的选取目标帧、间隔帧的光影信息,随着全景视频影像的播放,指示模型上的光影效果不断地变化。
所述获取模块用于获取所述影像点的灰度信息,所述光影信息包括所述灰度信息以及所述模型点的预设颜色。
本实施例中获取所述灰度信息,也就是亮度信息,通过对模型点的亮度补偿能够调节所述模型点颜色,举例来说,所述模型点为红色,若站在阳光下则红色变浅,若背对阳光则变为深红。
所述光影信息包括一调色值,所述调色值等于所述预设颜色的色调值和饱和度值以及所述灰度信息的亮度值,所述终端设备根据所述亮度值对所述模型点进行调色。
本实施例中,所述模型点的颜色可以用色调值、饱和度值以及亮度值表示,所述亮度值根据所述灰度信息补偿,在不改变色系的前体现能够使模型的颜色更加真实。
图3,利用上述终端设备,本实施例还提供一种基于全景视频影像的影像处理方法,包括:
步骤100、在所述显示屏上显示全景视频影像,所述全景视频影像内设有一指示模型;
步骤101、在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,获取所述模型点的法线;
步骤102、根据所述法线获取与所述模型点对应的影像点,所述影像点为全景视频影像球形幕上的影像点,所述影像点和模型点的连线与全景视频影像的观测点和模型点的连线到所述法线的夹角相同,所述影像点、模型点以及所述法线在同一平面上;
步骤103、获取所述影像点的灰度信息,光影信息包括所述灰度信息以及所述模型点的预设颜色。
步骤104、根据所述光影信息对所述模型点进行调色。
其中步骤101至步骤103实现了获取所述模型点在全景视频影像中的光影信息。
本实施例中,所述光影信息包括一调色值,所述调色值等于所述预设颜色的色调值和饱和度值以及所述灰度信息的亮度值,所述终端设备根据所述亮度值对所述模型点进行调色。
实施例2
本实施例与实施例1基本相同,不同之处仅在于:
所述获取模块用于以所述影像点为中心获取所述一帧影像上一影像区域;
所述获取模块还用于获取所述影像区域中全部像素点的亮度平均值作为所述灰度信息。
所述全景视频影像中的每一帧影像包括所述观测点的观测方向、拍摄时间以及地理位置信息,所述获取模块还用于
根据所述观测方向、拍摄时间以及地理位置信息获取指示模型与太阳的位置关系;
所述计算模块用于根据所述位置关系获取太阳到所述模型点的向量与所述法线向量的夹角;
所述获取模块用于根据所述夹角获取亮度补偿值,所述光影信息包括所述亮度补偿值、灰度信息以及所述模型点的预设颜色。
根据太阳的方向,能够获取一个照明点的亮度信息,另外一个环境中可能存在多个照明点,通过对太阳的位置的获取能够使模型点的光影信息更加真实。
相对应的,本实施例的影像处理方法将实施例1中步骤103的包括:
以所述影像点为中心获取所述一帧影像上一影像区域;
获取所述影像区域中全部像素点的亮度平均值作为所述灰度信息。
进一步地,所述全景视频影像中的每一帧影像包括所述观测点的观测方向、拍摄时间以及地理位置信息,所述影像处理方法包括:
根据所述观测方向、拍摄时间以及地理位置信息获取指示模型与太阳的位置关系;
根据所述位置关系获取太阳到所述模型点的向量与所述法线向量的夹角;
根据所述夹角获取亮度补偿值,所述光影信息包括所述亮度补偿值、灰度信息以及所述模型点的预设颜色。
上述影像处理方法可以与实施例1中的步骤可以并行处理,加快获取光影信息的速度。
虽然以上描述了本发明的具体实施方式,但是本领域的技术人员应当理解,这些仅是举例说明,本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下,可以对这些实施方式做出多种变更或修改,但这些变更和修改均落入本发明的保护范围。

Claims (10)

1.一种基于全景视频影像的影像处理方法,所述影像处理方法用于一终端设备,所述终端设备包括一显示屏,其特征在于,所述影像处理方法包括:
在所述显示屏上显示全景视频影像,所述全景视频影像内设有一指示模型;
在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,获取所述模型点在全景视频影像中的光影信息;
根据所述光影信息对所述模型点进行调色。
2.如权利要求1所述的影像处理方法,其特征在于,所述获取所述模型点在全景视频影像中的光影信息,包括:
获取所述模型点的法线;
根据所述法线获取与所述模型点对应的影像点,所述影像点为全景视频影像球形幕上的影像点,所述影像点和模型点的连线与全景视频影像的观测点和模型点的连线到所述法线的夹角相同,所述影像点、模型点以及所述法线在同一平面上;
获取所述影像点的灰度信息,所述光影信息包括所述灰度信息以及所述模型点的预设颜色。
3.如权利要求2所述的影像处理方法,其特征在于,所述获取所述影像点的灰度信息包括:
以所述影像点为中心获取所述一帧影像上一影像区域;
获取所述影像区域中全部像素点的亮度平均值作为所述灰度信息。
4.如权利要求2所述的影像处理方法,其特征在于,所述光影信息包括一调色值,所述调色值等于所述预设颜色的色调值和饱和度值以及所述灰度信息的亮度值,所述终端设备根据所述亮度值对所述模型点进行调色。
5.如权利要求2所述的影像处理方法,其特征在于,所述全景视频影像中的每一帧影像包括所述观测点的观测方向、拍摄时间以及地理位置信息,所述影像处理方法包括:
根据所述观测方向、拍摄时间以及地理位置信息获取指示模型与太阳的位置关系;
根据所述位置关系获取太阳到所述模型点的向量与所述法线向量的夹角;
根据所述夹角获取亮度补偿值,所述光影信息包括所述亮度补偿值、灰度信息以及所述模型点的预设颜色。
6.一种终端设备,所述终端设备包括一显示屏,其特征在于,所述终端设备包括一获取模块以及一处理模块,
所述显示屏用于显示全景视频影像,所述全景视频影像内设有一指示模型;
在全景视频影像的一帧影像中,对于所述指示模型上的一模型点,所述获取模块用于获取所述模型点在全景视频影像中的光影信息;
所述处理模块用于根据所述光影信息对所述模型点进行调色。
7.如权利要求6所述的终端设备,其特征在于,所述终端设备还包括一计算模块,
所述计算模块用于获取所述模型点的法线;
所述计算模块还用于根据所述法线获取与所述模型点对应的影像点,所述影像点为全景视频影像球形幕上的影像点,所述影像点和模型点的连线与全景视频影像的观测点和模型点的连线到所述法线的夹角相同,所述影像点、模型点以及所述法线在同一平面上;
所述获取模块用于获取所述影像点的灰度信息,所述光影信息包括所述灰度信息以及所述模型点的预设颜色。
8.如权利要求7所述的终端设备,其特征在于,
所述获取模块用于以所述影像点为中心获取所述一帧影像上一影像区域;
所述获取模块还用于获取所述影像区域中全部像素点的亮度平均值作为所述灰度信息。
9.如权利要求7所述的终端设备,其特征在于,所述光影信息包括一调色值,所述调色值等于所述预设颜色的色调值和饱和度值以及所述灰度信息的亮度值,所述终端设备根据所述亮度值对所述模型点进行调色。
10.如权利要求7所述的终端设备,其特征在于,所述全景视频影像中的每一帧影像包括所述观测点的观测方向、拍摄时间以及地理位置信息,所述获取模块还用于
根据所述观测方向、拍摄时间以及地理位置信息获取指示模型与太阳的位置关系;
所述计算模块用于根据所述位置关系获取太阳到所述模型点的向量与所述法线向量的夹角;
所述获取模块用于根据所述夹角获取亮度补偿值,所述光影信息包括所述亮度补偿值、灰度信息以及所述模型点的预设颜色。
CN201910443796.0A 2019-05-27 2019-05-27 基于全景视频影像的影像处理方法及终端设备 Pending CN110166760A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910443796.0A CN110166760A (zh) 2019-05-27 2019-05-27 基于全景视频影像的影像处理方法及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910443796.0A CN110166760A (zh) 2019-05-27 2019-05-27 基于全景视频影像的影像处理方法及终端设备

Publications (1)

Publication Number Publication Date
CN110166760A true CN110166760A (zh) 2019-08-23

Family

ID=67632662

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910443796.0A Pending CN110166760A (zh) 2019-05-27 2019-05-27 基于全景视频影像的影像处理方法及终端设备

Country Status (1)

Country Link
CN (1) CN110166760A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101710429A (zh) * 2009-10-12 2010-05-19 湖南大学 一种基于动态light map的增强现实系统光照算法
CN107093204A (zh) * 2017-04-14 2017-08-25 苏州蜗牛数字科技股份有限公司 一种基于全景画面影响虚拟对象光影效果的方法
WO2017179912A1 (ko) * 2016-04-15 2017-10-19 재단법인 실감교류인체감응솔루션연구단 삼차원 정보증강 비디오 씨쓰루 디스플레이 장치 및 방법, 렉티피케이션 장치
CN107705353A (zh) * 2017-11-06 2018-02-16 太平洋未来科技(深圳)有限公司 应用于增强现实的虚拟对象光影效果的渲染方法和装置
CN107871339A (zh) * 2017-11-08 2018-04-03 太平洋未来科技(深圳)有限公司 视频中虚拟对象色彩效果的渲染方法和装置
CN108597030A (zh) * 2018-04-23 2018-09-28 新华网股份有限公司 增强现实ar的光影效果显示方法、装置及电子设备
CN109064544A (zh) * 2018-08-09 2018-12-21 太平洋未来科技(深圳)有限公司 全景视频中虚拟对象的光影渲染方法、装置及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101710429A (zh) * 2009-10-12 2010-05-19 湖南大学 一种基于动态light map的增强现实系统光照算法
WO2017179912A1 (ko) * 2016-04-15 2017-10-19 재단법인 실감교류인체감응솔루션연구단 삼차원 정보증강 비디오 씨쓰루 디스플레이 장치 및 방법, 렉티피케이션 장치
CN107093204A (zh) * 2017-04-14 2017-08-25 苏州蜗牛数字科技股份有限公司 一种基于全景画面影响虚拟对象光影效果的方法
CN107705353A (zh) * 2017-11-06 2018-02-16 太平洋未来科技(深圳)有限公司 应用于增强现实的虚拟对象光影效果的渲染方法和装置
CN107871339A (zh) * 2017-11-08 2018-04-03 太平洋未来科技(深圳)有限公司 视频中虚拟对象色彩效果的渲染方法和装置
CN108597030A (zh) * 2018-04-23 2018-09-28 新华网股份有限公司 增强现实ar的光影效果显示方法、装置及电子设备
CN109064544A (zh) * 2018-08-09 2018-12-21 太平洋未来科技(深圳)有限公司 全景视频中虚拟对象的光影渲染方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN100450188C (zh) 图像数据处理方法和图像数据处理装置
CN104076914B (zh) 一种电子设备和投影显示方法
EP1393124B1 (en) Realistic scene illumination reproduction
CN112040092A (zh) 一种实时虚拟场景led拍摄系统及方法
JP2010220184A (ja) 単一画像で高ダイナミックレンジをシミュレートする暗部露光補償方法及びそれを応用した画像処理装置
CN107093204A (zh) 一种基于全景画面影响虚拟对象光影效果的方法
JP2016020891A (ja) 形状計測システムおよび撮像装置
US20200302579A1 (en) Environment map generation and hole filling
CN106940897A (zh) 一种在ar场景中介入现实光影的方法
CN110381244A (zh) 一种摄像头及低照度下提升图像质量的方法
CN112262413A (zh) 混合现实中的实时合成
CN116506993A (zh) 灯光控制方法及存储介质
CN104317144B (zh) 大型正交多幕投影系统光辐射快速补偿方法
Madsen et al. Towards probe-less augmented reality-a position paper
CN111340684B (zh) 一种游戏中图形处理的方法和装置
CN110166760A (zh) 基于全景视频影像的影像处理方法及终端设备
CN107295261A (zh) 图像去雾处理方法、装置、存储介质和移动终端
Minomo et al. Transforming your shadow into colorful visual media: Multi-projection of complementary colors
CN110286837A (zh) 用于数字导览的显示控制方法及移动终端
Pocock et al. The computer animator's technical handbook
CN110087068A (zh) 图像亮度的测量方法、装置、设备及计算机可读存储介质
CN112866507B (zh) 智能化的全景视频合成方法、系统、电子设备及介质
JP6726889B2 (ja) 映像表示システム
Santos et al. The daylight blocking optical stereo see-through HMD
CN110290408A (zh) 基于5g网络的vr设备、系统以及显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190823