CN114924824A - 可视对象的模糊方法、渲染方法及计算设备 - Google Patents

可视对象的模糊方法、渲染方法及计算设备 Download PDF

Info

Publication number
CN114924824A
CN114924824A CN202210614578.0A CN202210614578A CN114924824A CN 114924824 A CN114924824 A CN 114924824A CN 202210614578 A CN202210614578 A CN 202210614578A CN 114924824 A CN114924824 A CN 114924824A
Authority
CN
China
Prior art keywords
fuzzy
visual object
map
visual
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210614578.0A
Other languages
English (en)
Other versions
CN114924824B (zh
Inventor
曹思源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Deepin Technology Co ltd
Original Assignee
Wuhan Deepin Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Deepin Technology Co ltd filed Critical Wuhan Deepin Technology Co ltd
Priority to CN202210614578.0A priority Critical patent/CN114924824B/zh
Publication of CN114924824A publication Critical patent/CN114924824A/zh
Application granted granted Critical
Publication of CN114924824B publication Critical patent/CN114924824B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04804Transparency, e.g. transparent or translucent windows

Abstract

本发明公开了一种可视对象的模糊方法,在计算设备中执行,可视对象具有模糊子对象,该方法包括步骤:从帧缓冲区中获取可视对象所在区域的像素值,生成该可视对象的模糊子对象的材质图;对材质图进行模糊处理,得到背景材质图;将背景材质图写回帧缓冲区的相应区域;绘制可视对象,以生成该可视对象的前景材质图;将背景材质图与前景材质图进行Alpha混合,以使渲染出的可视对象呈现出模糊效果。本发明一并公开了相应的计算设备。

Description

可视对象的模糊方法、渲染方法及计算设备
本申请是2019年07月26日提交的发明专利申请2019106839944的分案申请。
技术领域
本发明涉及图形界面显示技术领域,尤其涉及一种可视对象的模糊方法、渲染方法及计算设备。
背景技术
窗口管理器是用于管理窗口的应用程序,其例如可以控制窗口的外表、在屏幕中的显示位置以及向用户提供操作窗口的方法等。窗口管理器在视觉上通常可以为窗口提供定制化的标题栏以及边框,标题栏通常会显示窗口的图标、标题以及最小化、最大化、关闭等按钮。在Linux桌面环境中,用户可以通过X11相关的技术或者由窗口管理器指定的方式定制标题栏和边框。
为了使桌面更加美观、易用,用户希望窗口标题栏的背景和边框能够与窗口底部的内容相混合,呈现出半透明的动态模糊效果。当窗口底部的内容发生变化时,窗口标题栏的背景及边框也会相应地进行动态变化。
目前,在Linux桌面环境下,大部分窗口管理器均不支持窗口标题栏及边框的动态模糊效果;对于少数支持动态模糊效果的窗口管理器,其定制性、美观性较差,难以满足用户要求。例如,KDE桌面环境下的窗口管理器KWin仅能够实现对所有窗口标题栏的动态模糊,无法定制化地对某一个或某几个窗口进行模糊,也不支持全窗口范围的动态模糊。此外,KWin也无法定制单个窗口的模糊区域的形状,无法对窗口之外的视觉元素(例如窗口切换组件、窗口预览组件等)进行模糊。
发明内容
为此,本发明提供一种可视对象的模糊方法、渲染方法及计算设备,以力图解决或至少缓解上面存在的问题。
根据本发明的第一个方面,提供一种可视对象的模糊方法,在计算设备中执行,所述可视对象具有模糊子对象,所述方法包括:从帧缓冲区中获取可视对象所在区域的像素值,生成该可视对象的模糊子对象的材质图;对所述材质图进行模糊处理,得到背景材质图;将所述背景材质图写回所述帧缓冲区的相应区域;绘制所述可视对象,以生成所述可视对象的前景材质图;将所述背景材质图与所述前景材质图进行Alpha混合,以使渲染出的可视对象呈现出模糊效果。
可选地,在根据本发明的可视对象的模糊方法中,可视对象包括:窗口、窗口切换组件、窗口预览组件、工作区预览组件。
可选地,在根据本发明的可视对象的模糊方法中,对所述材质图进行模糊处理,得到背景材质图的步骤包括:对所述材质图进行模糊处理,得到模糊材质图;获取所述可视对象的模糊区域掩膜,将所述模糊区域掩膜与所述模糊材质图进行混合,得到所述背景材质图。
可选地,在根据本发明的可视对象的模糊方法中,所述像素值包括像素的颜色值和透明度值,所述材质图包括颜色通道图和透明度通道图;所述对所述材质图进行模糊处理,得到背景材质图的步骤包括:对所述颜色通道图进行模糊处理,得到模糊材质图;将所述模糊区域掩膜与所述透明度通道图进行混合,得到背景材质图。
可选地,在根据本发明的可视对象的模糊方法中,对所述颜色通道图进行模糊处理的步骤包括:采用预设的卷积核对所述颜色通道图进行卷积。
可选地,在根据本发明的可视对象的模糊方法中,模糊区域掩膜为用于指示模糊区域的位图,且模糊区域的像素值为1;将所述模糊区域掩膜与所述透明度通道图进行混合的步骤包括:将所述模糊区域掩膜与所述透明度通道图的相应位置的像素值做与运算。
根据本发明的第二个方面,提供一种渲染方法,在计算设备中执行,包括:将发送了重绘请求的可视对象和具有模糊子对象的可视对象作为待重绘的可视对象;按照显示层级自底向上的顺序渲染各个待重绘的可视对象,其中,当待重绘的可视对象具有模糊子对象时,按照上述模糊方法对该可视对象进行模糊,以使渲染出的该可视对象呈现模糊效果。
根据本发明的第三个方面,提供一种计算设备,包括:至少一个处理器;和存储有程序指令的存储器,所述程序指令包括窗口管理器;当所述窗口管理器被所述处理器读取并执行时,使得所述计算设备执行如上所述的可视对象的模糊方法和如上所述的渲染方法。
根据本发明的第四个方面,提供一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如上所述的可视对象的模糊方法和如上所述的渲染方法。
本发明的可视对象的模糊方法,通过为可视对象设置模糊子对象来实现可视对象的模糊,即,为需要进行模糊的可视对象设置模糊子对象,不需要进行模糊的可视对象则不设置模糊子对象,从而可以定制化、可选择地模糊某一个或某几个可视对象。
在设置了模糊子对象的基础上,可以通过模糊子对象来实现可视对象的动态模糊。具体地,从帧缓冲区中获取可视对象所在区域的像素值,作为模糊子对象的材质图,对该材质图进行模糊处理,得到背景材质图。随后,将该背景材质图与可视对象的前景材质图进行Alpha混合,以使渲染出的可视对象呈现出模糊效果。由于模糊子对象的材质图由可视对象所在区域的像素值生成,因而本发明的模糊方法可以实现整个可视对象区域的模糊,视觉上更加美观,用户体验更好。
进一步地,本发明的可视对象可以是窗口、窗口切换组件、窗口预览组件、工作区预览组件等,从而对窗口管理器所管理的各种视觉元素进行模糊。
进一步地,本发明的模糊方法可以为需要进行模糊的可视对象设置模糊区域掩膜,模糊区域掩膜可以定义任何形状。通过模糊区域掩膜来对模糊子对象的材质图进行裁剪,可以得到具有目标形状的背景材质图,从而实现了单个可视对象的模糊区域的可定制性。
基于本发明的可视对象的模糊方法,本发明还提供一种渲染方法,能够在渲染每一帧桌面图像时,采用常规方法来渲染不需要进行模糊的可视对象,采用本发明的模糊方法来渲染需要进行模糊的可视对象(即设置了模糊子对象的可视对象),使渲染出的各个可视对象呈现出定制化的模糊效果。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的计算设备100的示意图;
图2示出了根据本发明一个实施例的渲染方法200的流程图;
图3图示出了根据本发明一个实施例的包括窗口A、B、C、D的桌面的示意图;
图4示出了图3所示的桌面所对应的窗口栈的示意图;
图5示出了图3所示的桌面所对应的Actor树形结构的示意图;
图6示出了根据本发明一个实施例的可视对象的模糊方法600的流程图;
图7示出了根据本发明一个实施例的一个可视对象的模糊过程的示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
针对现有技术中存在的问题,本发明提供一种可视对象的模糊方法和渲染方法,以实现可视对象的定制化模糊,使桌面上的可视对象呈现出更加和谐、美观、现代化的视觉效果,提高用户体验。
本发明的可视对象的模糊方法和渲染方法在计算设备中执行。计算设备可以是任意具有存储和计算能力的设备,其例如可以是桌面电脑、笔记本电脑等个人配置的计算机,也可以是工作站、服务器等硬件配置较高的计算机,还可以是手机、平板电脑、智能可穿戴设备等移动终端,但不限于此。
图1示出了根据本发明一个实施例的计算设备100的示意图。需要说明的是,图1所示的计算设备100仅为一个示例,在实践中,用于实施本发明的可视对象的模糊、渲染方法的计算设备可以是任意型号的设备,其硬件配置情况可以与图1所示的计算设备100相同,也可以不同。实践中用于实施本发明的模糊、渲染方法的计算设备可以对图1所示的计算设备100的硬件组件进行增加或删减,本发明对计算设备的具体硬件配置情况不做限制。
如图1所示,在基本的配置102中,计算设备100典型地包括系统存储器106和一个或者多个处理器104。存储器总线108可以用于在处理器104和系统存储器106之间的通信。
取决于期望的配置,处理器104可以是任何类型的处理,包括但不限于:微处理器(μP)、微控制器(μC)、数字信息处理器(DSP)或者它们的任何组合。处理器104可以包括诸如一级高速缓存110和二级高速缓存112之类的一个或者多个级别的高速缓存、处理器核心114和寄存器116。示例的处理器核心114可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器118可以与处理器104一起使用,或者在一些实现中,存储器控制器118可以是处理器104的一个内部部分。
取决于期望的配置,系统存储器106可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。系统存储器106可以包括操作系统120、一个或者多个应用122以及程序数据124。在一些实施方式中,应用122可以布置为在操作系统上由一个或多个处理器104利用程序数据124执行指令。
计算设备100还可以包括有助于从各种接口设备(例如,输出设备142、外设接口144和通信设备146)到基本配置102经由总线/接口控制器130的通信的接口总线140。示例的输出设备142包括图形处理单元148和音频处理单元150。它们可以被配置为有助于经由一个或者多个A/V端口152与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口144可以包括串行接口控制器154和并行接口控制器156,它们可以被配置为有助于经由一个或者多个I/O端口158和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备146可以包括网络控制器160,其可以被布置为便于经由一个或者多个通信端口164与一个或者多个其他计算设备162通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。
在根据本发明的计算设备100中,应用122包括窗口管理器128。窗口管理器128是用于管理窗口的应用程序,其例如可以控制窗口的外表、在屏幕中的显示位置以及向用户提供操作窗口的方法等。在本发明的实施例中,窗口管理器128中包括用于执行本发明的渲染方法200和模糊方法600的指令,该指令可以指示处理器104执行本发明的渲染方法200和模糊方法600,在渲染每一帧桌面图像时,采用常规方法来渲染不需要进行模糊的可视对象,采用本发明的模糊方法600来渲染需要进行模糊的可视对象,使渲染出的各个可视对象呈现出定制化的模糊效果。
需要说明的是,窗口管理器128可以执行渲染方法200和模糊方法600,但本发明对窗口管理器128的开发过程不做限制。窗口管理器128可以是完全自主研发的新的窗口管理器,也可以是在现有的窗口管理器,例如GNOME桌面环境下的Mutter、KDE桌面环境下的KWin等窗口管理器上进行改进,即,在现有的窗口管理器中修改、添加某些代码,使之支持本发明的渲染方法200和模糊方法600。
根据一种实施例,窗口管理器128是对Mutter架构的窗口管理器的改进。Mutter窗口管理器依赖Clutter技术来实现,Clutter是一个用于硬件加速用户界面的图形库,用来创建快速、视觉效果丰富的图形用户界面。而Clutter依赖cogl这一OpenGL封装库,为了提供最大的兼容性,cogl暴露的功能相对有限,尤其是对于需要OpenGL扩展的情况。因此,为了使Mutter窗口管理器能够实现本发明的渲染方法200和模糊方法600,本发明对Mutter做了以下改进:
1、修改cogl,使其能够支持glCopyTexSubImage2D这一OpenGL ES2.0API的功能。具体地,可以在cogl的材质处理驱动(CoglDriverVtable)中加入texture_2d_copy_sub_image这一API,该API用于从帧缓冲区(framebuffer)中拷贝指定区域的内容(像素值)到当前绑定的材质图(texture)中。
此外,在材质的虚函数表cogl_texture_pixmap_x11_vtable(该函数表包括一组通用的OpenGL材质处理函数)中定义本发明所需要的处理函数,例如模糊处理函数、Alpha混合函数等。
通过设置texture_2d_copy_sub_image以及定义处理函数,cogl可以从当前的帧缓冲区中取出已绘制的内容作为材质图,然后对材质图进行模糊、混成(composite)等处理,为执行本发明的渲染方法200和模糊方法600提供功能基础。
2、修改Clutter,使需要进行模糊的可视对象在每一帧都会被重绘。
Clutter的设计是以Actor为单元来进行的,每个可视对象对应于一个Actor。可视对象例如包括窗口、窗口管理器提供的窗口切换组件、窗口预览组件、工作区预览组件等,但不限于此。Actor之间具有层级关系,顶层的Actor名为Stage,每一个Actor均可以有任意数量的子Actor。
具体地,为了使Clutter能够支持本发明的渲染方法200和模糊方法600,可以在Clutter中定义一个特殊的Actor类,记为MetaBlurActor(模糊类)。此外,定义可视对象的属性_NET_WM_DEEPIN_BLUR_REGION_MASK(模糊区域掩膜),该属性的值是一个用于指示可视对象的模糊区域的位图,且模糊区域的像素值为1。
基于模糊类MetaBlurActor,可以为需要进行模糊的可视对象Actor设置一个MetaBlurActor子对象(下文中称为模糊子对象),用于对该可视对象进行标记,以使窗口管理器能够在每帧的绘制阶段识别出所有需要进行模糊的可视对象,保证这些可视对象在每一帧都会被重绘。进一步地,可以通过模糊子对象MetaBlurActor来实现相应可视对象Actor的动态模糊。通过模糊子对象来对可视对象进行模糊的具体步骤将于下文的模糊方法600中详述。
基于_NET_WM_DEEPIN_BLUR_REGION_MASK属性,可以为需要进行模糊的可视对象设置模糊区域掩膜,模糊区域掩膜可以定义任何形状。通过模糊区域掩膜来对模糊子对象的材质图进行裁剪,可以得到具有目标形状的背景材质图,从而实现了单个可视对象的模糊区域的可定制性。模糊区域掩膜的具体应用步骤将于下文的模糊方法600中详述。
上述对cogl和Clutter进行的修改为Mutter窗口管理器执行本发明的渲染方法200和模糊方法600提供了基础的功能支持。即,在上述修改的基础上,可以编写出用于执行渲染方法200和模糊方法600的程序指令,使得Mutter窗口管理器能够执行本发明的渲染方法200和模糊方法600。
以上以Mutter窗口管理器为例说明了窗口管理器128的改进过程。但是本领域技术人员可以理解,用于执行本发明的窗口管理器128除了可以是对现有的Mutter窗口管理器的改进之外,还可以是其他现有的窗口管理器的改进,也可以是完全自主研发的全新的窗口管理器,本发明对窗口管理器128的开发过程不做限制。
图2示出了根据本发明一个实施例的渲染方法200的流程图。方法200在计算设备(例如前述计算设备100)中执行,具体地,方法200由计算设备中的窗口管理器执行。需要说明的是,渲染方法200用于渲染一帧桌面图像,其可以按照预设的帧率循环执行。例如,设置帧率为60Hz,则每秒可以刷新60帧桌面图像,每帧桌面图像均采用方法200来渲染。
如图2所示,方法200始于步骤S210。
在步骤S210中,将发送了重绘请求的可视对象和具有模糊子对象的可视对象作为待重绘的可视对象。
根据一种实施例,可视对象为桌面的窗口显示区域(即将窗口最大化后所占据的屏幕区域)内的具有视觉显示效果的对象。可视对象例如包括窗口、窗口管理器提供的窗口切换组件、窗口预览组件、工作区预览组件等,但不限于此。
图3图示出了一个包括A、B、C、D四个窗口的桌面的示意图,每个窗口均为一个可视对象。需要说明的是,为了附图以及文字说明的简洁,图3中仅示出了窗口可视对象,未示出窗口切换组件、窗口预览组件等其他类型的可视对象。
窗口管理器通常采用窗口栈来管理已经打开的窗口,当前活动窗口(即用户当前正在操作的窗口)位于窗口栈的顶端,其他窗口则按照窗口的操作顺序进行排列,用户操作窗口的时间顺序越靠后,该窗口在窗口栈中的位置越靠近窗口栈的顶端。多个窗口在桌面上可能会出现层叠显示,下层窗口可能会被上层窗口遮挡、覆盖。窗口栈也可用于表示窗口的显示层级,越靠近窗口栈顶端的窗口,其显示层级越高。窗口栈顶端的窗口为当前活动窗口,其显示层级最高,内容被完全显示,不会被其他窗口遮挡。在图3所示的桌面中,窗口C为用户当前正在操作的窗口,即为当前活动窗口。
图4示出了图3所示的桌面所对应的窗口栈。如图4所示,当前活动窗口C位于窗口栈的顶端,其他窗口A、B、D按照被用户操作的先后顺序在窗口栈中依次排列。
在Mutter架构的窗口管理器中,采用Actor来管理可视对象,每个可视对象对应于一个Actor。Actor之间具有层级关系,顶层的Actor名为Stage,对应于整个窗口显示区域。每一个Actor均可以有任意数量的子Actor。
图5示出了图3所示的窗口显示区域所对应的Actor树形结构的示意图。如图5所示,窗口A~D分别对应于Actor_A~Actor_D,Actor_A~Actor_D均为顶层窗口RootActor(即Stage)的子Actor。在图3所示的桌面中,窗口C、窗口D为需要进行模糊的可视对象,相应地,分别为Actor_C、Actor_D设置模糊子对象MetaBlurActor_C、MetaBlurActor_D,以实现窗口C、窗口D的动态模糊。
可视对象在桌面上的显示状态会随着用户的交互操作而发生变化。当用户对可视对象进行操作时,例如拖动窗口、调整窗口大小、切换当前活动窗口(改变窗口的显示层级)、显示/隐藏窗口预览组件等时,相应地可视对象会发出重绘请求,请求窗口管理器重绘该可视对象,以使可视对象呈现出与用户操作相对应的视觉效果。
根据一种实施例,可视对象的Actor可以通过向窗口管理器发送queue_redraw(_with_clip)消息来发起重绘请求。重绘请求包括clip信息,即待重绘的区域信息。待重绘的区域为一个矩形区域,待重绘的区域信息可以是形如(x,y,width,height)的信息,其中,x、y分别为矩形区域左上角的像素点的横轴、纵轴坐标,width、height分别为矩形区域的宽和高。窗口管理器在接收到可视对象发来的包含clip信息的重绘请求后,在后续步骤S220中,会对该可视对象的待重绘区域进行重绘。需要说明的是,子Actor的重绘也会引起父Actor的重绘。
除了发送了重绘请求的可视对象之外,窗口管理器还在每帧的绘制阶段识别出所有具有模糊子对象MetaBlurActor的可视对象Actor,将这些可视对象作为待重绘的可视对象进行重绘。
例如,在图3所示的桌面中,用户将窗口A切换为当前活动窗口,相应地,窗口A的Actor将基于用户操作发起重绘请求,窗口A即为待重绘的可视对象。此外,窗口C具有模糊子对象MetaBlurActor_C,窗口D具有模糊子对象MetaBlurActor_D的,即窗口C、窗口D均为需要进行模糊的可视对象,相应地,窗口C、窗口D均为待重绘的可视对象。
在步骤S210确定了待重绘的可视对象后,执行步骤S220。
在步骤S220中,按照显示层级自底向上的顺序渲染各个待重绘的可视对象,其中,当待重绘的可视对象具有模糊子对象时,按照本发明的可视对象的模糊方法600来对该可视对象进行模糊,以使渲染出的该可视对象呈现模糊效果。
显示层级用于表示各个可视对象在窗口显示区域的层叠情况,可视对象的显示层级越高,该可视对象的显示内容越完整,越不会被其他可视对象所遮挡。当可视对象为窗口时,可以用窗口栈来表示窗口的显示层级,窗口栈顶端的窗口(即当前活动窗口)的显示层级最高。
根据一种实施例,在步骤S220的渲染过程中,每一个可视对象均对应于一个离屏帧缓冲区(offscreen framebuffer),离屏帧缓冲区中存储有可视对象的材质图,材质图中包括可视对象的各个像素的像素值。各可视对象可以分别完成绘制,将绘制结果写入各自的材质图中。随后,按照显示层级自底向上的顺序,将各个可视对象的材质图依次写入帧缓冲区(framebuffer)的相应位置中,以完成当前帧的渲染。
在步骤S220中,待重绘的可视对象可以分为两类,一类是不需要进行模糊的可视对象(即未设置有模糊子对象的可视对象),另一类为需要进行模糊的可视对象(即设置有模糊子对象的可视对象),这两类可视对象的绘制方法有所区别。
对于不需要进行模糊的多个可视对象,其在绘制上没有严格的先后顺序,可以分别地、并行地进行绘制。
对于需要进行模糊的多个可视对象,由于其需要进行背景的动态模糊,因此需要按照显示层级自底向上的顺序来完成绘制,即,只有当某一可视对象的下层可视对象(下层可视对象为该可视对象的背景)绘制完毕后,才可以启动该可视对象的绘制。在绘制过程中,按照下述方法600来对该可视对象进行模糊,以使该可视对象在视觉上呈现出模糊效果。
图6示出了根据本发明一个实施例的可视对象的模糊方法600的流程图。方法600在计算设备(例如前述计算设备100)中执行,具体地,方法600由计算设备中的窗口管理器执行,用于对单个可视对象进行模糊。如图6所示,方法600始于步骤S610。
在步骤S610中,从帧缓冲区中获取可视对象所在区域的像素值,生成该可视对象的模糊子对象的材质图。
帧缓冲区即framebuffer,其中存储有屏幕上所有像素点的像素值,基于帧缓冲区中存储的像素值,可以在屏幕上显示出相应的图像。
根据一种实施例,在步骤S610中,首先确定可视对象所在的区域,即确定可视对象所覆盖的屏幕区域。随后,从帧缓冲区中获取该屏幕区域中所有像素点的像素值,存储至该可视对象的模糊子对象(MetaBlurActor)的离屏帧缓冲区(offscreen framebuffer)中,生成该模糊子对象的材质图。
根据一种实施例,像素值包括像素的颜色值(R、G、B通道值)和透明度值(A通道值),相应地,生成的模糊子对象的材质图包括颜色通道图(R、G、B通道图)和透明度通道图(A通道图),颜色通道图中存储有各像素点的颜色值,透明度通道图中存储有各像素点的透明度值。
随后,在步骤S620中,对材质图进行模糊处理,得到背景材质图。
根据一种实施例,步骤S620包括模糊和裁剪两个处理步骤。
在模糊处理步骤中,对材质图进行模糊处理,得到模糊材质图。具体地,对材质图中的颜色通道图进行模糊处理,例如,采用预设的卷积核对颜色通道图进行卷积(分别对RGB通道图进行卷积),得到模糊材质图。模糊材质图包括经过模糊处理后的R、G、B通道图。
需要说明的是,本发明对颜色通道图的模糊处理所采用的具体算法不做限制,其例如可以是高斯模糊算法、均值模糊算法、中值滤波算法等,但不限于此。针对不同的模糊处理算法,设置的卷积核的大小以及卷积核中各个位置的权重值可能有所不同。
经过模糊处理步骤后,执行裁剪处理步骤。在裁剪处理步骤中,获取可视对象的模糊区域掩膜,将模糊区域掩膜与模糊材质图进行混合,得到背景材质图。具体地,将模糊区域掩膜与材质图中的透明度通道图(A通道图)进行混合,得到背景材质图。背景材质图包括混合后的透明度通道图和前述模糊材质图。
如前所述,模糊区域掩膜是可视对象的一个属性。对于需要进行模糊处理的可视对象,模糊区域掩膜是一个用于指示可视对象的模糊区域的位图,模糊区域可以定义成任意形状,模糊区域内的像素值为1。根据一种实施例,将模糊区域掩膜与透明度通道图的相应位置的像素值做与运算,可以裁剪掉0值区,得到具有目标形状的背景材质图,从而实现了可视对象的模糊区域的可定制性。
随后,在步骤S630中,将背景材质图写回帧缓冲区的相应区域。此处所说的“相应区域”即为前述步骤S610中的可视对象所在区域。
随后,在步骤S640中,绘制可视对象,以生成可视对象的前景材质图。
在步骤S640中,绘制可视对象,得到可视对象各像素点的像素值,将像素值写入该可视对象的离屏帧缓冲区(offscreen framebuffer)中,生成该可视对象的前景材质图。
随后,在步骤S650中,将背景材质图与前景材质图进行Alpha混合,以使渲染出的可视对象呈现出模糊效果。
在步骤S650中,可视对象从帧缓冲区中读取出背景材质图,将背景材质图与自身的离屏帧缓冲区中所存储的前景材质图进行Alpha混合,将混合后所得到的材质图写回帧缓冲区的相应区域。这样,在根据帧缓冲区中的数据而渲染出的桌面图像中,可视对象将呈现出模糊效果。
图7示出了对图3中的窗口C进行模糊的示意图。如图7所示,帧缓冲区framebuffer中存储有屏幕各像素点的RGBA通道值。
在步骤S1中,确定窗口C(Actor_C)所覆盖的屏幕区域710,将帧缓冲区framebuffer的区域710中各像素点的像素值复制到窗口C的模糊子对象(MetaBlurActor_C)的离屏帧缓冲区(offscreen framebuffer)中,生成模糊子对象MetaBlurActor_C的材质图。材质图包括颜色通道图(即R、G、B通道图)和透明度通道图(即A通道图)。
随后,在步骤S2中,对模糊子对象MetaBlurActor_C的材质图进行模糊和裁剪。具体地:
首先,对颜色通道图进行模糊处理,采用预设的卷积核(例如高斯卷积核)分别对材质图中的R、G、B通道图做卷积,生成包括R、G、B三个通道图的模糊材质图。
随后,对透明度通道图进行裁剪处理,将窗口C的模糊区域掩膜(shape mask)与A通道图做与运算,即将窗口C的模糊区域掩膜与A通道图的相应位置的像素值做与运算,得到裁剪后的A通道图,裁剪后的A通道图具有窗口C的模糊区域掩膜所定义的形状。
经过模糊处理和裁剪处理步骤,可以得到模糊子对象MetaBlurActor_C的背景材质图。背景材质图包括模糊后的R、G、B三个通道图(即模糊材质图)以及裁剪后的A通道图。
随后,在步骤S3中,将背景材质图写回帧缓冲区framebuffer的区域710中。
随后,在步骤S4中,绘制窗口C,得到窗口C中各像素点的像素值,将像素值写入窗口C的离屏帧缓冲区(offscreen framebuffer)中,生成窗口C的前景材质图。
随后,在步骤S5中,窗口C(Actor_C)从帧缓冲区中的区域710处获取背景材质图,将前景材质图与获取到的背景材质图进行Alpha混合。
随后,在步骤S6中,窗口C(Actor_C)将混合后的材质图写回帧缓冲区的区域710中。这样,在基于帧缓冲区所渲染出的下一帧桌面图像中,窗口C将呈现出模糊效果。
这里描述的各种技术可结合硬件或软件,或者它们的组合一起实现。从而,本发明的方法和设备,或者本发明的方法和设备的某些方面或部分可采取嵌入有形媒介,例如可移动硬盘、U盘、软盘、CD-ROM或者其它任意机器可读的存储介质中的程序代码(即指令)的形式,其中当程序被载入诸如计算机之类的机器,并被所述机器执行时,所述机器变成实践本发明的设备。
在程序代码在可编程计算机上执行的情况下,计算设备一般包括处理器、处理器可读的存储介质(包括易失性和非易失性存储器和/或存储元件),至少一个输入装置,和至少一个输出装置。其中,存储器被配置用于存储程序代码;处理器被配置用于根据该存储器中存储的所述程序代码中的指令,执行本发明的模糊方法和渲染方法。
以示例而非限制的方式,可读介质包括可读存储介质和通信介质。可读存储介质存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息。通信介质一般以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据,并且包括任何信息传递介质。以上的任一种的组合也包括在可读介质的范围之内。
在此处所提供的说明书中,算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与本发明的示例一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的而非限制性的,本发明的范围由所附权利要求书限定。

Claims (10)

1.一种可视对象的模糊方法,在计算设备的窗口管理器中执行,所述可视对象具有模糊子对象,所述方法包括:
从帧缓冲区中获取可视对象所在区域的像素值,生成该可视对象的模糊子对象的材质图;
对所述材质图进行模糊处理,得到背景材质图;
将所述背景材质图写回所述帧缓冲区的相应区域;
绘制所述可视对象,以生成所述可视对象的前景材质图;
将所述背景材质图与所述前景材质图进行Alpha混合,以使渲染出的可视对象呈现出模糊效果。
2.如权利要求1所述的方法,其中,所述可视对象包括:
窗口、窗口切换组件、窗口预览组件、工作区预览组件。
3.如权利要求1或2所述的方法,其中,所述对所述材质图进行模糊处理,得到背景材质图的步骤包括:
对所述材质图进行模糊处理,得到模糊材质图;
获取所述可视对象的模糊区域掩膜,将所述模糊区域掩膜与所述模糊材质图进行混合,得到所述背景材质图。
4.如权利要求1-3中任一项所述的方法,其中,所述像素值包括像素的颜色值和透明度值,所述材质图包括颜色通道图和透明度通道图;
所述对所述材质图进行模糊处理,得到背景材质图的步骤包括:
对所述颜色通道图进行模糊处理,得到模糊材质图;
将所述模糊区域掩膜与所述透明度通道图进行混合,得到背景材质图。
5.如权利要求4所述的方法,其中,所述对所述颜色通道图进行模糊处理的步骤包括:采用预设的卷积核对所述颜色通道图进行卷积。
6.如权利要求4或5所述的方法,其中,所述模糊区域掩膜为用于指示模糊区域的位图,且模糊区域的像素值为1;
所述将所述模糊区域掩膜与所述透明度通道图进行混合的步骤包括:将所述模糊区域掩膜与所述透明度通道图的相应位置的像素值做与运算。
7.一种渲染方法,在计算设备的窗口管理器中执行,包括:
将发送了重绘请求的可视对象和具有模糊子对象的可视对象作为待重绘的可视对象;
按照显示层级自底向上的顺序渲染各个待重绘的可视对象,其中,当待重绘的可视对象具有模糊子对象时,按照权利要求1-6中任一项所述的方法对该可视对象进行模糊,以使渲染出的该可视对象呈现模糊效果。
8.如权利要求7所述的方法,其中,所述重绘请求包括可视对象的待重绘的区域信息。
9.一种计算设备,包括:
至少一个处理器;和
存储有程序指令的存储器,所述程序指令包括窗口管理器;
当所述窗口管理器被所述处理器读取并执行时,使得所述计算设备执行如权利要求1-6中任一项所述的可视对象的模糊方法或权利要求7-8中任一项所述的渲染方法。
10.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求1-6中任一项所述的可视对象的模糊方法或权利要求7-8中任一项所述的渲染方法。
CN202210614578.0A 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备 Active CN114924824B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210614578.0A CN114924824B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201910683994.4A CN110457102B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备
CN202210614578.0A CN114924824B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201910683994.4A Division CN110457102B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备

Publications (2)

Publication Number Publication Date
CN114924824A true CN114924824A (zh) 2022-08-19
CN114924824B CN114924824B (zh) 2023-11-14

Family

ID=68483598

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910683994.4A Active CN110457102B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备
CN202210614578.0A Active CN114924824B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910683994.4A Active CN110457102B (zh) 2019-07-26 2019-07-26 可视对象的模糊方法、渲染方法及计算设备

Country Status (1)

Country Link
CN (2) CN110457102B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457102B (zh) * 2019-07-26 2022-07-08 武汉深之度科技有限公司 可视对象的模糊方法、渲染方法及计算设备
CN111242838B (zh) * 2020-01-09 2022-06-03 腾讯科技(深圳)有限公司 模糊图像渲染方法和装置、存储介质及电子装置
CN112199537A (zh) * 2020-09-18 2021-01-08 杭州安恒信息技术股份有限公司 一种可视化图像的更新方法、装置、电子装置和存储介质
CN113791861B (zh) * 2021-11-16 2022-03-01 北京鲸鲮信息系统技术有限公司 窗口模糊透明显示方法、装置、电子设备与存储介质
CN117710502A (zh) * 2023-12-12 2024-03-15 摩尔线程智能科技(北京)有限责任公司 渲染方法、装置及存储介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6348919B1 (en) * 1995-12-18 2002-02-19 3Dlabs Inc, Ltd. Graphics system with optimized use of unified local and frame buffers
US20080143739A1 (en) * 2006-12-13 2008-06-19 Harris Jerry G Method and System for Dynamic, Luminance-Based Color Contrasting in a Region of Interest in a Graphic Image
US8495514B1 (en) * 2005-06-02 2013-07-23 Oracle America, Inc. Transparency assisted window focus and selection
CN104103045A (zh) * 2014-07-09 2014-10-15 广东欧珀移动通信有限公司 终端的高斯模糊处理方法和系统
CN104156922A (zh) * 2014-08-12 2014-11-19 广州市久邦数码科技有限公司 一种图像处理方法及其系统
CN105404438A (zh) * 2014-08-13 2016-03-16 小米科技有限责任公司 背景模糊方法、装置及终端设备
CN105453010A (zh) * 2014-07-30 2016-03-30 华为技术有限公司 Ui控件背景设置方法、装置及终端
US20160148068A1 (en) * 2014-08-15 2016-05-26 Sony Corporation Image processing apparatus and method, and electronic device
WO2017016171A1 (zh) * 2015-07-24 2017-02-02 安一恒通(北京)科技有限公司 用于终端设备的窗口显示处理方法、装置、设备及存储介质
CN106570847A (zh) * 2016-10-24 2017-04-19 广州酷狗计算机科技有限公司 图像处理的方法和装置
CN106993134A (zh) * 2017-03-31 2017-07-28 努比亚技术有限公司 一种图像生成装置和方法、终端
WO2018076038A1 (en) * 2016-10-31 2018-05-03 Victoria Link Limited A rendering process and system
CN110457102A (zh) * 2019-07-26 2019-11-15 武汉深之度科技有限公司 可视对象的模糊方法、渲染方法及计算设备

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6348919B1 (en) * 1995-12-18 2002-02-19 3Dlabs Inc, Ltd. Graphics system with optimized use of unified local and frame buffers
US8495514B1 (en) * 2005-06-02 2013-07-23 Oracle America, Inc. Transparency assisted window focus and selection
US20080143739A1 (en) * 2006-12-13 2008-06-19 Harris Jerry G Method and System for Dynamic, Luminance-Based Color Contrasting in a Region of Interest in a Graphic Image
CN104103045A (zh) * 2014-07-09 2014-10-15 广东欧珀移动通信有限公司 终端的高斯模糊处理方法和系统
CN105453010A (zh) * 2014-07-30 2016-03-30 华为技术有限公司 Ui控件背景设置方法、装置及终端
CN104156922A (zh) * 2014-08-12 2014-11-19 广州市久邦数码科技有限公司 一种图像处理方法及其系统
CN105404438A (zh) * 2014-08-13 2016-03-16 小米科技有限责任公司 背景模糊方法、装置及终端设备
US20160148068A1 (en) * 2014-08-15 2016-05-26 Sony Corporation Image processing apparatus and method, and electronic device
WO2017016171A1 (zh) * 2015-07-24 2017-02-02 安一恒通(北京)科技有限公司 用于终端设备的窗口显示处理方法、装置、设备及存储介质
CN106570847A (zh) * 2016-10-24 2017-04-19 广州酷狗计算机科技有限公司 图像处理的方法和装置
WO2018076038A1 (en) * 2016-10-31 2018-05-03 Victoria Link Limited A rendering process and system
US20190272626A1 (en) * 2016-10-31 2019-09-05 Victoria Link Limited A rendering process and system
CN106993134A (zh) * 2017-03-31 2017-07-28 努比亚技术有限公司 一种图像生成装置和方法、终端
CN110457102A (zh) * 2019-07-26 2019-11-15 武汉深之度科技有限公司 可视对象的模糊方法、渲染方法及计算设备

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
CHU-TAK LI;WAN-CHI SIU;DANIEL P. K. LUN: "Boosting the Performance of Scene Recognition via Offline Feature-Shifts and Search Window Weights", 《2018 IEEE 23RD INTERNATIONAL CONFERENCE ON DIGITAL SIGNAL PROCESSING (DSP)》, pages 1 - 5 *
LINUX阅码场: "揭开Wayland的面纱(二):Wayland应运而生", Retrieved from the Internet <URL:https://cloud.tencent.com/developer/article/1442281> *
朱庆;翁其强;胡翰;王峰;王伟玺;杨卫军;张鹏程;: "基于帧缓存的多角度影像精细纹理映射方法", 西南交通大学学报, no. 02, pages 55 - 63 *
田琳: "基于GTK+的图像处理系统的设计与实现", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》, no. 2, pages 138 - 3621 *

Also Published As

Publication number Publication date
CN110457102A (zh) 2019-11-15
CN110457102B (zh) 2022-07-08
CN114924824B (zh) 2023-11-14

Similar Documents

Publication Publication Date Title
CN110457102B (zh) 可视对象的模糊方法、渲染方法及计算设备
KR101086570B1 (ko) 동적 윈도우 구조
KR100962920B1 (ko) 비주얼 및 장면 그래프 인터페이스
US8405679B2 (en) Methods and systems for per pixel alpha-blending of a parent window and a portion of a background image
US7543242B2 (en) Method and structure for implementing layered object windows
US9142044B2 (en) Apparatus, systems and methods for layout of scene graphs using node bounding areas
US8963960B2 (en) System and method for content aware hybrid cropping and seam carving of images
US7839419B2 (en) Compositing desktop window manager
US7692658B2 (en) Model for layout animations
JP3598303B2 (ja) オーバーラップする複数のディスプレイオブジェクトをディスプレイ上に選択的にディスプレイしてアクティブ化する方法、および、コンピュータシステム
US20190196774A1 (en) Manipulating shared screen content
US7911465B2 (en) Techniques for displaying information for collection hierarchies
RU2363984C2 (ru) Интерфейсы визуального объекта и графа сцены
US8629886B2 (en) Layer combination in a surface composition system
US20150243257A1 (en) Cross-Platform Rendering Engine
WO2017166210A1 (zh) 应用程序的处理方法及终端设备
US8358876B1 (en) System and method for content aware in place translations in images
US8423883B1 (en) Systems and methods of creating and editing electronic content including multiple types of graphics
US10169307B2 (en) Method and system for the use of adjustment handles to facilitate dynamic layout editing
JPH1039850A (ja) 透過性ウィンドウを実現する方法及びシステム
JPH10500512A (ja) グラフィカルユーザーインタフェースの形態及び動作のカスタマイズ方法及びシステム
CN104038807A (zh) 一种基于OpenGL的图层混合方法及装置
JP4742051B2 (ja) 空間・時間モーションブラー効果の生成方法
JP2003066943A (ja) 画像処理装置及びプログラム
US20130063482A1 (en) Application programming interface for a bitmap composition engine

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant