CN110275611B - 一种参数调节方法、装置和电子设备 - Google Patents
一种参数调节方法、装置和电子设备 Download PDFInfo
- Publication number
- CN110275611B CN110275611B CN201910447096.9A CN201910447096A CN110275611B CN 110275611 B CN110275611 B CN 110275611B CN 201910447096 A CN201910447096 A CN 201910447096A CN 110275611 B CN110275611 B CN 110275611B
- Authority
- CN
- China
- Prior art keywords
- mode
- parameter
- icon
- control icon
- gesture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/10—Intensity circuits
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种参数调节方法、装置和电子设备。方法包括：获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
Description
技术领域
本申请涉及信息处理技术，尤其涉及一种参数调节方法、装置和电子设备。
背景技术
现有的终端设备中，用户如果要对终端设备的音量、亮度等参数进行调节时，需要用户对触摸屏进行操作或对终端设备外壳上的实体按键进行操作，因此，参数的调节需要用户与终端设备接触的手动调节。对于想轻松地、快捷地调节终端设备的参数的用户来说，手动调节不是很方便，尤其在用户戴手套、手湿或手脏的情况下，要么无法对终端操作进行操作，要么产生误操作，从而影响用户的终端使用体验。
发明内容
有鉴于此，本申请实施例提供一种参数调节方法、装置和电子设备。
本申请实施例的技术方案是这样实现的：
本申请实施例提供的参数调节方法，包括：
获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；
获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
本申请实施例提供的参数调节装置，包括：
匹配单元，用于获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；
调节单元，用于获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
本申请实施例提供的电子设备，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；其中，所述处理器用于运行所述计算机程序时，执行上述参数调节方法。
本申请实施例中，当根据操作体的手势轮廓确定待调节的参数对应的目标控制图标，将对目标控制图标对应的参数作为待条件参数，对参数进行调整，从而在操作体不接触电子设备的情况下，能够对电子设备的参数进行调整，减少无操作，并提高用户体验。
附图说明
图1为本申请实施例提供的参数调节方法的流程示意图一；
图2为本申请实施例提供的手势轮廓示例一；
图3为本申请实施例提供的手势轮廓示例二；
图4为本申请实施例提供的手势轮廓示例三；
图5为本申请实施例提供的参数调节方法的流程示意图二；
图6为本申请实施例提供的手势轮廓示例四；
图7为本申请实施例提供的手势提示场景示意图；
图8为本申请实施例提供的参数调节方法的流程示意图三；
图9为本申请实施例提供的运动轨迹示意图一；
图10为本申请实施例提供的运动轨迹示意图二；
图11为本申请实施例参数调节装置的结构示意图；
图12为本申请实施例的电子设备的结构示意图。
具体实施方式
以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所提供的实施例仅仅用以解释本申请，并不用于限定本申请。另外，以下所提供的实施例是用于实施本申请的部分实施例，而非提供实施本申请的全部实施例，在不冲突的情况下，本申请实施例记载的技术方案可以任意组合的方式实施。
在本申请的各种实施例中：获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
本申请实施例提供一种参数调节方法，该方法应用于电子设备，电子设备中的各功能模块可以由电子设备(如终端设备、服务器或服务器集群)的硬件资源，如处理器等计算资源、通信资源(如用于支持实现光缆、蜂窝等各种方式通信)协同实现。
当然，本申请实施例不局限于提供为方法和硬件，还可有多种实现方式，例如提供为存储介质(存储有用于执行本申请实施例提供的参数调节方法的指令)。
本申请实施例提供一种参数调节方法，如图1所示，该参数调节方法包括：
步骤101、获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标。
电子设备可以是任何具有信息处理能力的电子设备，在一种实施例中，电子设备可以是智能终端，例如可以是移动电话(手机)、iPad、笔记本、AR眼镜、AR投影仪等具有信息处理能力的移动终端。在另一种实施例中，电子设备还可以是不便移动的具有计算功能的终端设备，比如台式计算机、桌面电脑等。
电子设备中安装有参数调节应用程序，参数调节应用程序可获取图像传感器采集的图像，并根据所采集的图像对终端上的音量、亮度、文字大小等参数进行调节，参数调节应用程序可作为电子设备的系统层的应用程序。
电子设备中还可安装有图像处理应用程序，比如：增强现实(Augmented Reality，AR)应用程序、游戏应用程序等。图像处理应用程序能够将显示数据转换为图像并输出在显示屏幕上。其中，显示数据中对象可包括：桌子、椅子、树、人等不同的对象，不同的对象为不同的显示元素，以构成显示数据中的画面。
参数调节应用程序与图像处理应用程序之间设置有接口，通过所设置的接口控制图像处理应用程序的音量、亮度、文字大小等参数，以对图像输出程序的输出效果进行控制。
电子设备获取图像传感器所采集的图像，并对所采集的图像进行图像识别，判断图像中是否包括操作体例如手。如果包括操作体，识别操作体的手势轮廓。其中，可通过参数调节应用程序中所集成的手势识别系统识别操作体的手势轮廓。手势识别系统可获取识别操作体的手势的关键点，基于所识别的关键点确定操作体的手势轮廓。
当图像传感器为未启动状态时，可通过语音、按键等方式启动图像传感器，使得图像传感器处于工作状态以采集图像。
在实际应用中，可根据图像传感器采集的图像确定操作体的手势在设定的触发时间段例如：1秒未变化时，识别该手势的手势轮廓，否则不识别手势的手势轮廓。
这里，所获取的操作体的手势轮廓可为一个操作体的手势轮廓，也可为两个操作体的手势构成的手势轮廓。
在一示例中，操作体的手势可如图2所示，操作体的手势轮廓如图2中的轮廓201所示。在又一示例中，操作体的手势可如图3所示，操作体的手势轮廓如图3中的轮廓301所示。在再一示例中，操作体的手势可如图4所示，操作体的手势轮廓如图4中的轮廓401所示。
确定操作体的手势轮廓后，可将操作体的手势轮廓与电子设备中设置多个控制图标中的各控制图标分别进行比较，确定多个控制图标中与操作体的手势轮廓最为接近的控制图标为与操作体的手势轮廓匹配的目标控制图标。
电子设备中可根据不同的参数设置不同的控制图标，且各控制图标分别对应不同的参数。比如：控制图标包括图标1：
图标2：
和图标3：
其中，图标1对应的参数为音量，图标2对应的参数为亮度，图标3对应的参数为文字大小。
以图2所示的手势轮廓为例，将图2中的轮廓201分别和图标1、图标2和图标3进行比较，则图标1为轮廓201对应的目标控制图标。以图3所示的手势轮廓为例，将图3中的轮廓301分别和图标1、图标2和图标3进行比较，则图标2为轮廓301对应的目标控制图标。以图4所示的手势轮廓为例，将图4中的轮廓401分别和图标1、图标2和图标3进行比较，则图标5为轮廓401对应的目标控制图标。
这里，手势轮廓中不同操作体的手势可为作为手势轮廓中的不同的组成部分，各组成部分分别对应控制图标中不同的元素。
比如：对于音量图标：
对于当手势轮廓包括左手和右手两个手的手势时，可将左手的手势对应音量图标中的元素
可将由的手势对应音量图标中的元素
在一实施例中，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标，包括：确定所述手势轮廓与所述至少一个控制图标之间的相似度；将满足调整条件的相似度对应的控制图标作为所述目标控制图标。
在获取操作体的手势轮廓后，分别确定手势轮廓与多个控制图标中每个控制图标之间的相似度，并将各相似度与调整条件进行匹配，将满足调整条件的相似度对应的控制图标作为目标控制图标。调整条件可为：相似度大于第一相似度阈值且相似度最大。
比如：控制图标包括图标1、图标2和图标3。操作体的手势轮廓与图标1的相似度为0.8，操作体的手势轮廓与图标1的相似度为0.3，操作体的手势轮廓与图标1的相似度为0.1，且第一相似度阈值为0.7，则确定操作体的手势轮廓对应的目标控制图标为图标1。
又比如：控制图标包括图标1、图标2和图标3。操作体的手势轮廓与图标1的相似度为0.8，操作体的手势轮廓与图标1的相似度为0.75，操作体的手势轮廓与图标1的相似度为0.1，且第一相似度阈值为0.7，则确定操作体的手势轮廓对应的目标控制图标为图标1。
在本申请实施例中，相似度大于第一相似度阈值且相似度最大为调整条件的一种示例，并不排除调整条件的内容为其他内容，调整条件的内容可根据实际需求进行设置。
步骤102、获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
在确定目标控制图标后，确定目标控制图标对应的参数，以目标控制图标对应的参数为待调节的参数，对目标控制图标对应的参数进行调节。
在一示例中，当操作体的手势轮廓为图2所示的轮廓201时，确定目标控制图标
对应的参数为音量，对电子设备的音量进行调节，调节音量的大小。在又一示例中，当操作体的手势轮廓为图3所示的轮廓301时，确定目标控制图标
对应的参数为亮度，对电子设备的亮度进行调节，调节亮度的大小。在再一示例中，当操作体的手势轮廓为图4所示的轮廓401时，确定目标控制图标
对应的参数为字体大小，对电子设备的字体大小进行调节。
这里，在对参数进行调节时，可首先根据运动轨迹确定参数的参数模式，对参数模式下的参数进行调节。
在对目标控制图标对应的参数进行调节时，根据操作体的运动轨迹对参数进行调节。在实际应用中，在确定目标控制图标对应的参数后，可在电子设备的显示屏幕上输出目标控制图标以提示用户当前对目标控制图标对应的参数进行调节，以方便用户获悉已确定待调节的参数，用户可以开始进行运动轨迹的操作。电子设备采集操作体的图像，识别所采集的图标中操作体的运动轨迹，可将连续多帧图像中的操作体进行比较，从而确定操作体的运动轨迹。
比如，当调节的参数为音量时，根据操作体的运动轨迹将音量调大或调小。比如：当两个操作体之间的距离增大时，将音量调大，当两个操作体之间的距离减小时，将音量调小。
在本申请实施例中，对于运动轨迹和参数的调节方式之间的对应关系，可根据用户实际需求进行设置，本申请实施例对此不进行任何限定。
采用本申请实施例提供的参数调节方法，用户在电子设备的图像传感器的采集范围内执行与目标控制图标对应的手势，电子设备根据图像传感器所采集的图像确定手势轮廓，并将手势轮廓与各控制图标进行比较，确定目标控制图标，并根据用户的手的运动轨迹对目标控制图标对应的参数进行调整。
本申请实施例中，当根据操作体的手势轮廓确定待调节的参数对应的目标控制图标，将对目标控制图标对应的参数作为待条件参数，对参数进行调整，从而在操作体不接触电子设备的情况下，能够对电子设备的参数进行调整，减少无操作，并提高用户体验。
本申请实施例提供一种参数调节方法，如图5所示，包括：
步骤501、获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较。
这里，在确定操作体的手势轮廓后，将操作体的手势轮廓与电子设备中设置多个控制图标中的各控制图标分别进行比较，以确定目标控制图标时，判断在设定的时间段内是否确定出目标控制图标时，如果未在设定的时间段内确定出目标控制图标，执行步骤502。
步骤502、当在设定的时间阈值内未确定与所述手势轮廓匹配的控制图标时，确定所述至少一个控制图标中的候选图标。
所述候选图标为与所述手势轮廓之间的相似度满足提示条件的控制图标；
当在步骤501中确定操作体的手势轮廓后，并将操作体的手势轮廓与电子设备中设置多个控制图标中的各控制图标分别进行比较，以确定目标控制图标时，在设定的时间段内未确定目标控制图标时，可确定用户有调节参数的需求，但基于对调节的手势并未掌握好，此时，可根据手势轮廓确定满足提示调节的候选图标。其中，候选图标表征根据手势轮廓与各控制图标的相似度推断出的用户可能调节的参数对应的控制图标。
候选图标可为一个或多个，候选图标的数量可基于提示条件来确定。提示条件可为：相似度介于第一相似度阈值与第二相似度阈值之间，第一相似度阈值大于第二相似度阈值。提示条件也可为：与所述手势轮廓之间的相似度最大且相似度介于第一相似度阈值与第二相似度阈值之间，第一相似度阈值大于第二相似度阈值。实际应用中，提示条件可根据实际需求进行设置。
例如，当手势如图6所示时，左手握拳，右手伸直，手势轮廓如图6中的轮廓601，此时，轮廓601与图标1
之间的相似度大于第二相似度阈值，但轮廓601与图标1之间的相似度并未大于第一相似度阈值，即轮廓601并未达到调整条件，则将图标1作为轮廓601的候选图标。
步骤503、输出所述候选图标对应的操作手势的虚拟数据，所述虚拟数据用于操作提示。
在确定候选图标后，获取候选图标对应的操作手势的虚拟数据，并将所获取的虚拟数据输出至显示屏幕上，此时，在显示屏幕上显示候选图标对应的操作手势。
这里，各控制图标都设置有对应的操作手势的虚拟数据，在线输出虚拟数据时，可显示各控制图标对应的操作手势，比如：图标1
对应的操作手势如图2中的操作手势：左手握拳，右手弯曲。又比如：图标2
对应的操作手势如图3中的操作手势：左手张开，右手握拳。又比如：图标3
对应的操作手势如图4中的操作手势：两手张开且指尖接触，手掌分离。
当用户的手势为图6所示的手势，候选图标为图标1
时，电子设备为AR眼镜时，候选图标对应的操作手势的提示可如图7所示，用户的手势701为左手握拳，右手伸直，在AR眼镜702的显示屏幕上输出候选图标
对应的操作手势的虚拟数据，显示屏幕上的显示如703所示，操作手势为左手握拳，右手弯曲。
在实际应用中，可当候选图标包括多个图标时，可在显示界面上输出的虚拟数据包括多个候选图标对应的操作手势。
步骤504、确定与所述手势轮廓匹配的控制图标为目标控制图标。
步骤505、获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
步骤501、步骤504以及步骤505的描述参见上述步骤101和步骤102的描述。
在一实施例中，在步骤502当确定与所述手势轮廓匹配的控制图标为目标控制图标之后，停止输出所述候选图标对应的操作手势的虚拟数据，在提示区域输出所述目标控制图标。
这里，当向用户输出候选图标的操作手势的虚拟数据后，并在操作体的手势轮廓满足调整条件确定目标控制图标后，停止输出候选图标的操作手势的虚拟数据，并在显示界面上输出目标控制图标，以提示用户当前以确定目标控制图标，即确定了待调节的参数。
在本申请实施例中，当电子设备在设定的时间段内未确定出目标控制图标时，根据用户的手势确定候选图标，并输出候选图标对应的操作手势的虚拟数据，以提示用户进行手势操作所参考的手势，从而提高用户体验，实现参数的精准调节。
在一实施例中，如图8所示，步骤102包括：
步骤1021、根据所述运动轨迹确定所述目标控制图标对应的参数的参数模式和调节方式。
在对参数进行调节时，根据运动轨迹的作用将运动轨迹分为两段轨迹：用于确定参数模式的模式控制轨迹和用于确定调节方式的方式控制轨迹，从而根据模式控制轨迹确定参数模式并根据方式控制轨迹确定调节方式，参数模式用于控制所调节的参数的模式，调节方式用户控制所调节的参数的大小。
这里，模式控制轨迹和方式控制轨迹可为不同的运动方式，比如：模式控制轨迹为顺时针或逆时针的旋转，方式控制轨迹可为手势的移动方向。再比如：模式控制轨迹为移动方向，方式控制轨迹可为顺时针或逆时针的旋转方向。本申请实施例对模式控制轨迹和方式控制轨迹的运动方式的不同不进行任何的限定。
在一示例中，当参数为音量时，音量的参数模式(也可称为音量模式)包括：媒体音量、通话音量、来电音量等模式，其中，媒体音量为电子设备所播放的音频、视频等多媒体的音量，通话音量为电子设备在通话过程中的音量，来电音量为电子设备被呼叫时播放的来电铃声的音量。
在又一示例中，当参数为文字大小时，文字的参数模式(文字模式)包括系统文字和应用文字，其中，系统文字为电子设备的系统中的文字，应用文字为具体的应用中的显示界面上的文字。
在实际应用中，运动轨迹可仅包括方式控制轨迹，此时，获取默认的参数模式。
在一实施例中，步骤1021中根据所述运动轨迹确定所述目标控制图标对应的参数模式，包括：确定所述运动轨迹是否包括模式控制轨迹；确定所述目标控制图标对应的参数的当前调节模式；当所述运动轨迹包括所述模式控制轨迹，根据所述模式控制轨迹和所述当前调节模式确定目标调节模式，确定所述目标调节模式对应的参数模式；当所述运动轨迹不包括所述模式控制轨迹，确定所述当前调节模式对应的参数模式。
电子设备中可设置体现模式控制轨迹的运动方式的参考模式控制轨迹，电子设备将所获取的运动轨迹与参考模式控制轨迹进行匹配，将与参考模式控制轨迹匹配的运动轨迹分段作为模式控制轨迹。
当操作体的运动轨迹包括模式控制轨迹时，根据模式控制轨迹与当前调节模式来确定目标调节模式。
这里，不同的调节模式对应不同的参数模式，比如：媒体音量调节模式对应的音量模式为多媒体音量，通话音量调节模式对应的音量模式为通话音量，来电音量调节模式对应的音量模式为来电音量。
这里，当模式控制轨迹的运动方式为旋转时，当操作体的手势如图9所示，且右手根据方向901进行旋转时，根据右手旋转的方向以及次数来确定目标参数调节模式，比如：右手逆时针旋转一次时，切换至上一个参数调节模式，当右手顺时针旋转一次时，切换至下一个参数调节模式。
本申请实施例中，可设置参数调节模式列表，在参数调节模式列表中，对各参数调节模式列表进行排序，根据排序来确定各参数调节模式的上一个参数调节模式和下一个参数调节模式。
在一示例中，当参数为音量，当前的参数调节模式为多媒体音量调节模式，各参数调节模式的顺序依次为：多媒体音量调节模式->通话音量调节模式->来电音量调节模式->多媒体音量调节模式。当操作体的运动轨迹为顺时针旋转两次时，则目标参数调节模式为来电音量调节模式。此时，音量模式为来电音量。
需要说明的是，在本申请实施例中，当前参数调节模式可为上一次调节时的参数调节模式，比如：上一次调节的音量为多媒体音量，则当前的参数调节模式为多媒体音量调节模式。当前参数调节模式也可根据电子设备的状态来确定，比如：电子设备为通话状态，则当前参数调节模式为通话参数调节模式，又比如：电子设备为来电状态，则当前参数调节模式为来电参数调节模式。
在一实施例中，步骤1021中根据所述运动轨迹确定调节方式，包括：确定所述运动轨迹所包括的方式控制轨迹的运动方向；根据所述运动方向确定调节方式。
电子设备中可设置体现方式控制轨迹的运动方式的参考方式控制轨迹，电子设备将所获取的运动轨迹与参考方式控制轨迹进行匹配，将与参考方式控制轨迹匹配的运动轨迹分段作为方式控制轨迹。
确定运动轨迹中的方式控制轨迹时，根据方式控制轨迹确定参数的调节方式。这里，确定方式控制轨迹的运动方向，确定参数的调节方式。
在一实施例中，所述根据所述运动方向确定调节方式，包括：
当所述运动方向为第一方向时，确定所述调节方式为第一调节方式，所述第一调节方式为增大所述参数的值；当所述运动方向为第二方向时，确定所述调节方式为第二调节方式，所述第二调节方式为减小所述参数的值。
所述第二方向与所述第一方向不同。比如：第一方向为向上、第二方向为向下，又比如：第一反向为向右，第二方向为向左。
第一方向和第二方向可根据目标控制图标对应的参数发生变化时的变化来确定。比如：目标控制图标为音量图标时，随着音量的增大，音量图标的元素
会增大，目标控制图标的轮廓向右移动，反之，随着音量的减小，音量图标的元素
会减小，目标控制图标的轮廓向左移动，则可设置第一方向为向右移动，第二方向为向左移动。又比如：目标控制图标为亮度图标时，随着亮度的增大，亮度图标的会增大，元素
中的细线会增多，反之，随着亮度的减小，亮度图标的元素
中的细线减小，则可设置第一方向为向顺时针方向移动，第二方向为逆时针方向移动。
当方式控制轨迹的运动方式为向第一方向移动，则确定调节方式为增大所述参数的值的第一调节方式。当方式控制轨迹的运动方式为向第二方向移动，则确定调节方式为减小所述参数的值的第二调节方式。
这里，当调节的参数为音量，第一方向为向右，第二方向为向左时，当运动轨迹的运动方式如图10所示，当右手1001向方向1002移动时，则确定的调节方式为第一调节方式，当右手1001向方向1003移动时，则确定的调节方式为第二调节方式。
步骤1022、根据所述参数模式和所述调节方式对所述目标控制图标对应的参数进行调节。
在确定参数模式和调节方式后，对目标控制图标对应的参数进行调整。比如：当目标图标对应的参数为音量，确定的参数模式为多媒体音量，调节方式为第一调节方式时，增大多媒体音量的音量大小。参数调节的大小可根据运动轨迹的运动幅度来确定，比如：在调节音量时，右手向右移动1-5cm，则提高一个等级。
这里，可根据摄像头的视场角来确定运动轨迹的可移动距离，并将可移动距离与参数的可调节范围进行对应，并进行相同等级的划分。比如：以音量的调节为例，当可移动距离为40cm时，音量等级为10个等级，则移动幅度为4cm为一个等级，当右手向右移动4cm时，音量等级增加一个等级；当右手向右移动8cm时，音量等级增加两个等级；当右手向左移动8cm时，音量等级降低一个等级。其中对于移动的距离可设定的范围，比如：当向右移动2-4cm时，音量等级增加一个等级。
在本申请实施例中，运动幅度与参数调节的大小可根据实际需求进行设置。本申请实施例并不进行任何的限制。
在本申请实施例中，可根据操作体的运动轨迹来确定参数模式，对所确定的参数模式下的参数进行调节，从而能够根据操作体的运动轨迹在一个参数的多个参数模式之间进行切换，不需要用户通过电子设备的页面来设置所调节的参数模式，提高了电子设备的操作方便性，提高用户体验。
下面，以调节的参数为音量，电子设备为AR眼镜为例，对本申请实施例提供的参数调节方法进行进一步说明。
相关技术中，调节音量的调节方案包括以下两种：
方案一：物理音量按键。
方案一存在缺点：如果用户想调整通话音量，而非媒体音量，需要先通过其他操作(如手势点击选择为通话音量调整模式)更改调整模式，再通过音量键调整。不利于戴手套(误操作)或手湿、手脏(破坏设备)的使用者使用。
方案二：虚拟按钮方式。
方案二存在缺点：如系统中加入按钮，通过手势点击按钮来增加/减少音量。这种方式操作比较繁琐。
为解决上述方案一和方案二存在的技术缺点，本申请实施例提供的调节音量的方案为方案三。
方案三：非接触式的音量调整。包括：手势初始状态、音量模式选择、音量大小调节和完成音量调节四个阶段。
阶段一、手势初始状态
为了让手势识别系统识别到音量调节状态，也是为了避免正常使用过程中的手势误识别，需要如图2所示的起始动作保持一段时间，如1秒，这里，图2所示的起始动作为：左手握拳，右手微弯。当手势识别系统识别到图2的手势后，在显示界面上输出提示内容给与用户提示，提示内容为音量图标
此时，用户的眼前显示出音量图标，电子设备进入阶段二。
阶段二、音量模式选择
音量的音量模式分为媒体音量、通话音量、来电音量，在进行音量大小调节之前，需先选择参数的参数模式，当参数为音量时，当参数模式也可称为音量模式。在音量调节模式为媒体模式时，音量的音量模式为媒体音量；在音量调节模式为通话模式时，音量的音量模式为通话音量；在音量调节模式为来电模式时，音量的音量模式为来电音量。
当完成上述阶段一后，通过图9所示的右手的旋转与恢复来选择前一个/后一个音量调节模式。具体的，右手先逆时针旋转90度再恢复，表示选择前一种音量调节模式；如果先顺时针旋转90度再恢复，表示选择后一种音量调节模式。
这里，当前音量调节模式可默认为音媒体音量调节模式；通话时默认的当前音量调节模式可为通话音量调节模式；来电过程中默认的当前音量调节模式为来电音量调节模式。如果所需的调节模式和当前音量模式相同，可直接跳过阶段二的模式选择，直接进行阶段三的音量大小调节。
阶段三、音量大小调节
选择好音量模式后，进行音量大小调节。操作体中，左手保持不动，右手左右水平方向移动，表示调节的音量大小。移动到最左边与左手相碰时表示音量为0，移动到最右端表示音量最大。
右手的最右端的距离不宜过长，结合双手到AR眼镜的相机的距离和AR眼镜的相机的FOV，可为40厘米左右。右手距离左手的初始距离应在最左端到最右端之间(0-40厘米)。当右手水平移动一定距离后(如2厘米)，再进行当前模式下的音量大小设置。
需要说明的是，在阶段三的调节过程中可随时回到阶段二根据模式控制轨迹的手势旋转并恢复右手来切换音量调节模式的选择。
阶段四、完成音量调节
音量调节完成后，松开左手，或双手同时移出手势识别区域即可。
采用本申请实施例提供的参数调节方法对AR眼镜的音量进行调整时，可分别通过不同的操作体表示控制图标中不同的元素，比如：左手握拳，表示喇叭，右手微弯，表示音波，从而模仿音量图标。用该手势调节音量时，左手不动，右手左右水平方向移动，可表示调节的音量大小，移动到最左边与左手相碰时可表示音量为0，移动到最右端可表示音量最大。另外，调整媒体、通话、来电等不同音量模式下的音量时，右手先逆时针转90度再恢复，或者顺时针转90度再恢复，以此来在不同音量调节模式间切换，以调节不同音量调节模式对应的音量模式下的音量。
本申请实施例提供的参数调节方法具有以下技术效果：
1、手势操作简单、自然，和电子设备中的控制图标相关联，易于理解。
2、不需要点击物理按键，对于戴手套的用户来说不会出现误触碰的情况。
3、不需要触碰设备，在手湿、手脏的情况下也能调整音量，不会破坏AR眼镜设备。
为实现本申请实施例的方法，本申请实施例提供一种参数调节装置1100，应用于电子设备，该参数调节装置所包括的各单元、以及各单元所包括的各模块，可以通过电子设备中的处理器来实现；当然也可通过具体的逻辑电路实现；在实施的过程中，处理器可以为中央处理器(CPU，Central Processing Unit)、微处理器(MPU，Micro Processor Unit)、数字信号处理器(DSP，Digital Signal Processor)或现场可编程门阵列(FPGA，Field-Programmable Gate Array)等。
如图11所示，该装置1100包括：匹配单元1101和调节单元1102，其中，
匹配单元1101，用于获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；
调节单元1102，用于获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
在一实施例中，匹配单元1101，还用于：
确定所述手势轮廓与所述至少一个控制图标之间的相似度；
将满足调整条件的相似度对应的控制图标作为所述目标控制图标。
在一实施例中，装置1100还包括：提示单元，用于：
当在设定的时间阈值内未确定与所述手势轮廓匹配的控制图标时，确定所述至少一个控制图标中的候选图标，所述候选图标为与所述手势轮廓之间的相似度满足提示条件的控制图标；
输出所述候选图标对应的操作手势的虚拟数据，所述虚拟数据用于操作提示。
在一实施例中，提示单元，还用于：
当确定与所述手势轮廓匹配的控制图标为目标控制图标，停止输出所述候选图标对应的操作手势的虚拟数据，在提示区域输出所述目标控制图标。
在一实施例中，调节单元1102，还用于：
根据所述运动轨迹确定所述目标控制图标对应的参数的参数模式和调节方式；
根据所述参数模式和所述调节方式对所述目标控制图标对应的参数进行调节。
在一实施例中，调节单元1102，还用于：
确定所述运动轨迹是否包括模式控制轨迹；
确定所述目标控制图标对应的参数的当前参数调节模式；
当所述运动轨迹包括所述模式控制轨迹，根据所述模式控制轨迹和所述当前参数调节模式确定目标参数调节模式，确定所述目标参数调节模式对应的参数模式；
当所述运动轨迹不包括所述模式控制轨迹，确定所述当前参数调节模式对应的参数模式。
在一实施例中，调节单元1102，还用于：
确定所述运动轨迹所包括的方式控制轨迹的运动方向；
根据所述运动方向确定调节方式。
在一实施例中，调节单元1102，还用于：
当所述运动方向为第一方向时，确定所述调节方式为第一调节方式，所述第一调节方式为增大所述参数的值；
当所述运动方向为第二方向时，确定所述调节方式为第二调节方式，所述第二调节方式为减小所述参数的值，所述第二方向与所述第一方向不同。
需要说明的是，装置实施例的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果。对于本申请装置实施例中未披露的技术细节，请参照本申请方法实施例的描述而理解。
本申请实施例提供一种电子设备，图12为本申请实施例电子设备的组成结构示意图，如图12所示，电子设备1200包括：一个处理器1201、至少一个通信总线1202、用户接口1203、至少一个外部通信接口1204和存储器1205。其中，通信总线1202配置为实现这些组件之间的连接通信。其中，用户接口1203可以包括与用户交互的触摸接口、按键开关等，外部通信接口1204可以包括标准的有线接口和无线接口。电子设备1200还可包括有摄像头等图像传感器。
其中，所述处理器1201，配置为执行存储器中存储的计算机程序，以实现以下步骤：
获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；
获取所述操作体的运动轨迹，根据所述运动轨迹对所述目标控制图标对应的参数进行调节。
相应地，本申请实施例再提供一种存储介质，即计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述的参数调节方法的步骤。
以上电子设备和计算机可读存储介质实施例的描述，与上述方法实施例的描述是类似的，具有同方法实施例相似的有益效果。对于本申请电子设备和计算机可读存储介质实施例中未披露的技术细节，请参照本申请方法实施例的描述而理解。
本申请实施例中，如果以软件功能模块的形式实现上述的参数调节方法，并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read OnlyMemory)、磁碟或者光盘等各种可以存储程序代码的介质。这样，本申请实施例不限制于任何特定的硬件和软件结合。
应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解，在本申请的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元；既可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外，在本申请各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(Read Only Memory，ROM)、磁碟或者光盘等各种可以存储程序代码的介质。
或者，本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。
Claims (10)
1.一种参数调节方法，包括：
获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；
获取所述操作体的运动轨迹，根据所述运动轨迹确定所述目标控制图标对应的参数的参数模式，并对所述参数模式下的参数进行调节，其中，所述参数模式包括至少以下之一：音量的参数模式、文字的参数模式。
2.根据权利要求1所述的方法，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标，包括：
确定所述手势轮廓与所述至少一个控制图标之间的相似度；
将满足调整条件的相似度对应的控制图标作为所述目标控制图标。
3.根据权利要求1或2所述的方法，所述方法还包括：
当在设定的时间阈值内未确定与所述手势轮廓匹配的控制图标时，确定所述至少一个控制图标中的候选图标，所述候选图标为与所述手势轮廓之间的相似度满足提示条件的控制图标；
输出所述候选图标对应的操作手势的虚拟数据，所述虚拟数据用于操作提示。
4.根据权利要求3所述的方法，所述方法还包括：
当确定与所述手势轮廓匹配的控制图标为目标控制图标，停止输出所述候选图标对应的操作手势的虚拟数据，在提示区域输出所述目标控制图标。
5.根据权利要求1所述的方法，所述方法还包括：
根据所述运动轨迹确定所述目标控制图标对应的参数的参数模式和调节方式；
根据所述参数模式和所述调节方式对所述目标控制图标对应的参数进行调节。
6.根据权利要求5所述的方法，所述根据所述运动轨迹确定所述目标控制图标对应的参数模式，包括：
确定所述运动轨迹是否包括模式控制轨迹；
确定所述目标控制图标对应的参数的当前参数调节模式；
当所述运动轨迹包括所述模式控制轨迹，根据所述模式控制轨迹和所述当前参数调节模式确定目标参数调节模式，确定所述目标参数调节模式对应的参数模式；
当所述运动轨迹不包括所述模式控制轨迹，确定所述当前参数调节模式对应的参数模式。
7.根据权利要求5所述的方法，所述根据所述运动轨迹确定调节方式，包括：
确定所述运动轨迹所包括的方式控制轨迹的运动方向；
根据所述运动方向确定调节方式。
8.根据权利要求7所述的方法，所述根据所述运动方向确定调节方式，包括：
当所述运动方向为第一方向时，确定所述调节方式为第一调节方式，所述第一调节方式为增大所述参数的值；
当所述运动方向为第二方向时，确定所述调节方式为第二调节方式，所述第二调节方式为减小所述参数的值，所述第二方向与所述第一方向不同。
9.一种参数调节装置，所述装置包括：
匹配单元，用于获取操作体的手势轮廓，将所述手势轮廓与至少一个控制图标进行比较，确定与所述手势轮廓匹配的控制图标为目标控制图标；
调节单元，用于获取所述操作体的运动轨迹，根据所述运动轨迹确定所述目标控制图标对应的参数的参数模式，并对所述参数模式下的参数进行调节，其中，所述参数模式包括至少以下之一：音量的参数模式、文字的参数模式。
10.一种电子设备，包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器；其中，所述处理器用于运行所述计算机程序时，执行权利要求1至8任一项所述参数调节方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910447096.9A CN110275611B (zh) | 2019-05-27 | 2019-05-27 | 一种参数调节方法、装置和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910447096.9A CN110275611B (zh) | 2019-05-27 | 2019-05-27 | 一种参数调节方法、装置和电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110275611A CN110275611A (zh) | 2019-09-24 |
| CN110275611B true CN110275611B (zh) | 2023-02-17 |
Family
ID=67960244
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910447096.9A Active CN110275611B (zh) | 2019-05-27 | 2019-05-27 | 一种参数调节方法、装置和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110275611B (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111857346B (zh) * | 2020-07-23 | 2024-07-16 | 纯米科技(上海)股份有限公司 | 手势控制方法及装置 |
| CN111857345A (zh) * | 2020-07-23 | 2020-10-30 | 上海纯米电子科技有限公司 | 基于手势进行控制的方法及装置 |
| CN112822471B (zh) * | 2020-12-30 | 2023-02-03 | 广州富港生活智能科技有限公司 | 投影控制方法、智能机器人及相关产品 |
| CN113138663B (zh) * | 2021-03-29 | 2024-09-13 | 北京小米移动软件有限公司 | 设备调节方法、设备调节装置、电子设备及存储介质 |
| CN113269075B (zh) * | 2021-05-19 | 2024-08-23 | 广州繁星互娱信息科技有限公司 | 手势轨迹识别方法和装置、存储介质及电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103577075A (zh) * | 2013-11-11 | 2014-02-12 | 惠州Tcl移动通信有限公司 | 一种电子设备的参数调节方法和装置 |
| CN104636064A (zh) * | 2015-01-23 | 2015-05-20 | 小米科技有限责任公司 | 手势生成方法及装置 |
| CN104898822A (zh) * | 2014-03-03 | 2015-09-09 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
| CN106559570A (zh) * | 2016-11-18 | 2017-04-05 | 维沃移动通信有限公司 | 一种音量调节方法及移动终端 |
| CN107918490A (zh) * | 2017-11-22 | 2018-04-17 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
| CN109189223A (zh) * | 2017-09-05 | 2019-01-11 | 南京知行新能源汽车技术开发有限公司 | 用户界面控制的装置、系统及方法 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7519223B2 (en) * | 2004-06-28 | 2009-04-14 | Microsoft Corporation | Recognizing gestures and using gestures for interacting with software applications |
| US8845431B2 (en) * | 2011-05-31 | 2014-09-30 | Microsoft Corporation | Shape trace gesturing |
| EP2711805A1 (en) * | 2012-09-25 | 2014-03-26 | Advanced Digital Broadcast S.A. | Method for handling a gesture-based user interface |
-
2019
- 2019-05-27 CN CN201910447096.9A patent/CN110275611B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103577075A (zh) * | 2013-11-11 | 2014-02-12 | 惠州Tcl移动通信有限公司 | 一种电子设备的参数调节方法和装置 |
| CN104898822A (zh) * | 2014-03-03 | 2015-09-09 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
| CN104636064A (zh) * | 2015-01-23 | 2015-05-20 | 小米科技有限责任公司 | 手势生成方法及装置 |
| CN106559570A (zh) * | 2016-11-18 | 2017-04-05 | 维沃移动通信有限公司 | 一种音量调节方法及移动终端 |
| CN109189223A (zh) * | 2017-09-05 | 2019-01-11 | 南京知行新能源汽车技术开发有限公司 | 用户界面控制的装置、系统及方法 |
| CN107918490A (zh) * | 2017-11-22 | 2018-04-17 | 联想(北京)有限公司 | 一种控制方法及电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110275611A (zh) | 2019-09-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110275611B (zh) | 一种参数调节方法、装置和电子设备 | |
| JP7483084B2 (ja) | ユーザインタフェースカメラ効果 | |
| US12118201B2 (en) | Devices, methods, and graphical user interfaces for a unified annotation layer for annotating content displayed on a device | |
| US11669985B2 (en) | Displaying and editing images with depth information | |
| US11468625B2 (en) | User interfaces for simulated depth effects | |
| EP3661187A1 (en) | Photography method and mobile terminal | |
| EP3752904B1 (en) | Avatar integration with multiple applications | |
| US20170163872A1 (en) | Electronic device and method for controlling image display | |
| WO2020042727A1 (zh) | 一种应用场景的交互方法和移动终端以及存储介质 | |
| KR101944112B1 (ko) | 사용자 저작 스티커를 생성하는 방법 및 장치, 사용자 저작 스티커 공유 시스템 | |
| JP6165485B2 (ja) | 携帯端末向けａｒジェスチャユーザインタフェースシステム | |
| WO2014200734A1 (en) | Device, method, and graphical user interface for switching between camera interfaces | |
| US11979656B2 (en) | Devices, methods, and graphical user interfaces for assisted photo- taking | |
| WO2020037923A1 (zh) | 图像合成方法和装置 | |
| US20230017694A1 (en) | Method and apparatus for controlling interface display, device, and storage medium | |
| WO2020019664A1 (zh) | 基于人脸的形变图像生成方法和装置 | |
| CN107172347B (zh) | 一种拍照方法及终端 | |
| WO2015181159A1 (en) | Methods and systems for touch input | |
| US20230244379A1 (en) | Key function execution method and apparatus, device, and storage medium | |
| WO2022111458A1 (zh) | 图像拍摄方法和装置、电子设备及存储介质 | |
| CN104898880B (zh) | 一种控制方法及电子设备 | |
| CN107450717B (zh) | 一种信息处理方法及穿戴式设备 | |
| WO2014173327A1 (zh) | 一种按钮识别区域的调整方法及装置 | |
| US20160147294A1 (en) | Apparatus and Method for Recognizing Motion in Spatial Interaction | |
| WO2020001015A1 (zh) | 场景操控的方法、装置及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |