CN113592320B - 一种就餐意图识别方法、装置及电子设备 - Google Patents

一种就餐意图识别方法、装置及电子设备 Download PDF

Info

Publication number
CN113592320B
CN113592320B CN202110892299.6A CN202110892299A CN113592320B CN 113592320 B CN113592320 B CN 113592320B CN 202110892299 A CN202110892299 A CN 202110892299A CN 113592320 B CN113592320 B CN 113592320B
Authority
CN
China
Prior art keywords
dining
area
motion information
thermodynamic diagram
hands
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110892299.6A
Other languages
English (en)
Other versions
CN113592320A (zh
Inventor
请求不公布姓名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Century Photosynthesis Technology Co ltd
Original Assignee
Chengdu Century Photosynthesis Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Century Photosynthesis Technology Co ltd filed Critical Chengdu Century Photosynthesis Technology Co ltd
Publication of CN113592320A publication Critical patent/CN113592320A/zh
Application granted granted Critical
Publication of CN113592320B publication Critical patent/CN113592320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06313Resource planning in a project environment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06312Adjustment or analysis of established resource schedule, e.g. resource or task levelling, or dynamic rescheduling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/12Hotels or restaurants
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Educational Administration (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Image Analysis (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供了一种就餐意图识别方法、装置、电子设备及计算机可读存储介质,其中,该方法包括:根据服务区域内预设时间段的运动信息获得服务区域的运动信息热力图;将服务区域内的就餐区域与运动信息热力图作交集处理得到就餐区域热力图;统计设定时间内就餐区域内的人手数量得到人手出现频率信息,根据人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果。通过本发明实施例提供的就餐意图识别方法、装置、电子设备及计算机可读存储介质,有利于餐厅运营方进行各种收台准备的工作安排,根据顾客的就餐意图等级,灵活调节对汤锅的电磁炉的火候控制,提高对就餐顾客的服务质量。

Description

一种就餐意图识别方法、装置及电子设备
技术领域
本发明涉及智能设备技术领域,具体而言,涉及一种就餐意图识别方法、装置、电子设备及计算机可读存储介质。
背景技术
随着生活效率与节奏的提高及人们交际面的扩展,到饭店用餐的人越来越多。
随着科技的发展,越拉越多的系统、装置、线上以及线下服务实现了智能服务。但是在大型餐饮场所,主要依靠真人提供服务,同时客户群体存在流动性大、包含各个年龄段等特点,现有方案较难自动为每个客户提供个性化的服务。
对于餐饮场景,就餐意图是一项十分重要的信息,可以帮助商家进行各种服务收台的准备安排,以及智能调节电磁炉等工作。
发明内容
为解决现有存在的技术问题,本发明实施例提供一种就餐意图识别方法、装置、电子设备及计算机可读存储介质。
第一方面,本发明实施例提供了一种就餐意图识别方法,包括:
根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果。
第二方面,本发明实施例提供了一种就餐意图识别装置,包括:
运动信息模块,用于根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
就餐区域模块,用于将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
意图识别模块,用于统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果。
第三方面,本发明实施例提供了一种电子设备,包括总线、收发器、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述收发器、所述存储器和所述处理器通过所述总线相连,其特征在于,所述计算机程序被所述处理器执行时实现如上所述的就餐意图识别方法中的步骤。
第四方面,本发明实施例提供了计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如上所述的就餐意图识别方法中的步骤。
本发明实施例提供的方法、装置、电子设备及计算机可读存储介质,获得就餐区域热力图信息,统计就餐区域的人手出现频率信息,将就餐区域热力图信息和人手出现频率信息进行综合判定得到到餐厅就餐顾客的就餐意图等级,有利于餐厅运营方进行各种收台准备的工作安排,根据顾客的就餐意图等级,灵活调节对汤锅的电磁炉的火候控制,提高对就餐顾客的服务质量。
附图说明
为了更清楚地说明本发明实施例或背景技术中的技术方案,下面将对本发明实施例或背景技术中所需要使用的附图进行说明。
图1示出了本发明实施例所提供的就餐区域内无人手出现的服务区域的运动信息热力图;
图2示出了本发明实施例所提供的就餐区域内有人手出现的服务区域的运动信息热力图;
图3示出了本发明实施例所提供的一种就餐意图识别方法的流程图;
图4示出了本发明实施例图3中步骤S307所提供的一种就餐意图识别方法的流程图;
图5示出了本发明实施例图3中步骤S309所提供的一种就餐意图识别方法的流程图;
图6示出了本发明实施例所提供的一种就餐意图识别装置的结构示意图;
图7示出了本发明实施例所提供的一种就餐意图识别电子设备的结构示意图。
具体实施方式
所属技术领域的技术人员应当知道,本发明实施例可以实现为方法、装置、电子设备及计算机可读存储介质。因此,本发明实施例可以具体实现为以下形式:完全的硬件、完全的软件(包括固件、驻留软件、微代码等)、硬件和软件结合的形式。此外,在一些实施例中,本发明实施例还可以实现为在一个或多个计算机可读存储介质中的计算机程序产品的形式,该计算机可读存储介质中包含计算机程序代码。
上述计算机可读存储介质可以采用一个或多个计算机可读存储介质的任意组合。计算机可读存储介质包括:电、磁、光、电磁、红外或半导体的系统、装置或器件,或者以上任意的组合。计算机可读存储介质更具体的例子包括:便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、闪存(Flash Memory)、光纤、光盘只读存储器(CD-ROM)、光存储器件、磁存储器件或以上任意组合。在本发明实施例中,计算机可读存储介质可以是任意包含或存储程序的有形介质,该程序可以被指令执行系统、装置、器件使用或与其结合使用。
上述计算机可读存储介质包含的计算机程序代码可以用任意适当的介质传输,包括:无线、电线、光缆、射频(Radio Frequency,RF)或者以上任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言,例如:Java、Smalltalk、C++,还包括常规的过程式程序设计语言,例如:C语言或类似的程序设计语言。计算机程序代码可以完全的在用户计算机上执行、部分的在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行以及完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络,包括:局域网(LAN)或广域网(WAN),可以连接到用户计算机,也可以连接到外部计算机。
下面将参照本发明实施例的方法、装置、电子设备及计算机可读存储介质的流程图和/或方框图描述本发明实施例。
应当理解,流程图和/或方框图的每个方框以及流程图和/或方框图中各方框的组合,都可以由计算机可读程序指令实现。这些计算机可读程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而生产出一种机器,这些计算机可读程序指令通过计算机或其他可编程数据处理装置执行,产生了实现流程图和/或方框图中的方框规定的功能/操作的装置。
也可以将这些计算机可读程序指令存储在能使得计算机或其他可编程数据处理装置以特定方式工作的计算机可读存储介质中。这样,存储在计算机可读存储介质中的指令就产生出一个包括实现流程图和/或方框图中的方框规定的功能/操作的指令装置产品。
也可以将计算机可读程序指令加载到计算机、其他可编程数据处理装置或其他设备上,使得在计算机、其他可编程数据处理装置或其他设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机或其他可编程数据处理装置上执行的指令能够提供实现流程图和/或方框图中的方框规定的功能/操作的过程。
下面结合本发明实施例中的附图对本发明实施例进行描述。
图3示出了本发明实施例所提供的一种就餐意图识别方法的流程图。如图3所示,该方法包括:
步骤S301:获取服务区域的连续多帧图像,得到该图像中像素点变化大的运动信息区域;
本发明实施例中,基于连续多帧的差异信息,可以判定出服务区域内像素点发生较大变化的运动信息区域;
如图1所示,服务区域为就餐卡座范围之内,由沙发和椅子所围成的方形区域。
步骤S303:对运动信息区域的运动信息干扰进行过滤处理,获得相同尺寸的运动信息图;
本发明实施例中,用阈值T0过滤较小运动信息的干扰(如沸腾的汤锅、烟雾)得到与原图尺寸相同的运动信息图M。
步骤S305:对运动信息图的每个像素点进行归一化处理,得到运动信息热力图H;
本发明实施例中,对运动信息图M中的每个像素点进行归一化处理,平滑因子a介于0-1之间,表示运动信息图中运动的强弱。
本发明实施例中,利用平滑因子a,对于近一段时间所有的运动信息图求取运动信息热力图H,求取公式:H=M1*a+M2*a*a+M3*a*a*a……;因此,H亦为像素值0-1之间的运动信息热力图,Mn是指前n张运动信息图,M1是前1张(第1张),M2是前2张,依次类推;各M之间并无因果关系,但会一起生成运动信息热力图H。
步骤S307:将服务区域内的就餐区域与运动信息热力图H作交集处理得到就餐区域热力图;
如图2所示,本发明实施例中,服务区域内的就餐区域即为卡座中央餐桌汤锅范围之内的方形区域。在图2中,就餐区域出现了一只人手信息(hond符号标记)。
本发明实施例中,如图4所示,具体地,步骤S307具体可以包括:
步骤S3071:将服务区域内就餐区域的像素点设为1,服务区域的其他像素点设为0;
步骤S3073:将服务区域与运动信息热力图H进行像素点相乘,得到就餐区域热力图;
步骤S3075:设定映射函数f(H),将就餐区域热力图映射为数值h:
其中,g(x,y)是权重函数,所述就餐区域热力图的运动信息越多,所述h值越大,其中最简单的是求均值,即g(x,y)=1时。
步骤S3077:我们采用一种特征映射,统计大量就餐样本,得到就餐意愿较强时的强就餐意愿平均热力图G,用H与G作逐点相乘并求和取平均值得出h,这样求出的h具备相似度相关性。G是一个数学统计,即在多个就餐意愿较强时得到就餐区域平均热力图:
步骤S309:统计设定时间内就餐区域内的人手数量得到人手出现频率;
本发明实施例中,如图5所示,具体地,统计设定时间内就餐区域内的人手数量得到人手出现频率信息的步骤包括:
步骤S3091:实时进行人手检测,利用iou计算,记录当前时刻在就餐区域中的人手数量;
本发明实施例中,iou即交并比,就餐区域与人手区域的交集除以两者的并集,该参数可以说明靠近的人手离就餐区域的距离。
步骤S3093:统计设定时间内在靠近设定就餐区域距离的人手数量,得到该设定时间内人手出现频率信息;
本发明实施例中,统计一段时间内人手出现的频率:时间T1中人手出现频率f1,时间T2中人手出现频率f2,时间T3中人手出现频率f3,T1、T2、T3为由短到长的时间段区间。
步骤S311:根据人手出现频率信息和就餐区域热力图得到就餐意图识别结果。
本发明实施例中,设定相应阈值:所述就餐区域热力图映射数值h的阈值th_h,f1的阈值th_f1,f2的阈值th_f2,f3的阈值th_f3;
如果h>th_h且f1>th_f1,就餐意图等级=1;
如果f2>th_f2,就餐意图等级=2;
如果f3>th_f3,就餐意图等级=3。
因此,本发明实施例的就餐意图识别方法,获得就餐区域热力图信息,统计就餐区域的人手出现频率信息,将就餐区域热力图信息和人手出现频率信息进行综合判定得到到餐厅就餐顾客的就餐意图等级,有利于餐厅运营方进行各种收台准备的工作安排,根据顾客的就餐意图等级,灵活调节对汤锅的电磁炉的火候控制,提高对就餐顾客的服务质量。
上文结合图1至图5,详细描述了根据本发明实施例的就餐意图识别方法,下面将结合图6,详细描述根据本发明实施例的就餐意图识别装置。
图6示出了本发明实施例所提供的一种就餐意图识别装置的结构示意图。如图6所示,该就餐意图识别装置包括:
运动信息模块61,用于根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
就餐区域模块62,用于将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
意图识别模块63,用于统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果。
在本发明实施例中,可选地,运动信息模块61包括:
图像获取子模块611,用于获取所述服务区域的连续多帧图像,得到所述图像中像素点变化大的运动信息区域;
干扰过滤子模块612,用于对所述运动信息区域的运动信息干扰进行过滤处理,获得相同尺寸的运动信息图;
像素归一子模块613,用于对所述运动信息图的每个像素点进行归一化处理,得到所述运动信息热力图。
在本发明实施例中,可选地,在所述就餐区域模块62中,
设定映射函数f(H),将所述就餐区域热力图映射为数值h:
其中,g(x,y)为权重函数,所述就餐区域热力图的运动信息越多,所述h值越大。
可选地,在本发明实施例的意图识别模块63中,
时间T1中人手出现频率f1,时间T2中人手出现频率f2,时间T3中人手出现频率f3,T1、T2、T3为由短到长的时间段区间;
设定相应阈值:所述就餐区域热力图映射数值h的阈值th_h,f1的阈值th_f1,f2的阈值th_f2,f3的阈值th_f3;
如果h>th_h且f1>th_f1,就餐等级=1;
如果f2>th_f2,就餐等级=2;
如果f3>th_f3,就餐等级=3。
在本发明实施例中,还包括:
平均意愿模块64,用于统计就餐样本得到强就餐意愿平均热力图G,得到就餐区域平均热力图:
可选地,在本发明实施例的运动信息模块61中,
所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的获取公式:
H=M1*a+M2*a*a+M3*a*a*a……
其中,Mn是指前n张运动信息图,M1是前1张,M2是前2张,依次类推,H的像素值处于0-1之间,a为平滑因子,0<a<1。
可选地,本发明实施例的意图识别模块63包括:
人手检测子模块631,用于实时进行人手数量检测,将所述就餐区域与人手区域的交集除以两者的并集,得到人手靠近所述就餐区域的距离;
频率检测子模块632,用于统计设定时间内在靠近设定就餐区域距离的人手数量,得到该设定时间内人手出现频率信息。
本发明实施例的就餐意图识别装置,获得就餐区域热力图信息,统计就餐区域的人手出现频率信息,将就餐区域热力图信息和人手出现频率信息进行综合判定得到到餐厅就餐顾客的就餐意图等级,有利于餐厅运营方进行各种收台准备的工作安排,根据顾客的就餐意图等级,灵活调节对汤锅的电磁炉的火候控制,提高对就餐顾客的服务质量。
此外,本发明实施例还提供了一种电子设备,包括总线、收发器、存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,该收发器、该存储器和处理器分别通过总线相连,计算机程序被处理器执行时实现上述就餐意图识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
具体的,参见图7所示,本发明实施例还提供了一种电子设备,该电子设备包括总线71、处理器72、收发器73、总线接口74、存储器75和用户接口76。
在本发明实施例中,该电子设备还包括:存储在存储器75上并可在处理器72上运行的计算机程序,计算机程序被处理器72执行时实现以下步骤:
根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果。
可选地,计算机程序被处理器72执行时还可实现以下步骤:
所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的步骤包括:
获取所述服务区域的连续多帧图像,得到所述图像中像素点变化大的运动信息区域;
对所述运动信息区域的运动信息干扰进行过滤处理,获得相同尺寸的运动信息图;
对所述运动信息图的每个像素点进行归一化处理,得到所述运动信息热力图。
可选地,计算机程序被处理器72执行时还可实现以下步骤:
在所述将服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图的步骤中,设定映射函数f(H),将所述就餐区域热力图映射为数值h:
其中,g(x,y)为权重函数,所述就餐区域热力图的运动信息越多,所述h值越大。
可选地,计算机程序被处理器72执行时还可实现以下步骤:
所述统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息的步骤包括:
时间T1中人手出现频率f1,时间T2中人手出现频率f2,时间T3中人手出现频率f3,T1、T2、T3为由短到长的时间段区间;
在所述根据人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果的步骤中,设定相应阈值:所述就餐区域热力图映射数值h的阈值th_h,f1的阈值th_f1,f2的阈值th_f2,f3的阈值th_f3;
如果h>th_h且f1>th_f1,就餐等级=1;
如果f2>th_f2,就餐等级=2;
如果f3>th_f3,就餐等级=3。
可选地,计算机程序被处理器72执行时还可实现以下步骤:
统计就餐样本得到强就餐意愿平均热力图G,得到就餐区域平均热力图:
可选地,计算机程序被处理器72执行时还可实现以下步骤:
所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的获取公式:
H=M1*a+M2*a*a+M3*a*a*a……
其中,Mn是指前n张运动信息图,M1是前1张,M2是前2张,依次类推,H的像素值处于0-1之间,a为平滑因子,0<a<1。
可选地,计算机程序被处理器72执行时还可实现以下步骤:
所述统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息的步骤包括:
实时进行人手数量检测,将所述就餐区域与人手区域的交集除以两者的并集,得到人手靠近所述就餐区域的距离;
统计设定时间内在靠近设定就餐区域距离的人手数量,得到该设定时间内人手出现频率信息。
收发器73,用于在处理器72的控制下接收和发送数据。
在图7中,总线架构(用总线71来代表),总线71可以包括任意数量互联的总线和桥,总线71将包括由处理器72代表的一个或多个处理器与存储器75代表的存储器的各种电路连接在一起。
总线71表示若干类型的总线结构中的任何一种总线结构中的一个或多个,包括存储器总线以及存储器控制器、外围总线、加速图形端口(Accelerate Graphical Port,AGP)、处理器或使用各种总线体系结构中的任意总线结构的局域总线。作为示例而非限制,这样的体系结构包括:工业标准体系结构(Industry Standard Architecture,ISA)总线、微通道体系结构(Micro Channel Architecture,MCA)总线、扩展ISA(Enhanced ISA,EISA)总线、视频电子标准协会(Video Electronics Standards Association,VESA)、外围部件互连(Peripheral Component Interconnect,PCI)总线。
处理器72可以是一种集成电路芯片,具有信号处理能力。在实现过程中,上述方法实施例的各步骤可以通过处理器中硬件的集成逻辑电路或软件形式的指令完成。上述的处理器包括:通用处理器、中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(FieldProgrammable Gate Array,FPGA)、复杂可编程逻辑器件(Complex Programmable LogicDevice,CPLD)、可编程逻辑阵列(Programmable Logic Array,PLA)、微控制单元(Microcontroller Unit,MCU)或其他可编程逻辑器件、分立门、晶体管逻辑器件、分立硬件组件。可以实现或执行本发明实施例中公开的各方法、步骤及逻辑框图。例如,处理器可以是单核处理器或多核处理器,处理器可以集成于单颗芯片或位于多颗不同的芯片。
处理器72可以是微处理器或任何常规的处理器。结合本发明实施例所公开的方法步骤可以直接由硬件译码处理器执行完成,或者由译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存取存储器(Random Access Memory,RAM)、闪存(FlashMemory)、只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、寄存器等本领域公知的可读存储介质中。所述可读存储介质位于存储器中,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
总线71还可以将,例如外围设备、稳压器或功率管理电路等各种其他电路连接在一起,总线接口74在总线71和收发器73之间提供接口,这些都是本领域所公知的。因此,本发明实施例不再对其进行进一步描述。
收发器73可以是一个元件,也可以是多个元件,例如多个接收器和发送器,提供用于在传输介质上与各种其他装置通信的单元。例如:收发器73从其他设备接收外部数据,收发器73用于将处理器72处理后的数据发送给其他设备。取决于计算机系统的性质,还可以提供用户接口76,例如:触摸屏、物理键盘、显示器、鼠标、扬声器、麦克风、轨迹球、操纵杆、触控笔。
应理解,在本发明实施例中,存储器75可进一步包括相对于处理器72远程设置的存储器,这些远程设置的存储器可以通过网络连接至服务器。上述网络的一个或多个部分可以是自组织网络(ad hoc network)、内联网(intranet)、外联网(extranet)、虚拟专用网(VPN)、局域网(LAN)、无线局域网(WLAN)、广域网(WAN)、无线广域网(WWAN)、城域网(MAN)、互联网(Internet)、公共交换电话网(PSTN)、普通老式电话业务网(POTS)、蜂窝电话网、无线网络、无线保真(Wi-Fi)网络以及两个或更多个上述网络的组合。例如,蜂窝电话网和无线网络可以是全球移动通信(GSM)系统、码分多址(CDMA)系统、全球微波互联接入(WiMAX)系统、通用分组无线业务(GPRS)系统、宽带码分多址(WCDMA)系统、长期演进(LTE)系统、LTE频分双工(FDD)系统、LTE时分双工(TDD)系统、先进长期演进(LTE-A)系统、通用移动通信(UMTS)系统、增强移动宽带(Enhance Mobile Broadband,eMBB)系统、海量机器类通信(massive Machine Type of Communication,mMTC)系统、超可靠低时延通信(UltraReliable Low Latency Communications,uRLLC)系统等。
应理解,本发明实施例中的存储器75可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器包括:只读存储器(Read-OnlyMemory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存(Flash Memory)。
易失性存储器包括:随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如:静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,DRRAM)。本发明实施例描述的电子设备的存储器75包括但不限于上述和任意其他适合类型的存储器。
在本发明实施例中,存储器75存储了操作系统751和应用程序752的如下元素:可执行模块、数据结构,或者其子集,或者其扩展集。
具体而言,操作系统751包含各种系统程序,例如:框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序752包含各种应用程序,例如:媒体播放器(Media Player)、浏览器(Browser),用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序752中。应用程序752包括:小程序、对象、组件、逻辑、数据结构以及其他执行特定任务或实现特定抽象数据类型的计算机系统可执行指令。
此外,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述就餐意图识别方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
具体而言,计算机程序被处理器执行时可实现以下步骤:
根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果。
可选地,计算机程序被处理器执行时还可实现以下步骤:
所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的步骤包括:
获取所述服务区域的连续多帧图像,得到所述图像中像素点变化大的运动信息区域;
对所述运动信息区域的运动信息干扰进行过滤处理,获得相同尺寸的运动信息图;
对所述运动信息图的每个像素点进行归一化处理,得到所述运动信息热力图。
可选地,计算机程序被处理器执行时还可实现以下步骤:
在所述将服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图的步骤中,设定映射函数f(H),将所述就餐区域热力图映射为数值h:
其中,g(x,y)为权重函数,所述就餐区域热力图的运动信息越多,所述h值越大。
可选地,计算机程序被处理器执行时还可实现以下步骤:
所述统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息的步骤包括:
时间T1中人手出现频率f1,时间T2中人手出现频率f2,时间T3中人手出现频率f3,T1、T2、T3为由短到长的时间段区间;
在所述根据人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果的步骤中,设定相应阈值:所述就餐区域热力图映射数值h的阈值th_h,f1的阈值th_f1,f2的阈值th_f2,f3的阈值th_f3;
如果h>th_h且f1>th_f1,就餐等级=1;
如果f2>th_f2,就餐等级=2;
如果f3>th_f3,就餐等级=3。
可选地,计算机程序被处理器执行时还可实现以下步骤:
还包括:
统计就餐样本得到强就餐意愿平均热力图G,得到就餐区域平均热力图:
可选地,计算机程序被处理器执行时还可实现以下步骤:
所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的获取公式:
H=M1*a+M2*a*a+M3*a*a*a……
其中,Mn是指前n张运动信息图,M1是前1张,M2是前2张,依次类推,H的像素值处于0-1之间,a为平滑因子,0<a<1。
可选地,计算机程序被处理器执行时还可实现以下步骤:
所述统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息的步骤包括:
实时进行人手数量检测,将所述就餐区域与人手区域的交集除以两者的并集,得到人手靠近所述就餐区域的距离;
统计设定时间内在靠近设定就餐区域距离的人手数量,得到该设定时间内人手出现频率信息。
计算机可读存储介质包括:永久性和非永久性、可移动和非可移动媒体,是可以保留和存储供指令执行设备所使用指令的有形设备。计算机可读存储介质包括:电子存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备以及上述任意合适的组合。计算机可读存储介质包括:相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带存储、磁带磁盘存储或其他磁性存储设备、记忆棒、机械编码装置(例如在其上记录有指令的凹槽中的穿孔卡或凸起结构)或任何其他非传输介质、可用于存储可以被计算设备访问的信息。按照本发明实施例中的界定,计算机可读存储介质不包括暂时信号本身,例如无线电波或其他自由传播的电磁波、通过波导或其他传输介质传播的电磁波(例如穿过光纤电缆的光脉冲)或通过导线传输的电信号。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或二者的结合来实现,为了清楚说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机程序指令。所述计算机程序指令包括:汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、集成电路配置数据或以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言,例如:Smalltalk、C++以及过程式编程语言,例如:C语言或类似的编程语言。
在计算机上加载和执行所述计算机程序指令时,全部或部分的产生按照本发明实施例所述的流程或功能,所述计算机可以是通过计算机、专用计算机、计算机网络或其他可编辑装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如:所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如:同轴电缆、双绞线、光纤、数字用户线路(digitalsubscriber line,DSL))或无线(例如:红外、无线、微波)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或包括一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如:软盘、磁盘、磁带)、光介质(例如:光盘)或半导体介质(例如:固态硬盘(Solid State Drive,SSD))等。这些功能究竟以硬件还是软件来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明实施例的范围。
所属技术领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述本发明方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所披露的装置、电子设备和方法,可以通过其他的方式实现。例如,以上描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的、机械的或其他的形式连接。
所述作为分离部件说明的单元可以是或也可以不是物理上分开的,作为单元显示的部件可以是或也可以不是物理单元,既可以位于一个位置,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或全部单元来解决本发明实施例方案要解决的问题。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术作出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(包括:个人计算机、服务器、数据中心或其他网络设备)执行本发明各个实施例所述方法的全部或部分步骤。而上述存储介质包括如前述所列举的各种可以存储程序代码的介质。
以上所述,仅为本发明实施例的具体实施方式,但本发明实施例的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明实施例披露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明实施例的保护范围之内。因此,本发明实施例的保护范围应以权利要求的保护范围为准。

Claims (8)

1.一种就餐意图识别方法,其特征在于,包括:
根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果;
其中,所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的步骤包括:
获取所述服务区域的连续多帧图像,得到所述图像中像素点变化大的运动信息区域;
对所述运动信息区域的运动信息干扰进行过滤处理,获得相同尺寸的运动信息图;
对所述运动信息图的每个像素点进行归一化处理,得到所述运动信息热力图;
在所述将服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图的步骤中,设定映射函数f(H),将所述就餐区域热力图映射为数值h:
其中,H(x,y)为所述运动信息热力图,g(x,y)为权重函数,所述就餐区域热力图的运动信息越多,所述h值越大。
2.根据权利要求1所述的方法,其特征在于,所述统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息的步骤包括:
时间T1中人手出现频率f1,时间T2中人手出现频率f2,时间T3中人手出现频率f3,T1、T2、T3为由短到长的时间段区间;
在所述根据人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果的步骤中,设定相应阈值:所述就餐区域热力图映射数值h的阈值th_h,f1的阈值th_f1,f2的阈值th_f2,f3的阈值th_f3;
如果h>th_h且f1>th_f1,就餐等级=1;
如果f2>th_f2,就餐等级=2;
如果f3>th_f3,就餐等级=3。
3.根据权利要求1所述的方法,其特征在于,还包括:
统计就餐样本得到强就餐意愿平均热力图G,得到就餐区域平均热力图:
4.根据权利要求1所述的方法,其特征在于,所述根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图的获取公式:
H=M1*a+M2*a*a+M3*a*a*a……
其中,Mn是指前n张运动信息图,M1是前1张,M2是前2张,依次类推,H的像素值处于0-1之间,a为平滑因子,0<a<1。
5.根据权利要求1所述的方法,其特征在于,所述统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息的步骤包括:
实时进行人手数量检测,将所述就餐区域与人手区域的交集除以两者的并集,得到人手靠近所述就餐区域的距离;
统计设定时间内在靠近设定就餐区域距离的人手数量,得到该设定时间内人手出现频率信息。
6.一种就餐意图识别装置,其特征在于,包括:
运动信息模块,用于根据服务区域内预设时间段的运动信息获得所述服务区域的运动信息热力图;
就餐区域模块,用于将所述服务区域内的就餐区域与所述运动信息热力图作交集处理得到就餐区域热力图;
意图识别模块,用于统计设定时间内所述就餐区域内的人手数量得到人手出现频率信息,根据所述人手出现频率信息和所述就餐区域热力图得到就餐意图识别结果;
其中,所述运动信息模块包括:
图像获取子模块,用于获取所述服务区域的连续多帧图像,得到所述图像中像素点变化大的运动信息区域;
干扰过滤子模块,用于对所述运动信息区域的运动信息干扰进行过滤处理,获得相同尺寸的运动信息图;
像素归一子模块,用于对所述运动信息图的每个像素点进行归一化处理,得到所述运动信息热力图;
在所述就餐区域模块中,设定映射函数f(H),将所述就餐区域热力图映射为数值h:
其中,H(x,y)为所述运动信息热力图,g(x,y)为权重函数,所述就餐区域热力图的运动信息越多,所述h值越大。
7.一种电子设备,包括总线、收发器、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述收发器、所述存储器和所述处理器通过所述总线相连,其特征在于,所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的就餐意图识别方法中的步骤。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的就餐意图识别方法中的步骤。
CN202110892299.6A 2021-06-16 2021-08-04 一种就餐意图识别方法、装置及电子设备 Active CN113592320B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2021106666088 2021-06-16
CN202110666608 2021-06-16

Publications (2)

Publication Number Publication Date
CN113592320A CN113592320A (zh) 2021-11-02
CN113592320B true CN113592320B (zh) 2023-10-03

Family

ID=78255096

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110892299.6A Active CN113592320B (zh) 2021-06-16 2021-08-04 一种就餐意图识别方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN113592320B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113609979B (zh) * 2021-06-11 2024-03-19 成都世纪光合作用科技有限公司 一种收台处理方法、装置和电子设备
CN113902831B (zh) * 2021-12-13 2022-04-26 苏州万店掌软件技术有限公司 一种热点区域点阵图生成方法、系统、装置及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108647242A (zh) * 2018-04-10 2018-10-12 北京天正聚合科技有限公司 一种热力图的生成方法和系统
CN111191804A (zh) * 2018-11-15 2020-05-22 北京京东尚科信息技术有限公司 生成餐厅服务任务信息的方法、系统、设备及存储介质
CN111401305A (zh) * 2020-04-08 2020-07-10 北京精准沟通传媒科技股份有限公司 一种4s店顾客统计方法、装置及电子设备
CN111783626A (zh) * 2020-06-29 2020-10-16 北京字节跳动网络技术有限公司 图像识别方法、装置、电子设备及存储介质
CN111862521A (zh) * 2019-04-28 2020-10-30 杭州海康威视数字技术股份有限公司 行为热力图生成及报警方法、装置、电子设备及存储介质
CN111986234A (zh) * 2020-08-20 2020-11-24 各珍珍 基于人工智能的自适应分辨率畜牧视频信息处理方法
CN112035559A (zh) * 2020-11-02 2020-12-04 浙江口碑网络技术有限公司 热力图的展示方法、服务器及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11222297B2 (en) * 2019-11-21 2022-01-11 Rockspoon, Inc. System and method for matching patrons, servers, and restaurants within the food service industry

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108647242A (zh) * 2018-04-10 2018-10-12 北京天正聚合科技有限公司 一种热力图的生成方法和系统
CN111191804A (zh) * 2018-11-15 2020-05-22 北京京东尚科信息技术有限公司 生成餐厅服务任务信息的方法、系统、设备及存储介质
CN111862521A (zh) * 2019-04-28 2020-10-30 杭州海康威视数字技术股份有限公司 行为热力图生成及报警方法、装置、电子设备及存储介质
CN111401305A (zh) * 2020-04-08 2020-07-10 北京精准沟通传媒科技股份有限公司 一种4s店顾客统计方法、装置及电子设备
CN111783626A (zh) * 2020-06-29 2020-10-16 北京字节跳动网络技术有限公司 图像识别方法、装置、电子设备及存储介质
CN111986234A (zh) * 2020-08-20 2020-11-24 各珍珍 基于人工智能的自适应分辨率畜牧视频信息处理方法
CN112035559A (zh) * 2020-11-02 2020-12-04 浙江口碑网络技术有限公司 热力图的展示方法、服务器及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Dining activity analysis using a hidden markov model;Jiang Gao 等;Proceedings of the 17th International Conference on Pattern Recognition, 2004;1-4 *
基于电信位置数据的用户活动推测及行为模式分析;苏杭;中国优秀硕士学位论文全文数据库信息科技辑(第11期);I138-263 *

Also Published As

Publication number Publication date
CN113592320A (zh) 2021-11-02

Similar Documents

Publication Publication Date Title
CN113592320B (zh) 一种就餐意图识别方法、装置及电子设备
US10795957B2 (en) Information recommending method and device
US10873648B2 (en) Detecting mobile device attributes
CN106792992B (zh) 一种用于提供无线接入点信息的方法与设备
US20170223087A1 (en) Detecting Carriers for Mobile Devices
JP6450013B2 (ja) グラフベースの自然言語処理のための技術
US20210082453A1 (en) Acoustic neural network scene detection
US20180248879A1 (en) Method and apparatus for setting access privilege, server and storage medium
EP3948892A1 (en) System and method for remote patient monitoring
US20160323159A1 (en) Determining Semantic Place Names from Location Reports
CN113791834B (zh) 信息显示设备
CN106067897A (zh) 基于用户终端位置的信息推送方法和装置
CN112100547A (zh) 一种页面数据采集的方法、装置及电子设备
US20160110372A1 (en) Method and apparatus for providing location-based social search service
US10902050B2 (en) Analyzing and weighting media information
CN111027495A (zh) 用于检测人体关键点的方法和装置
CN109699017B (zh) 一种基于场景类型的用户推荐方法与设备
US11455355B2 (en) Visualizing query results to improve quality of subsequent searches
CN110942033A (zh) 用于推送信息的方法、装置、电子设备和计算机介质
CN116304844B (zh) 一种人员进出计数统计系统及方法
Zhao et al. A novel hybrid combination optimization algorithm based on search area segmentation and fast Fourier transform
EP3865980B1 (en) Electronic device and control method therefor
US11689378B1 (en) Determining loss of focus in online sessions
CN106021263B (zh) 利用位置数据约束或限制数据集以高效搜索的方法和系统
CN117112898A (zh) 服务推荐方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant