CN109886199B - 信息处理方法、装置、车辆及移动终端 - Google Patents

信息处理方法、装置、车辆及移动终端 Download PDF

Info

Publication number
CN109886199B
CN109886199B CN201910131112.3A CN201910131112A CN109886199B CN 109886199 B CN109886199 B CN 109886199B CN 201910131112 A CN201910131112 A CN 201910131112A CN 109886199 B CN109886199 B CN 109886199B
Authority
CN
China
Prior art keywords
vehicle
image
mobile terminal
recognition
connection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910131112.3A
Other languages
English (en)
Other versions
CN109886199A (zh
Inventor
罗序斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apollo Zhilian Beijing Technology Co Ltd
Original Assignee
阿波罗智联(北京)科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 阿波罗智联(北京)科技有限公司 filed Critical 阿波罗智联(北京)科技有限公司
Priority to CN201910131112.3A priority Critical patent/CN109886199B/zh
Publication of CN109886199A publication Critical patent/CN109886199A/zh
Application granted granted Critical
Publication of CN109886199B publication Critical patent/CN109886199B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明提供一种信息处理方法、装置、车辆及移动终端。该方法应用于车辆,该方法包括:调用摄像头采集图像;通过车辆与移动终端之间的连接,向移动终端发送图像;通过连接,接收移动终端对图像进行图像识别得到的识别结果;根据识别结果,执行相应的处理操作。与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。

Description

信息处理方法、装置、车辆及移动终端
技术领域
本发明实施例涉及车辆工程技术领域,尤其涉及一种信息处理方法、装置、车辆及移动终端。
背景技术
随着车辆工程技术领域的迅速发展,车辆的使用越来越普遍,车辆目前已经成为了人们日常生活中的重要交通工具之一。
目前,车辆上一般设置有摄像头,车辆可以对摄像头采集的图像进行图像识别,以实现基于图像识别的驾车服务。由于图像识别操作的执行,车辆上的大量运算资源被抢占,这样会导致车辆运行卡顿,从而影响到车辆上的其他服务的正常运行,例如影响到地图或者音乐服务的正常运行。
发明内容
本发明实施例提供一种信息处理方法、装置、车辆及移动终端,以解决现有技术中,图像识别操作的执行导致车辆运行卡顿,从而影响到车辆上的其他服务的正常运行的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供一种信息处理方法,应用于车辆,所述方法包括:
调用摄像头采集图像;
通过所述车辆与移动终端之间的连接,向所述移动终端发送所述图像;
通过所述连接,接收所述移动终端对所述图像进行图像识别得到的识别结果;
根据所述识别结果,执行相应的处理操作。
第二方面,本发明实施例提供一种信息处理方法,应用于移动终端,所述方法包括:
通过所述移动终端与车辆之间的连接,接收所述车辆发送的图像;
对所述图像进行图像识别,得到识别结果;
通过所述连接,向所述车辆发送所述识别结果。
第三方面,本发明实施例提供一种信息处理装置,应用于车辆,所述方法包括:
采集模块,用于调用摄像头采集图像;
第一发送模块,用于通过所述车辆与移动终端之间的连接,向所述移动终端发送所述图像;
接收模块,用于通过所述连接,接收所述移动终端对所述图像进行图像识别得到的识别结果;
处理模块,用于根据所述识别结果,执行相应的处理操作。
第四方面,本发明实施例提供一种信息处理装置,应用于移动终端,所述装置包括:
第一接收模块,用于通过所述移动终端与车辆之间的连接,接收所述车辆发送的图像;
处理模块,用于对所述图像进行图像识别,得到识别结果;
发送模块,用于通过所述连接,向所述车辆发送所述识别结果。
第五方面,本发明实施例提供一种车辆,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述应用于车辆的信息处理方法的步骤。
第六方面,本发明实施例提供一种移动终端,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述应用于移动终端的信息处理方法的步骤。
第七方面,本发明实施例提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述应用于车辆的信息处理方法的步骤,或者实现上述应用于移动终端的信息处理方法的步骤。
本发明实施例中,车辆与移动终端之间可以建立有连接,在调用摄像头采集图像之后,车辆不对图像进行图像识别,而是通过连接,向移动终端发送图像。接下来,移动终端对图像进行图像识别,得到识别结果,并通过连接,向车辆发送识别结果,以便于车辆根据识别结果,执行相应的处理操作,从而实现基于图像识别的驾车服务,例如疲劳检测服务、手势识别服务等。可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆迁移至移动终端上执行,这样能够充分利用移动终端高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获取其他的附图。
图1是本发明实施例提供的应用于车辆的信息处理方法的流程图之一;
图2是本发明实施例提供的应用于车辆的信息处理方法的流程图之二;
图3是本发明实施例提供的应用于移动终端的信息处理方法的流程图;
图4是本发明实施例提供的应用于车辆的信息处理装置的结构框图;
图5是本发明实施例提供的应用于移动终端的信息处理装置的结构框图;
图6是本发明实施例提供的车辆的结构示意图;
图7是本发明实施例提供的移动终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获取的所有其他实施例,都属于本发明保护的范围。
参见图1,图中示出了本发明实施例提供的信息处理方法的流程图之一。如图1所示,该方法应用于车辆(例如纯电动汽车、混合电动汽车等),该方法包括如下步骤:
步骤101,调用摄像头采集图像。
这里,车辆可以调用摄像头定时或者不定时地采集图像。具体地,车辆调用摄像头采集的图像的张数可以为一张、两张、三张、四张、五张或者五张以上,在此不再一一列举。
步骤102,通过车辆与移动终端之间的连接,向移动终端发送图像。
本发明实施例中,移动终端可以为:计算机(Computer)、手机、平板电脑(TabletPersonalComputer)、膝上型电脑(Laptop Computer)、个人数字助理(personal digitalassistant,简称PDA)、移动上网电子设备(Mobile Internet Device,MID)、可穿戴式设备(Wearable Device)等。
需要说明的是,车辆与移动终端之间的连接可以为有线连接或者无线连接。具体地,车辆与移动终端之间的连接可以为通用串行总线(Universal Serial Bus,USB)连接;或者,车辆与移动终端之间的连接可以为局域网(Local Area Network,LAN)连接,例如为无线保真(Wireless Fidelity,WiFi)连接。
由于USB连接和WiFi连接这两种连接方式的带宽足够高,车辆与移动终端之间的连接采用USB连接或WiFi连接时,能够保证车辆与移动终端之间的数据传输的可靠性。
步骤103,通过连接,接收移动终端对图像进行图像识别得到的识别结果。
在车辆通过自身与移动终端之间的连接,向移动终端发送图像之后,移动终端能够接收到图像。接下来,移动终端可以对接收到的图像进行图像识别,以得到识别结果。具体地,移动终端上可以部署有用于图像识别的深度学习算法,移动终端可以使用自身的计算资源运行深度学习算法,以对图像进行图像识别,从而得到识别结果。
需要说明的是,基于车辆与移动终端之间的连接,车辆与移动终端能够进行双向的数据通信。这样,在得到识别结果之后,移动终端可以通过自身与车辆之间的连接,向车辆发送识别结果,相应地,车辆能够接收到识别结果。
步骤104,根据识别结果,执行相应的处理操作。
需要说明的是,根据识别结果,执行相应的处理操作的具体实现形式多样,为了布局清楚,后续进行举例介绍。
本发明实施例中,车辆与移动终端之间可以建立有连接,在调用摄像头采集图像之后,车辆不对图像进行图像识别,而是通过连接,向移动终端发送图像。接下来,移动终端对图像进行图像识别,得到识别结果,并通过连接,向车辆发送识别结果,以便于车辆根据识别结果,执行相应的处理操作,从而实现基于图像识别的驾车服务,例如疲劳检测服务、手势识别服务等。可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆迁移至移动终端上执行,这样能够充分利用移动终端高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
可选地,通过车辆与移动终端之间的连接,向移动终端发送图像之前,该方法还包括:
通过车辆与移动终端之间的连接,向移动终端发送图像识别任务类型;
其中,识别结果与图像识别任务类型。
本发明实施例中,在车辆通过自身与移动终端之间的连接,向移动终端发送图像识别任务类型之后,移动终端能够接收到图像识别任务类型。具体地,图像识别任务类型可以为疲劳驾驶检测类型、手势识别类型等。
接下来,移动终端可以对图像进行图像识别,以得到与图像识别任务类型对应的识别结果。具体地,在图像识别任务类型为疲劳驾驶检测类型的情况下,图像处理结果为疲劳检测结果,其可以用于表征车辆是否处于用户疲劳驾驶状态;在图像识别任务类型为手势识别类型的情况下,图像处理结果为手势识别结果,其可以用于表征用户手势操作所指示的车辆控制策略,例如对车辆部件的控制策略。
可见,本发明实施例中,通过图像识别任务类型的发送,移动终端能够给车辆提供相应的识别结果,以使得车辆能够基于图像识别,实现用户所需的驾车服务。
需要说明的是,根据识别结果,执行相应的处理操作的具体实现形式多样,下面对其中两种实现形式进行举例介绍。
在一种实现形式中,图像识别任务类型为疲劳驾驶检测类型;
根据识别结果,执行相应的处理操作,包括:
若识别结果用于表征车辆处于用户疲劳驾驶状态,执行疲劳驾驶提示操作。
这里,疲劳驾驶提示操作的操作类型可以为语音提示、灯光提示、文字提示、振动提示等。
这种实现形式中,在车辆处于用户疲劳驾驶状态时,车辆执行疲劳驾驶提示操作,这样能够起到较好地提示作用,以保证车辆的行车安全性。
在另一种实现形式中,图像识别任务类型为手势识别类型;
根据识别结果,执行相应的处理操作,包括:
根据识别结果,获得对目标车辆部件的部件控制策略;其中,目标车辆部件为与图像中的用户手势操作关联的车辆部件;
根据部件控件策略,对目标车辆部件进行控制。
这里,移动终端中可以预先存储手势操作类型与车辆部件的部件控制策略之间的对应关系。在来自车辆的图像中显示有用户手势操作的情况下,通过图像识别,移动终端能够确定出图像中的用户手势操作的手势操作类型。
假设移动终端确定出的手势操作类型为右滑手势,且移动终端预先存储的对应关系中,右滑手势对应的部件控件策略为针对车辆内的播放设备的切下一首策略,那么,移动终端进行图像识别得到的识别结果中可以携带针对播放设备的切下一首策略。这样,车辆后续能够从识别结果中提取针对播放设备的切下一首策略,根据该策略,车辆可以控制播放设备播放的音乐切换至下一首。
假设移动终端确定出的手势操作为下滑手势,且移动终端预先存储的对应关系中,下滑手势对应的部件控件策略为针对车辆内的空调的升温策略,那么,移动终端进行图像识别得到的识别结果中可以携带针对空调的升温策略。这样,车辆后续能够从识别结果中提取针对空调的升温策略,根据该策略,车辆可以提高空调的设定温度。
可见,这种实现形式能够非常便捷地实现对车辆部件的控制。
可选地,通过车辆与移动终端之间的连接,向移动终端发送图像之前,该方法还包括:
获得车辆所处路段的路段信息;
向移动终端发送图像,包括:
向移动终端发送图像和路段信息。
本发明实施例中,在车辆通过自身与移动终端之间的连接,向移动终端发送图像之前,车辆可以基于全球定位系统(Global Positioning System,GPS)和导航系统,获得所处路段的路段信息。这里,路段信息可以包括路段类型(例如高速公路、山体路段等)、路段拥堵程度、路段事故发生频率等。车辆可以通过自身与移动终端之间的连接,将图像与路段信息一并发送至移动终端。
之后,移动终端能够接收到图像和路段信息,移动终端可以根据接收到的路段信息,确定识别精度级别,并对接收到的图像进行图像识别,以得到与确定出的识别精度级别对应的识别结果。
在路段信息包括路段拥堵程度时,识别精度级别可以与路段拥堵程度负相关。具体而言,移动终端接收到的路段信息中的路段拥堵程度越高,则移动终端确定出的识别精度等级可以越低;移动终端接收到的路段信息中的路段拥堵程度越低,则移动终端确定出的识别精度等级可以越高。也就是说,在拥堵程度较高的路段,移动终端进行低精度的图像识别,而在拥堵程度较低的路段,移动终端进行高精度的图像识别。
以图像识别任务类型为疲劳驾驶检测类型的情况为例,在拥堵程度较高的路段,车辆相互之间的距离较近容易发生磕碰,这时,移动终端可以进行低精度的图像识别,以在较短时间内获得识别结果,从而便于在用户疲劳驾驶时进行提示,进而保证车辆的行车安全性。在拥堵程度较低的路段,车辆相互之间的距离较远不容易发生磕碰,这时,移动终端可以进行高精度的图像识别,以保证识别结果的准确度。
可见,本发明实施例中,通过图像和路段信息的一并发送,移动终端能够根据车辆所处路段,得到相应识别精度级别的识别结果,这样能够保证行车安全性和识别结果的准确度。
参见图2,图中示出了本发明实施例提供的信息处理方法的流程图之二。如图2所示,该方法应用于车辆,例如应用于车辆中的车机,该方法包括如下步骤:
步骤201,用户启用图像识别相关功能。
具体地,车辆上可以设置有图像识别相关的操作控件(例如操作按钮),用户可以通过操作该操作控件,启用图像识别相关功能。
步骤202,判断手机车机是否建立有连接;若为否,执行步骤203;若为是,执行步骤204。
步骤203,把手机车机通过USB连接方式或者WiFi连接方式连接。
在手机车机通过USB连接方式或者WiFi连接方式连接之后,手机车机之间的USB连接或WiFi连接作为手机车机之间互联的数据通道。
步骤204,车机通过与手机的连接,把图像识别任务类型发送给手机。
这里,图像识别任务类型可以为疲劳驾驶检测类型、手势识别类型等。
步骤205,车机通过与手机的连接,将车辆的摄像头拍摄的图像发送给手机。
这里,车机可以将图像与车辆所处路段的路段信息一并发送给手机。
步骤206,手机在接收图像识别任务类型和图像后运行图像识别算法,得到与图像识别任务类型对应的识别结果。
这里,在手机同时接收到图像和路段信息的情况下,手机可以根据路段信息,确定识别精度级别,得到同时与图像识别任务类型和识别精度级别对应的识别结果。
步骤207,手机通过与车机的连接,把识别结果发送给车机。
步骤208,车机根据识别结果,执行相应的处理操作。
在步骤208中,通过执行相应的处理操作,可以实现基于图像识别的驾车服务。
可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车机迁移至手机上执行,这样能够充分利用手机高性能的运算资源,即使是性能不高且不能联网的车机也能够提供基于图像识别的各种驾车服务,例如疲劳检测、手势识别等驾车服务,在运行基于图像识别的驾车服务时,车机的中央处理器(Central Processing Unit,CPU)能够预留更多的资源用于地图服务、音乐服务等其他服务的流畅运行。需要指出的是,本发明实施例中可以支持使用各种操作系统的手机。
综上,本发明实施例中,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。
参见图3,图中示出了本发明实施例提供的信息处理方法的流程图。如图3所示,该方法应用于移动终端,该方法包括如下步骤:
步骤301,通过移动终端与车辆之间的连接,接收车辆发送的图像;
步骤302,对图像进行图像识别,得到识别结果;
步骤303,通过连接,向车辆发送识别结果。
可选地,通过移动终端与车辆之间的连接,接收车辆发送的图像之前,该方法还包括:
通过移动终端与车辆之间的连接,接收车辆发送的图像识别任务类型;
对图像进行图像识别,得到识别结果,包括:
对图像进行图像识别,得到与图像识别任务类型对应的识别结果。
可选地,接收车辆发送的图像,包括:
接收车辆发送的图像及车辆所处路段的路段信息;
对图像进行图像识别,得到识别结果,包括:
根据路段信息,确定识别精度级别;
对图像进行图像识别,得到与识别精度级别对应的识别结果。
可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆迁移至移动终端上执行,这样能够充分利用移动终端高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
参见图4,图中示出了本发明实施例提供的信息处理装置400的结构框图。如图4所示,信息处理装置400应用于车辆,信息处理装置400包括:
采集模块401,用于调用摄像头采集图像;
第一发送模块402,用于通过车辆与移动终端之间的连接,向移动终端发送图像;
接收模块403,用于通过连接,接收移动终端对图像进行图像识别得到的识别结果;
处理模块404,用于根据识别结果,执行相应的处理操作。
可选地,信息处理装置400还包括:
第二发送模块,用于在通过车辆与移动终端之间的连接,向移动终端发送图像之前,通过车辆与移动终端之间的连接,向移动终端发送图像识别任务类型;
其中,识别结果与图像识别任务类型对应。
可选地,图像识别任务类型为疲劳驾驶检测类型;
处理模块404,具体用于:
若识别结果用于表征车辆处于用户疲劳驾驶状态,执行疲劳驾驶提示操作;
或者,
图像识别任务类型为手势识别类型;
处理模块404,包括:
获得单元,用于根据识别结果,获得对目标车辆部件的部件控制策略;其中,目标车辆部件为与图像中的用户手势操作关联的车辆部件;
控制单元,用于根据部件控件策略,对目标车辆部件进行控制。
可选地,信息处理装置400还包括:
获得模块,用于在通过车辆与移动终端之间的连接,向移动终端发送图像之前,获得车辆所处路段的路段信息;
第一发送模块402,具体用于:
向移动终端发送图像和路段信息。
可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆迁移至移动终端上执行,这样能够充分利用移动终端高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
参见图5,图中示出了本发明实施例提供的信息处理装置500的结构框图。如图5所示,信息处理装置500应用于移动终端,信息处理装置500包括:
第一接收模块501,用于通过移动终端与车辆之间的连接,接收车辆发送的图像;
处理模块502,用于对图像进行图像识别,得到识别结果;
发送模块503,用于通过连接,向车辆发送识别结果。
可选地,信息处理装置500还包括:
第二接收模块,用于在通过移动终端与车辆之间的连接,接收车辆发送的图像之前,通过移动终端与车辆之间的连接,接收车辆发送的图像识别任务类型;
处理模块503,具体用于:
对图像进行图像识别,得到与图像识别任务类型对应的识别结果。
可选地,第一接收模块501,具体用于:
接收车辆发送的图像及车辆所处路段的路段信息;
处理模块503,包括:
确定模块,用于根据路段信息,确定识别精度级别;
获得模块,用于对图像进行图像识别,得到与识别精度级别对应的识别结果。
可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆迁移至移动终端上执行,这样能够充分利用移动终端高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
参见图6,图中示出了本发明实施例提供的车辆600的结构示意图。如图6所示,车辆600包括:处理器601、存储器603、用户接口604和总线接口。
处理器601,用于读取存储器603中的程序,执行下列过程:
调用摄像头采集图像;
通过车辆与移动终端之间的连接,向移动终端发送图像;
通过连接,接收移动终端对图像进行图像识别得到的识别结果;
根据识别结果,执行相应的处理操作。
在图6中,总线架构可以包括任意数量的互联的总线和桥,具体由处理器601代表的一个或多个处理器和存储器603代表的存储器的各种电路链接在一起。总线架构还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起,这些都是本领域所公知的,因此,本文不再对其进行进一步描述。总线接口提供接口。针对不同的用户设备,用户接口604还可以是能够外接内接需要设备的接口,连接的设备包括但不限于小键盘、显示器、扬声器、麦克风、操纵杆等。
处理器601负责管理总线架构和通常的处理,存储器603可以存储处理器601在执行操作时所使用的数据。
可选地,处理器601,还用于:
在通过车辆与移动终端之间的连接,向移动终端发送图像之前,通过车辆与移动终端之间的连接,向移动终端发送图像识别任务类型;
其中,识别结果与图像识别任务类型对应。
可选地,图像识别任务类型为疲劳驾驶检测类型;
处理器601,具体用于
若识别结果用于表征车辆处于用户疲劳驾驶状态,执行疲劳驾驶提示操作;
或者,
图像识别任务类型为手势识别类型;
处理器601,具体用于
根据识别结果,获得对目标车辆部件的部件控制策略;其中,目标车辆部件为与图像中的用户手势操作关联的车辆部件;
根据部件控件策略,对目标车辆部件进行控制。
可选地,处理器601,还用于:
在通过车辆与移动终端之间的连接,向移动终端发送图像之前,获得车辆所处路段的路段信息;
处理器601,具体用于:
向移动终端发送图像和路段信息。
可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆600迁移至移动终端上执行,这样能够充分利用移动终端高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆600能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆600上的其他服务的流畅运行,从而提高车辆600用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
优选地,本发明实施例还提供一种车辆,包括处理器601,存储器603,存储在存储器603上并可在所述处理器601上运行的计算机程序,该计算机程序被处理器601执行时实现上述应用于车辆的信息处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述应用于车辆的信息处理实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random AccessMemory,简称RAM)、磁碟或者光盘等。
参见图7,图中示出了本发明实施例提供的移动终端700的结构示意图。如图7所示,移动终端700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解,图7中示出的移动终端结构并不构成对移动终端的限定,移动终端700可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。移动终端700包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器710,用于:
通过移动终端与车辆之间的连接,接收车辆发送的图像;
对图像进行图像识别,得到识别结果;
通过连接,向车辆发送识别结果。
可选地,处理器710,还用于:
在通过移动终端与车辆之间的连接,接收车辆发送的图像之前,通过移动终端与车辆之间的连接,接收车辆发送的图像识别任务类型;
处理器710,具体用于:
对图像进行图像识别,得到与图像识别任务类型对应的识别结果。
可选地,处理器710,具体用于:
接收车辆发送的图像及车辆所处路段的路段信息;
根据路段信息,确定识别精度级别;
对图像进行图像识别,得到与识别精度级别对应的识别结果。
可见,本发明实施例中,需要消耗大量运算资源的图像识别操作由车辆迁移至移动终端700上执行,这样能够充分利用移动终端700高性能的运算资源,在运行基于图像识别的驾车服务的同时,车辆能够预留更多的资源用于地图服务、音乐服务等其他服务,因此,与现有技术相比,在运行基于图像识别的驾车服务时,本发明实施例能够有效地保证车辆上的其他服务的流畅运行,从而提高车辆用户的使用体验。此外,本发明实施例中,即使在没有网络信号或者网络信号很差的情况下,基于图像识别的驾车服务也能够正常运行。
应理解的是,本发明实施例中,射频单元701可用于收发信息或通话过程中,信号的接收和发送。通常,射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元701还可以通过无线通信系统与网络和其他设备通信。
终端通过网络模块702为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元703还可以提供与移动终端700执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
移动终端700还包括至少一种传感器705,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度,接近传感器可在移动终端700移动到耳边时,关闭显示面板7061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
用户输入单元707可用于接收输入的数字或字符信息,以及产生与终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器710,接收处理器710发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071,用户输入单元707还可以包括其他输入设备7072。具体地,其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板7071可覆盖在显示面板7061上,当触控面板7071检测到在其上或附近的触摸操作后,传送给处理器710以确定触摸事件的类型,随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图7中,触控面板7071与显示面板7061是作为两个独立的部件来实现终端的输入和输出功能,但是在某些实施例中,可以将触控面板7071与显示面板7061集成而实现终端的输入和输出功能,具体此处不做限定。
接口单元708为外部装置与移动终端700连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。
存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器709可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器710是移动终端700的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器709内的软件程序和/或模块,以及调用存储在存储器709内的数据,执行终端的各种功能和处理数据,从而对终端进行整体监控。处理器710可包括一个或多个处理单元;优选的,处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
移动终端700还可以包括给各个部件供电的电源711(比如电池),优选的,电源711可以通过电源管理系统与处理器710逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端700包括一些未示出的功能模块,在此不再赘述。
优选地,本发明实施例还提供一种移动终端,包括处理器710,存储器709,存储在存储器709上并可在所述处理器710上运行的计算机程序,该计算机程序被处理器710执行时实现上述应用于移动终端的信息处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述应用于移动终端的信息处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(RandomAccess Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (13)

1.一种信息处理方法,其特征在于,应用于车辆,所述方法包括:
所述车辆调用摄像头采集图像;
所述车辆通过其与移动终端之间的连接,向所述移动终端发送所述图像;
所述车辆通过所述连接,接收所述移动终端对所述图像进行图像识别得到的识别结果;
所述车辆根据所述识别结果,执行相应的处理操作;
所述车辆通过其与移动终端之间的连接,向所述移动终端发送所述图像之前,所述方法还包括:
所述车辆获得其所处路段的路段信息;
所述向所述移动终端发送所述图像,包括:
向所述移动终端发送所述图像和所述路段信息;
所述接收所述移动终端对所述图像进行图像识别得到的识别结果,包括:
接收所述移动终端根据所述路段信息确定的识别精度级别对所述图像进行图像识别得到的与所述识别精度级别对应的识别结果。
2.根据权利要求1所述的方法,其特征在于,所述通过所述车辆与移动终端之间的连接,向所述移动终端发送所述图像之前,所述方法还包括:
所述车辆通过其与移动终端之间的连接,向所述移动终端发送图像识别任务类型;
其中,所述识别结果与所述图像识别任务类型对应。
3.根据权利要求2所述的方法,其特征在于,
所述图像识别任务类型为疲劳驾驶检测类型;
所述根据所述识别结果,执行相应的处理操作,包括:
若所述识别结果用于表征所述车辆处于用户疲劳驾驶状态,执行疲劳驾驶提示操作;
或者,
所述图像识别任务类型为手势识别类型;
所述车辆根据所述识别结果,执行相应的处理操作,包括:
所述车辆根据所述识别结果,获得对目标车辆部件的部件控制策略;其中,所述目标车辆部件为与所述图像中的用户手势操作关联的车辆部件;
所述车辆根据所述部件控件策略,对所述目标车辆部件进行控制。
4.一种信息处理方法,其特征在于,应用于移动终端,所述方法包括:
所述移动终端通过其与车辆之间的连接,接收所述车辆发送的图像;
所述移动终端对所述图像进行图像识别,得到识别结果;
所述移动终端通过所述连接,向所述车辆发送所述识别结果;
所述接收所述车辆发送的图像,包括:
接收所述车辆发送的图像及所述车辆所处路段的路段信息;
所述移动终端对所述图像进行图像识别,得到识别结果,包括:
所述移动终端根据所述路段信息,确定识别精度级别;
所述移动终端对所述图像进行图像识别,得到与所述识别精度级别对应的识别结果。
5.根据权利要求4所述的方法,其特征在于,
所述移动终端通过其与车辆之间的连接,接收所述车辆发送的图像之前,所述方法还包括:
所述移动终端通过其与车辆之间的连接,接收所述车辆发送的图像识别任务类型;
所述移动终端对所述图像进行图像识别,得到识别结果,包括:
所述移动终端对所述图像进行图像识别,得到与所述图像识别任务类型对应的识别结果。
6.一种信息处理装置,其特征在于,应用于车辆,所述装置包括:
采集模块,用于调用摄像头采集图像;
第一发送模块,用于通过所述车辆与移动终端之间的连接,向所述移动终端发送所述图像;
接收模块,用于通过所述连接,接收所述移动终端对所述图像进行图像识别得到的识别结果;
处理模块,用于根据所述识别结果,执行相应的处理操作;
所述装置还包括:
获得模块,用于在通过所述车辆与移动终端之间的连接,向所述移动终端发送所述图像之前,获得所述车辆所处路段的路段信息;
所述第一发送模块,具体用于:
向所述移动终端发送所述图像和所述路段信息;
所述接收模块,具体用于:
接收所述移动终端根据所述路段信息确定的识别精度级别对所述图像进行图像识别得到的与所述识别精度级别对应的识别结果。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第二发送模块,用于在通过所述车辆与移动终端之间的连接,向所述移动终端发送所述图像之前,通过所述车辆与移动终端之间的连接,向所述移动终端发送图像识别任务类型;
其中,所述识别结果与所述图像识别任务类型对应。
8.根据权利要求7所述的装置,其特征在于,
所述图像识别任务类型为疲劳驾驶检测类型;
所述处理模块,具体用于:
若所述识别结果用于表征所述车辆处于用户疲劳驾驶状态,执行疲劳驾驶提示操作;
或者,
所述图像识别任务类型为手势识别类型;
所述处理模块,包括:
获得单元,用于根据所述识别结果,获得对目标车辆部件的部件控制策略;其中,所述目标车辆部件为与所述图像中的用户手势操作关联的车辆部件;
控制单元,用于根据所述部件控件策略,对所述目标车辆部件进行控制。
9.一种信息处理装置,其特征在于,应用于移动终端,所述装置包括:
第一接收模块,用于通过所述移动终端与车辆之间的连接,接收所述车辆发送的图像;
处理模块,用于对所述图像进行图像识别,得到识别结果;
发送模块,用于通过所述连接,向所述车辆发送所述识别结果;
所述第一接收模块,具体用于:
接收所述车辆发送的图像及所述车辆所处路段的路段信息;
所述处理模块,包括:
确定模块,用于根据所述路段信息,确定识别精度级别;
获得模块,用于对所述图像进行图像识别,得到与所述识别精度级别对应的识别结果。
10.根据权利要求9所述的装置,其特征在于,
所述装置还包括:
第二接收模块,用于在通过所述移动终端与车辆之间的连接,接收所述车辆发送的图像之前,通过所述移动终端与车辆之间的连接,接收所述车辆发送的图像识别任务类型;
所述处理模块,具体用于:
对所述图像进行图像识别,得到与所述图像识别任务类型对应的识别结果。
11.一种车辆,其特征在于,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至3中任一项所述的信息处理方法的步骤。
12.一种移动终端,其特征在于,包括处理器,存储器,存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求4至5中任一项所述的信息处理方法的步骤。
13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至3中任一项所述的信息处理方法的步骤,或者实现如权利要求4至5中任一项所述的信息处理方法的步骤。
CN201910131112.3A 2019-02-21 2019-02-21 信息处理方法、装置、车辆及移动终端 Active CN109886199B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910131112.3A CN109886199B (zh) 2019-02-21 2019-02-21 信息处理方法、装置、车辆及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910131112.3A CN109886199B (zh) 2019-02-21 2019-02-21 信息处理方法、装置、车辆及移动终端

Publications (2)

Publication Number Publication Date
CN109886199A CN109886199A (zh) 2019-06-14
CN109886199B true CN109886199B (zh) 2022-04-12

Family

ID=66928806

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910131112.3A Active CN109886199B (zh) 2019-02-21 2019-02-21 信息处理方法、装置、车辆及移动终端

Country Status (1)

Country Link
CN (1) CN109886199B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111114541B (zh) * 2019-12-31 2021-08-20 华为技术有限公司 车辆控制方法、装置、控制器和智能车

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294190A (zh) * 2012-02-06 2013-09-11 福特全球技术公司 通过手势识别与车辆控制交互的识别系统
CN107341468A (zh) * 2017-06-30 2017-11-10 北京七鑫易维信息技术有限公司 驾驶员状态识别方法、装置、存储介质及处理器
CN107423673A (zh) * 2017-05-11 2017-12-01 上海理湃光晶技术有限公司 一种人脸识别方法及系统
CN107977668A (zh) * 2017-07-28 2018-05-01 北京物灵智能科技有限公司 一种机器人图像识别方法及系统

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8493981B2 (en) * 2010-11-03 2013-07-23 Broadcom Corporation Switch module
JP5765019B2 (ja) * 2011-03-31 2015-08-19 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
US8890674B2 (en) * 2011-06-07 2014-11-18 Continental Automotive Systems, Inc. Driver assistance detection system
CN104240508B (zh) * 2014-09-20 2016-05-04 青岛橡胶谷知识产权有限公司 用于路段拥堵报警的无人机检测系统
CN104318765A (zh) * 2014-10-22 2015-01-28 浙江工业大学 基于智能手机的实时交通拥堵自动检测方法
CA2910231A1 (en) * 2014-10-23 2016-04-23 Alcohol Countermeasure Systems (International) Inc. Method for driver face detection in videos
CN104851302B (zh) * 2015-06-10 2016-03-16 福建瑞聚信息技术股份有限公司 一种拥堵等级网络识别方法
CN106203346A (zh) * 2016-07-13 2016-12-07 吉林大学 一种面向智能车辆驾驶模式切换的道路环境图像分类方法
CN106709420B (zh) * 2016-11-21 2020-07-10 厦门瑞为信息技术有限公司 一种监测营运车辆驾驶人员驾驶行为的方法
CN106781570B (zh) * 2016-12-30 2019-08-02 大唐高鸿信息通信研究院(义乌)有限公司 一种适用于车载短距离通信网络的高速公路危险路况识别和告警方法
CN107341810B (zh) * 2017-06-16 2020-07-10 重庆交通大学 一种车辆自动识别方法、装置及电子设备
CN107798918B (zh) * 2017-11-28 2021-07-16 公安部道路交通安全研究中心 一种交通事故现场安全防护监测方法和装置
CN108009495A (zh) * 2017-11-30 2018-05-08 西安科锐盛创新科技有限公司 疲劳驾驶预警方法
CN108871458A (zh) * 2018-07-29 2018-11-23 合肥市智信汽车科技有限公司 一种运输车辆远程监控报警系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294190A (zh) * 2012-02-06 2013-09-11 福特全球技术公司 通过手势识别与车辆控制交互的识别系统
CN107423673A (zh) * 2017-05-11 2017-12-01 上海理湃光晶技术有限公司 一种人脸识别方法及系统
CN107341468A (zh) * 2017-06-30 2017-11-10 北京七鑫易维信息技术有限公司 驾驶员状态识别方法、装置、存储介质及处理器
CN107977668A (zh) * 2017-07-28 2018-05-01 北京物灵智能科技有限公司 一种机器人图像识别方法及系统

Also Published As

Publication number Publication date
CN109886199A (zh) 2019-06-14

Similar Documents

Publication Publication Date Title
CN111049979B (zh) 一种应用分享方法、电子设备及计算机可读存储介质
CN109343759B (zh) 一种息屏显示的控制方法及终端
CN108279948B (zh) 一种应用程序启动方法及移动终端
CN108319390B (zh) 一种柔性屏的控制方法及移动终端
CN108494030B (zh) 一种无线充电方法、终端及发射端设备
CN111083684A (zh) 控制电子设备的方法及电子设备
CN108897473B (zh) 一种界面显示方法及终端
CN111026484A (zh) 一种应用分享方法、第一电子设备及计算机可读存储介质
CN109857297B (zh) 信息处理方法及终端设备
CN110456395B (zh) 一种定位方法及终端设备
CN109888928B (zh) 一种终端及无线充电控制方法
CN110308834B (zh) 应用图标显示方式的设置方法及终端
EP4084511A1 (en) Application sharing method, first electronic device, and computer-readable storage medium
CN111143002A (zh) 一种应用分享方法、电子设备及计算机可读存储介质
CN109523253B (zh) 一种支付方法和装置
CN110851220A (zh) 一种信息输出方法及电子设备
CN111131885A (zh) 一种播放控制方法及电子设备
CN110096203B (zh) 一种截图方法及移动终端
CN109443261B (zh) 折叠屏移动终端折叠角度的获取方法及移动终端
CN109005297B (zh) 一种导航应用的显示方法和移动终端
CN108021315B (zh) 一种控制方法及移动终端
CN108089935B (zh) 一种应用程序的管理方法及移动终端
CN111163227B (zh) 一种分享方法及电子设备
CN109947617B (zh) 一种监听应用界面显示内容的方法、终端及可读存储介质
CN109886199B (zh) 信息处理方法、装置、车辆及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20211009

Address after: 100176 101, floor 1, building 1, yard 7, Ruihe West 2nd Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing

Applicant after: Apollo Zhilian (Beijing) Technology Co., Ltd

Address before: 100085 third floor, baidu building, No. 10, Shangdi 10th Street, Haidian District, Beijing

Applicant before: Baidu Online Network Technology (Beijing) Co., Ltd

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant