CN112000829B - 一种咨询响应方法、装置、设备及存储介质 - Google Patents

一种咨询响应方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN112000829B
CN112000829B CN202010916218.7A CN202010916218A CN112000829B CN 112000829 B CN112000829 B CN 112000829B CN 202010916218 A CN202010916218 A CN 202010916218A CN 112000829 B CN112000829 B CN 112000829B
Authority
CN
China
Prior art keywords
image
consultation
vehicle
user
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010916218.7A
Other languages
English (en)
Other versions
CN112000829A (zh
Inventor
陆玥
杨中远
韩金金
王楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
iFlytek Co Ltd
Original Assignee
iFlytek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by iFlytek Co Ltd filed Critical iFlytek Co Ltd
Priority to CN202010916218.7A priority Critical patent/CN112000829B/zh
Publication of CN112000829A publication Critical patent/CN112000829A/zh
Application granted granted Critical
Publication of CN112000829B publication Critical patent/CN112000829B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/535Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Abstract

本申请提出一种咨询响应方法、装置、设备及存储介质,该方法包括:获取咨询图像,所述咨询图像通过对车辆的特定区域进行拍摄得到;通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件;其中,所述数据库存储所有车型的所有车辆部件的图像和相关数据信息;从所述数据库中获取与所述车辆部件相关的数据信息,并输出所获取的数据信息。上述处理过程实现了基于图像的汽车知识咨询,使得用户可以通过拍摄图像的方式,咨询与汽车部件相关的信息。应用该方法,能够从根本上解决由于用户不知道汽车部件名称而无法咨询汽车部件相关信息的问题。

Description

一种咨询响应方法、装置、设备及存储介质
技术领域
本申请涉及数据检索技术领域,尤其涉及一种咨询响应方法、装置、设备及存储介质。
背景技术
汽车知识问答服务,是车载系统提供给用户的基础服务。通过该服务,用户可以询问与汽车相关的知识并获得解答,从而使用户能够方便地了解汽车。例如,用户可以将某一汽车部件名称输入汽车知识问答服务,汽车知识问答服务即可输出该部件的功能、使用注意事项、更换须知等相关信息,以供用户全面了解该汽车部件。
但是,汽车功能部件数量众多,对于普通用户来说,通常无法确定汽车所有部件的规范名称。此时,对于用户不知道规范名称的部件,则无法通过汽车知识问答系统进行提问,导致用户无法通过汽车知识问答服务,了解部件信息。
发明内容
为了解决上述问题,本申请提出一种咨询响应方法、装置、设备及存储介质,意在使得用户在不知道车辆部件名称的情况下,依然能够获取车辆部件相关信息。
为了达到上述目的,本申请提出如下具体方案:
一种咨询响应方法,包括:
获取咨询图像,所述咨询图像通过对车辆的特定区域进行拍摄得到;
通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件;其中,所述数据库存储所有车型的所有车辆部件的图像和相关数据信息;
从所述数据库中获取与所述车辆部件相关的数据信息,并输出所获取的数据信息。
可选的,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:
确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型;
从所述数据库的目标数据集合中,检索与所述咨询图像匹配的图像;其中,所述目标数据集合存储所述目标车型的所有车辆部件的图像和相关数据信息;
根据检索到的图像,确定所述咨询图像中包含的车辆部件。
可选的,所述确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型,包括:
输出询问信息,所述询问信息用于询问所述咨询图像中的图像内容对应的车辆型号;
获取与所述询问信息对应的答复信息,并基于获取的答复信息确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型。
可选的,当未能确定所述咨询图像中的图像内容对应的车辆型号时,从所述数据库中存储的所有车型的所有车辆部件的图像中,检索与所述咨询图像匹配的图像。
可选的,与所述车辆部件相关的数据信息,包括:
所述车辆部件的名称;
所述方法还包括:
获取包含所述车辆部件的名称的咨询信息;
从所述数据库中,确定出与所述咨询信息对应的数据信息,并将确定的数据信息输出。
可选的,如果所述咨询图像中包含多个车辆部件,则通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容;
则,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:
通过从数据库中检索与所述符合用户咨询需求的图像内容匹配的图像,确定所述咨询图像中包含的车辆部件。
可选的,所述通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容,包括:
分别为所述咨询图像中的各个车辆部件添加标识;
输出携带所述标识的咨询图像,并且输出指示信息,所述指示信息用于指示用户从携带所述标识的咨询图像中,选择目标标识,所述目标标识为符合用户咨询需求的图像内容所携带的标识;
获取用户选择的目标标识的信息;
根据用户所选择的目标标识,从所述咨询图像中,确定出符合用户咨询需求的图像内容。
本申请提出的咨询响应方法,可以获取用户对车辆的特定区域进行拍摄得到的图像,并将该图像作为咨询图像,通过从数据库中检索与该咨询图像匹配的图像,确定该咨询图像中包含的车辆部件,然后,从数据库中获取与该车辆部件相关的数据信息,并输出所获取的数据信息。上述处理过程实现了基于图像的汽车知识咨询,使得用户可以通过拍摄图像的方式,咨询与汽车部件相关的信息。应用该方法,能够从根本上解决由于用户不知道汽车部件名称而无法咨询汽车部件相关信息的问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1是本申请实施例提供的一种咨询响应方法的流程示意图;
图2是本申请实施例提供的车辆仪表盘指示灯示意图;
图3是本申请实施例提供的另一种咨询响应方法的流程示意图;
图4是本申请实施例提供的数据库架构示意图;
图5是本申请实施例提供的咨询图像示意图;
图6是本申请实施例提供的对图5所示的图像中的图像内容添加标识的示意图;
图7是本申请实施例提供的一种咨询响应装置的结构示意图;
图8是本申请实施例提供的一种咨询响应设备的结构示意图。
具体实施方式
本申请实施例所提出的技术方案适用于汽车知识问答应用场景。采用本申请实施例技术方案,能够基于用户提出的汽车知识咨询信息,向用户反馈符合用户需求的汽车知识。
通常情况下,在汽车知识问答场景中,用户的咨询信息中需要携带汽车部件名称,系统获取到该用户咨询信息后,根据其中包含的汽车部件名称,从数据库中检索与该汽车部件相关的信息并反馈给用户,从而使用户可以了解与该汽车部件相关的信息。
例如,用户可以咨询“方向盘无法转动怎么办”,在该咨询信息中,包含汽车部件“方向盘”,则系统从数据库中检索到与“方向盘”相关的信息,还可以进一步从“方向盘”相关的信息中,检索出与“无法转动”故障相关的故障应对措施,并反馈给用户,从而可以使用户了解方向盘无法转动时该如何处理。
但是对于普通用户来说,有很多汽车部件是不认识的,即不确定其规范名称。此时,用户无法向汽车知识问答系统针对该不认识的部件进行提问,或者会因为不确定汽车部件名称,无法精准提问,也就无法通过汽车问答服务,获取该部件的相关信息。
针对上述问题,本申请实施例提出一种咨询响应方法,该方法可示例性地应用于汽车问答服务,或者应用于车载系统、智能终端等,能够根据用户的咨询问题,向用户反馈所咨询的信息,并且,本申请实施例技术方案能够在用户未知汽车部件名称的情况下,实现针对汽车部件的知识问答,从而使得用户能够更方便地获取汽车部件相关信息。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提出一种咨询响应方法,该方法可示例性地应用于汽车知识问答系统,该汽车知识问答系统可运行于车载系统、智能终端等任意的智能硬件设备;也可以运行于云端服务器,同时通过车载系统、智能终端等终端设备获取及输出信息。参见图1所示,该方法包括:
S101、获取咨询图像,所述咨询图像通过对车辆的特定区域进行拍摄得到。
具体的,上述的咨询图像,是指用户对车辆的某一特定区域进行拍摄得到的图像,该图像作为用户向汽车知识问答系统进行咨询的素材,输入汽车知识问答系统。
其中,上述的车辆的特定区域,可以是车辆的某一零件,或某一信号指示灯、仪表盘或显示屏幕的某一显示区域等。理论上,车辆上所具备的任意区域,均可以被拍摄得到咨询图像。
例如,图2所示,为车辆仪表盘中场景的指示灯图标。在汽车领域,这些图标均具有相应的名称,例如“XXX指示灯”,但是对于用户来说,并不知道这些图标的准确名称。当这些指示灯图标亮起时,用户完全不知道该如何应对。此时用户可以通过汽车知识问答系统,了解上述各个图标的含义和应对措施。当用户想要了解第一个指示灯图标时,可以直接用手机对车辆仪表盘上的该图标进行拍摄得到咨询图像,然后将该咨询图像输入汽车知识问答系统。
该咨询图像,优选为彩色图像,其图像大小符合汽车知识问答系统对输入图像大小的要求,其图像格式符合汽车知识问答系统对输入图像格式的要求。
S102、通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件。其中,所述数据库存储所有车型的所有车辆部件的图像和相关数据信息。
具体的,本申请实施例预先构建数据库,该数据库具体为汽车知识数据库,在该数据库中,存储着市面所有车型的所有部件的图像,以及相关数据信息,例如部件的名称、功能、使用方法、故障处理、注意事项等信息。
示例性的,该数据库中的数据,来自于车型厂商的电子手册或某些论坛。从车型电子手册或论坛上获取与某车型的各部件对应的图片、名称、使用方法、注意事项等内容,分别填入数据库中的该车型各部件的图片、名称、使用方法、注意事项属性,形成属性的key与value一一对应的数据存储。
在获取咨询图像后,本申请实施例从该数据库中,检索与该咨询图像匹配的图像,从而确定该咨询图像中包含的车辆部件。
比如,本申请实施例采用图像匹配技术,从数据库中,检索与该咨询图像匹配的图像。示例性的,先从咨询图像中分割出车辆部件图像区域,然后,将该车辆部件图像区域的图像内容,与数据库中存储的各车型的车辆部件的图像内容进行图像匹配处理。
由于不同车型的同一功能部件的结构或形状、颜色等外在特征通常具有相似性,因此,经过上述的图像匹配处理,可能从数据库中检索到多个匹配图像。对此,本申请实施例设定图像匹配阈值,并设定将与咨询图像的匹配度大于匹配阈值的图像,作为与咨询图像匹配的图像,或者,将与咨询图像的匹配度大于匹配阈值,并且与咨询图像的匹配度最大的图像,作为与咨询图像匹配的图像。
根据数据库中存储的车辆部件图像与车辆部件的对应关系,基于上述检索到的与咨询图像匹配的图像,可以确定与该图像对应的部件名称,从而确定上述咨询图像中包含的车辆部件。
S103、从所述数据库中获取与所述车辆部件相关的数据信息,并输出所获取的数据信息。
具体的,当确定咨询图像中包含的车辆部件后,可以进一步从数据库中,读取与该车辆部件对应的数据信息,例如该车辆部件的名称、功能、使用方法、故障处理、注意事项等,并将读取的数据信息输出给用户,以使用户能够了解其拍摄的咨询图像中的车辆部件的相关信息。
其中,对于从数据库中获取的与咨询图像中包含的车辆部件相关的数据信息,可以通过文本形式、语音形式等进行输出,其输出形式可以由用户设定。
通过上述介绍可见,本申请实施例提出的咨询响应方法,可以获取用户对车辆的特定区域进行拍摄得到的图像,并将该图像作为咨询图像,通过从数据库中检索与该咨询图像匹配的图像,确定该咨询图像中包含的车辆部件,然后,从数据库中获取与该车辆部件相关的数据信息,并输出所获取的数据信息。上述处理过程实现了基于图像的汽车知识咨询,使得用户可以通过拍摄图像的方式,咨询与汽车部件相关的信息。应用该方法,能够从根本上解决由于用户不知道汽车部件名称而无法咨询汽车部件相关信息的问题。
作为一种示例性的实现方式,参见图3所示,上述的通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,具体包括:
S302、确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型。
具体的,在汽车领域,相同功能的汽车部件在不同车型上会有细微的差异,如果直接从数据库中检索与咨询图像中的车辆部件匹配的图像,则很有可能会检索到大量的相似图像,从而为匹配图像的筛选带来压力。
为了能够更快速、更准确地从数据库中检索到与咨询图像匹配的图像,本申请实施例首先确定咨询图像中的图像内容对应的车辆型号,该车辆型号作为目标车型,作为从数据库中检索与咨询图像匹配的图像的约束条件。
例如,假设用户所驾车辆为A品牌a1系列2020款运动版,则当该用户通过汽车知识问答系统咨询某一不知名汽车部件的相关信息时,可以对该汽车部件进行拍摄后,将拍摄图像上传汽车知识问答系统。汽车知识问答系统获取到该咨询图像后,首先确定该图像中的汽车部件对应的车型为“A品牌a1系列2020款运动版”。
示例性的,可以限定当用户向汽车知识问答系统输入咨询图像时,同步输入车辆型号。则当汽车知识问答系统获取到咨询图像时,根据同步接收的车辆型号信息,可以确定目标车型。
S303、从所述数据库的目标数据集合中,检索与所述咨询图像匹配的图像。其中,所述目标数据集合存储所述目标车型的所有车辆部件的图像和相关数据信息。
具体的,为了便于从数据库中检索不同车型的车辆部件对应的相关信息,本申请实施例对上述数据库中的数据,按照车型分集合存储。参见图4所示,在该数据库中存在多个数据集合,每个数据集合中存储某款车型的所有车辆部件的相关信息,包括图片、名称(含义)、使用方法等。
则,当确定上述的目标车型时,从数据库中选取包含该目标车型的所有车辆部件的图像和相关数据信息的数据集合,作为目标数据集合。
然后,从该数据集合中,检索与咨询图像匹配的图像。
可以理解,上述的确定目标数据集合的处理,相当于缩小了数据检索范围,有助于更快速、更准确地检索到与咨询图像匹配的、符合用户预期的图像。
S304、根据检索到的图像,确定所述咨询图像中包含的车辆部件。
当从目标数据集合中检索到与咨询图像匹配的图像后,该与咨询图像匹配的图像中的车辆部件,即为该咨询图像中包含的车辆部件。
图3所示的实施例中的步骤S301、S305分别对应图1所示的方法实施例中的步骤S101、S103,其具体内容请参见图1所示的方法实施例的内容,此处不再赘述。
作为另一种可选的实现方式,本申请另一实施例还提出,上述的确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型,还可以通过如下方式实现:
首先,输出询问信息,该询问信息用于询问所述咨询图像中的图像内容对应的车辆型号。
具体的,当汽车知识问答系统获取到用户输入的咨询图像时,输出例如“请问此图片对应哪个车型”的询问信息,主动询问用户该咨询图像对应的车辆型号。
示例性的,该询问信息可以为语音形式的询问信息,或者文本形式的询问信息。
然后,获取与所述询问信息对应的答复信息,并基于获取的答复信息确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型。
用户基于该询问信息,通过汽车知识问答系统输入答复信息,例如用户可输入“A品牌a1系列2020款运动版”。示例性的,该答复信息可以是语音或文本形式的答复信息,当其为语音形式的答复信息时,用户可通过麦克风将该答复信息输入汽车知识问答系统,当该答复信息为文本形式时,用户可通过键盘、手写屏等文本输入装置将该答复信息输入汽车知识问答系统。
相应的,汽车知识问答系统获取到用户输入的与上述询问信息对应的答复信息后,可以基于获取的答复信息,从中提取出表示车辆型号的信息,作为确定的目标车型。
上述实施例中示例性地介绍了确定咨询图像中的图像内容对应的车辆型号的实现方式,在实际应用中,也可以采用其他方式确定上述的目标车型。
但是,在实际应用中,也可能无法确定上述的目标车型,例如用户不确定自己驾驶的车辆的具体车型信息,此时无法回答系统给出的询问信息。
当不能确定上述的咨询图像中的图像内容对应的车辆型号时,也就无法确定上述的目标数据集合,此时,本申请实施例设定,汽车知识问答系统从整个数据库中检索与咨询图像匹配的图像,也就是从数据库中存储的所有车型的所有车辆部件的图像中,检索与咨询图像匹配的图像。
此时,可能从数据库中检索得到多幅图像,可以将检索到的多幅图像均作为与咨询图像匹配的图像,或者,从检索到的多幅图像中,确定出与咨询图像匹配度最高的图像,作为与咨询图像匹配的图像。
作为一种示例性的实现方式,上述的与所述车辆部件相关的数据信息,可以是该车辆部件名称。
也就是,当汽车知识问答系统根据获取的咨询图像,经过处理确定咨询图像中包含的车辆部件后,从数据库中获取该车辆部件的名称,并输出该车辆部件名称。
该车辆部件名称的输出,使得用户可以确定咨询图像中的车辆部件的规范名称。
用户获取到汽车知识问答系统输出的车辆部件名称时,即可确定想要了解的该车辆部件的名称。此时,用户可以进一步针对该车辆部件,进行其他相关内容的咨询。
例如,假设用户对仪表盘亮起的某一指示灯进行拍摄,并将拍摄图像输入汽车知识问答系统,按照本申请实施例技术方案,汽车知识问答系统通过数据库检索,确定该指示灯的名称,假设该指示灯为“发动机故障指示灯”,则将“发动机故障指示灯”输出给用户。
用户获取该指示灯名称后,可以进一步向汽车知识问答系统输入咨询信息“发动机故障指示灯亮起时该怎么做”,即用户可以进一步咨询与“发动机故障指示灯”相关的其他信息。
由于此时用户已经获取了感兴趣的车辆部件的名称,因此当其再次咨询与该车辆部件相关的其他信息时,需要在咨询信息中携带该车辆部件名称,以便汽车知识问答系统能够准确地从数据库中检索与该车辆部件相关的其他信息。
可见,当汽车知识问答系统输出咨询图像中包含的车辆部件的名称后,当用户进一步向汽车知识问答系统发送咨询信息时,汽车知识问答系统可以获取用户发送的包含该车辆部件的名称的咨询信息。
然后,汽车知识问答系统从数据库中,检索与该咨询信息对应的数据信息,并将检索确定的数据信息输出。
例如,假设用户向汽车知识问答系统中输入了咨询信息“发动机故障指示灯亮起时该怎么做”,则汽车知识问答系统从数据中检索出发送机故障指示灯亮起时的注意事项以及处理方式相关信息,并将检索到的信息输出,从而使用户可以根据输出的信息确定当发动机故障指示灯亮起时该如何应对。
作为一种可能的情况,用户在对车辆某一区域进行拍摄时,可能会同时拍摄到车辆的多个部件,从而导致在咨询图像中包含多个车辆部件。当用户将该咨询图像输入汽车知识问答系统时,汽车知识问答系统在对咨询图像进行特征提取用于图像匹配时,会发现在咨询图像中包含多个车辆部件,此时无法确定用户想要咨询的到底是哪个车辆部件。对此,本申请实施例设定,当咨询图像中包含多个车辆部件时,通过与用户交互,从咨询图像中确定出符合用户咨询需求的图像内容。
示例性的,可以直接输出“请标记所咨询的具体内容”等信息,同时在汽车知识问答系统的显示系统中,输出该咨询图像。用户在系统输出的图像中,选择所咨询的图像内容并反馈给系统,则系统可以基于用户的选择反馈,从咨询图像中确定出符合用户咨询需求的图像内容。
上述的交互过程,可以通过汽车知识问答系统的交互界面实现。示例性的,该交互界面可以设置触控屏,则当系统输出咨询图像并且指示用户在该咨询图像上标记所咨询的具体内容时,用户可以直接在显示该咨询图像的触控屏上进行点击或标记。
基于上述处理,当汽车知识问答系统从包含多个车辆部件的咨询图像中确定出符合用户咨询需求的图像内容后,在从数据库中检索与咨询图像匹配的图像时,具体是从数据库中检索与该咨询图像中的、符合用户咨询需求的图像内容匹配的图像,并且通过该图像检索处理,确定该咨询图像中包含的车辆部件,此时确定的车辆部件,即为该咨询图像包含的多个车辆部件中的、用户需要咨询的车辆部件。
作为另一种可选的实现方式,本申请实施例还提出,上述的通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容,还可以通过执行如下步骤SS10~SS13的处理而实现:
SS10、分别为所述咨询图像中的各个车辆部件添加标识。
具体的,如果汽车知识问答系统在对咨询图像进行特征提取时,发现在该咨询图像中存在多个车辆部件,则为该咨询图像中的各个车辆部件分别添加标识。
示例性的,该标识的具体形式可以灵活设置,例如可以是高亮显示、框选、颜色标识等。
例如,假设用户向汽车知识问答系统输入了图5所示的咨询图像,汽车知识问答系统在对该图像进行特征提取时,发现在该图像中包含多个车辆部件,例如包括指示灯,还包括仪表盘、仪表指针等。但是,用户并没有指明所咨询的具体部件。
此时,汽车知识问答系统对该图像中的各车辆部件添加标识。
例如图6所示,对图5所示图像中的两个指示灯分别添加包含不同数字的标注框。从而使该两个指示灯具有明显区别的标识。本申请实施例仅以图6所示介绍对咨询图像中的车辆部件添加标识的处理,当图6并不表示对所有车辆部件添加标识的结果,对图6中其他车辆部件,可以参照上述介绍,依次添加标识。
SS11、输出携带所述标识的咨询图像,并且输出指示信息,所述指示信息用于指示用户从携带所述标识的咨询图像中,选择目标标识,所述目标标识为符合用户咨询需求的图像内容所携带的标识。
具体的,系统为上述的咨询图像中的各个车辆部件分别添加标识后,将携带标识的咨询图像输出,同时输出指示信息,指示用户从携带标识的咨询图像中,选择符合用户咨询需求的图像内容所携带的标识。
例如,系统输出图6所示的咨询图像,同时输出指示信息“请选择所咨询的车辆部件对应的标识”,或“请选择咨询1号部件还是2号部件”等,指示用户从该咨询图像中选择目标标识。
SS12、获取用户选择的目标标识的信息。
用户将所选择的符合咨询需求的图像内容所携带的标识,作为目标标识输入汽车知识问答系统,则汽车知识问答系统可以获取用户选择的目标标识的信息。
SS13、根据用户所选择的目标标识,从所述咨询图像中,确定出符合用户咨询需求的图像内容。
具体的,当汽车知识问答系统确定用户所选择的目标标识时,将该目标标识对应的图像内容,作为符合用户咨询需求的图像内容。
例如,假设当系统输出图6所示的咨询图像,并且输出指示信息“请选择所咨询的车辆部件对应的标识”时,用户向系统输入了“2”,则系统将图6中标识“2”对应的指示灯,作为符合用户咨询需求的图像内容。
与上述的咨询响应方法相对应的,本申请实施例还提出一种咨询响应装置,参见图7所示,该装置包括:
图像获取单元100,用于获取咨询图像,所述咨询图像通过对车辆的特定区域进行拍摄得到;
判断处理单元110,用于通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件;其中,所述数据库存储所有车型的所有车辆部件的图像和相关数据信息;
信息输出单元120,用于从所述数据库中获取与所述车辆部件相关的数据信息,并输出所获取的数据信息。
本申请实施例提出的咨询响应装置,可以获取用户对车辆的特定区域进行拍摄得到的图像,并将该图像作为咨询图像,通过从数据库中检索与该咨询图像匹配的图像,确定该咨询图像中包含的车辆部件,然后,从数据库中获取与该车辆部件相关的数据信息,并输出所获取的数据信息。上述处理过程实现了基于图像的汽车知识咨询,使得用户可以通过拍摄图像的方式,咨询与汽车部件相关的信息。应用该装置,能够从根本上解决由于用户不知道汽车部件名称而无法咨询汽车部件相关信息的问题。
可选的,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:
确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型;
从所述数据库的目标数据集合中,检索与所述咨询图像匹配的图像;其中,所述目标数据集合存储所述目标车型的所有车辆部件的图像和相关数据信息;
根据检索到的图像,确定所述咨询图像中包含的车辆部件。
可选的,所述确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型,包括:
输出询问信息,所述询问信息用于询问所述咨询图像中的图像内容对应的车辆型号;
获取与所述询问信息对应的答复信息,并基于获取的答复信息确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型。
可选的,当未能确定所述咨询图像中的图像内容对应的车辆型号时,所述判断处理单元110从所述数据库中存储的所有车型的所有车辆部件的图像中,检索与所述咨询图像匹配的图像。
可选的,与所述车辆部件相关的数据信息,包括:
所述车辆部件的名称;
所述信息输出单元还用于:
获取包含所述车辆部件的名称的咨询信息;
从所述数据库中,确定出与所述咨询信息对应的数据信息,并将确定的数据信息输出。
可选的,如果所述咨询图像中包含多个车辆部件,则所述判断处理单元110通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容;
则,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:
通过从数据库中检索与所述符合用户咨询需求的图像内容匹配的图像,确定所述咨询图像中包含的车辆部件。
可选的,所述通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容,包括:
分别为所述咨询图像中的各个车辆部件添加标识;
输出携带所述标识的咨询图像,并且输出指示信息,所述指示信息用于指示用户从携带所述标识的咨询图像中,选择目标标识,所述目标标识为符合用户咨询需求的图像内容所携带的标识;
获取用户选择的目标标识的信息;
根据用户所选择的目标标识,从所述咨询图像中,确定出符合用户咨询需求的图像内容。
具体的,上述的咨询响应装置的各个单元的具体工作内容,请参见上述方法实施例的内容,此处不再重复。
本申请另一实施例还提出一种咨询响应设备,参见图8所示,该设备包括:
存储器200和处理器210;
其中,所述存储器200与所述处理器210连接,用于存储程序;
所述处理器210,用于通过运行所述存储器200中存储的程序,实现上述任一实施例公开的咨询响应方法。
具体的,上述目标检测结果的评测设备还可以包括:总线、通信接口220、输入设备230和输出设备240。
处理器210、存储器200、通信接口220、输入设备230和输出设备240通过总线相互连接。其中:
总线可包括一通路,在计算机系统各个部件之间传送信息。
处理器210可以是通用处理器,例如通用中央处理器(CPU)、微处理器等,也可以是特定应用集成电路(application-specific integrated circuit,ASIC),或一个或多个用于控制本发明方案程序执行的集成电路。还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
处理器210可包括主处理器,还可包括基带芯片、调制解调器等。
存储器200中保存有执行本发明技术方案的程序,还可以保存有操作系统和其他关键业务。具体地,程序可以包括程序代码,程序代码包括计算机操作指令。更具体的,存储器200可以包括只读存储器(read-only memory,ROM)、可存储静态信息和指令的其他类型的静态存储设备、随机存取存储器(random access memory,RAM)、可存储信息和指令的其他类型的动态存储设备、磁盘存储器、flash等等。
输入设备230可包括接收用户输入的数据和信息的装置,例如键盘、鼠标、摄像头、扫描仪、光笔、语音输入装置、触摸屏、计步器或重力感应器等。
输出设备240可包括允许输出信息给用户的装置,例如显示屏、打印机、扬声器等。
通信接口220可包括使用任何收发器一类的装置,以便与其他设备或通信网络通信,如以太网,无线接入网(RAN),无线局域网(WLAN)等。
处理器2102执行存储器200中所存放的程序,以及调用其他设备,可用于实现本申请实施例所提供的咨询响应方法的各个步骤。
本申请另一实施例还提供了一种存储介质,该存储介质上存储有计算机程序,该计算机程序被处理器运行时,实现上述任一实施例提供的咨询响应方法的各个步骤。
上述的咨询响应设备的各个部分的具体工作内容,以及上述的存储介质中的计算机程序被处理器运行时的具体处理内容,均可参见本申请上述方法实施例的内容,此处不再重复。
对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本申请各实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减,各实施例中记载的技术特征可以进行替换或者组合。
本申请各实施例种装置及终端中的模块和子模块可以根据实际需要进行合并、划分和删减。
本申请所提供的几个实施例中,应该理解到,所揭露的终端,装置和方法,可以通过其它的方式实现。例如,以上所描述的终端实施例仅仅是示意性的,例如,模块或子模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个子模块或模块可以结合或者可以集成到另一个模块,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或模块的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的模块或子模块可以是或者也可以不是物理上分开的,作为模块或子模块的部件可以是或者也可以不是物理模块或子模块,即可以位于一个地方,或者也可以分布到多个网络模块或子模块上。可以根据实际的需要选择其中的部分或者全部模块或子模块来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能模块或子模块可以集成在一个处理模块中,也可以是各个模块或子模块单独物理存在,也可以两个或两个以上模块或子模块集成在一个模块中。上述集成的模块或子模块既可以采用硬件的形式实现,也可以采用软件功能模块或子模块的形式实现。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件单元,或者二者的结合来实施。软件单元可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (8)

1.一种咨询响应方法,其特征在于,包括:
获取咨询图像,所述咨询图像通过对车辆的特定区域进行拍摄得到;
通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件;其中,所述数据库存储所有车型的所有车辆部件的图像和相关数据信息;
从所述数据库中获取与所述车辆部件相关的数据信息,并输出所获取的数据信息;
如果所述咨询图像中包含多个车辆部件,则通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容;
则,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:
通过从数据库中检索与所述符合用户咨询需求的图像内容匹配的图像,确定所述咨询图像中包含的车辆部件;
所述通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容,包括:
分别为所述咨询图像中的各个车辆部件添加标识;
输出携带所述标识的咨询图像,并且输出指示信息,所述指示信息用于指示用户从携带所述标识的咨询图像中,选择目标标识,所述目标标识为符合用户咨询需求的图像内容所携带的标识;
获取用户选择的目标标识的信息;
根据用户所选择的目标标识,从所述咨询图像中,确定出符合用户咨询需求的图像内容。
2.根据权利要求1所述的方法,其特征在于,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:
确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型;
从所述数据库的目标数据集合中,检索与所述咨询图像匹配的图像;其中,所述目标数据集合存储所述目标车型的所有车辆部件的图像和相关数据信息;
根据检索到的图像,确定所述咨询图像中包含的车辆部件。
3.根据权利要求2所述的方法,其特征在于,所述确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型,包括:
输出询问信息,所述询问信息用于询问所述咨询图像中的图像内容对应的车辆型号;
获取与所述询问信息对应的答复信息,并基于获取的答复信息确定所述咨询图像中的图像内容对应的车辆型号,作为目标车型。
4.根据权利要求2所述的方法,其特征在于,当未能确定所述咨询图像中的图像内容对应的车辆型号时,从所述数据库中存储的所有车型的所有车辆部件的图像中,检索与所述咨询图像匹配的图像。
5.根据权利要求1所述的方法,其特征在于,与所述车辆部件相关的数据信息,包括:
所述车辆部件的名称;
所述方法还包括:
获取包含所述车辆部件的名称的咨询信息;
从所述数据库中,确定出与所述咨询信息对应的数据信息,并将确定的数据信息输出。
6.一种咨询响应装置,其特征在于,包括:
图像获取单元,用于获取咨询图像,所述咨询图像通过对车辆的特定区域进行拍摄得到;
判断处理单元,用于通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件;其中,所述数据库存储所有车型的所有车辆部件的图像和相关数据信息;如果所述咨询图像中包含多个车辆部件,则通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容;则,所述通过从数据库中检索与所述咨询图像匹配的图像,确定所述咨询图像中包含的车辆部件,包括:通过从数据库中检索与所述符合用户咨询需求的图像内容匹配的图像,确定所述咨询图像中包含的车辆部件;所述通过与用户交互,从所述咨询图像中确定出符合用户咨询需求的图像内容,包括:分别为所述咨询图像中的各个车辆部件添加标识;输出携带所述标识的咨询图像,并且输出指示信息,所述指示信息用于指示用户从携带所述标识的咨询图像中,选择目标标识,所述目标标识为符合用户咨询需求的图像内容所携带的标识;获取用户选择的目标标识的信息;根据用户所选择的目标标识,从所述咨询图像中,确定出符合用户咨询需求的图像内容;
信息输出单元,用于从所述数据库中获取与所述车辆部件相关的数据信息,并输出所获取的数据信息。
7.一种咨询响应设备,其特征在于,包括:
存储器和处理器;
其中,所述存储器与所述处理器连接,用于存储程序;
所述处理器,用于通过运行所述存储器中的程序,实现如权利要求1至5中的任意一项所述的咨询响应方法。
8.一种存储介质,其特征在于,所述存储介质上存储有计算机程序,所述计算机程序被处理器运行时,实现如权利要求1至5中任意一项所述的咨询响应方法。
CN202010916218.7A 2020-09-03 2020-09-03 一种咨询响应方法、装置、设备及存储介质 Active CN112000829B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010916218.7A CN112000829B (zh) 2020-09-03 2020-09-03 一种咨询响应方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010916218.7A CN112000829B (zh) 2020-09-03 2020-09-03 一种咨询响应方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN112000829A CN112000829A (zh) 2020-11-27
CN112000829B true CN112000829B (zh) 2023-05-30

Family

ID=73465291

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010916218.7A Active CN112000829B (zh) 2020-09-03 2020-09-03 一种咨询响应方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112000829B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108090838A (zh) * 2017-11-21 2018-05-29 阿里巴巴集团控股有限公司 识别车辆受损部件的方法、装置、服务器、客户端及系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002099550A (ja) * 2000-09-22 2002-04-05 Honda Motor Co Ltd 部品検索システム、そのサーバ、ユーザ端末及び記録媒体
KR20090073554A (ko) * 2007-12-31 2009-07-03 아진산업(주) 임베디드 기반의 차량용 영상저장 장치 및 방법
CN105095828A (zh) * 2014-04-23 2015-11-25 比亚迪股份有限公司 车辆信息提供系统和方法
CN107193929B (zh) * 2017-05-17 2020-12-25 田兆杰 基于特征提取和相似度计算的车辆故障问答方法及装置
CN107729372A (zh) * 2017-09-12 2018-02-23 维沃移动通信有限公司 一种异常指示方法及移动终端
CN109816986A (zh) * 2017-11-22 2019-05-28 福特环球技术公司 提供车辆部件的用户指引信息的移动通信装置及方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108090838A (zh) * 2017-11-21 2018-05-29 阿里巴巴集团控股有限公司 识别车辆受损部件的方法、装置、服务器、客户端及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Yuqi Li etc..Deep joint discriminative learning for vehicle re-identification and retrieval.《2017 IEEE International Conference on Image Processing (ICIP)》.2018,第 2381-8549页. *
马凌宇.图像自动识别技术在铁路上的应用.《电子技术与软件工程》.2016,第90-91页. *

Also Published As

Publication number Publication date
CN112000829A (zh) 2020-11-27

Similar Documents

Publication Publication Date Title
US11663468B2 (en) Method and apparatus for training neural network, and storage medium
US20020154160A1 (en) Information providing system, program, information storage medium, and user interface setting method
US20200302712A1 (en) Vehicle detection method, apparatus and vehicle diagnostic device
CN106021507A (zh) 应用程序推荐方法、装置及移动终端
US20070079128A1 (en) Electronic signature system and method
US20170068527A1 (en) Device control method and apparatus
US20130311506A1 (en) Method and apparatus for user query disambiguation
US7605938B2 (en) System and method for printing out image data and text data
CN112363767A (zh) 一种车载摄像头调用方法和装置
CN112015489A (zh) 一种车载软件的管理方法、装置、存储介质及系统
CN104280042A (zh) 获取导航信息的方法和装置
US20050198267A1 (en) Client-side auto-rediscovery for networked devices
CN112000829B (zh) 一种咨询响应方法、装置、设备及存储介质
WO2021261685A1 (ko) 중고 자동차 물류 관리 서비스 방법 및 그 시스템
US7650110B2 (en) Wireless communication apparatus and wireless communication method for storing and accessing a plurality of images
KR101702001B1 (ko) 차량 구매자의 구매 경험 공유 및 확산을 위한 실시간 차량 상태 모니터링 시스템 및 방법
CN115495489A (zh) 跨境物流订单轨迹查询方法、装置、终端设备和存储介质
CN110119743B (zh) 一种图片识别方法、服务器及计算机可读存储介质
CN114329151A (zh) 基于用户手册的车辆学习方法、装置、车辆及存储介质
CN114079594A (zh) 车载终端数据采集方法、设备及存储介质
CN109962895B (zh) 一种更新汽车仪表界面的方法与系统、服务器及存储介质
CN107655492B (zh) 用于查询信息的方法及装置
CN112416707A (zh) 一种链接检测方法及装置
WO2020001332A1 (en) Repair instruction device and method
CN111031499A (zh) 基于通讯录的位置分享方法及系统、存储介质、终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant