CN113935444A - 物品搜索方法、设备以及计算机可读介质 - Google Patents

Abstract

本申请提供了一种物品搜索方案，该方案可以获取来自射频标签的射频信号，根据所述射频信号确定目标射频标签，所述目标射频标签为预置于目标物品的所属部件中的射频标签，同时获取环境的取景图像，然后在确定所述目标射频标签的空间位置之后，确定所述目标射频标签的空间位置在所述取景图像中对应的目标位置，并根据所述目标位置在所述取景图像中添加关于所述目标射频标签的虚拟图像，使得显示的取景图像中包括了代表各个部件的虚拟图像，从而通过增强现实的方式，让用户可以在拍摄到的取景图像中通过虚拟图像看到目标物品各个所属部件的位置，提升物品搜索的效率，避免遗漏部件。

Description

物品搜索方法、设备以及计算机可读介质

技术领域

本申请涉及信息技术领域，尤其涉及一种物品搜索方法、设备以及计算机可读介质。

背景技术

工业互联网能够通过开放的、全球化的工业级网络平台将设备、生产线、工厂、供应商、产品和客户紧密地连接和融合起来，高效共享工业经济中的各种要素资源，从而通过自动化、智能化的生产方式降低成本、增加效率。在工业互联网的实现过程中会涉及到零部件制造、仓储等环节，当零部件的种类、数量较多时，若在仓储时未进行合理的规划，很可能会因放置杂乱、物件遮挡等原因，导致无法在短时间内寻找到需要的零部件。尤其对于属于同一套产品的多个零部件，搜寻效率低下，且容易遗漏其中的部分零部件。

类似的，在人们的日常生活中，也经常出现找不到物品的情况，尤其是包含多个部件的物品。例如积木等包含多个部件的玩具，人们在使用之后往往会散落在房间的各个地方，如沙发背后、桌椅下方。在整理时，由于一部分散落的地方会遮挡时间，因此难以目视的方式难以直接查找，需要搬开遮挡物。由此，会导致搜寻过程效率低下，且容易遗漏一部分部件。

发明内容

本申请的一个目的是提供一种物品搜索方法、设备以及计算机可读介质，用以解决搜索效率低下，容易遗漏部件的问题。

本申请实施例中提供了一种物品搜索方法，该方法包括：

获取来自射频标签的射频信号，根据所述射频信号确定目标射频标签，所述目标射频标签为预置于目标物品的所属部件中的射频标签；

确定所述目标射频标签的空间位置；

获取环境的取景图像，并确定所述目标射频标签的空间位置在所述取景图像中对应的目标位置；

根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像；

显示添加所述虚拟图像后的取景图像。

本申请实施例提供了另一种物品搜索设备，该设备包括：

射频模块，用于获取来自射频标签的射频信号；

图像获取模块，用于获取环境的取景图像；

处理模块，用于根据所述射频信号确定目标射频标签，确定所述目标射频标签的空间位置和所述目标射频标签的空间位置在所述取景图像中对应的目标位置，以及根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像，所述目标射频标签为预置于目标物品的所属部件中的射频标签；

显示模块，用于显示添加所述虚拟图像后的取景图像。

本申请的一些实施例还提供了一种计算设备，其中，该设备包括用于存储计算机程序指令的存储器和用于执行计算机程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发所述设备执行前述物品搜索方法。

本申请的另一些实施例还提供了一种计算机可读介质，其上存储有计算机程序指令，所述计算机可读指令可被处理器执行以实现所述物品搜索方法。

本申请实施例提供的一种物品搜索方法中，可以获取来自射频标签的射频信号，根据所述射频信号确定目标射频标签，所述目标射频标签为预置于目标物品的所属部件中的射频标签，同时获取环境的取景图像，然后在确定所述目标射频标签的空间位置之后，确定所述目标射频标签的空间位置在所述取景图像中对应的目标位置，并根据所述目标位置在所述取景图像中添加关于所述目标射频标签的虚拟图像，使得显示的取景图像中包括了代表各个部件的虚拟图像，从而通过增强现实的方式，让用户可以在拍摄到的取景图像中通过虚拟图像看到目标物品各个所属部件的位置，提升物品搜索的效率，避免遗漏部件。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：

图1为本申请实施例提供的一种物品搜索方法的处理流程图；

图2为本申请实施例中搜寻一个包含3个部件的产品时的示意图；

图3为本申请实施例中添加所述虚拟图像后的取景图像的显示示意图；

图4为本申请实施例中目标位置处于取景图像的取景范围右侧的显示示意图；

图5为本申请实施例中目标位置处于取景图像的取景范围左侧的显示示意图；

图6为本申请实施例提供的一种物品搜索设备的结构示意图；

图7为本申请实施例提供的一种用于实现物品搜索的计算设备的结构示意图；

附图中相同或相似的附图标记代表相同或相似的部件。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能解释为对本发明的限制。

本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。

本申请实施例提供的一种物品搜索方法，该方法可以使得显示的取景图像中包括了代表各个部件的虚拟图像，从而通过增强现实的方式，让用户可以在拍摄到的取景图像中通过虚拟图像看到目标物品各个所属部件的位置，提升物品搜索的效率，避免遗漏部件。

在实际场景中，该方法的执行主体可以是用户设备、或者用户设备与网络设备通过网络相集成所构成的设备。当由用户设备与网络设备集成所构成时，方案中涉及数据处理的部分可以在用户设备本地实现，也可以在网络设备中实现并通过网络将处理结果提供至用户设备，而涉及交互显示的部分则由用户设备实现。所述用户设备包括但不限于计算机、手机、平板电脑等各类终端设备；所述网络设备包括但不限于如网络主机、单个网络服务器、多个网络服务器集或基于云计算的计算机集合等实现。在此，云由基于云计算(CloudComputing)的大量主机或网络服务器构成，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个虚拟计算机。

图1示出了本申请实施例提供的一种物品搜索方法的处理流程，至少包括以下处理步骤：

步骤S101，获取来自射频标签的射频信号，根据所述射频信号确定目标射频标签。

其中，所述射频标签即为使用了射频识别(RFID，Radio FrequencyIdentification)技术的标签，将物品与射频标签配对设置之后可以使得物品和射频标签一一对应，从而通过射频标签识别出特定的物品。其中，物品与射频标签配对设置的方式可以是将射频标签置入物品中，或者也可以是贴在物品的表面或内部等。目标射频标签即为本次搜索的目标物品所对应的射频标签，在进行射频识别时，通过能够接收射频信号的接收天线，可以获取来自射频标签的射频信号，不同的射频标签所发出的射频信号不同。而后通过解析射频信号，可以筛选出其中特定射频信号，由此确定发出该特定射频信号的目标射频标签。

若需要识别出某一个特定的目标物品所属的多个部件，则可以在该目标物品的各个部件中预先置入目标射频标签，这些目标射频标签可以发出包含识别信息的射频信号，以便于识别出目标物品的部件。对于同一目标物品所属的多个部件，识别信息可以相同，也可以不同。若识别信息可以相同，则本方案可以确认目标射频标签对应的属于目标物品，但是无法区分是哪个具体部件，若识别信息不同，则可以确认目标射频标签对应的部件属于目标物品，并且同时还可以确定是目标物品中的哪个具体部件。

例如，目标物品可以是一套包含N个零部件的工业产品，各个零部件也可以预先标记为零部件p1、p2、p3、……、pN，每个零部件中预先置入对应的射频标签，分别为标签tag1、标签tag2、标签tag3、……、标签tagN。还如，目标物品也可以是一套包含4块不同积木的积木玩具，由此可知该目标物品包括了4个部件，分别为积木a、积木b、积木c和积木d，可以在每块积木内预先置入对应的射频标签，分别为标签a、标签b、标签c和标签d。

其中，这些射频标签可以根据实际场景的需求选择有源或者无源的射频标签，对于有源的射频标签，可以主动对外发射射频信号，用户设备的射频模块可以直接通过接收天线接收到有源射频标签主动发射的射频信号。而对于无源的射频标签，则需要由用户设备发出的射频信号进行激发，无源射频标签在接收到用户设备发出的射频信号之后，基于电磁感应的原理在内部产生电流，从而触发电路工作，对外发射射频信号。此时用户设备的射频模块才可以通过接收天线接收到无源射频标签发射的射频信号。

无论采用何种方式，用户设备均可以获取来自射频标签的射频信号，这些射频信号中都会包括一段识别信息，该识别信息可以用于区分射频信号的来源，从而确定发出该射频信号的射频标签的具体身份。例如，用户设备获取来自5个不同射频标签的射频信号之后，通过射频信号中的识别信息，确定这些射频信号来自于标签a、标签b、标签c、标签d和标签e，若本次搜索的目标物品是前述的积木玩具，则可以确定其中的目标射频标签，即标签a、标签b、标签c和标签d。

在本申请的一些实施例中，可以在获取来自射频标签的射频信号之前，获取目标物品的识别信息，由此在根据所述射频信号确定目标射频标签时，即可通过比较目标物品的识别信息和所述射频信号中包含的识别信息的方式，根据比较结果确定目标射频标签。例如，在搜寻前述的包含4块不同积木的积木玩具时，可以预先确定这4块积木对应的识别信息分别为id_1、id_2、id_3和id_4。在根据所述射频信号确定目标射频标签时，可以通过射频信号解析出其中包含的识别信息，然后将解析得到的识别信息与预先获得的识别信息id_1、id_2、id_3和id_4进行比较。若有相同的识别信息，则表示接收到了来自于目标射频标签的射频信号，由此确定其中的目标射频信息。

其中，获取目标物品的识别信息的方式可以是通过扫描所述目标物品对应的二维码，然后从所述二维码中获取识别信息。例如，以前述积木玩具为例，可以在至少一块积木的表面印制二维码，或者是在积木玩具的收纳容器、外包装等物体上印制二维码，用户在需要搜寻积木时，可以扫描二维码，从二维码中获取到4块积木对应的识别信息id_1、id_2、id_3和id_4。

此外，也可以获取来自所述目标物品任意一个所属部件的射频标签的射频信号，从所述射频信号中获取识别信息。在实际场景中，一个物品的多个部件可能会被放置于环境中的各个位置，其中有一部分容易找到，而另一部分则不易找到。由此，可以在找到其中任意一个部件之后，通过单独获取该部件的射频标签的射频信号，识别出该部件的识别信息。

若目标物品的各个部件的识别信息相同，则无需额外的处理，获取到需要的识别信息。若目标物品的各个部件的识别信息不同，则可以预先将配置一个识别信息的对应表，将属于同一物品的各个部件的识别信息划分为同一组，由此可以在获取其中任意一个识别信息之后，通过查询该对应表，确定目标物品每个部件的识别信息。

步骤S102，确定所述目标射频标签的空间位置。其中，目标射频标签的空间位置代表了对应的部件在当前的环境中的实际位置，在实际场景中可以预先构建相应坐标系，通过坐标值的方式标记目标射频标签的空间位置。例如，可以执行物品搜索方法的用户设备所在的位置作为坐标系的原点，通过射频信号的强度计算目标射频标签与坐标系原点之间的距离，进而确定目标射频标签在该坐标系下的坐标值。

由此，本申请的一些实施例中提供的确定所述目标射频标签的空间位置的方式如下：首先，根据多个接收天线所接收到的所述目标射频标签的射频信号的信号强度，计算所述目标射频标签与每个接收天线之间的距离。然后，根据所述目标射频标签与每个接收天线之间的距离，以及每个接收天线的坐标值，计算所述目标射频标签的坐标值。

例如，本实施例中可以采用四根接收射频信号的接收天线，其位置信息已知，在坐标系中的坐标值分别为(x1,y1,z1)，(x2,y2,z2)，(x3,y3,z3)，(x4,y4,z4)。对于一个目标射频标签tag1，在发射一个射频信号之后，由于与四根接收天线的距离不同，会导致各个接收天线接收到射频信号的强度不同。因此，基于不同的信号强度，可以计算出目标射频标签tag1与每个接收天线之间的距离值，分别为R1、R2、R3和R4。由此可以获得如下的方程组：

其中，(x,y,z)即为目标射频标签在坐标系下的坐标值，通过求解上述方程即可计算出所述目标射频标签的坐标值。

步骤S103，获取环境的取景图像，并确定所述目标射频标签的空间位置在所述取景图像中对应的目标位置。在本申请实施例中，所述环境即为搜索目标物品时所处的空间，例如在房间内搜索时，该房间即为用于获得取景图像的环境。所述取景图像为摄像头等图像获取模块实时采集到的图像，例如用户打开手机的摄像头拍照功能之后，显示屏中显示的预览图像即为一种取景图像。

所述取景图像中对应的目标位置是指目标射频标签在取景图像中的位置，可以通过取景图像的图像坐标系下的坐标值进行表示。其中，图像坐标系即为环境中的景物成像后的平面中的坐标系，可以以图像中的任意一个点作为原点，然后标定X轴和Y轴。而镜头坐标系即为以镜头光心作为原点，以镜头正前方作为Z轴的三维坐标系，在于Z轴垂直的平面上标定X轴和Y轴。由于取景图像是由图像获取模块基于小孔成像等成像原理所成像获得的，因此基于相应的成像原理，可以在镜头坐标系和图像坐标系之间对坐标值进行转换。而镜头坐标系与前述标定目标射频标签的空间位置的坐标系之间可以通过旋转、平移等方式进行转换。由此，通过坐标系之间的变换，可以在获得目标射频标签的空间位置之后，确定该空间位置在所述取景图像中对应的目标位置。

步骤S104，根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像。其中，所述虚拟图像可以是任意能够表示目标射频标签所对应的部件的图像内容。实际场景中，可以采用与部件的实体较为接近的图像内容，以便于用户在看到图像后能够更方便的感知到各个部件的位置。例如，对于前述积木玩具中的4个部件，可以分别采用不同形状的积木图案作为对应的虚拟图像，来分别表示积木a、积木b、积木c和积木d。

步骤S105，显示添加所述虚拟图像后的取景图像。例如，图2示出了搜寻一个包含3个部件的产品时的示意图，视图200为取景图像范围内的环境可见视图，包括了一排用于放置产品的货架210。该产品的三个部件p1、p2和p3被放置在了货架下方的柜子内，当柜门关闭后无法直接在外部直接查看到柜内的部件，因此在没有提前知晓部件位置的情况下，难以从如图所示的环境中快速地找到该产品的部件。若预先在这几个部件p1、p2和p3的内部贴上射频标签tag_p1、tag_p2和tag_p3，可以通过获取这些目标射频标签的射频信号，来确定其空间位置，然后在手机的取景图像中确定空间位置对应的目标位置之后，在目标位置添加对应的虚拟图像221、222和223，即可在手机中显示添加了虚拟图像之后的取景图像。此时，用户通过查看手机中显示的取景图像，即可快速、直观地获知部件被放置于货架下方的柜子内，从而提高搜寻的效率。

还如，图3示出家居场景中搜索包含多个部件的玩具等物品时的示意图，其中视图300为取景图像范围内的环境可见视图，采用本申请实施例提供的方案获取取景图像并基于射频标签添加相应的虚拟图像之后，其最终显示结果为图3中手机所示的取景图像。其中，4块积木的射频标签所对应的虚拟图像分别为图像301～304。

本申请实施例提供的物品搜索方案中，采用了增强现实的形式向用户显示图像，即物品部件的虚拟图像结合环境的实际图像。由此，目标物品的部件即使被环境中的其它事物所遮挡，也可以通过虚拟图像的形式显示在取景图像中，使得用户通过查看用户设备中所显示的取景图像，即可查看到各个部件的位置，能够有效提升物品搜寻的效率，并且不会造成部件的遗漏。

在本申请的一些实施例中，在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像时，可以先根据目标射频标签的射频信号，确定关于所述目标射频标签的虚拟图像的图像内容。例如，可以预先设定好射频标签对应的识别信息与图像内容之间的对应关系，id_1对应的图像内容为图像301、id_2对应的图像内容为图像302、id_3对应的图像内容为图像303、id_4对应的图像内容为图像304。由此，在获取射频信号之后，可以解析出射频信号中的识别信息，根据识别信息匹配到对应的图像内容。而后，可以在所述取景图像的目标位置处添加所述图像内容，使得用户可以查看到增强现实的取景图像。

在实际场景中，由于取景图像的取景范围会受到镜头拍摄范围的限制，仅可以拍摄到镜头所朝向的方向上的景物，而射频信号的接收则不会受到方向的限制。因此，目标射频标签的空间位置在进行坐标系变换后，所确定的目标位置，可能会处于所述取景图像的取景范围之外。此时，可以根据所述目标位置与所述取景图像的取景范围的相对位置关系，在所述取景图像中添加用于指示所述目标位置所在方向的指示标记。

以图4所示的场景为例，其中积木d的空间位置处于镜头拍摄范围300之外，由此，其对应的目标位置也会处于取景图像的取景范围之外，因此无法将积木d对应的图像304添加至取景图像中。为了在此种情况下也可以提示用户积木d的位置，可以根据所述目标位置与所述取景图像的取景范围的相对位置关系，在所述取景图像中添加用于指示所述目标位置所在方向的指示标记。在图4中，积木d的目标位置应当位于取景图像的取景范围的右侧，此时可以在取景图像的右侧边缘添加一个朝向右侧的箭头305，来作为指示标记，以提示用户积木d在当前取景图像的右侧，用户将镜头转向右侧一段距离之后，即可在取景图像中看到积木d对应的图像304。同理，若图2中的产品包括4个部件，其中部件p4在取景图像的取景范围之外，且位于左侧，此时取景图像中的显示内容可以如图5所示，还包括一个位于取景图像左侧的指示箭头224。

而当所述目标位置在所述取景图像的取景范围之内时，可以在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像，如图4中的积木a、积木b和积木c对应的图像301～303。在此，本领域技术人员应当理解上述关于指示标记的具体显示方式仅为举例，其他现有的或今后可能出现的其它方式如可适用于本发明，也应包含在本发明保护范围以内，并在此以引用方式包含于此。例如，可以在取景图像中的任意位置，如取景图像中的空白处、取景图像的中央等，显示文字等其它形式的指示标记。

基于同一发明构思，本申请实施例中还提供了一种物品搜索方法，所述设备对应的方法是前述实施例中的物品搜索方法，并且其解决问题的原理与该方法相似。

本申请实施例提供的一种物品搜索设备可以使得显示的取景图像中包括了代表各个部件的虚拟图像，从而通过增强现实的方式，让用户可以在拍摄到的取景图像中通过虚拟图像看到目标物品各个所属部件的位置，提升物品搜索的效率，避免遗漏部件。

在实际场景中，该物品搜索设备是用户设备、或者用户设备与网络设备通过网络相集成所构成的设备。当由用户设备与网络设备集成所构成时，方案中涉及数据处理的部分可以在用户设备本地实现，也可以在网络设备中实现并通过网络将处理结果提供至用户设备，而涉及交互显示的部分则由用户设备实现。所述用户设备包括但不限于计算机、手机、平板电脑等各类终端设备；所述网络设备包括但不限于如网络主机、单个网络服务器、多个网络服务器集或基于云计算的计算机集合等实现。在此，云由基于云计算(CloudComputing)的大量主机或网络服务器构成，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个虚拟计算机。

图6示出了本申请实施例提供的一种物品搜索设备的结构，包括射频模块610、图像获取模块620、处理模块630和显示模块640。其中，所述射频模块610用于获取来自射频标签的射频信号；图像获取模块620用于获取环境的取景图像；处理模块630用于根据所述射频信号确定目标射频标签，确定所述目标射频标签的空间位置和所述目标射频标签的空间位置在所述取景图像中对应的目标位置，以及根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像，所述目标射频标签为预置于目标物品的所属部件中的射频标签；显示模块640用于显示添加所述虚拟图像后的取景图像。

所述射频标签即为使用了射频识别技术的标签，将物品与射频标签配对设置之后可以使得物品和射频标签一一对应，从而通过射频标签识别出特定的物品。其中，物品与射频标签配对设置的方式可以是将射频标签置入物品中，或者也可以是贴在物品的表面或内部等。目标射频标签即为本次搜索的目标物品所对应的射频标签，在进行射频识别时，通过能够接收射频信号的接收天线，可以获取来自射频标签的射频信号，不同的射频标签所发出的射频信号不同。而后通过解析射频信号，可以筛选出其中特定射频信号，由此确定发出该特定射频信号的目标射频标签。

若需要识别出某一个特定的目标物品所属的多个部件，则可以在该目标物品的各个部件中预先置入目标射频标签，这些目标射频标签可以发出包含识别信息的射频信号，以便于识别出目标物品的部件。对于同一目标物品所属的多个部件，识别信息可以相同，也可以不同。若识别信息可以相同，则本方案可以确认目标射频标签对应的属于目标物品，但是无法区分是哪个具体部件，若识别信息不同，则可以确认目标射频标签对应的部件属于目标物品，并且同时还可以确定是目标物品中的哪个具体部件。

例如，目标物品可以是一套包含N个零部件的工业产品，各个零部件也可以预先标记为零部件p1、p2、p3、……、pN，每个零部件中预先置入对应的射频标签，分别为标签tag1、标签tag2、标签tag3、……、标签tagN。还如，目标物品也可以是一套包含4块不同积木的积木玩具，由此可知该目标物品包括了4个部件，分别为积木a、积木b、积木c和积木d，可以在每块积木内预先置入对应的射频标签，分别为标签a、标签b、标签c和标签d。

其中，这些射频标签可以根据实际场景的需求选择有源或者无源的射频标签，对于有源的射频标签，可以主动对外发射射频信号，用户设备的射频模块可以直接通过接收天线接收到有源射频标签主动发射的射频信号。而对于无源的射频标签，则需要由用户设备发出的射频信号进行激发，无源射频标签在接收到用户设备发出的射频信号之后，基于电磁感应的原理在内部产生电流，从而触发电路工作，对外发射射频信号。此时用户设备的射频模块才可以通过接收天线接收到无源射频标签发射的射频信号。

无论采用何种方式，用户设备均可以获取来自射频标签的射频信号，这些射频信号中都会包括一段识别信息，该识别信息可以用于区分射频信号的来源，从而确定发出该射频信号的射频标签的具体身份。例如，用户设备获取来自5个不同射频标签的射频信号之后，通过射频信号中的识别信息，确定这些射频信号来自于标签a、标签b、标签c、标签d和标签e，若本次搜索的目标物品是前述的积木玩具，则可以确定其中的目标射频标签，即标签a、标签b、标签c和标签d。

在本申请的一些实施例中，在获取来自射频标签的射频信号之前，处理模块可以获取目标物品的识别信息，由此在根据所述射频信号确定目标射频标签时，即可通过比较目标物品的识别信息和所述射频信号中包含的识别信息的方式，根据比较结果确定目标射频标签。例如，在搜寻前述的包含4块不同积木的积木玩具时，可以预先确定这4块积木对应的识别信息分别为id_1、id_2、id_3和id_4。在根据所述射频信号确定目标射频标签时，处理模块可以通过射频信号解析出其中包含的识别信息，然后将解析得到的识别信息与预先获得的识别信息id_1、id_2、id_3和id_4进行比较。若有相同的识别信息，则表示接收到了来自于目标射频标签的射频信号，由此确定其中的目标射频信息。

其中，获取目标物品的识别信息的方式可以是通过图像获取模块来扫描所述目标物品对应的二维码，然后处理模块从所述二维码中获取识别信息。例如，以前述积木玩具为例，可以在至少一块积木的表面印制二维码，或者是在积木玩具的收纳容器、外包装等物体上印制二维码，用户在需要搜寻积木时，可以扫描二维码，从二维码中获取到4块积木对应的识别信息id_1、id_2、id_3和id_4。

此外，也可以通过射频模块获取来自所述目标物品任意一个所属部件的射频标签的射频信号，然后由处理模块从所述射频信号中获取识别信息。在实际场景中，一个物品的多个部件可能会被放置于环境中的各个位置，其中有一部分容易找到，而另一部分则不易找到。由此，可以在找到其中任意一个部件之后，通过单独获取该部件的射频标签的射频信号，识别出该部件的识别信息。

若目标物品的各个部件的识别信息相同，则无需额外的处理，获取到需要的识别信息。若目标物品的各个部件的识别信息不同，则可以预先将配置一个识别信息的对应表，将属于同一物品的各个部件的识别信息划分为同一组，由此可以在获取其中任意一个识别信息之后，通过查询该对应表，确定目标物品每个部件的识别信息。

目标射频标签的空间位置代表了对应的部件在当前的环境中的实际位置，在实际场景中可以预先构建相应坐标系，通过坐标值的方式标记目标射频标签的空间位置。例如，可以执行物品搜索方法的用户设备所在的位置作为坐标系的原点，通过射频信号的强度计算目标射频标签与坐标系原点之间的距离，进而确定目标射频标签在该坐标系下的坐标值。

由此，本申请的一些实施例中提供的确定所述目标射频标签的空间位置的方式如下：首先，处理模块根据多个接收天线所接收到的所述目标射频标签的射频信号的信号强度，计算所述目标射频标签与每个接收天线之间的距离。然后，处理模块根据所述目标射频标签与每个接收天线之间的距离，以及每个接收天线的坐标值，计算所述目标射频标签的坐标值。

例如，本实施例中可以采用四根接收射频信号的接收天线，其位置信息已知，在坐标系中的坐标值分别为(x1,y1,z1)，(x2,y2,z2)，(x3,y3,z3)，(x4,y4,z4)。对于一个目标射频标签tag1，在发射一个射频信号之后，由于与四根接收天线的距离不同，会导致各个接收天线接收到射频信号的强度不同。因此，基于不同的信号强度，可以计算出目标射频标签tag1与每个接收天线之间的距离值，分别为R1、R2、R3和R4。由此可以获得如下的方程组：

其中，(x,y,z)即为目标射频标签在坐标系下的坐标值，通过求解上述方程即可计算出所述目标射频标签的坐标值。

在本申请实施例中，图像获取模块获取环境的取景图像时，所述环境即为搜索目标物品时所处的空间，例如在房间内搜索时，该房间即为用于获得取景图像的环境。所述取景图像为摄像头等图像获取模块实时采集到的图像，例如用户打开手机的摄像头拍照功能之后，显示屏中显示的预览图像即为一种取景图像。

所述取景图像中对应的目标位置是指目标射频标签在取景图像中的位置，可以通过取景图像的图像坐标系下的坐标值进行表示。其中，图像坐标系即为环境中的景物成像后的平面中的坐标系，可以以图像中的任意一个点作为原点，然后标定X轴和Y轴。而镜头坐标系即为以镜头光心作为原点，以镜头正前方作为Z轴的三维坐标系，在于Z轴垂直的平面上标定X轴和Y轴。由于取景图像是由图像获取模块基于小孔成像等成像原理所成像获得的，因此基于相应的成像原理，可以在镜头坐标系和图像坐标系之间对坐标值进行转换。而镜头坐标系与前述标定目标射频标签的空间位置的坐标系之间可以通过旋转、平移等方式进行转换。由此，通过坐标系之间的变换，可以在获得目标射频标签的空间位置之后，确定该空间位置在所述取景图像中对应的目标位置。

处理模块在所述取景图像中添加的关于所述目标射频标签的虚拟图像。可以是任意能够表示目标射频标签所对应的部件的图像内容。实际场景中，可以采用与部件的实体较为接近的图像内容，以便于用户在看到图像后能够更方便的感知到各个部件的位置。例如，对于前述积木玩具中的4个部件，可以分别采用不同形状的积木图案作为对应的虚拟图像，来分别表示积木a、积木b、积木c和积木d。

在添加虚拟图像之后，显示模块可以显示添加所述虚拟图像后的取景图像。

例如，图2示出了搜寻一个包含3个部件的产品时的示意图，视图200为取景图像范围内的环境可见视图，包括了一排用于放置产品的货架210。该产品的三个部件p1、p2和p3被放置在了货架下方的柜子内，当柜门关闭后无法直接在外部直接查看到柜内的部件，因此在没有提前知晓部件位置的情况下，难以从如图所示的环境中快速地找到该产品的部件。若预先在这几个部件p1、p2和p3的内部贴上射频标签tag_p1、tag_p2和tag_p3，可以通过获取这些目标射频标签的射频信号，来确定其空间位置，然后在手机的取景图像中确定空间位置对应的目标位置之后，在目标位置添加对应的虚拟图像221、222和223，即可在手机中显示添加了虚拟图像之后的取景图像。此时，用户通过查看手机中显示的取景图像，即可快速、直观地获知部件被放置于货架下方的柜子内，从而提高搜寻的效率。

还如，图3示出家居场景中搜索包含多个部件的玩具等物品时的示意图，其中视图300为取景图像范围内的环境可见视图，采用本申请实施例提供的方案获取取景图像并基于射频标签添加相应的虚拟图像之后，其最终显示结果为图3中手机所示的取景图像。其中，4块积木的射频标签所对应的虚拟图像分别为图像301～304。

本申请实施例提供的物品搜索方案中，采用了增强现实的形式向用户显示图像，即物品部件的虚拟图像结合环境的实际图像。由此，目标物品的部件即使被环境中的其它事物所遮挡，也可以通过虚拟图像的形式显示在取景图像中，使得用户通过查看用户设备中所显示的取景图像，即可查看到各个部件的位置，能够有效提升物品搜寻的效率，并且不会造成部件的遗漏。

在本申请的一些实施例中，在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像时，处理模块可以先根据目标射频标签的射频信号，确定关于所述目标射频标签的虚拟图像的图像内容。例如，可以预先设定好射频标签对应的识别信息与图像内容之间的对应关系，id_1对应的图像内容为图像301、id_2对应的图像内容为图像302、id_3对应的图像内容为图像303、id_4对应的图像内容为图像304。由此，在获取射频信号之后，可以解析出射频信号中的识别信息，根据识别信息匹配到对应的图像内容。而后，处理模块可以在所述取景图像的目标位置处添加所述图像内容，使得用户可以查看到增强现实的取景图像。

在实际场景中，由于取景图像的取景范围会受到镜头拍摄范围的限制，仅可以拍摄到镜头所朝向的方向上的景物，而射频信号的接收则不会受到方向的限制。因此，目标射频标签的空间位置在进行坐标系变换后，所确定的目标位置，可能会处于所述取景图像的取景范围之外。此时，处理模块可以根据所述目标位置与所述取景图像的取景范围的相对位置关系，在所述取景图像中添加用于指示所述目标位置所在方向的指示标记。

以图4所示的场景为例，其中积木d的空间位置处于镜头拍摄范围300之外，由此，其对应的目标位置也会处于取景图像的取景范围之外，因此无法将积木d对应的图像304添加至取景图像中。为了在此种情况下也可以提示用户积木d的位置，可以根据所述目标位置与所述取景图像的取景范围的相对位置关系，在所述取景图像中添加用于指示所述目标位置所在方向的指示标记。在图4中，积木d的目标位置应当位于取景图像的取景范围的右侧，此时可以在取景图像的右侧边缘添加一个朝向右侧的箭头305，来作为指示标记，以提示用户积木d在当前取景图像的右侧，用户将镜头转向右侧一段距离之后，即可在取景图像中看到积木d对应的图像304。同理，若图2中的产品包括4个部件，其中部件p4在取景图像的取景范围之外，且位于左侧，此时取景图像中的显示内容可以如图5所示，还包括一个位于取景图像左侧的指示箭头224。

而当所述目标位置在所述取景图像的取景范围之内时，处理模块可以在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像，如图4中的积木a、积木b和积木c对应的图像301～303。在此，本领域技术人员应当理解上述关于指示标记的具体显示方式仅为举例，其他现有的或今后可能出现的其它方式如可适用于本发明，也应包含在本发明保护范围以内，并在此以引用方式包含于此。例如，可以在取景图像中的任意位置，如取景图像中的空白处、取景图像的中央等，显示文字等其它形式的指示标记。

另外，本申请的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本申请的方法和/或技术方案。而调用本申请的方法的程序指令，可能被存储在固定的或可移动的记录介质中，和/或通过广播或其他信号承载媒体中的数据流而被传输，和/或被存储在根据程序指令运行的计算机设备的工作存储器中。在此，根据本申请的一些实施例包括一个如图7所示的计算设备，该设备包括存储有计算机可读指令的一个或多个存储器710和用于执行计算机可读指令的处理器720，其中，当该计算机可读指令被该处理器执行时，使得所述设备执行基于前述本申请的多个实施例的方法和/或技术方案。

此外，本申请的一些实施例还提供了一种计算机可读介质，其上存储有计算机程序指令，计算机可读指令可被处理器执行以实现前述本申请的多个实施例的方法和/或技术方案。

需要注意的是，本申请可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在实施例中，本申请的软件程序可以通过处理器执行以实现上文步骤或功能。同样地，本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本申请的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。

本技术领域技术人员可以理解，可以用计算机程序指令来实现这些结构图和/或框图和/或流图中的每个框以及这些结构图和/或框图和/或流图中的框的组合。本技术领域技术人员可以理解，可以将这些计算机程序指令提供给通用计算机、专业计算机或其他可编程数据处理方法的处理器来实现，从而通过计算机或其他可编程数据处理方法的处理器来执行本发明公开的结构图和/或框图和/或流图的框或多个框中指定的方案。

本技术领域技术人员可以理解，本发明中已经讨论过的各种操作、方法、流程中的步骤、措施、方案可以被交替、更改、组合或删除。进一步地，具有本发明中已经讨论过的各种操作、方法、流程中的其他步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。进一步地，现有技术中的具有与本发明中公开的各种操作、方法、流程中的步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。在此，本领域技术人员应当理解上述步骤之间的数字仅用于区别不同的处理步骤，其数字顺序与步骤实际执行的顺序和处理逻辑无关，并不用于限定步骤之间的执行顺序。

对于本领域技术人员而言，显然本申请不限于上述示范性实施例的细节，而且在不背离本申请的精神或基本特征的情况下，能够以其他的具体形式实现本申请。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本申请的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。

Claims (16)

1.一种物品搜索方法，其中，该方法包括：

获取来自射频标签的射频信号，根据所述射频信号确定目标射频标签，所述目标射频标签为预置于目标物品的所属部件中的射频标签；

确定所述目标射频标签的空间位置；

获取环境的取景图像，并确定所述目标射频标签的空间位置在所述取景图像中对应的目标位置；

根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像；

显示添加所述虚拟图像后的取景图像。

2.根据权利要求1所述的方法，其中，根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像，包括：

若所述目标位置在所述取景图像的取景范围之外，根据所述目标位置与所述取景图像的取景范围的相对位置关系，在所述取景图像中添加用于指示所述目标位置所在方向的指示标记。

3.根据权利要求1所述的方法，其中，根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像，包括：

若所述目标位置在所述取景图像的取景范围之内，在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像。

4.根据权利要求3所述的方法，其中，在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像，包括：

根据目标射频标签的射频信号，确定关于所述目标射频标签的虚拟图像的图像内容；

在所述取景图像的目标位置处添加所述图像内容。

5.根据权利要求1所述的方法，其中，获取来自射频标签的射频信号之前，还包括：

获取目标物品的识别信息；

根据所述射频信号确定目标射频标签，包括：

比较目标物品的识别信息和所述射频信号中包含的识别信息，并根据比较结果确定目标射频标签。

6.根据权利要求5所述的方法，其中，获取目标物品的识别信息，包括：

扫描所述目标物品对应的二维码，从所述二维码中获取识别信息；或

获取来自所述目标物品任意一个所属部件的射频标签的射频信号，从所述射频信号中获取识别信息。

7.根据权利要求1所述的方法，其中，确定所述目标射频标签的空间位置，包括：

根据多个接收天线所接收到的所述目标射频标签的射频信号的信号强度，计算所述目标射频标签与每个接收天线之间的距离；

根据所述目标射频标签与每个接收天线之间的距离，以及每个接收天线的坐标值，计算所述目标射频标签的坐标值。

8.一种物品搜索设备，其中，该设备包括：

射频模块，用于获取来自射频标签的射频信号；

图像获取模块，用于获取环境的取景图像；

处理模块，用于根据所述射频信号确定目标射频标签，确定所述目标射频标签的空间位置和所述目标射频标签的空间位置在所述取景图像中对应的目标位置，以及根据所述目标位置，在所述取景图像中添加关于所述目标射频标签的虚拟图像，所述目标射频标签为预置于目标物品的所属部件中的射频标签；

显示模块，用于显示添加所述虚拟图像后的取景图像。

9.根据权利要求8所述的设备，其中，所述处理模块，用于当所述目标位置在所述取景图像的取景范围之外时，根据所述目标位置与所述取景图像的取景范围的相对位置关系，在所述取景图像中添加用于指示所述目标位置所在方向的指示标记。

10.根据权利要求8所述的设备，其中，所述处理模块，用于当所述目标位置在所述取景图像的取景范围之内时，在所述取景图像的目标位置处添加关于所述目标射频标签的虚拟图像。

11.根据权利要求10所述的设备，其中，所述处理模块，用于根据目标射频标签的射频信号，确定关于所述目标射频标签的虚拟图像的图像内容；在所述取景图像的目标位置处添加所述图像内容。

12.根据权利要求8所述的设备，其中，所述处理模块，用于在获取来自射频标签的射频信号之前，获取目标物品的识别信息，以及比较目标物品的识别信息和所述射频信号中包含的识别信息，并根据比较结果确定目标射频标签。

13.根据权利要求12所述的设备，其中，所述图像获取模块，还用于扫描所述目标物品对应的二维码；

所述射频模块，还用于获取来自所述目标物品任意一个所属部件的射频标签的射频信号；

所述处理模块，用于从所述二维码中获取识别信息，或从所述射频信号中获取识别信息。

14.根据权利要求8所述的设备，其中，所述处理模块，用于根据多个接收天线所接收到的所述目标射频标签的射频信号的信号强度，计算所述目标射频标签与每个接收天线之间的距离；根据所述目标射频标签与每个接收天线之间的距离，以及每个接收天线的坐标值，计算所述目标射频标签的坐标值。

15.一种计算设备，其中，该设备包括用于存储计算机程序指令的存储器和用于执行计算机程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发所述设备执行权利要求1至7中任一项所述的方法。

16.一种计算机可读介质，其上存储有计算机程序指令，所述计算机可读指令可被处理器执行以实现如权利要求1至7中任一项所述的方法。

Images