CN107992814A - 对象寻找方法及装置 - Google Patents

对象寻找方法及装置 Download PDF

Info

Publication number
CN107992814A
CN107992814A CN201711212037.0A CN201711212037A CN107992814A CN 107992814 A CN107992814 A CN 107992814A CN 201711212037 A CN201711212037 A CN 201711212037A CN 107992814 A CN107992814 A CN 107992814A
Authority
CN
China
Prior art keywords
picture
finding
view
suspect objects
found
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711212037.0A
Other languages
English (en)
Inventor
付文君
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201711212037.0A priority Critical patent/CN107992814A/zh
Publication of CN107992814A publication Critical patent/CN107992814A/zh
Priority to US16/146,207 priority patent/US10621439B2/en
Priority to EP18208977.1A priority patent/EP3489805B1/en
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开是关于一种对象寻找方法及装置。该方法应用于终端设备中，包括：响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面，检测取景画面中是否存在与该待寻找对象相对应的疑似对象；在取景画面中存在疑似对象时，以AR增强现实方式突出标识该疑似对象。本公开的实施例，通过响应于针对待寻找对象的寻找请求，检测终端设备的图像获取装置获取的针对周围环境的取景画面中是否存在与待寻找对象相对应的疑似对象，并在该取景画面中存在疑似对象时，以AR增强现实方式突出标识该疑似对象，从而便利用户快速寻找到待寻找对象。

Description

对象寻找方法及装置
技术领域
本公开涉及计算机技术领域，尤其涉及一种对象寻找方法及装置。
背景技术
在人们的日常生活中，经常会出现找不到物品的情况，例如，找不到眼镜、公交卡等。此时，人们需要通过目测方式来寻找物品。然而，通过目测寻找物品时，极易出现人眼遗漏物品等情况，导致整个寻找过程耗时较长。
发明内容
为克服相关技术中存在的问题，本公开提供一种对象寻找方法及装置。
根据本公开实施例的第一方面，提供一种对象寻找方法，应用于终端设备中，所述方法包括：
响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面；
检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象；
在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象。
对于以上方法，在一种可能的实现方式中，检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象，包括：
检测所述取景画面中的参考对象与所述待寻找对象之间的相似度；
在所述相似度大于或等于相似度阈值时，确定所述取景画面中存在与所述待寻找对象相对应的疑似对象。
对于以上方法，在一种可能的实现方式中，在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象，包括以下方式中的至少一种：
在所述取景画面中存在疑似对象时，增强显示所述疑似对象；
在所述取景画面中存在疑似对象时，增强显示所述疑似对象所在的区域；
在所述取景画面中存在疑似对象时，增强显示所述疑似对象的方向信息；
在所述取景画面中存在疑似对象时，增强显示所述疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。
对于以上方法，在一种可能的实现方式中，所述寻找请求包括语音请求、文字请求以及图片请求中的至少一种。
对于以上方法，在一种可能的实现方式中，所述寻找请求的内容包括所述待寻找对象的名称、颜色、大小、形状中的至少一种。
根据本公开实施例的第二方面，提供一种对象寻找装置，应用于终端设备中，所述装置包括：
取景画面获取模块，用于响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面；
检测模块，用于检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象；
疑似对象标识模块，用于在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象。
对于以上装置，在一种可能的实现方式中，所述检测模块包括：
检测子模块，用于检测所述取景画面中的参考对象与所述待寻找对象之间的相似度；
确定子模块，用于在所述相似度大于或等于相似度阈值时，确定所述取景画面中存在与所述待寻找对象相对应的疑似对象。
对于以上装置，在一种可能的实现方式中，所述疑似对象标识模块包括以下子模块中的至少一个：
第一显示子模块，用于在所述取景画面中存在疑似对象时，增强显示所述疑似对象；
第二显示子模块，用于在所述取景画面中存在疑似对象时，增强显示所述疑似对象所在的区域；
第三显示子模块，用于在所述取景画面中存在疑似对象时，增强显示所述疑似对象的方向信息；
第四显示子模块，用于在所述取景画面中存在疑似对象时，增强显示所述疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。
对于以上装置，在一种可能的实现方式中，所述寻找请求包括语音请求、文字请求以及图片请求中的至少一种。
对于以上装置，在一种可能的实现方式中，所述寻找请求的内容包括所述待寻找对象的名称、颜色、大小、形状中的至少一种。
根据本公开实施例的第三方面，提供一种对象寻找装置，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行上述方法。
根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，当所述存储介质中的指令由处理器执行时，使得处理器能够执行上述对象寻找方法。
本公开的实施例提供的技术方案可以包括以下有益效果：根据本公开的实施例，通过响应于针对待寻找对象的寻找请求，检测终端设备的图像获取装置获取的针对周围环境的取景画面中是否存在与待寻找对象相对应的疑似对象，并在该取景画面中存在疑似对象时，以AR增强现实方式突出标识该疑似对象，从而便利用户快速寻找到待寻找对象。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种对象寻找方法的流程图。
图2是根据一示例性实施例示出的一种对象寻找方法的流程图。
图3是根据一示例性实施例示出的一种对象寻找方法的流程图。
图4是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。
图5是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。
图6是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。
图7是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。
图8是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。
图9是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。
图10是根据一示例性实施例示出的一种对象寻找装置的框图。
图11是根据一示例性实施例示出的一种对象寻找装置的框图。
图12是根据一示例性实施例示出的一种对象寻找装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种对象寻找方法的流程图。如图1所示，该方法用于终端设备中，例如，AR眼镜、手机、平板电脑等，本公开对此不作限制。根据本公开实施例的对象寻找方法包括：
在步骤S11中，响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面；
在步骤S12中，检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象；
在步骤S13中，在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象。
根据本公开的实施例，通过响应于针对待寻找对象的寻找请求，检测终端设备的图像获取装置获取的针对周围环境的的取景画面中是否存在与待寻找对象相对应的疑似对象，并在该取景画面中存在该疑似对象时，以AR增强现实方式突出标识该疑似对象，从而便利用户快速寻找到待寻找对象。
举例来说，该终端设备可能会接收到用户针对待寻找对象的寻找请求，终端设备响应于针对该待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面，并检测取景画面中是否存在与所述待寻找对象相对应的疑似对象。例如，用户在出门前想要寻找其公交卡，该用户佩戴着AR眼镜，该用户可以向该AR眼镜发出针对其公交卡的寻找请求。该AR眼镜响应于针对公交卡的寻找请求，可以通过其AR眼镜的图像获取装置(例如，摄像头)获取针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似对象。例如，用户向该AR眼镜发起针对公交卡的寻找请求，该AR眼镜响应于针对公交卡的寻找请求，直接进入寻找模式，启动摄像装置(例如，摄像头)，通过其摄像头获取针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似对象。
在一种可能的实现方式中，所述寻找请求包括语音请求、文字请求以及图片请求中的至少一种。
举例来说，针对待寻找对象的寻找请求可以为语音请求。例如，该用户可以通过语音方式将其需要寻找的公交卡告知给其AR眼镜。例如，该用户可以向其AR眼镜发出“请帮我寻找一下公交卡”这一语音请求。针对待寻找对象的寻找请求还可以为文字请求。例如，该用户希望通过其手机帮助寻找公交卡，该用户可以通过文字方式将其需要寻找的公交卡告知给其手机。例如，该用户向其手机发出“寻找公交卡”这一文字请求。该寻找请求还可以为图片请求。例如，用户希望其手机帮助寻找公交卡，用户可以通过图片请求的方式向其手机发出公交卡寻找请求。例如，用户可以从其手机相册中获取公交卡相关的图片，或者从网络上获取公交卡相关的图片，并向其手机发起寻找图片中公交卡的图片请求，以便终端设备更好的获取待寻找对象的特征。针对待寻找对象的寻找请求还可以为语音请求、文字请求以及图片请求中的多种。例如，用户可以向其手机发出“寻找公交卡”这一文字请求，并同时通过语音方式告知该手机其想寻找的公交卡的一些特征作为补充寻找请求。例如，用户可以发出“蓝色的，长方形”等语音请求。另外，用户还可以从其手机相册中获取包含公交卡的图片，向其手机发起针对公交卡的图片请求，该语音请求、文字请求以及图片请求共同作为寻找请求。
通过这种方式，丰富寻找请求的形式，可以满足不同用户的使用习惯，便利用户依照其使用习惯向终端设备发起寻找请求。本领域技术人员应理解，针对待寻找对象的寻找请求还可以包括其他方式，例如，可以为手势形式的寻找请求。举例来说，用户可以针对其经常寻找的物品设置相对应的手势，例如，画圆圈这一手势对应于近视眼镜、画方块对应于公交卡等，在其想要寻找近视眼镜时，可以以画圆圈这一手势向其AR眼镜发出针对近视眼镜的寻找请求，针对待寻找对象的寻找请求的方式可以由系统默认设置，也可以由用户根据使用习惯进行个性化设置，本公开对寻找请求的形式不作限制。
在一种可能的实现方式中，所述寻找请求的内容包括所述待寻找对象的名称、颜色、大小、形状中的至少一种。
举例来说，用户针对待寻找对象的寻找请求的内容可以包括待寻找对象的名称、颜色、大小、形状中的至少一种。例如，如前文所述，用户希望其手机帮助寻找公交卡，该用户可以通过多种方式向其手机发出寻找请求，例如，可以通过语音请求的方式向其手机发出“请帮我寻找公交卡”这一寻找请求，可见，该寻找请求的内容包括了待寻找对象的名称(公交卡)。用户还可以向其手机发出包括待寻找对象的颜色的寻找请求，例如，其想要寻找的公交卡的颜色为蓝色，则可以向其手机发出“寻找蓝色”的寻找请求，手机可以响应该寻找请求，并检测针对周围环境的取景画面中是否包括蓝色的疑似对象，并在检测到蓝色的疑似对象时，以AR增强现实方式突出标识该疑似对象。用户还可以向其手机发出包括待寻找对象的大小的寻找请求，例如，其想要寻找的公交卡为尺寸较小，为5厘米*3厘米的小卡，则可以向其手机发出“5厘米*3厘米”，手机可以响应该寻找请求，并检测针对周围环境的取景画面中是否包括尺寸为5厘米*3厘米的疑似对象，并在检测到疑似对象时，以AR增强现实方式突出标识该疑似对象。用户还可以向其手机发出包括待寻找对象的形状的寻找请求。例如，其想要寻找的公交卡的形状为长方形，则可以向其手机发出“长方形”的寻找请求，手机可以响应该寻找请求，并检测针对周围环境的取景画面中是否包括长方形的疑似对象，并在检测到长方形的疑似对象时，以AR增强现实方式突出标识该疑似对象。
同时，该寻找请求的内容还可以包括待寻找对象的名称、颜色、大小、形状中的多种特征，例如，用户可以通过语音请求的方式向其手机发出“请帮我寻找公交卡，蓝色的，长方形，5厘米*3厘米”这一包括待寻找对象的多种特征的寻找请求。
通过这种方式，针对待寻找对象的寻找请求包括待寻找对象较多的特征，终端设备可以更好地获取待寻找对象的特征，从而加快寻找速度，便利用户快速、准确寻找到待寻找对象。本领域技术人员应理解，针对待寻找对象的寻找请求还可以包括其他内容，本公开对寻找请求的内容不作限制。
在一种可能的实现方式中，所述方法还包括：
响应于寻找模式开启请求，开启寻找模式；
在所述寻找模式下，接收针对待寻找对象的寻找请求。
举例来说，用户在通过终端设备寻找待寻找对象时，可能需要开启该终端设备的寻找模式，在该寻找模式处于开启状态时，该终端设备可以用于帮助寻找待寻找对象。例如，用户可以向终端设备发送寻找模式开启请求，该寻找模式开启请求可以包括多种方式。
举例来说，该寻找模式开启请求可以为语音开启请求。例如，用户可以向其AR眼镜发出“开启寻找模式”这一语音开启请求，该AR眼镜响应于该寻找模式开启请求，开启寻找模式。用户还可以通过触发寻找模式开启控件的方式来发出寻找模式开启请求。例如，该终端设备包括寻找模式开启控件，该控件可以在终端设备系统设置页面处，还可以在相应的寻找物品软件的设置页面处。用户可以通过触发该寻找模式开启控件来开启或者关闭寻找模式，该终端设备响应于寻找模式开启请求，开启寻找模式。例如，AR眼镜可以在虚拟显示屏上显示该寻找模式开启控件，用户可以通过手指触发该虚拟显示屏上的寻找模式开启控件，来开启寻找模式开启控件。用户还可以通过手势来发出寻找模式开启请求，例如，可以设置连续顺时针画3圈为发出寻找模式开启请求，则用户在通过手势连续顺时针画3圈时，为发出寻找模式开启请求。用户还可以通过控制终端设备的实体键的方式来发出寻找模式开启请求。例如，AR眼镜的眼框架上可能设置有用于控制寻找模式开启或关闭的实体键，用户可以通过按压该实体键来发出寻找模式开启请求，该AR眼镜响应于寻找模式开启请求，开启寻找模式。
本领域技术人员应理解，寻找模式开启请求可以包括多种方式，寻找模式开启请求的方式可以由系统默认设置，也可以由用户根据使用习惯进行个性化设置，只要终端设备可以接收并响应寻找模式开启请求即可，本公开对此不作限制。
在一种可能的实现方式中，在所述寻找模式下，接收针对待寻找对象的寻找请求。
举例来说，如前文所述，在响应于寻找模式开启请求，开启寻找模式之后，该终端设备处于寻找模式下，可以接收针对待寻找对象的寻找请求。例如，用户可以对其AR眼镜发出“开启寻找模式”这一寻找模式开启请求，AR眼镜响应于该寻找模式开启请求，开启寻找模式，此时，该AR眼镜处于寻找模式下。用户可以对AR眼镜发出“公交卡”这一语音，在寻找模式下的AR眼镜可以接收用户发出的“公交卡”这一语音请求，确定用户发出了寻找请求，待寻找对象为公交卡。
通过这种方式，用户可以控制该终端设备开启或关闭寻找模式。本领域技术人员应理解，只要可以响应于寻找模式开启请求，开启寻找模式，并在该寻找模式下，接收针对待寻找对象的寻找请求即可，本公开对此不作限制。
在一种可能的实现方式中，终端设备响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面，终端设备检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象。
举例来说，该终端设备检测取景画面中是否存在与待寻找对象相对应的疑似对象。其中，如前文所述，该终端设备可以直接接收并响应于用户针对待寻找对象的寻找请求，也可以先接收并响应于寻找模式开启请求，在开启寻找模式后，接收并响应于用户针对待寻找对象的寻找请求。该终端设备响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面，终端设备可以检测取景画面中是否存在与待寻找对象相对应的疑似对象。例如，AR眼镜响应于用户寻找公交卡的请求，进入寻找模式，可以开启摄像装置(例如，摄像头)，通过摄像头获取针对周围环境的取景画面，并开始检测取景画面中是否存在与公交卡相对应的疑似对象。本领域技术人员应理解，可以采用相关技术中公知的方式通过终端设备的图像获取装置获取针对周围环境的取景画面，并检测取景画面中是否存在与待寻找对象相对应的疑似对象，本公开对此不作限制。
图2是根据一示例性实施例示出的一种对象寻找方法的流程图。在一种可能的实现方式中，如图2所示，步骤S12可以包括：
在步骤S121中，检测所述取景画面中的参考对象与所述待寻找对象之间的相似度；
在步骤S122中，在所述相似度大于或等于相似度阈值时，确定所述取景画面中存在与所述待寻找对象相对应的疑似对象。
举例来说，该终端设备可以检测其取景画面中的参考对象与待寻找对象之间的相似度，并在相似度大于或等于相似度阈值时，确定该取景画面中存在与所述待寻找对象相对应的疑似对象。例如，该AR眼镜响应于用户针对公交卡的寻找请求，可以进入寻找模式，开启摄像头，通过摄像头获取针对周围环境的取景画面，并检测取景画面中的参考对象与公交卡的相似度。例如，该AR眼镜可以对取景画面中的参考对象进行分析。例如，可以对取景画面中的参考对象进行特征提取，并根据该参考对象的特征与待寻找对象公交卡的特征，确定该参考对象与公交卡的相似度，在确定得到的相似度大于或等于相似度阈值时，可以确定该取景画面中存在与公交卡相对应的疑似对象(相似度大于或等于相似度阈值的参考对象)，例如，疑似公交卡。
在一种可能的实现方式中，该终端设备可能检测到该取景画面中存在多个参考对象，该多个参考对象与待寻找对象之间的相似度都大于或等于相似度阈值，可以确定该取景画面中存在多个与待寻找对象相对应的疑似对象。
举例来说，当AR眼镜响应于用户针对公交卡的寻找请求，进入寻找模式，开启摄像头，通过摄像头获取针对周围环境的取景画面，并检测取景画面中的参考对象与公交卡的相似度。当该取景画面中存在多个参考对象与待寻找对象之间的相似度都大于或等于相似度阈值时，例如，AR眼镜的摄像头所拍摄的取景画面中可能包括一张银行卡、一张公交卡以及一张工卡，AR眼镜可能检测到这三张卡与待寻找对象公交卡之间的相似度均大于或等于相似度阈值，可以确定该取景画面中存在多个与待寻找对象相对应的疑似对象。
这样，可以通过检测取景画面中参考对象与待寻找对象之间的相似度，并在相似度大于或等于相似度阈值时，确定取景画面中存在与待寻找对象相对应的疑似对象，从而辅助用户寻找待寻找对象。本领域技术人员应理解，可以采用相关技术实现检测取景画面中的参考对象与待寻找对象之间的相似度，并在相似度大于或等于相似度阈值时，确定取景画面存在待寻找对象，本公开对检测取景画面中的参考对象与待寻找对象之间的相似度方法、相似度阈值的大小不作限制。
图3是根据一示例性实施例示出的一种对象寻找方法的流程图。在一种可能的实现方式中，如图3所示，步骤S13可以包括：
在步骤S131中，在所述取景画面中存在疑似对象时，增强显示所述疑似对象；
在步骤S132中，在所述取景画面中存在疑似对象时，增强显示所述疑似对象所在的区域；
在步骤S133中，在所述取景画面中存在疑似对象时，增强显示所述疑似对象的方向信息；
在步骤S134中，在所述取景画面中存在疑似对象时，增强显示所述疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。
举例来说，在检测到取景画面中存在疑似对象时，可以以AR增强现实方式突出标识疑似对象，以提示用户待寻找对象的位置，并引导用户快速、准确找到该待寻找对象。
在一种可能的实现方式中，在所述取景画面中存在疑似对象时，可以增强显示所述疑似对象。
举例来说，在取景画面中存在疑似对象时，可以增强显示该疑似对象。例如，在终端设备检测到取景画面中存在疑似对象时，可以将虚拟形象叠加在终端设备所拍摄的取景画面中的疑似对象上，也可以将虚拟形象叠加在终端设备所获取的真实场景中的疑似对象上。例如，在AR眼镜寻找到用户想要寻找的疑似公交卡时，可以将一个虚拟形象(例如，动态的彩色公交卡、放大的公交卡等)叠加在AR眼镜所拍摄的取景画面中的疑似公交卡上，也可以将该虚拟形象叠加在AR眼镜所获取的真实场景中的疑似公交卡上。通过采用区别于真实物品的虚拟形象，来增强显示该疑似对象。还可以通过填充颜色、图案等方式增强显示该疑似对象。例如，在AR眼镜寻找到用户想要寻找的疑似公交卡时，可以在该疑似公交卡上通过填充颜色、图案等方式增强显示该疑似公交卡的位置。本领域技术人员应理解，可以通过多种方式增强显示待疑似对象，不限于虚拟形象、颜色、图案等，只要可以在检测到取景画面中存在疑似对象时，增强显示该疑似对象即可，本公开对此不作限制。
图4是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。如图4所示，用户通过其佩戴的AR眼镜寻找公交卡。用户可以向其AR眼镜发出针对公交卡的寻找请求。用户的AR眼镜可以通过其摄像头拍摄针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似公交卡。当AR眼镜检测到取景画面中存在疑似公交卡时，可以增强显示该疑似公交卡。如图4所示，用户的AR眼镜将公交卡的虚拟形象(一个放大的填充了线条的公交卡，)叠加在真实场景中的疑似公交卡上，以增强显示该疑似公交卡。
在一种可能的实现方式中，在所述取景画面中存在疑似对象时，可以增强显示所述疑似对象所在的区域。
举例来说，在取景画面中存在疑似对象时，可以增强显示该疑似对象所在的区域。例如，在终端设备检测到取景画面中存在疑似对象时，可以将疑似对象所在的区域的虚拟形象叠加在终端设备所拍摄的取景画面中的疑似对象所在的区域，或者将该疑似对象所在的区域的虚拟形象叠加在终端设备所获取的真实场景中的疑似对象所在的区域上，以增强显示该疑似对象所在的区域，以便利用户快速寻找到该疑似对象。例如，在AR眼镜寻找到用户想要寻找的公交卡时，该公交卡在书桌的台灯旁边，则可以将书桌以及台灯的虚拟形象叠加在AR眼镜所拍摄的取景画面中书桌以及台灯上。还可以对疑似对象所在的区域之外的区域进行以下处理中的至少一项：虚化、变灰、变暗和变黑。这样，可以降低疑似对象所在区域之外的区域的关注度，进而提高用户对疑似对象所在的区域的关注度，以便用户快速找到疑似对象所在的区域，并快速找到疑似对象。本领域技术人员应理解，可以通过多种方式增强显示疑似对象所在的区域，不限于上述示例，只要在检测到取景画面中存在疑似对象时，可以增强显示疑似对象所在的区域即可，本公开对此不作限制。
图5是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。如图5所示，用户通过其佩戴的AR眼镜寻找公交卡。用户可以向其AR眼镜发出针对公交卡的寻找请求。用户的AR眼镜可以通过其摄像头拍摄针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似公交卡。当AR眼镜检测到取景画面中存在疑似公交卡时，可以增强显示该疑似公交卡所在的区域。例如，如图5所示，用户的AR眼镜检测到疑似公交卡在书桌的电脑旁边上，则可以将疑似公交卡所在的区域之外的区域进行变黑处理，从而降低疑似公交卡所在区域之外的区域的关注度，进而增强显示疑似对象所在的区域。
在一种可能的实现方式中，在所述取景画面中存在疑似对象时，可以增强显示所述疑似对象的方向信息。
举例来说，在检测到取景画面中存在疑似对象时，可以增强显示疑似对象的方向信息。例如，在终端设备检测到取景画面中存在疑似对象时，可以通过箭头等方式增强显示该疑似对象的方向信息。例如，在AR眼镜寻找到用户想要寻找的疑似公交卡时，可以将虚拟箭头形象叠加在AR眼镜所拍摄的取景画面中，指向疑似公交卡的方向，或者将虚拟箭头形象叠加在终端设备所获取的在真实场景中，指向的疑似公交卡的方向。这样，可以便于用户快速找到待寻找对象。本领域技术人员应理解，可以采用多种方式增强显示疑似对象的方向信息，本公开对此不作限制。
图6是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。如图6所示，用户通过其佩戴的AR眼镜寻找公交卡。用户可以向其AR眼镜发出针对公交卡的寻找请求。用户的AR眼镜可以通过其摄像头拍摄针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似公交卡。当AR眼镜检测到取景画面中存在疑似公交卡时，可以增强显示该疑似公交卡的方向信息。如图6所示，可以将虚拟箭头形象叠加在AR眼镜所获取的真实场景中，指向疑似公交卡的方向，以增强显示疑似公交卡的方向信息。
在一种可能的实现方式中，在所述取景画面中存在疑似对象时，增强显示所述疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。
举例来说，在检测到取景画面中存在疑似对象时，可以增强显示疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。例如，在AR眼镜寻找到用户想要寻找的疑似公交卡时，该疑似公交卡位于冰箱附近。此时，AR眼镜可以将冰箱作为疑似公交卡的参照物，通过增强显示该冰箱(例如，将冰箱的虚拟形象叠加在真实冰箱上)，来指示疑似公交卡的位置。通过这种方式，可以利用疑似对象周围的参照物来指示疑似对象的位置，从而便于用户快速寻找到待寻找对象。本领域技术人员应理解，可以采用相关技术中公知的方式增强显示疑似对象周围的参照物，参照物可以包括多种形式，只要可以用于指示疑似对象的位置即可，本公开对此不作限制。
图7是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。如图7所示，用户通过其佩戴的AR眼镜寻找公交卡。用户可以向其AR眼镜发出针对公交卡的寻找请求。用户的AR眼镜可以通过其摄像头拍摄针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似公交卡。当AR眼镜检测到取景画面中存在疑似公交卡时，可以增强显示该疑似公交卡周围的参照物，例如，增强显示该疑似公交卡周围的冰箱。如图7所示，可以将虚拟圆圈叠加在AR眼镜所获取的真实场景的冰箱上，用该虚拟圆圈来圈出冰箱，从而通过冰箱这一目标较大的参照物来指示疑似公交卡的位置。
本领域技术人员应理解，在终端设备检测到取景画面中存在疑似对象时，可以采用相关技术增强显示该疑似对象、该疑似对象所在的区域、该疑似对象的方向信息以及该疑似对象周围的参照物中的一个或多个，只要在终端设备检测到取景画面中存在疑似对象时，以AR增强现实方式突出标识疑似对象即可，本公开对此不作限制。
在一种可能的实现方式中，在检测到取景画面中多个参考对象与该待寻找对象之间的相似度大于或等于相似度阈值时，确定该取景画面中存在与该待寻找对象相对应的疑似对象，并以AR增强现实方式突出标识多个疑似对象。
举例来说，如前文所述，在检测到多个参考对象(例如，一张银行卡、一张公交卡以及一张工卡)与用户想要寻找的公交卡之间的相似度均大于或等于相似度阈值时。例如，一个参考对象(银行卡)与公交卡之间的相似度为80％、一个参考对象(公交卡)与公交卡之间的相似度为95％以及一个参考对象(工卡)与公交卡之间的相似度为70％，其中，相似度阈值可以为70％。此时，该终端设备可以确定取景画面中存在三个疑似对象，可以以AR增强现实方式突出标识多个疑似对象。例如，可以用三个虚拟形象分别叠加在取景画面中三个疑似对象上，以提示用户三个疑似对象的位置。还可以将参考对象与待寻找对象之间的相似度的信息虚拟叠加在取景画面中相应的疑似对象的旁边。例如，在三个疑似对象的旁边分别显示对应的相似度的值。这样，可以由用户根据相似度的值来确定查看疑似对象的顺序，提高寻找物品的速度和准确度。本领域技术人员应理解，可以采用多种方式以AR增强现实方式突出标识多个疑似对象，例如，还可以用颜色对多个待寻找对象进行区分，不同颜色代表不同的相似度的信息，具体对应关系可以由系统默认设置，也可以由用户根据使用习惯进行设置，例如，用户可以设置相似度最高的显示为红色，相似度最低的显示为绿色等，本公开对此不作限制。
图8是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。如图8所示，用户通过其手机寻找公交卡。用户可以向其手机发出针对公交卡的寻找请求。用户的手机可以通过其摄像头拍摄针对周围环境的取景画面，并检测取景画面中是否存在与公交卡相对应的疑似公交卡。当手机检测到取景画面中存在3个疑似公交卡时，可以以AR增强现实方式突出标识多个疑似公交卡。如图8所示，可以将三个虚拟圆圈分别圈出三个疑似公交卡，并分别将相应的相似度信息虚拟叠加在三个疑似公交卡旁边，以突出标识该多个疑似公交卡。
应用示例
以下结合“通过手机寻找公交卡”作为一个示例性应用场景，给出根据本公开实施例的应用示例，以便于理解对象寻找方法的流程。本领域技术人员应理解，以下应用示例仅仅是出于便于理解本公开实施例的目的，不应视为对本公开实施例的限制。
图9是根据一示例性实施例示出的一种对象寻找方法的应用场景的示意图。如图9所示，在该应用示例中，该用户的手机的设置页面内包括寻找模式开启控件，用户触发了该寻找模式开启控件，该用户的手机处于开启模式下。在该应用示例中，用户通过语音方式向其手机发出语音请求，例如，用户对其手机说“请帮我寻找我的公交卡”。
在该应用示例中，该用户的手机响应于寻找公交卡的寻找请求，打开AR摄像头，检测手机AR摄像头所拍摄的取景画面中是否存在与公交卡相对应的疑似公交卡。在该应用示例中，该手机可以检测取景画面中参考对象与公交卡的相似度，在相似度大于或等于相似度阈值时，确定该取景画面中存在与公交卡相对应的疑似公交卡。
在该应用示例中，在所述取景画面中存在疑似公交卡时，以AR增强现实方式突出标识该疑似公交卡。例如，在取景画面中增强显示疑似公交卡以及该疑似公交卡的方向信息，例如，用虚拟圆圈图形圈出该疑似公交卡，并通过虚拟箭头指示该疑似公交卡的方向。
根据本公开的实施例，通过响应于针对待寻找对象的寻找请求，检测终端设备的图像获取装置获取的针对周围环境的的取景画面中是否存在与待寻找对象相对应的疑似对象，并在该取景画面中存在该疑似对象时，以AR增强现实方式突出标识该疑似对象，从而便利用户快速寻找到待寻找对象。
图10是根据一示例性实施例示出的一种对象寻找装置的框图。参照图10，该装置包括取景画面获取模块61，检测模块62和疑似对象标识模块63。
该取景画面获取模块61，被配置为响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面；
该检测模块62，被配置为检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象；
该疑似对象标识模块63，被配置为在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象。
图11是根据一示例性实施例示出的一种对象寻找装置的框图。参照图11，在一种可能的实现方式中，所述检测模块62包括：
检测子模块621，被配置为检测所述取景画面中的参考对象与所述待寻找对象之间的相似度；
确定子模块622，被配置为在所述相似度大于或等于相似度阈值时，确定所述取景画面中存在与所述待寻找对象相对应的疑似对象。
参照图11，在一种可能的实现方式中，所述疑似对象标识模块63包括以下子模块中的至少一个：
第一显示子模块631，被配置为在所述取景画面中存在疑似对象时，增强显示所述疑似对象；
第二显示子模块632，被配置为在所述取景画面中存在疑似对象时，增强显示所述疑似对象所在的区域；
第三显示子模块633，被配置为在所述取景画面中存在疑似对象时，增强显示所述疑似对象的方向信息；
第四显示子模块634，被配置为在所述取景画面中存在疑似对象时，增强显示所述疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。
在一种可能的实现方式中，所述寻找请求包括语音请求、文字请求以及图片请求中的至少一种。
在一种可能的实现方式中，所述寻找请求的内容包括所述待寻找对象的名称、颜色、大小、形状中的至少一种。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图12是根据一示例性实施例示出的一种对象寻找装置的框图。例如，装置800可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参照图12，装置800可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(I/O)的接口812，传感器组件814，以及通信组件816。
处理组件802通常控制装置800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理组件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统，一个或多个电源，及其他与为装置800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(MIC)，当装置800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器，用于为装置800提供各个方面的状态评估。例如，传感器组件814可以检测到装置800的打开/关闭状态，组件的相对定位，例如所述组件为装置800的显示器和小键盘，传感器组件814还可以检测装置800或装置800一个组件的位置改变，用户与装置800接触的存在或不存在，装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件816还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器804，上述指令可由装置800的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (7)

1.一种对象寻找方法，其特征在于，应用于终端设备中，所述方法包括：
响应于针对待寻找对象的寻找请求，通过终端设备的图像获取装置获取针对周围环境的取景画面；
检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象；
在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象。
2.根据权利要求1所述的方法，其特征在于，检测所述取景画面中是否存在与所述待寻找对象相对应的疑似对象，包括：
检测所述取景画面中的参考对象与所述待寻找对象之间的相似度；
在所述相似度大于或等于相似度阈值时，确定所述取景画面中存在与所述待寻找对象相对应的疑似对象。
3.根据权利要求1所述的方法，其特征在于，在所述取景画面中存在所述疑似对象时，以AR增强现实方式突出标识所述疑似对象，包括以下方式中的至少一种：
在所述取景画面中存在疑似对象时，增强显示所述疑似对象；
在所述取景画面中存在疑似对象时，增强显示所述疑似对象所在的区域；
在所述取景画面中存在疑似对象时，增强显示所述疑似对象的方向信息；
在所述取景画面中存在疑似对象时，增强显示所述疑似对象周围的参照物，所述参照对象用于指示所述疑似对象的位置。
4.根据权利要求1所述的方法，其特征在于，所述寻找请求包括语音请求、文字请求以及图片请求中的至少一种。
5.根据权利要求1所述的方法，其特征在于，所述寻找请求的内容包括所述待寻找对象的名称、颜色、大小、形状中的至少一种。
6.一种对象寻找装置，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：执行权利要求1-5中任意一项所述的方法。
7.一种非临时性计算机可读存储介质，当所述存储介质中的指令由处理器执行时，使得处理器能够执行根据权利要求1-5中任意一项所述的方法。
CN201711212037.0A 2017-11-28 2017-11-28 对象寻找方法及装置 Pending CN107992814A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201711212037.0A CN107992814A (zh) 2017-11-28 2017-11-28 对象寻找方法及装置
US16/146,207 US10621439B2 (en) 2017-11-28 2018-09-28 Method, apparatus, and storage medium for searching for object using augmented reality (AR)
EP18208977.1A EP3489805B1 (en) 2017-11-28 2018-11-28 Method, apparatus and storage medium for searching for an object

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711212037.0A CN107992814A (zh) 2017-11-28 2017-11-28 对象寻找方法及装置

Publications (1)

Publication Number Publication Date
CN107992814A true CN107992814A (zh) 2018-05-04

Family

ID=62032397

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711212037.0A Pending CN107992814A (zh) 2017-11-28 2017-11-28 对象寻找方法及装置

Country Status (3)

Country Link
US (1) US10621439B2 (zh)
EP (1) EP3489805B1 (zh)
CN (1) CN107992814A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109299693A (zh) * 2018-09-26 2019-02-01 维沃移动通信有限公司 一种显示控制方法及移动终端
CN109324693A (zh) * 2018-12-04 2019-02-12 塔普翊海（上海）智能科技有限公司 Ar搜索装置、基于ar搜索装置的物品搜索系统及方法
CN111093033A (zh) * 2019-12-31 2020-05-01 维沃移动通信有限公司 一种信息处理方法及设备
CN111367955A (zh) * 2019-10-09 2020-07-03 杭州海康威视系统技术有限公司 目标对象的识别方法、装置、电子设备和存储介质
TWI781411B (zh) * 2020-04-21 2022-10-21 英華達股份有限公司 快速尋找物品的系統及其方法
WO2023193482A1 (zh) * 2022-04-07 2023-10-12 Oppo广东移动通信有限公司 显示方法、装置、电子设备和计算机可读存储介质

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11340756B2 (en) 2019-09-27 2022-05-24 Apple Inc. Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
US11615596B2 (en) 2020-09-24 2023-03-28 Apple Inc. Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
US11567625B2 (en) * 2020-09-24 2023-01-31 Apple Inc. Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
US11933621B2 (en) 2021-10-06 2024-03-19 Qualcomm Incorporated Providing a location of an object of interest
EP4384987A1 (en) 2021-10-08 2024-06-19 Samsung Electronics Co., Ltd. Method and system for selecting marker for modifying a scene within an augmented reality based computing environment
WO2023058899A1 (en) * 2021-10-08 2023-04-13 Samsung Electronics Co., Ltd. Method and system for selecting marker for modifying a scene within an augmented reality based computing environment
JP2023063792A (ja) * 2021-10-25 2023-05-10 キヤノン株式会社 電子機器、情報処理システム、制御方法、およびプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103761505A (zh) * 2013-12-18 2014-04-30 微软公司 对象跟踪
CN107133573A (zh) * 2017-04-12 2017-09-05 宇龙计算机通信科技(深圳)有限公司 一种寻找物品的方法和装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8698843B2 (en) * 2010-11-02 2014-04-15 Google Inc. Range of focus in an augmented reality application
US20130097197A1 (en) * 2011-10-14 2013-04-18 Nokia Corporation Method and apparatus for presenting search results in an active user interface element
US9092896B2 (en) * 2012-08-07 2015-07-28 Microsoft Technology Licensing, Llc Augmented reality display of scene behind surface
US20140053099A1 (en) 2012-08-14 2014-02-20 Layar Bv User Initiated Discovery of Content Through an Augmented Reality Service Provisioning System
US9535496B2 (en) * 2013-03-15 2017-01-03 Daqri, Llc Visual gestures
US10152495B2 (en) * 2013-08-19 2018-12-11 Qualcomm Incorporated Visual search in real world using optical see-through head mounted display with augmented reality and user interaction tracking
US9558716B2 (en) * 2014-05-05 2017-01-31 Here Global B.V. Method and apparatus for contextual query based on visual elements and user input in augmented reality at a device
KR20160000533A (ko) * 2014-06-24 2016-01-05 (주)서버사이드 증강 현실에서 물체의 정보 제공을 위한 지역 특징점을 이용한 오브젝트 다중 검출, 추적 방법 및 그 시스템
US10943111B2 (en) * 2014-09-29 2021-03-09 Sony Interactive Entertainment Inc. Method and apparatus for recognition and matching of objects depicted in images
JP2017182247A (ja) 2016-03-29 2017-10-05 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10769438B2 (en) * 2017-05-23 2020-09-08 Samsung Electronics Company, Ltd. Augmented reality
US11120264B2 (en) * 2017-06-02 2021-09-14 Apple Inc. Augmented reality interface for facilitating identification of arriving vehicle
US10015628B1 (en) * 2018-01-09 2018-07-03 Eternal Legacy Company, LLC Digital legacy and location services for burial sites
KR102378682B1 (ko) * 2018-02-06 2022-03-24 월마트 아폴로, 엘엘씨 커스터마이즈된 증강 현실 아이템 필터링 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103761505A (zh) * 2013-12-18 2014-04-30 微软公司 对象跟踪
CN107133573A (zh) * 2017-04-12 2017-09-05 宇龙计算机通信科技(深圳)有限公司 一种寻找物品的方法和装置

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109299693A (zh) * 2018-09-26 2019-02-01 维沃移动通信有限公司 一种显示控制方法及移动终端
CN109324693A (zh) * 2018-12-04 2019-02-12 塔普翊海（上海）智能科技有限公司 Ar搜索装置、基于ar搜索装置的物品搜索系统及方法
CN111367955A (zh) * 2019-10-09 2020-07-03 杭州海康威视系统技术有限公司 目标对象的识别方法、装置、电子设备和存储介质
CN111367955B (zh) * 2019-10-09 2024-03-26 杭州海康威视系统技术有限公司 目标对象的识别方法、装置、电子设备和存储介质
CN111093033A (zh) * 2019-12-31 2020-05-01 维沃移动通信有限公司 一种信息处理方法及设备
CN111093033B (zh) * 2019-12-31 2021-08-06 维沃移动通信有限公司 一种信息处理方法及设备
TWI781411B (zh) * 2020-04-21 2022-10-21 英華達股份有限公司 快速尋找物品的系統及其方法
WO2023193482A1 (zh) * 2022-04-07 2023-10-12 Oppo广东移动通信有限公司 显示方法、装置、电子设备和计算机可读存储介质

Also Published As

Publication number Publication date
US20190163976A1 (en) 2019-05-30
EP3489805B1 (en) 2023-06-07
EP3489805A1 (en) 2019-05-29
US10621439B2 (en) 2020-04-14

Similar Documents

Publication Publication Date Title
CN107992814A (zh) 对象寻找方法及装置
CN105491289B (zh) 防止拍照遮挡的方法及装置
US10942580B2 (en) Input circuitry, terminal, and touch response method and device
CN105069426B (zh) 相似图片判断方法以及装置
CN104391711B (zh) 一种设置屏幕保护的方法及装置
CN107688781A (zh) 人脸识别方法及装置
CN105335714B (zh) 照片处理方法、装置和设备
CN107580129A (zh) 终端状态控制方法及装置
CN107463052A (zh) 拍摄曝光方法及装置
CN107742120A (zh) 银行卡卡号的识别方法及装置
CN109360197A (zh) 图像的处理方法、装置、电子设备及存储介质
CN105631804A (zh) 图片处理方法及装置
CN106802808A (zh) 悬浮按钮控制方法及装置
CN106126082A (zh) 控制终端的方法、装置及终端
CN107783715A (zh) 应用启动方法及装置
CN106547850A (zh) 表情注释方法及装置
CN105426904B (zh) 照片处理方法、装置和设备
CN105487774B (zh) 图像分组方法及装置
CN104573642A (zh) 人脸识别方法及装置
CN106488132A (zh) 拍照方法和装置
US20190095163A1 (en) Method and device for displaying an input interface and an electronic device
JP2014206837A (ja) 電子機器、その制御方法及びプログラム
CN108509863A (zh) 信息提示方法、装置和电子设备
CN106936986A (zh) 应用处理方法及装置
CN106778198A (zh) 执行操作的安全认证方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination