CN115586833A - 信息处理方法、装置、系统、电子设备及介质 - Google Patents

信息处理方法、装置、系统、电子设备及介质 Download PDF

Info

Publication number
CN115586833A
CN115586833A CN202211258728.5A CN202211258728A CN115586833A CN 115586833 A CN115586833 A CN 115586833A CN 202211258728 A CN202211258728 A CN 202211258728A CN 115586833 A CN115586833 A CN 115586833A
Authority
CN
China
Prior art keywords
wearer
glasses
target object
scanning
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211258728.5A
Other languages
English (en)
Inventor
张丽果
于跃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhongke Chuangda Chongqing Automobile Technology Co ltd
Original Assignee
Zhongke Chuangda Chongqing Automobile Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhongke Chuangda Chongqing Automobile Technology Co ltd filed Critical Zhongke Chuangda Chongqing Automobile Technology Co ltd
Priority to CN202211258728.5A priority Critical patent/CN115586833A/zh
Publication of CN115586833A publication Critical patent/CN115586833A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
    • G06K17/0025—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device the arrangement consisting of a wireless interrogation device in combination with a device for optically marking the record carrier
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/327—Short range or proximity payments by means of M-devices
    • G06Q20/3276—Short range or proximity payments by means of M-devices using a pictured code, e.g. barcode or QR-code, being read by the M-device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种信息处理方法、装置、系统、电子设备及介质，涉及信息处理技术领域。该方法包括：AR眼镜和终端设备，AR眼镜包括摄像头，AR眼镜与终端设备绑定并通信连接；AR眼镜实时捕捉佩戴者感兴趣的目标对象，可以实现所见即所得的效果；在捕捉到佩戴者感兴趣的目标对象的情况下，AR眼镜响应于佩戴者的命令，扫描目标对象获得扫描信息，从而可以快速锁定佩戴者感兴趣的目标对象，然后将该扫描信息发送至终端设备，终端设备对扫描信息进行处理得到处理结果，能够省去打开智能终端、打开智能终端摄像头进行扫描等繁琐步骤，快速得到扫描信息和处理结果，节省了时间，提升了用户体验，同时可以提高视力障碍人群获取扫描信息的便捷性。

Description

信息处理方法、装置、系统、电子设备及介质
技术领域
本发明涉及信息技术领域，尤其涉及一种信息处理方法、装置、系统、电子设备及介质。
背景技术
随着科技的进步以及移动支付等新型业态的流行，日常生活中越来越多的场景需要通过“扫描”完成各种操作，比如拍照识图、移动支付扫描二维码等。
当前若要扫描二维码，一般需要如下几个步骤：(1)打开手机或其他具备摄像功能的智能设备终端；(2)打开具备扫一扫功能的应用程序APP；(3)手动打开手机或智能设备终端的摄像头，将手摄像头对准需要扫描的二维码；(4)等待手机或智能设备终端显示扫描结果。同样地，对于拍照识图辩物，一般也需要如下几个步骤：(1)打开手机或其他具备摄像功能的智能设备终端；(2)打开具备扫一扫功能的应用程序APP；(3)将手机或智能设备终端的摄像头对准需要扫描的物体或者画面；(4)等待手机或智能设备终端显示扫描结果。如上所示，当前借助手机或者其他具备摄像功能的智能终端设备进行扫描的方式比较繁琐，且每一步都需要一定的时间等待，不能及时展示扫描结果。而且，在某些场景下，例如排队扫描二维码时，二维码的距离可能较远，人眼看得到但智能终端设备扫不到，又无法一直举着智能终端设备尝试扫描。因此，亟需一种更便捷的扫描方式。
发明内容
为解决上述技术问题，本发明实施例提供一种信息处理方法、装置、系统、电子设备及介质。
第一方面，本发明实施例提供了一种信息处理方法，所述方法应用于AR眼镜，所述AR眼镜用于与终端设备绑定并通信连接，所述AR眼镜包括摄像头，所述方法包括：
实时捕捉佩戴者感兴趣的目标对象；
在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息；
将所述扫描信息发送至终端设备，所述终端设备用于对所述扫描信息处理。
可选地，所述实时捕捉佩戴者感兴趣的目标对象，包括：根据预设的人眼追踪策略跟踪所述佩戴者的眼球运动，根据所述佩戴者的眼球运动实时捕捉所述佩戴者感兴趣的目标对象。
可选地，所述方法还包括：在捕捉到所述佩戴者感兴趣的目标对象的情况下，展示所述目标对象以及所述目标对象的位置信息。
可选地，所述响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息，将所述扫描信息发送至终端设备，包括：在所述目标对象为条码的情况下，响应于所述佩戴者的第一命令，扫描所述条码，得到条码图像，将所述条码图像发送至所述终端设备；或，在所述目标对象为条码的情况下，响应于所述佩戴者的第二命令，扫描并解析所述条码，得到所述条码的解析结果，将所述条码的解析结果发送至所述终端设备。
可选地，所述条码为付款码；在将所述条码图像发送至终端设备之后，所述方法还包括：接收并显示所述终端设备对所述付款码图像解析得到的结算信息界面；响应于所述佩戴者的确认支付的命令，向所述终端设备发送支付命令，使所述终端设备完成本次支付。
可选地，所述佩戴者的确认支付的命令包括头部动作、眨眼、口令中的一种；所述头部动作包括点头、摇头或用头部绘制预设图案中的一种。
可选地，所述AR眼镜与安装在所述终端设备上的至少一个应用程序绑定；所述将所述扫描信息发送至终端设备，包括：响应于所述佩戴者的目标命令，将所述扫描信息发送至与所述目标命令对应的目标应用程序。
可选地，所述方法还包括：接收所述终端设备发送的处理结果，所述处理结果是所述终端设备对所述扫描信息进行处理后得到的；展示所述处理结果。
第二方面，本发明实施例提供了一种信息处理方法，所述方法应用于终端设备，所述终端设备与AR眼镜绑定并通信连接；所述方法包括：接收所述AR眼镜发送的扫描信息，并对所述扫描信息进行处理，得到处理结果；其中，所述扫描信息是所述AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令扫描所述目标对象得到的。
可选地，所述方法还包括：将所述处理结果发送至所述终端设备的桌面；唤醒所述终端设备的显示屏幕，以展示所述桌面上的处理结果。
可选地，所述方法还包括：将所述处理结果发送至所述AR眼镜，以使所述AR眼镜展示所述处理结果。
第三方面，本发明实施例提供了一种信息处理装置，所述装置应用于AR眼镜，所述装置包括：
捕捉模块，用于实时捕捉佩戴者感兴趣的目标对象；
扫描发送模块，用于在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息，将所述扫描信息发送至终端设备，所述终端设备与所述AR眼镜绑定并通信连接。
可选地，所述捕捉模块还用于：根据预设的人眼追踪策略跟踪所述佩戴者的眼球运动，根据所述佩戴者的眼球运动实时捕捉所述佩戴者感兴趣的目标对象。
可选地，所述装置还包括展示模块，用于在捕捉到所述佩戴者感兴趣的目标对象的情况下，展示所述目标对象以及所述目标对象的位置信息。
可选地，所述扫描发送模块还用于：在所述目标对象为条码的情况下，响应于所述佩戴者的第一命令，扫描所述条码，得到条码图像，将所述条码图像发送至终端设备；或，在所述目标对象为条码的情况下，响应于所述佩戴者的第二命令，扫描并解析所述条码，得到所述条码的解析结果，将所述条码的解析结果发送至终端设备。
可选地，所述AR眼镜与安装在所述终端设备上的至少一个应用程序绑定；所述扫描发送模块还用于：响应于所述佩戴者的目标命令，将所述扫描信息发送至与所述目标命令对应的目标应用程序。
可选地，所述展示模块还用于：接收所述终端设备发送的处理结果，所述处理结果是所述终端设备对所述扫描信息进行处理后得到的；展示所述处理结果。
第四方面，本发明实施例提供了一种信息处理装置，所述装置应用于终端设备，所述终端设备与AR眼镜绑定并通信连接；所述装置包括：
接收模块，用于接收所述AR眼镜发送的扫描信息；
处理模块，用于对所述扫描信息进行处理，得到处理结果；其中，所述扫描信息是所述AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令扫描所述目标对象得到的。
可选地，所述装置还包括推送模块，用于：将所述处理结果发送至所述终端设备的桌面；唤醒所述终端设备的显示屏幕，以展示所述桌面上的处理结果。
可选地，所述装置还包括结果发送模块，用于将所述处理结果发送至所述AR眼镜，以使所述AR眼镜展示所述处理结果。
第五方面，本发明实施例提供了一种信息处理系统，所述信息处理系统包括AR眼镜和终端设备，所述AR眼镜包括摄像头，所述AR眼镜与所述终端设备绑定并通信连接；
所述AR眼镜用于实时捕捉佩戴者感兴趣的目标对象，在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息；
所述终端设备用于接收所述AR眼镜发送的所述扫描信息，并对所述扫描信息进行处理，得到处理结果。
可选地，所述AR眼镜根据预设的人眼追踪策略跟踪所述佩戴者的眼球运动，根据所述佩戴者的眼球运动实时捕捉所述佩戴者感兴趣的目标对象。
可选地，所述AR眼镜还用于：在捕捉到所述佩戴者感兴趣的目标对象的情况下，展示所述目标对象以及所述目标对象的位置信息。
可选地，在所述目标对象为条码的情况下，所述AR眼镜还用于：响应于所述佩戴者的第一命令，扫描所述条码，得到条码图像，将所述条码图像发送至所述终端设备；或，所述AR眼镜还用于：响应于所述佩戴者的第二命令，扫描并解析所述条码，得到所述条码的解析结果，将所述条码的解析结果发送至所述终端设备。
可选地，所述AR眼镜与安装在所述终端设备上的至少一个应用程序绑定；所述AR眼镜还用于：响应于所述佩戴者的目标命令，将所述扫描信息发送至与所述目标命令对应的目标应用程序。
可选地，所述终端设备还用于：将所述处理结果发送至所述终端设备的桌面；唤醒所述终端设备的显示屏幕，以展示所述桌面上的处理结果。
可选地，所述终端设备还用于将所述处理结果发送至所述AR眼镜；所述AR眼镜还用于将展示所述处理结果。
第六方面，本发明实施例提供了一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现上述任一实施例提供的信息处理方法。
第七方面，本发明实施例提供了一种非易失性可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现上述任一实施例提供的信息处理方法。
上述发明中的一个实施例具有如下优点或有益效果：
本发明实施例的信息处理方法包括AR眼镜和终端设备，AR眼镜和终端设备绑定并通信连接，其中，AR眼镜具备摄像头，可以实时捕捉佩戴者感兴趣的目标对象，可以实现所见即所得的效果；在捕捉到佩戴者感兴趣的目标对象的情况下，AR眼镜响应于佩戴者的命令，扫描目标对象获得扫描信息，从而可以快速锁定佩戴者感兴趣的目标对象，然后将该扫描信息发送至终端设备，终端设备接收AR眼镜发送的扫描信息，并对扫描信息进行处理得到处理结果，能够省去打开智能终端、打开智能终端摄像头进行扫描等繁琐步骤，简化了扫描流程，能够快速得到扫描信息和处理结果，节省了时间，提升了用户体验，同时该信息处理方法可以提高视力障碍人群获取扫描信息的便捷性。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明，不构成对本发明的不当限定。其中：
图1示出了本发明一实施例的信息处理方法的流程示意图；
图2示出了本发明另一实施例的信息处理方法的流程示意图；
图3示出了本发明又一实施例的信息处理方法的流程示意图；
图4示出了本发明一实施例的信息处理系统的架构图；
图5示出了本发明一实施例的信息处理装置的结构示意图；
图6示出了本发明另一实施例的信息处理方法的结构示意图；
图7示出了本发明实施例的电子设备的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
图1示出了本发明一实施例的信息处理方法的流程图。该实施例的信息处理方法可以应用于具有摄像头的AR眼镜(Augmented Reality，增强现实)。该AR眼镜还具备通信连接功能，以通过该通信连接功能与终端设备通信连接，实现信息交互。该通信连接功能可以是无线通信连接功能，也可以是有线通信连接功能。作为示例，该无线通信连接功能可以支持AR眼镜与终端设备通过蓝牙、WiFi等通信连接。在本实施例中，可以预先将AR眼镜和终端设备通过无线或有线连接，使其具备与终端设备互相通信的功能。终端设备可以包括但不限于智能手机、平板电脑、笔记本电脑、智能可穿戴设备(如手环)等。
如图1所示，该信息处理方法包括：
步骤S101：实时捕捉佩戴者感兴趣的目标对象。
本实施例中佩戴者在佩戴AR眼镜后，AR眼镜可以实时跟踪佩戴者眼睛所观察到的物体以及信息，从而实时捕捉或检测佩戴者感兴趣的目标对象。其中，该感兴趣的目标对象可以是佩戴者观察到的任意一个物体或信息。作为示例，该感兴趣的目标对象可以是条码(一维条码如商品条形码或二维码)、商品、植物或物流信息等。
步骤S102：在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息；
步骤S103：将所述扫描信息发送至终端设备，所述终端设备与所述AR眼镜绑定并通信连接，所述终端设备用于对扫描信息处理。
AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，确定是否检测到扫描该目标对象的命令。在检测到扫描该目标对象的命令的情况下，扫描该目标对象，得到扫描信息，并将扫描信息发送至与该AR眼镜绑定并通信连接的终端设备上。
在可选的实施方式中，佩戴者的命令可以是用来确认扫描目标对象的命令，佩戴者的命令可以是预设的生物命令。生物命令可以是某种指令和/或某个动作，某种指令例如是语音口令，语音口令可以是表示确认扫描或者是同意扫描的语音，例如语音口令可以是“扫描”、“确认”、“OK”、“开始”、“可以”中的一种，或者语音口令可以是包含有上述文字的一句话，比如立即“扫描”、“确认扫描”、马上“扫描”、“扫描”吧。某个动作例如是点头、摇头、眨眼、或者是用头部绘制预设的图案。
在可选的实施方式中，佩戴者的命令，还可以结合预设的次数。例如，佩戴者的命令可以是佩戴者发生了预设次数的动作，比如，佩戴者眨眼了预设次数，或者点头了预设次数，在或者说了预设次数的语音口令。预设次数可以是1次、2次、3次等。例如，佩戴者点头了2次，表示佩戴者确认扫描目标对象。
应当理解的是，还可以设置其他的命令，佩戴者的命令只要是可以表示确认扫描目标对象的命令即可，本实施方式并不以此为限。
AR眼镜在检测到预设的命令后进行扫描，得到扫描信息，然后将得到的扫描信息发送至预先绑定的终端设备，以使终端设备对扫描信息进行处理。
本发明实施例的信息处理方法，AR眼镜具备摄像头，可以实时捕捉佩戴者感兴趣的目标对象，可以实现所见即所得的效果；在捕捉到佩戴者感兴趣的目标对象的情况下，AR眼镜响应于佩戴者的命令，扫描目标对象获得扫描信息，从而可以快速锁定佩戴者感兴趣的目标对象，然后将该扫描信息发送至终端设备，终端设备接收AR眼镜发送的扫描信息，并对扫描信息进行处理得到处理结果，能够省去打开智能终端、打开智能终端摄像头进行扫描等繁琐步骤，简化了扫描流程，能够快速得到扫描信息和处理结果，节省了时间，提升了用户体验，同时该信息处理方法可以提高视力障碍人群获取扫描信息的便捷性。即，在本发明实施例中，AR眼镜作为终端设备的外部扫一扫端口，AR眼镜是信息的采集端和入口，终端设备是信息的处理端，从而可以省去繁琐步骤，快速得到扫描结果。
在可选的实施例中，AR眼镜可以根据预设的人眼追踪策略(人眼追踪技术)跟踪所述佩戴者的眼球运动，根据所述佩戴者的眼球运动实时捕捉所述佩戴者感兴趣的目标对象。其中，根据佩戴者的眼球运动可以确定佩戴者观察每一对象的所用的时间，在观察某一对象的时间达到预设时长时，可以将该被观察的对象作为佩戴者感兴趣的目标对象。作为示例，预设的人眼追踪策略可以包括角膜反射法、巩膜一虹膜边缘法、瞳孔一角膜反射向量法等。
在可选的实施例中，在佩戴者感兴趣的目标对象为条码的情况下，AR眼镜可以将扫描的条码图像直接发送到终端设备，也可以对条码进行解析，将解析结果发送到终端设备。因此，上述步骤S102还可以包括：
在所述目标对象为条码的情况下，响应于所述佩戴者的第一命令，扫描所述条码，得到条码图像，将所述条码图像发送至所述终端设备；
或
在所述目标对象为条码的情况下，响应于所述佩戴者的第二命令，扫描并解析所述条码，得到所述条码的解析结果，将所述条码的解析结果发送至所述终端设备。
其中，第一命令和第二命令可以灵活设置，本发明在此不做限制。在AR眼镜直接向终端设备发送条码图像的情况下，AR眼镜作为条码信息采集设备采集条码信息，而条码信息的处理动作由终端设备完成。在AR眼镜解析条码图像，将解析结果发送至终端设备的情况下，AR眼镜不仅可以作为条码信息采集设备采集条码信息，还可以作为条码信息解析设备解析条码信息。
在可选的实施例中，AR眼镜不仅可以与终端设备绑定，还可以与安装在终端设备上的应用程序APP如即时通讯类应用程序、支付类应用程序、购物类应用程序、短视频类应用程序、娱乐影音类应用程序等进行绑定，并获取信息交互的权限。因此，该AR眼镜在扫描目标对象得到扫描信息后，可以响应于佩戴者的目标命令，将该扫描信息发送至与该目标命令对应的目标应用程序。例如，在目标对象为支付二维码的情况下，AR眼镜可以将扫描的支付二维码的图像发送到支付类应用程序。在目标对象为商品链接二维码的情况下，AR眼镜可以将扫描的商品链接二维码发送到相应的购物类应用程序。
在可选的实施例中，在上述条码为付款码的情况下，AR眼镜在将支付码图像发送至终端设备后，该AR眼镜还可以接收并显示终端设备对付款码图像解析得到的解算信息界面，检测并响应于佩戴者的确认支付的命令，向终端设备发送支付命令，使得终端设备完成本次支付。其中，佩戴者的确认支付的命令可以是头部动作，例如点头、摇头或者用头部绘制预设图案。该确认支付的命令也可以是眨眼动作，进一步的可以是预设次数的眨眼动作，如眨一次眼、眨两次眼等，也可以是仅眨左眼或仅眨右眼。该确认支付的命令还可以是口令(即语音指令)，例如确认支付等。
图2示出了本发明另一实施例的信息处理方法的流程图。该实施例的方法可以应用于AR眼镜。如图2所示，该方法包括：
步骤S201：实时捕捉佩戴者感兴趣的目标对象；
步骤S202：在捕捉到所述佩戴者感兴趣的目标对象的情况下，展示所述目标对象以及所述目标对象的位置信息；
步骤S203：响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息，将所述扫描信息发送至终端设备，所述终端设备与所述AR眼镜绑定并通信连接；
步骤S204：接收所述终端设备发送的处理结果，所述处理结果是所述终端设备对所述扫描信息进行处理后得到的；
步骤S205：展示所述处理结果。
在本实施例中，AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，可以通过镜片投影向佩戴者展示该目标对象，同时也可以标识出该目标对象的位置。AR眼镜还可以接收终端设备处理扫描信息后得到的处理结果，并通过镜片投影或语音播报等形式展示该处理结果，以便于用户查看处理结果或根据需求选择相应后续操作。
本实施例的信息处理方法，AR眼镜具备摄像功能，其作为图像、物体等的信息入口，用户可以预设各种指令比如生物指令(点头、眨眼等)、语音指令、触摸滑屏等以进行确认、选项等操作，AR眼镜的镜片充当信息展示媒介及窗口，展示目标对象和扫描信息的处理结果，终端设备作为信息处理模块和信息输出模块对扫描信息进行处理并输出处理结果，从而简化扫描流程，提高扫描效率和提升用户体验。
图3示出了本发明又一实施例的信息处理方法的流程示意图。该实施例的信息处理方法可以应用于终端设备中，该终端设备与AR眼镜绑定并通信连接。本实施例中的终端设备可以包括但不限于智能手机、平板电脑、笔记本电脑、智能可穿戴设备(如手环)等。
如图3所示，该信息处理方法包括：
步骤S301：接收AR眼镜发送的扫描信息；其中，可以是终端设备接收AR眼镜发送的扫描信息，也可以是终端设备内的某一应用程序接收该扫描信息；
步骤S302：对所述扫描信息进行处理，得到处理结果；其中，所述扫描信息是所述AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令扫描所述目标对象得到的。在目标对象为二维码的情况下，扫描信息为二维码画面(二维码图像)，终端设备可以对二维码进行识别。在目标对象为物体的情况下，该扫描信息可以是物体图像，终端设备可以根据物体图像进行识别或识图购物等。
本实施例的信息处理方法中，智能设备作为信息处理模块直接接收AR眼镜的扫描信息，并对扫描信息进行处理并得到处理结果，省去了打开智能终端、打开智能终端摄像头进行扫描等繁琐步骤，简化了扫描流程，能够快速得到扫描信息和处理结果，节省了时间，提升了用户体验。
在可选的实施例中，该信息处理方法还包括：将所述处理结果发送至所述终端设备的桌面；唤醒所述终端设备的显示屏幕，以展示所述桌面上的处理结果。
终端设备在对扫描信息进行处理后，可以将处理结果直接推送到终端设备的桌面，并唤醒终端设备的显示屏幕，以便于佩戴者查看处理结果，省去了佩戴者解锁屏幕、查找处理结果的步骤，进一步简化步骤以及提升用户体验，另外将处理结果推送到桌面也便于佩戴者向其他人员展示处理结果。例如，在目标对象为场所码的情况下，AR眼镜将扫描的场所码画面发送至终端设备或终端设备上的某一应用程序，终端设备或该应用程序处理该场所码，得到佩戴者的健康码，终端或该应用程序将健康码推送到桌面，并唤醒终端设备的屏幕，以便于佩戴者向相关人员展示该健康码。
在可选的实施例中，终端设备还可以将处理结果发送至AR眼镜，以使AR眼镜通过镜片投影或语音播报等形式展示该处理结果。
本发明实施例的信息处理方法可以应用于支付类场景、物体识别类场景、识图购物类场景、物体溯源场景等多种场景。结合图1-图3所示的实施例，下面以目标对象为二维码为例说明本发明实施例的信息处理方法的操作流程：
(1)预备阶段：AR眼镜与智能移动终端通过无线或有线连接，具备相互通信功能，AR眼镜也可以获得智能移动终端中各应用程序APP的权限，比如支付应用程序、即时通讯应用程序等，以便当需要AR眼镜扫描二维码信息时，可以将二维码信息回传给智能移动终端或智能移动终端上的APP，并获得信息反馈；在本实施例中可以理解为：AR眼镜是支付应用程序、即时通讯应用程序的外部扫一扫端口，AR眼镜是数据的入口和收集端，智能移动终端和APP是数据的处理端，处理结果再返回给AR眼镜展示，比如通过镜片投影或者语音播放等形式。
(2)佩戴者佩戴AR眼镜后，通过人眼追踪技术实时跟踪佩戴者眼睛所观察到的信息，以实时检测佩戴者感兴趣的目标对象；
(3)当佩戴者视野范围内出现二维码后，一方面AR眼镜会通知佩戴者，并将二维码所在位置标识出来提示佩戴者，另一方面用户可以通过预设指令动作，比如通过点头、口令、眨眼等生物命令或者其他命令作为是否进行扫描的动作指令；
(4)当AR眼镜监控到扫描二维码的动作指令后，将二维码信息同步给所连接的智能移动终端，这里AR眼镜可以直接解析二维码，将解析后的数据传送给智能移动终端，也可以直接将二维码画面传送给智能移动终端，以使智能移动终端对二维码进行解析；
(5)智能移动终端对收到的二维码信息进行处理，并将处理结果推到桌面，同时也会将二维码扫描结果回传给AR眼镜；
(6)唤醒移动智能终端的屏幕，其中，可以自动唤醒移动智能终端的屏幕，也可以响应于佩戴者的动作唤醒移动智能终端的屏幕。此时，二维码扫描结果既在AR眼镜端呈现，又在智能移动终端准备好，拿出智能移动终端便可查看得到二维码扫描结果。
在支付类场景中，当该二维码为支付二维码时，信息处理方法的流程具体为：用户先将AR与手机进行绑定，获取支付应用程序的权限；用户购物完毕，商家出示收款码，用户佩戴AR眼镜，盯住二维码达到预设时长，通过预设的点头以及眨眼命令确认扫描该二维码；AR眼镜将二维码信息传送给支付应用程序，支付应用程序进行解析后，确认支付金额，并将结算界面信息及画面传送给AR眼镜；AR镜片展示支付信息，用户通过确认指令，确认支付，完成支付。
在物体识别类场景中，信息处理方法的流程具体为：用户先将AR眼镜与手机进行绑定，获取物体识别类应用程序的权限；佩戴者盯住感兴趣目标，比如盆栽，达到预设时长，通过目标命令(如预设的点头以及语音命令)确认扫描该盆栽，并将扫描信息发送至与目标命令相应的物体识别类应用程序；该物体识别类应用程序可以通过识图辨物功能查询搜索到的信息，比如对于该植物的科普介绍等，物体识别类应用程序可以将该科普介绍发送至AR眼镜，AR眼镜可以通过语音播报的形式播报该科普介绍。
在识图购物类场景中，息处理方法的流程具体为：用户先将AR眼镜与手机进行绑定，获取购物类应用程序的权限；佩戴者盯住感兴趣目标，比如某一商品的营销二维码，达到预设时长，通过目标命令(如预设的眨眼动作)确认扫描该营销二维码，并将扫描信息发送至与目标命令相应的购物类应用程序；购物类应用程序基于该营销二维码，打开购物预览界面，并将该购物预览界面发送至AR眼镜端，以通过AR眼镜的镜片展示给用户，并且手机端也展示相应界面，用户可以选择直接购物或者使用手机继续购物。
图4示出了本发明一实施例的信息处理系统400的架构图，如图4所示，该信息处理系统400包括：AR眼镜401和终端设备402，AR眼镜401包括摄像头，AR眼镜401与终端设备402绑定并通信连接。
其中，AR眼镜401用于实时捕捉佩戴者感兴趣的目标对象，在捕捉到佩戴者感兴趣的目标对象的情况下，响应于佩戴者的命令，扫描目标对象，得到扫描信息。在本实施例中，利用AR眼镜的摄像功能能够迅速捕捉到目标对象，同时捕捉佩戴者表情指令信息，并基于佩戴者的表情指令信息扫描目标对象得到扫描信息，然后将扫描信息发送至终端设备。
终端设备402用于接收AR眼镜401发送的扫描信息，并对扫描信息进行处理，得到处理结果。
在本发明实施例的信息处理系统中，AR眼镜可以帮助佩戴者迅速锁定目标所见即所得，能够省去繁琐操作步骤，快速得到扫描结果，对视力障碍等人群也有很好的帮助效果。本发明实施例的信息处理系统通过AR眼镜将现实世界的信息虚拟化后，传递到数字世界，并将最终结果得以呈现，打通了两个维度的交互。
在可选的实施例中，AR眼镜401根据预设的人眼追踪策略跟踪佩戴者的眼球运动，根据佩戴者的眼球运动实时捕捉佩戴者感兴趣的目标对象。
在可选的实施例中，AR眼镜401还用于：在捕捉到佩戴者感兴趣的目标对象的情况下，展示目标对象以及目标对象的位置信息。
在可选的实施例中，在目标对象为条码的情况下，AR眼镜401还用于：响应于佩戴者的第一命令，扫描条码，得到条码图像，将条码图像发送至终端设备402；或，AR眼镜401还用于：响应于佩戴者的第二命令，扫描并解析条码，得到条码的解析结果，将条码的解析结果发送至终端设备402。
在可选的实施例中，AR眼镜401与安装在终端设备402上的至少一个应用程序绑定；AR眼镜401还用于：响应于佩戴者的目标命令，将扫描信息发送至与目标命令对应的目标应用程序。
在可选的实施例中，终端设备402还用于：将处理结果发送至终端设备402的桌面；唤醒终端设备402的显示屏幕，以展示桌面上的处理结果。
在可选的实施例中，终端设备402还用于将处理结果发送至AR眼镜401；AR眼镜401还用于将展示处理结果。
图5示出了本发明一实施例的信息处理装置500的结构示意图，该信息处理装置500可以应用于AR眼镜。如图5所示，该信息处理装置500包括：
捕捉模块501，用于实时捕捉佩戴者感兴趣的目标对象；
扫描发送模块502，用于在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息，将所述扫描信息发送至终端设备，所述终端设备与所述AR眼镜绑定并通信连接。
可选地，所述捕捉模块还用于：根据预设的人眼追踪策略跟踪所述佩戴者的眼球运动，根据所述佩戴者的眼球运动实时捕捉所述佩戴者感兴趣的目标对象。
可选地，所述装置还包括展示模块，用于在捕捉到所述佩戴者感兴趣的目标对象的情况下，展示所述目标对象以及所述目标对象的位置信息。
可选地，所述扫描发送模块还用于：在所述目标对象为条码的情况下，响应于所述佩戴者的第一命令，扫描所述条码，得到条码图像，将所述条码图像发送至终端设备；或，在所述目标对象为条码的情况下，响应于所述佩戴者的第二命令，扫描并解析所述条码，得到所述条码的解析结果，将所述条码的解析结果发送至终端设备。
可选地，所述AR眼镜与安装在所述终端设备上的至少一个应用程序绑定；所述扫描发送模块还用于：响应于所述佩戴者的目标命令，将所述扫描信息发送至与所述目标命令对应的目标应用程序。
可选地，所述展示模块还用于：接收所述终端设备发送的处理结果，所述处理结果是所述终端设备对所述扫描信息进行处理后得到的；展示所述处理结果。
图6示出了本发明另一实施例的信息处理装置600的结构示意图，该信息处理装置600可以应用于终端设备，该终端设备与AR眼镜绑定并通信连接。
如图6所示，该信息处理装置600包括：
接收模块601，用于接收所述AR眼镜发送的扫描信息；
处理模块602，用于对所述扫描信息进行处理，得到处理结果；其中，所述扫描信息是所述AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令扫描所述目标对象得到的。
可选地，所述装置还包括推送模块，用于：将所述处理结果发送至所述终端设备的桌面；唤醒所述终端设备的显示屏幕，以展示所述桌面上的处理结果。
可选地，所述装置还包括结果发送模块，用于将所述处理结果发送至所述AR眼镜，以使所述AR眼镜展示所述处理结果。
上述装置可执行本发明实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明实施例所提供的方法。
本发明实施例还提供了一种电子设备，如图7所示，包括处理器701、通信接口702、存储器703和通信总线704，其中，处理器701，通信接口702，存储器703通过通信总线704完成相互间的通信，
存储器703，用于存放计算机程序；
处理器701，用于执行存储器703上所存放的程序时，实现如下步骤：实时捕捉佩戴者感兴趣的目标对象；在捕捉到佩戴者感兴趣的目标对象的情况下，响应于佩戴者的命令，扫描目标对象，得到扫描信息，将扫描信息发送至终端设备，终端设备与AR眼镜绑定并通信连接；
或者，实现如下步骤：接收AR眼镜发送的扫描信息，并对扫描信息进行处理，得到处理结果；其中，扫描信息是AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于佩戴者的命令扫描目标对象得到的。
上述终端提到的通信总线704可以是外设部件互连标准(Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，简称EISA)总线等。该通信总线704可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口702用于上述终端与其他设备之间的通信。
存储器703可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器701的存储装置。
上述的处理器701可以是通用处理器，包括中央处理器(Central ProcessingUnit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种非易失性可读存储介质，该非易失性可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的信息处理方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的信息处理方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在非易失性可读存储介质中，或者从一个非易失性可读存储介质向另一个非易失性可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述非易失性可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (14)

1.一种信息处理方法，其特征在于，所述方法应用于AR眼镜，所述AR眼镜用于与终端设备绑定并通信连接，所述AR眼镜包括摄像头，所述方法包括：
实时捕捉佩戴者感兴趣的目标对象；
在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息；
将所述扫描信息发送至终端设备，所述终端设备用于对所述扫描信息处理。
2.根据权利要求1所述的方法，其特征在于，所述实时捕捉佩戴者感兴趣的目标对象，包括：
根据预设的人眼追踪策略跟踪所述佩戴者的眼球运动，根据所述佩戴者的眼球运动实时捕捉所述佩戴者感兴趣的目标对象。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在捕捉到所述佩戴者感兴趣的目标对象的情况下，展示所述目标对象以及所述目标对象的位置信息。
4.根据权利要求1所述的方法，其特征在于，所述响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息，将所述扫描信息发送至终端设备，包括：
在所述目标对象为条码的情况下，响应于所述佩戴者的第一命令，扫描所述条码，得到条码图像，将所述条码图像发送至终端设备；
或
在所述目标对象为条码的情况下，响应于所述佩戴者的第二命令，扫描并解析所述条码，得到所述条码的解析结果，将所述条码的解析结果发送至终端设备。
5.根据权利要求4所述的方法，其特征在于，所述条码为付款码；
在将所述条码图像发送至终端设备之后，所述方法还包括：
接收并显示所述终端设备对所述付款码图像解析得到的结算信息界面；
响应于所述佩戴者的确认支付的命令，向所述终端设备发送支付命令，使所述终端设备完成本次支付。
6.根据权利要求5所述的方法，其特征在于，所述佩戴者的确认支付的命令包括头部动作、眨眼、口令中的一种；所述头部动作包括点头、摇头或用头部绘制预设图案中的一种。
7.根据权利要求1所述的方法，其特征在于，所述AR眼镜与安装在所述终端设备上的至少一个应用程序绑定；所述将所述扫描信息发送至终端设备，包括：
响应于所述佩戴者的目标命令，将所述扫描信息发送至与所述目标命令对应的目标应用程序。
8.根据权利要求1-7任一项所述的方法，其特征在于，所述方法还包括：
接收所述终端设备发送的处理结果，所述处理结果是所述终端设备对所述扫描信息进行处理后得到的；
展示所述处理结果。
9.一种信息处理方法，其特征在于，所述方法应用于终端设备，所述终端设备与AR眼镜绑定并通信连接；所述方法包括：
接收所述AR眼镜发送的扫描信息，并对所述扫描信息进行处理，得到处理结果；其中，所述扫描信息是所述AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令扫描所述目标对象得到的。
10.一种信息处理装置，其特征在于，所述装置应用于AR眼镜，所述装置包括：
捕捉模块，用于实时捕捉佩戴者感兴趣的目标对象；
扫描发送模块，用于在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息，将所述扫描信息发送至终端设备，所述终端设备与所述AR眼镜绑定并通信连接。
11.一种信息处理装置，其特征在于，所述装置应用于终端设备，所述终端设备与AR眼镜绑定并通信连接；所述装置包括：
接收模块，用于接收所述AR眼镜发送的扫描信息；
处理模块，用于对所述扫描信息进行处理，得到处理结果；其中，所述扫描信息是所述AR眼镜在捕捉到佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令扫描所述目标对象得到的。
12.一种信息处理系统，其特征在于，所述信息处理系统包括AR眼镜和终端设备，所述AR眼镜包括摄像头，所述AR眼镜与所述终端设备绑定并通信连接；
所述AR眼镜用于实时捕捉佩戴者感兴趣的目标对象，在捕捉到所述佩戴者感兴趣的目标对象的情况下，响应于所述佩戴者的命令，扫描所述目标对象，得到扫描信息；
所述终端设备用于接收所述AR眼镜发送的所述扫描信息，并对所述扫描信息进行处理，得到处理结果。
13.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-8中任一所述的方法或如权利要求9所述的方法。
14.一种非易失性可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-8中任一所述的方法或如权利要求9所述的方法。
CN202211258728.5A 2022-10-14 2022-10-14 信息处理方法、装置、系统、电子设备及介质 Pending CN115586833A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211258728.5A CN115586833A (zh) 2022-10-14 2022-10-14 信息处理方法、装置、系统、电子设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211258728.5A CN115586833A (zh) 2022-10-14 2022-10-14 信息处理方法、装置、系统、电子设备及介质

Publications (1)

Publication Number Publication Date
CN115586833A true CN115586833A (zh) 2023-01-10

Family

ID=84780197

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211258728.5A Pending CN115586833A (zh) 2022-10-14 2022-10-14 信息处理方法、装置、系统、电子设备及介质

Country Status (1)

Country Link
CN (1) CN115586833A (zh)

Similar Documents

Publication Publication Date Title
JP6859520B2 (ja) 識別認証方法、デバイス、およびシステム
JP6859521B2 (ja) 決済方法、入口制御方法、および装置
CN108664829B (zh) 用于提供与图像中对象有关的信息的设备
JP6893606B2 (ja) 画像のタグ付け方法、装置及び電子機器
US10410171B2 (en) System and method for inventory management
US9412017B1 (en) Methods systems and computer program products for motion initiated document capture
TW201907350A (zh) 線下導購方法和裝置
TWI452527B (zh) 基於擴增實境與雲端計算之應用程式執行方法與系統
CN109215254B (zh) 实体店铺应用系统、用户信息处理方法及装置
US20190205622A1 (en) Method and device of detecting picture type
CA3032417A1 (en) Automated queuing system
CN105654033A (zh) 人脸图像验证方法和装置
US20140233854A1 (en) Real time object scanning using a mobile phone and cloud-based visual search engine
US8620027B2 (en) Augmented reality-based file transfer method and file transfer system thereof
US10855728B2 (en) Systems and methods for directly accessing video data streams and data between devices in a video surveillance system
CN117095456A (zh) 考试行为的检测方法、装置、电子设备和存储介质
CN110895769B (zh) 信息显示方法、设备、系统及存储介质
CN115586833A (zh) 信息处理方法、装置、系统、电子设备及介质
US10095714B2 (en) Mobile device capable of offline and online synchronous image identifying, an image identifying system, and a storage medium for the same
CN114445759A (zh) 一种用于远程采样的数据共享方法、装置、电子设备及可读存储介质
CN114519576A (zh) 一种资源转移及其控制方法、装置、电子设备和存储介质
CN109062403B (zh) 一种pda设备
WO2015100070A1 (en) Presenting information based on a video
CN111626075A (zh) 一种目标识别方法及装置
JPWO2017208351A1 (ja) 撮像画像共有システム、撮像画像共有方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination