CN120276155A - 显示模组的控制方法、近眼显示装置 - Google Patents

Abstract

本申请实施例提供了一种显示模组的控制方法、近眼显示装置。显示模组被配置成放置在光学镜片上，以及输出图像内容，显示模组的控制方法包括：检测显示模组在当前所连接的镜片上的相对位置以及显示模组的触摸部的接触；在成像区设置模式下检测到显示模组静止于镜片上的第一相对位置处触摸部被按照第一触摸模式触摸的情况下，将第一相对位置标记为第一拟合点；第一相对位置是显示模组在镜片上的一任意位置，在成像区设置模式下第一触摸模式是用于表示用户确认能看清显示模组的显示区的触摸模式；在标记出至少三个第一拟合点的情况下，将至少三个第一拟合点拟合成一个封闭区域；将封闭区域设置为显示模组在镜片上的预设成像区。

Description

显示模组的控制方法、近眼显示装置

技术领域

本申请涉及近眼显示领域，特别是涉及一种显示模组的控制方法、近眼显示装置。

背景技术

近眼显示是指在距离眼睛较短的成像距离上成像以供感官感知，例如虚拟现实(Virtual Reality，VR)眼镜和增强现实(Augmented Reality，AR)眼镜均是在距离眼睛较短的距离上成像。也就是说，近眼显示是一个相对的概念，是相对于传统的电视机、显示器等而言的。显然，通常电视机、显示器等设备的成像的显示面板到眼睛的成像距离远大于VR眼镜或AR眼镜等近眼显示设备的成像距离。

目前，近眼显示通常可以分为VR、AR、混合现实(Mixed Reality，MR)和扩展现实(Extended Reality，XR)。

VR，又称为计算机模拟现实。它是一种通过人机交互和计算机生成的三维模拟所创造的体验。我们可以通过使用虚拟现实设备，例如，耳机、控制器，在环境中进行交互。也就是说，VR是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，并使我们沉浸在这一环境中。

AR，是一种实时的、直接或间接的对现实世界物理环境的观察。它将我们在真实环境中看到的内容与计算机软件生成的数字内容相融合，以某种方式增强我们所处的真实环境。AR系统将虚拟信息通过摄像头实时传送到耳机或智能眼镜，亦或是通过移动设备，让我们能够清楚查看3D图像。

MR，是现实世界与虚拟世界的融合，以产生新的环境和可视化。其中，物理对象和数字对象共存，并进行实时交互。这意味着，如果在现实空间中放置一个新图像，在一定程度上，这一新图像会与我们现实环境中的真实物体进行互动。

XR，是指由计算机技术和可穿戴设备产生的所有真实及虚拟环境的结合以及人机交互。XR通过数字化增强我们的感官，以此来融合世界。除此之外，它为沉浸式虚拟体验提供了大量不同层级的虚拟传感器输入水平。XR包括上述三种新兴技术，即VR、AR和MR。

发明内容

在相关技术中，某些眼镜(例如护目镜)的镜片的尺寸可能比人眼的视场大很多，使得佩戴眼镜的用户无法看到或看清镜片上的一些区域，即眼镜的镜片上可能存在一些区域(即盲区)位于佩戴眼镜的用户的视野外；如果连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清。本申请实施例的目的是提供一种显示模组的控制方法、装置、电子设备、近眼显示装置、介质、芯片和计算机程序产品，以独立或半独立地在一定程度上解决如果连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清的技术问题。所述的独立解决是指提供一种硬件方面的构造方案，该方案可以独立地工作而不需要软件的配合，即可达成近眼显示技术中连接在眼镜的镜片上的显示模组不会在镜片上的盲区内成像的效果。所述的半独立地解决是指提供一种硬件方面的构造方案，该硬件构造方案在与近眼显示软件——例如AR技术中供用户与虚拟信息进行交互的软件——配合工作时，能够达成近眼显示技术中连接在眼镜的镜片上的显示模组不会在镜片上的盲区内成像的效果。

本申请实施例的第一方面提供了一种显示模组的控制方法，所述显示模组被配置成放置在光学镜片上，以及显示模组被配置成输出图像内容，所述方法包括：

检测所述显示模组在当前所连接的镜片上的相对位置以及所述显示模组的触摸部的接触；

在成像区设置模式下检测到所述显示模组静止于所述镜片上的第一相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第一相对位置标记为第一拟合点；所述第一相对位置是所述显示模组在所述镜片上的一任意位置，在所述成像区设置模式下所述第一触摸模式是用于表示用户确认能看清所述显示模组的显示区的触摸模式；

在标记出至少三个第一拟合点的情况下，将所述至少三个第一拟合点拟合成一个封闭区域；

将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区。

本申请实施例的第二方面提供了一种显示模组的控制装置，所述显示模组被配置成放置在光学镜片上，以及显示模组被配置成输出图像内容，所述装置包括：

第一检测模块，用于检测所述显示模组在当前所连接的镜片上的相对位置以及所述显示模组的触摸部的接触；

第一标记模块，用于在成像区设置模式下检测到所述显示模组静止于所述镜片上的第一相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第一相对位置标记为第一拟合点；所述第一相对位置是所述显示模组在所述镜片上的一任意位置，在所述成像区设置模式下所述第一触摸模式是用于表示用户确认能看清所述显示模组的显示区的触摸模式；

第一拟合模块，用于在标记出至少三个第一拟合点的情况下，将所述至少三个第一拟合点拟合成一个封闭区域；

第一设置模块，用于将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区。

本申请实施例的第三方面提供了一种电子设备，所述电子设备包括：处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的显示模组的控制方法的步骤。

本申请实施例的第四方面提供了一种近眼显示装置，所述近眼显示装置包括：处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的显示模组的控制方法的步骤。

本申请实施例的第五方面提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的显示模组的控制方法的步骤。

本申请实施例的第六方面提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的显示模组的控制方法的步骤。

本申请实施例的第七方面提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的显示模组的控制方法的步骤。

在本申请实施例中，在成像区设置模式下，通过检测显示模组在当前所连接的镜片上的相对位置以及显示模组的触摸部的接触，从而在显示模组当前连接的镜片上找出至少三个经用户确认可以看清的第一拟合点，然后将找出的至少三个拟合点拟合成一个封闭区域，既然该封闭区域上的边界点(显然这些边界点包括第一拟合点)都能被用户看清，自然用户也能看清该封闭区域，将该封闭区域设置为显示模组在镜片上的预设成像区。之后，显示模组将在镜片上的该预设成像区内成像，而不会在镜片上的盲区内成像，从而有效地解决了连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清盲区内的虚拟信息的技术问题。

本申请其它技术效果在下文实施例中详细描述。

附图说明

图1是本申请实施例提供的一种显示模组与镜片之间的连接示意图；

图2是本申请实施例提供的一种显示模组的一应用场景的示意图；

图3是本申请实施例提供的一种显示模组的一应用场景的示意图；

图4是本申请实施例提供的一种显示模组的一应用场景的示意图；

图5是本申请实施例提供的一种显示模与智能终端之间的连接关系的示意图；

图6是本申请实施例提供的一种显示模组成像主界面的示意图；

图7是本申请实施例提供的一种显示模组的一应用场景的示意图；

图8是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图9是本申请实施例提供的一种显示模组的一应用场景的示意图；

图10是本申请实施例提供的一种显示模组的一应用场景的示意图；

图11是本申请实施例提供的一种显示模组的一应用场景的示意图；

图12是本申请实施例提供的一种显示模组的一应用场景的示意图；

图13是本申请实施例提供的一种显示模组的一应用场景的示意图；

图14是本申请实施例提供的一种显示模组的一应用场景的示意图；

图15是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图16是本申请实施例提供的一种显示模组的一应用场景的示意图；

图17是本申请实施例提供的一种显示模组的一应用场景的示意图；

图18是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图19是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图20是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图21是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图22是本申请实施例提供的显示模组的控制方法的步骤流程的示意图；

图23是本申请实施例提供的显示模组的控制装置的结构示意图；

图24是本申请实施例提供的电子设备的结构示意图；

图25是本申请实施例提供的电子设备的结构示意图；

图26是本申请实施例提供的近眼显示装置的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

本申请实施例提供了一种显示模组的控制方法、装置、电子设备、近眼显示装置、存储介质、芯片和计算机程序产品，能有效解决如果连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清盲区内的虚拟信息的技术问题。下面结合附图进行说明。为了便于(正确)理解本申请实施例，下面先对本申请实施例中可能涉及的技术名词进行定义和解释，在后文中若无特别说明的情况下，相应的技术名词的语义均遵循此处的定义：

计算机或计算设备：是指以图灵可计算理论、冯·诺依曼组成结构或哈佛组成结构为基础的所有电子设备。例如，手机、智能手表、单片机系统等都是计算机，而不仅仅限于日常生活中所说例如个人电脑(PC，Personal Computer)这样的狭义计算机。

应用：即计算机应用程序(Computer Program或Application Software)，它以某些程序设计语言编写，运行于某种目标结构计算机体系上。计算机应用程序，是指为了得到某种结果而可以由计算机等具有信息处理能力的装置执行的代码化指令序列，或者可以被自动转换成代码化指令序列的符号化指令序列或者符号化语句序列。

逻辑功能：是指(具有独立运算能力的)近眼显示装置、计算机或计算设备等各种电子设备提供的各种各样的功能。这些功能可以是面向用户的功能，也可以是面向系统(或设备)的功能。例如，面向用户的逻辑功能可以是：图形用户界面(Graphical UserInterface，GUI)输出功能、音频输出功能、主界面或桌面、程序/应用、程序/应用中的子功能等等。其中，主界面或桌面、应用等都可以向用户提供GUI，以供用户与之进行交互。面向系统的逻辑功能可以是：碎片文件整理、系统错误诊断等等。

前台运行、后台运行：前台运行和后台运行是两个相对的概念。这两者均是用来描述应用/程序或进程在操作系统(通俗而言操作系统就是指计算机中使得应用与计算机底层硬件进行通信的软件)中的运行方式。下面以传统的计算机为例对前台运行和后台运行进行说明，在AR技术中，前台运行和后台运行与传统的计算机中的前台运行和后台运行的特征是相似的。在传统的计算机中，当应用在前台运行时，应用的GUI通常会显示在显示屏幕上，用户可以看到应用的GUI或窗口，用户可以基于GUI直接与应用进行交互或通信，此时应用通常会占用输入设备(例如鼠标和键盘)；前台运行的应用通常会阻塞用户界面，用户需要等待前台运行的应用执行完成或按照前台运行的应用的需求进行交互；适用于需要用户实时反馈或需要用户输入的任务。在传统的计算机中，当应用在后台运行时，通常不会在显示屏幕上输出GUI，即对用户而言是不可见的，用户通常无法直接与应用进行交互或通信；应用在后台运行时，用户可以继续使用计算机执行其他任务，而应用在用户不可见的状态下默默运行，例如处理文件、执行系统服务等等；后台运行的应用通常不会占用输入设备，不需要用户直接参与任务的执行；允许用户在应用执行的同时继续进行其他任务，提高系统的多任务处理能力。

显示模组：是指基于光学技术成像的显示部件、显示装置或显示设备。因此，显示模组是一个物理硬件模块。在一些可选的实施方式中，显示模组可以连接在镜片上并通过显示模组进行上电成像。其中镜片可以是例如日常生活中常见的太阳镜、用于视力矫正的眼镜、护目镜或带有镜片的面罩等，也可以是具有音频，传感等的智能眼镜的镜片等等。显示模组可以通过磁力、夹子等吸附等的方式连接在镜片上，从而使得显示模组可以在其所连接的镜片上自由运动或者在制定的设置区域移动，例如显示模组可以在所放置的镜片上直线或曲线移动、轴旋转等。

示例性地，如图1所示，图1是本申请实施例提供的一种显示模组与镜片之间的连接示意图。请参见图1，以眼镜的镜片作为一实施例的说明，但本申请不限制于眼镜，也可是例如头盔、护目、视力矫正、运动等头戴式设备上相关上的镜片，其中眼镜1可以是普通的眼镜，也可以是AR眼镜、智能眼镜等等。眼镜1包括镜框11、镶嵌在镜框11中的镜片12和活动连接在镜框11上的镜腿13。镜片12包括环境侧24和眼睛侧22，用户的眼睛可以由眼睛侧22透过镜片12看到环境侧24的物理环境，可选地，显示模组2在镜片12朝向环境侧24的一端设置有第一磁吸件，显示模组2在镜片12朝向眼睛侧22设置有第二磁吸件，可以理解，在镜片12的两侧设置两个相互吸附的磁吸件，实现显示模组在镜片上预固定，其中第一磁吸件和第二磁吸件可以是相互吸引的磁铁，当然也可是其中一个是磁铁，另一个是可被磁铁吸引的金属等等，从而使得显示模组2整体吸附在镜片12上，此时显示模组2还可以在镜片12上自由滑动或轴旋转而不会从镜片12上脱离。当然其它例如夹持、挂接移动的方案在此也是可行的。

示例性地，如图2和图3所示，图2和图3均是本申请实施例提供的一种显示模组的一应用场景的示意图，图3可以是从眼镜1的镜腿13所在的方向观察(即眼睛侧22)眼镜1得到的主视图。请结合参见图1、图2和图3，图1中直线箭头a所示的方向即眼睛视线观察显示模组2在镜片12上成像出的虚拟图像的方向，用户从箭头a所示的方向观察显示模组2的端面，可以看到基于AR技术在镜片12所成的虚拟图像或图形界面。即从图1中所示的箭头a的方向观察显示模组2所看到的显示模组2的端面处就是显示模组2的显示区21，显示模组2在工作中时显示区21可以是处于“被点亮”的状态，即能够形成图像内容，例如可包括文字、交互界面、视频、图像等等相关显示内容。而镜片12上非显示模组2占据的区域则仍保持镜片12本身的属性，例如作为用户可以通过眼睛侧透过镜片12看到环境侧的，例如护目、视力矫正等即作为镜片本身的属性而存在。

在一些可选的实施方式中，镜片12的中心位置是校准位置，该校准位置是显示模组2的参考位置，显示模组2静止于该校准位置处时在镜片12上成像出主界面或预设的逻辑功能的界面。之所以将镜片12的中心位置确定为校准位置，是因为显示模组2在中心位置处可以向周向更多的方向和距离上进行移动，以方便用户操作显示模组2和自定义预设成像区。

用户在佩戴了眼镜1后，可以用手按住(或捏住)显示模组2的触摸部以拖动显示模组2在镜片12上移动或旋转显示模组2使显示模组2进行轴旋转。在一些实施例中，显示模组2可位于环境侧24，显示区21的光线可以透过镜片达到眼睛侧22的用户眼睛中成像，此时触摸部可以位于环境侧24，因此用户可以较好地进行交互；另一些实施例中，显示模组2可位于眼睛侧22，此时，显示区21的光线可以直接进入用户的眼睛成像，此时触摸部可以位于眼睛侧22，因此用户可以较好地进行较为隐蔽地交互。示例性地，如图4所示，图4是本申请实施例提供的一种显示模组的一应用场景的示意图。请参见图4，显示模组2的触摸部位于环境侧24，用户可以按住(或捏住)显示模组2的触摸部以拖动显示模组2在镜片12上移动或旋转显示模组2使显示模组2进行轴旋转。

在一些可选的实施方式中，显示模组2的显示区21在镜片12上成像出的虚拟图像或图形界面可以来自于显示模组2本身，或者与显示模组2通信连接的眼镜1，当然其它实施例中也可以是来自于与眼镜1和显示模组2均保持相对独立的其他电子设备，如手机、平板电脑等智能终端或计算机。若眼镜1是普通的眼镜，则显示模组2在镜片12上成像出的虚拟图像或图形界面可以来自于与眼镜1和显示模组2均保持相对独立的其他电子设备，如手机、平板电脑等智能终端或计算机。

示例性地，如图5所示，图5是本申请实施例提供的一种显示模与智能终端之间的连接关系的示意图。请参见图5，显示模组2(物理)连接在近眼显示装置10上，该近眼显示装置10可以是前述的眼镜1，智能终端4可以是PC、laptop、智能手机、平板电脑、智能音箱、服务器等等，显示模组2与智能终端4之间建立有线或无线的通信连接。例如，显示模组2和智能终端4基于Wifi协议或BlueTooth协议进行通信；或者，显示模组2和智能终端4借助USB线缆基于USB传输协议进行通信，且显示模组2也借助USB线缆从智能终端4获取电能。当然，并不局限于前述的示例，显示模组2和智能终端4还可以基于其他的通信协议建立有线或无线通信连接，例如NFC通信协议、P2P(点对点)网络等等。显示模组2和近眼显示装置10共同组成智能终端4的“显示设备”，智能终端4输出的GUI通过显示模组2成像在近眼显示装置10上。

在一些可选的实施方式中，在显示模组2的触摸部上可设置有触摸传感器或压力、电容传感器等，以检测显示模组2的触摸部是否被触摸。在一些可选的实施方式中，在显示模组2的触摸部上还设置有微型摄像头，以从环境中采集图像/视频数据。在一些可选的实施方式中，在显示模组2的触摸部上还设置有微型麦克风，以从环境中采集环境音。在一些可选的实施方式中，显示模组2的显示区21的一侧也设置有微型摄像头，以采集佩戴眼镜1的用户的眼部图像，以对用户的眼球进行追踪。

触发条件：是指提前预置的触发逻辑功能运行或执行的条件。在本申请实施例的一些可选的实施方式中，将显示模组的某些运动状态预置为某些逻辑功能的触发条件。例如，将显示模组静止于其所连接的镜片上的某一设定的位置处预置为触发输出主界面功能，则在后续监测到显示模组静止于该设定的位置处的情况下，显示模组将在其所连接的镜片上的成像主界面，用户通过观察显示模组的显示区从而可以观察到在镜片上成像出的主界面。可选地，在主界面中可以有至少一个应用(或文件)的图标(的缩略图)。其中某一设定的位置可以为镜片的中心位置，当然也可也是边框的四角等较容易记忆和识别的位置。

预设成像区：是指预先在显示模组所连接的镜片上为显示模组设定的成像区域。在一些可选的实施方式中，预设成像区可以是显示模组所连接的镜片上的一规则区域，例如是矩形区域、圆形区域或椭圆形区域。在一些可选的实施方式中，预设成像区也可以是显示模组所连接的镜片上的一不规则区域。在一些可选的实施方式中，预设成像区也可以是显示模组所连接的镜片的整个镜片区域。在一些可选的实施方式中，预设成像区也可以是显示模组所连接的镜片的部分区域。本申请实施例提供的显示模组的控制方法能实现在显示模组当前连接的镜片上设置预设成像区，具体请参见后文中的说明。

示例性地，如图6所示，图6是本申请实施例提供的一种显示模组成像主界面的示意图。请参见图6，在该示例中，显示模组2的预设成像区是镜片12的整个镜片区域。用户在佩戴上眼镜1后，从镜腿13(请结合图1和图2)一侧向镜片12观察(即眼睛侧)，用户可以通过观察显示模组2的显示区21，从而观察到显示模组2在镜片12上成像出的主界面。即在图6的示例中，显示模组2静止于镜片12上的图示位置(该位置并不限于图6中所示位置，用户可以自行设定显示模组2静止于镜片12的任意位置处触发输出主界面的逻辑功能)时，触发输出主界面的逻辑功能。在图6的示例中，预设成像区121即镜片12的整个镜片区域，预设成像区121被划分成了多个子区域(例如图6中所示的6个子区域)，在每个子区域中成像出该子区域映射的应用或文件的图标(的缩略图)，例如在子区域1211中成像出应用F的图标，在子区域1212中成像出应用E的图标。在图6中，共示例出了在六个子区域中成像出应用A-I的图标。在其他一些可选的实施方式中，图标A-I中的至少之一可以是视频、图片、音频、文本等文件图标(的缩略图)。

在一些可选的实施方式中，在将显示模组2首次连接在镜片12上并开启显示模组2时，显示模组2默认在镜片12上成像出主界面。

需要补充说明的是，在图6中为了便于说明主界面中划分出了多个子区域，在图6中示意出了标示各个子区域的网格线(即镜片12上的虚线网格)，不应当将该网格线理解为本申请实施例提供的显示模组2成像出的主界面中必须有网格线，显然该网格线并不是必须的，即在成像出的主界面中可以没有该网格线，即显示模组2放置在镜片12上后，作为镜片12的本体上是无法看到网格线，镜片12仍然保持镜片自身的属性。当然如果镜片自身是采用了例如光波导的全息类镜片，则可以相互结合以进行简单提示等等。当然，也可以为用户提供设置选项，供用户选择在成像主界面时是否也成像出该网格线。若用户设置成像主界面时也成像该网格线，则显示模组在成像主界面的同时会成像该网格线。若用户设置成像主界面时不成像该网格线，则显示模组在成像主界面的不会成像该网格线。当然网格线也可是对应在智能终端(例如手机app)上的图形界面，方便用户通过终端的图形界面去划分或自定义预设成像区121的网络线。此外，该网格线的线型又不局限于图6中所示的虚线，还可以是实线、中心线等等。

为了便于从整体上理解本申请所提供的实施例，在此基础上，下面对本申请实施例所针对的技术缺陷作一示例性地说明。

如图7所示，图7是本申请实施例提供的一种显示模组的一应用场景的示意图，在该示例性地场景中示意地示出了一种护目镜的主视图。为了使得护目镜能够尽可能地更好地保护佩戴者的眼睛，厂家通常会将镜片制作的较大，以便能够在不影响佩戴者的视线的情况下更加全面地包覆眼部区域进行防护。请参见图7，用户在佩戴该示例性的护目镜5后，镜片52上越靠近镜框51的边缘区域越不容易被用户看清，甚至无法看清，即镜片52上的一些边缘区域是用户的视野盲区。

示例性地，假定用户A在佩戴该护目镜5后，能看清镜片52的区域如图中虚线包围的区域521(将该区域称为用户A的可视区)所示(显然，实际中护目镜上通常没有该虚线环，该虚线环是为了示意性地说明盲区和可视区的分界线的虚拟交界)，而镜片52上除区域521之外的其他区域是用户A的盲区；那么显示模组2只有位于该区域521内且在该区域521内成像，用户A才能看清楚显示模组2(的显示区21)，用户也才能通过显示模组2的显示区21看清显示模组2在该区域521内成的像；而如果显示模组2在镜片52上的盲区(例如图7中所示的位置处)内的情况下，用户A连显示模组2都看不清，当然也看不清显示模组2的显示区21，自然也不能通过观看显示模组2的显示区21而观看到显示模组2在镜片52上成的像。

因此，在相关技术中，某些眼镜(例如图7中所示的护目镜)处于防护或者造型的考虑，眼镜的镜片的尺寸可能比人眼的视场大很多，使得佩戴眼镜的用户无法看到或看清镜片上的一些区域，即眼镜的镜片上可能存在一些区域(即盲区)位于佩戴眼镜的用户的视野外；如果连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清。

本申请实施例提供一种显示模组的控制方法、装置、电子设备、近眼显示装置、介质、芯片和计算机程序产品，能够独立或半独立地在一定程度上解决如果连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清的技术问题。

在此基础上，下面对本申请实施例作具体说明。

本申请实施例提供了一种显示模组的控制方法，该显示模组被配置成放置在光学镜片上，以及显示模组被配置成输出图像内容。示例性地，如图1至图7所示，该显示模组可以是图1至图7中示出的显示模组2，该显示模组2可以在镜片12或镜片52上输出图像内容。执行该显示模组的控制方法的可以是图1至图6中的眼镜1、图1至图7中的显示模组2、图5中的近眼显示装置10或智能终端4中至少之一，其能够实现控制显示模组2在其所连接的眼镜1(或近眼显示装置10或护目镜5)上所成像的GUI的具体信息。如图8所示，图8是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。为了便于理解本申请实施例提供的显示模组的控制方法，下面将以图7中示例的护目镜5为例，对图8所示的步骤流程进行说明。请参见图8，该显示模组的控制方法，包括：

S11，检测所述显示模组在当前所连接的镜片上的相对位置以及所述显示模组的触摸部的接触。

镜片是显示模组当前所连接的眼镜上的镜片。示例性地，可以为上述实施例描述的，此处不再赘述。

在本申请实施例中，用于在眼镜的镜片上增强现实显示成像的显示模组可以在其所连接的镜片上做一些运动，而不是将显示模组固定在镜片上。在一些可选的实施方式中，在显示模组中内置有惯性传感器或加速度传感器(或陀螺仪)，通过此类传感器可以采集显示模组的瞬时速度和加速度，从而根据采集到的瞬时速度和加速度并结合时间等参数确定显示模组的运动轨迹。

可选的，预先在显示模组所连接的镜片上选定一固定参考点作为原点，显示模组从该原点开始移动并始终监测显示模组的运动轨迹。该运动轨迹上的任意一点相对于原点的位置即可以表示为显示模组相对于所连接的镜片的相对位置。

示例性地，如图9所示，图9是本申请实施例提供的一种显示模组的一应用场景的示意图。例如镜片52上的P0点为预先选定的原点，显示模组2从原点沿着路径l1移动到了P1点、又沿着路径l2移动到了P2点、接着沿着l3移动到了P3点、最后沿着l4移动到了P4点。可以通过监测到的显示模组2的运动参数(例如速度、加速度等)确定显示模组2在该运动过程在任意时刻t时的运动轨迹l，在任意时刻t时的运动轨迹的终点相对于原点P0的位置关系即可以表示显示模组2在镜片52上的相对位置。例如，在t1时刻显示模组2移动至了P1点，根据确定出的路径l1可以确定该P1点相对于原点P0的位置关系，即显示模组2在镜片52上的相对位置，示例性地将其表示为表示P1点是位于向量的终点的位置处，且该向量的起点是P0。

同理，而当显示模组2从P1点运动到P2的过程中的运动轨迹为l2，显然P2相对于P1的位置关系可以表示为表示P2点是位于向量的终点的位置处，且该向量的起点是P1。基于数学上的向量关系可知，因此有相应地，显然，上述的向量其实是显示模组2在此过程中的位移。

需要补充说明的是，在上述示例中，在描述显示模组2的路径和移动轨迹时均是以直线轨迹(路径)进行示例的，显然显示模组2是可以任意移动的，并不限于上述示例的直线轨迹的形式，例如是曲线轨迹。

有关显示模组的触摸部的接触的检测，请参见前文的相关说明，在此不再赘述。

S12，在成像区设置模式下检测到所述显示模组静止于所述镜片上的第一相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第一相对位置标记为第一拟合点。所述第一相对位置是所述显示模组在所述镜片上的一任意位置。在所述成像区设置模式下所述第一触摸模式是用于表示用户确认能看清所述显示模组的显示区的触摸模式。

成像区设置模式是为用户提供的在显示模组所连接的镜片上设置预设成像区的一项逻辑功能。在一些可选的实施方式中，在显示模组首次连接在镜片上开机时会自动进入成像区设置模式。在一些可选的实施方式中，在与显示模组连接的智能终端上提供了控制显示模组的APP，用户可以通过该APP中的成像区设置功能选项启动成像区设置模式。显示模组在进入该模式后，会进入预设成像区设置流程。

示例性地，图5中所示的近眼显示装置10是图9所示的护目镜5，在显示模组2首次连接在镜片52上开机时自动进入成像区设置模式，用户也可以通过智能终端4上的控制显示模组的APP中成像区设置功能选项启动显示模组2的成像区设置模式。

在监测到显示模组的瞬时速度为0时，可以确认显示模组静止于镜片上。

示例性地，在图9中的示例中，在最初可以检测到显示模组2静止于P0点，随后可以再次检测到显示模组2静止于P1点。接着会依次检测到显示模组静止于P2点、P3点和P4点。即P1、P2、P3和P4均是第一相对位置。

第一触摸模式可以是预先设定的一种触摸模式，例如是对显示模组的触摸部进行了单击、双击或三连击等。当检测到显示模组静止于镜片上的某一位置处被按照第一触摸模式触摸了触摸部，则将显示模组所在的该位置标记为第一拟合点。拟合点是用来拟合预设成像区的边界点。

示例性地，在图9中的示例中，在检测到显示模组2在从P0点移动至P1、P2、P3和P4点处，且静止于P1、P2、P3和P4点处时还均检测到触摸部被按照第一触摸模式(例如单击)进行了触摸，因此，将P1、P2、P3和P4点均标记为第一拟合点。

S13，在标记出至少三个第一拟合点的情况下，将所述至少三个第一拟合点拟合成一个封闭区域。

S14，将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区。

基于数学常识可知，在空间中至少需要三点才能围合成一个封闭区域。因此，在标记出至少三个第一拟合点后，可以将标记出的所有第一拟合点拟合成一个封闭区域。并将根据所有第一拟合点拟合出的封闭区域设置为显示模组在当前所连接的镜片上成像的预设成像区。

拟合是指将多个点围合成一个封闭区域，且任意两个点之间的连线不与其他任意两点之间的连线相交叉。在一些可选的实施方式中，可以将至少三个第一拟合点拟合成预设形状的封闭区域。例如，该预设形状可以是椭圆形(圆形是一种特殊的椭圆形)、矩形、三角形等等。在一些可选的实施方式中，在进行区域拟合时，在任意两个直线距离最短的第一拟合点之间可以用曲线连接也可以用直线连接，在用曲线连接时优选使用光滑曲线连接。

示例性地，如图10和图11所示，图10和图11均是本申请实施例提供的一种显示模组的一应用场景的示意图。请参见图10，将四个第一拟合点 拟合成一个椭圆形区域，将该椭圆区域设置为显示模组2在镜片52上的预设成像区522。请参见图11，将四个第一拟合点P1、P2、P3和P4拟合成一个四边形区域，将该四边形区域设置为显示模组2在镜片52上的预设成像区522。

在一些可选的实施方式中，为了方便用户设置预设成像区，上述步骤S11-S14可以通过与显示模组通信连接的智能终端(请参见图5)辅助设置，下面进行示例性地说明。

如图12至图13所示，图12至图13均是本申请实施例提供的一种显示模组的一应用场景的示意图。请参见图12至13，显示模组2与智能终端6保持通信连接，且智能终端6预先获取了护目镜5的虚拟轮廓模型。该虚拟轮廓模型可以通过3D扫描仪扫描护目镜5获取，也可以是从生产护目镜5的厂家处获取的。在将显示模组2连接(放置)到镜片52上后，显示模组2启动成像区设置模式时，在智能终端6的屏幕上相应输出护目镜5的虚拟轮廓模型，并在护目镜5的虚拟轮廓模型上对显示模组2在护目镜5上的相对位置进行示踪。可以将显示模组2移动至所连接的镜片52上的不同位置处进行定位，且每个定位点(也即拟合点)以佩戴眼镜5的用户确认能够看清为准。即用户将显示模组2放置镜片52上的不同位置处进行“瞄点”定位，在智能终端6上示出这些定位点，然后将所有的定位点拟合成预设成像区。

请参见图12，在显示模组2刚进入成像区设置模式时，在智能终端6上的屏幕上在护目镜5的虚拟轮廓模型上示出了显示模组2的初始位置P0，当显示模组2从P0移动至P1，在在智能终端6上的屏幕上在护目镜5的虚拟轮廓模型上示出了位置P1，用户若确认现实模组2在P1点处时能看清，则记录P1相对于原点P0位置。请参见图13，在完成“瞄点”定位后，在智能终端6上的屏幕上在护目镜5的虚拟轮廓模型上示出了找到的所有定位点，例如图13中示例的P1、P2、P3和P4。请参见图14，在智能终端6上的屏幕上在护目镜5的虚拟轮廓模型上示出拟合出的椭圆形的封闭区域，并将该封闭区域设置为显示模组2在镜片52上成像的预设成像区522。

在一些可选的实施方式中，在选取第一相对位置时，优先选取镜片上靠近镜框的极限位置点，例如镜片上接近镜框的边缘区域的位置点，若用户确认在这些位置点无法看清显示模组，则提示用户将显示模组渐渐向镜片的中心位置点靠近，以使得最后拟合出的预设成像区尽可能地大，以增大预设成像区的面积。显然，标定的第一拟合点的数据量越多，拟合出的预设成像区越能更加接近用户的可视区。因此，可以灵活地设置拟合预设成像区的第一拟合点的数量。

在本申请实施例中，在成像区设置模式下，通过检测显示模组在当前所连接的镜片上的相对位置以及显示模组的触摸部的接触，从而在显示模组当前连接的镜片上找出至少三个经用户确认可以看清的第一拟合点，然后将找出的至少三个拟合点拟合成一个封闭区域，既然该封闭区域上的边界点(显然这些边界点包括第一拟合点)都能被用户看清，自然用户也能看清该封闭区域，将该封闭区域设置为显示模组在镜片上的预设成像区。之后，显示模组将在镜片上的该预设成像区内成像，而不会在镜片上的盲区内成像，从而有效地解决了连接在眼镜的镜片上的显示模组在镜片上的盲区内成像，将导致佩戴眼镜的用户无法看到或看清盲区内的虚拟信息的技术问题。

本申请实施例提供了一种显示模组的控制方法，该显示模组被配置成放置在光学镜片上，以及显示模组被配置成输出图像内容。示例性地，如图1至图7所示，该显示模组可以是图1至图7中示出的显示模组2，该显示模组2可以在镜片12或镜片52上输出图像内容。执行该显示模组的控制方法的可以是图1至图6中的眼镜1、图1至图7中的显示模组2、图5中的近眼显示装置10或智能终端4中至少之一，其能够实现控制显示模组2在其所连接的眼镜1(或近眼显示装置10或护目镜5)上所成像的GUI的具体信息。如图9所示，图9是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。为了便于理解本申请实施例提供的显示模组的控制方法，下面将以图7中示例的护目镜5和图16所示的场景为例，对图9所示的步骤流程进行说明。请参见图9，该显示模组的控制方法，包括：

S21，获取所述镜片的第一虚拟轮廓模型和所述用户的眼部的第二虚拟轮廓模型；

S22，在所述第一虚拟轮廓模型上扫描出与所述第二虚拟轮廓模型相同的或相似的轮廓区域，将所述轮廓区域设置为所述显示模组在所述镜片上的预设成像区。

请参见图16，智能终端6获取镜片的第一虚拟轮廓模型5′的有关说明请参见前文，在此不再赘述。同样的，也可以用3D扫描仪获取佩戴护目镜5的用户A的眼部的第二虚拟轮廓模型，智能终端6从该3D扫描仪获取第二虚拟轮廓模型。智能终端6将该第二虚拟轮廓模型与第一虚拟轮廓模型5′进行重叠呈现，并在第一虚拟轮廓模型5′上扫描出与第二虚拟轮廓模型相同或者相似的轮廓区域522′，将该轮廓区域522′设置为显示模组2在镜片52上的预设成像区522。

这种设置预设成像区的方式相对于前述的设置预设成像区的方式而言，其设置流程更加快捷，但难度在于针对每个眼镜，佩戴该眼镜的每个用户都需要同时获取眼镜的镜片的虚拟轮廓和用户的眼部的虚拟轮廓。因此，在实际中，用户可以根据实际情况灵活选择预设成像区的设置方式。

在完成预设成像区的设置后，显示模组在位于所连接的镜片上的预设成像区内时将可以在所连接的镜片上的预设成像区内成像。而显示模组在位于所连接的镜片上的预设成像区外不会在所连接的镜片上成像。因此，在一些可选的实施方式中，在检测到所述显示模组位于所述预设成像区外的情况下，启动低功耗模式。

示例性地，在图11中，在完成预设成像区的设置后，当显示模组2移动到镜片52上的区域522之外时，显示模组2启动低功耗模式。从而节约设备的电能，延长设备的续航时间和使用寿命。在低功耗模式中，显示模组2可以是处于完全不工作的状态或待机状态或部分模块工作的状态，而在显示模组2重新移动至区域522内时，显示模组2关闭低功耗模式恢复工作。在一些可选的实施方式中，用户还可以将非预设成像区(即在图11中的示例中，即镜片52上的区域522之外的区域)对不同时间段的低功耗模式对应的具体状态进行设置，例如将晚上11点至次日7点的低功耗模式设置为完全不工作的状态，将早晨7点至9点、中午12点至下午2点、傍晚5点至8点的低功耗模式设置为待机状态，而将其余时间段设置为部分模块工作(例如监测显示模组的运动状态的硬件处于工作中)的状态。

在一些可选的实施方式中，在前述实施方式的基础上，本申请实施例提供的显示模组的控制方法还包括：

在接收到分区指令的情况下，将所述预设成像区划分成至少两个子成像区；

在接收到在第一子成像区域内成像第一图形界面的映射指令时，控制所述显示模组在所述第一子成像区域内成像所述第一图形界面；所述第一子成像区域是所述至少两个子成像区中的任意一子成像区域。

用户可以自行将预设成像区分割成多个子成像区，并在不同的子成像区呈现不同的图像，且每个子区域中呈现的图像也可以由用户自行设置。显示模组在接收到用户输入的分区指令的情况下，显示模组响应于分区指令中的区域数目，将预设成像区分割成该区域数目的子成像区(示例性地，如图17中所示，将预设成像区522划分成了6个子成像区)。显示模组在接收针对某个子成像区的映射指令的情况下，根据映射指令中映射的数据，在该子成像区域中成像出该映射指令中映射的数据对应的图形界面。

示例性地，如图17所示，图17是本申请实施例提供的一种显示模组的一应用场景的示意图。请参见图17，用户在镜片52上为显示模组2设置预设成像区522，该预设成像区522被划分成了6个子成像区，在每个子成像区中成像出了每个子成像区中映射的数据的图形界面。图17中所示的图标A-I可以是应用程序或文件的图标(的缩略图)，也可以其他的内容，例如是正在播放的视频等等。

在本申请实施例中，为了能够充分让此类传统眼镜具有增强现实显示功能，并可以在其上实现高效交互，用户可根据需要自定义布局具体的预设成像区，例如眼镜的镜片整体为圆形或方形或者其它形状，其具有大于人眼视野范围的镜片区域，此时用户可以取视野比较好的位置为预设成像区，预设成像区可以分割成多个子成像区，其中每个子成像区可以配置输出与之相应的图形界面，多个子区域可以实现多个图形界面的多路输出。

很显然，针对一个特定的眼镜会因其佩戴用户的不同，对每个用户而言其盲区和可视区也是不同的。而针对一个特定的用户会因其佩戴的眼镜的不同，对每个眼镜而言其盲区和可视区也是不同的。也就是说，前述的实施例中提供的预设成像区的设置方法需要因人而异、因眼镜而异。换句话说，用户A佩戴眼镜A时设置的预设成像区A可能对用户B佩戴眼镜A而言是不适合的，用户B佩戴眼镜A可能无法看清预设成像区A内的一些区域，用户B佩戴眼镜A时可能需要重新设置预设成像区B。因此，在一些可选的实施方式中，针对显示模组当前连接的镜片，可以将设置预设成像区的用户的身份信息与该用户设置的预设成像区进行关联，以便后续不同用户佩戴眼镜时显示模组基于与该用户相关联的预设成像区进行成像。因此，在一些可选的实施方式中，在前述实施方式的基础上，本申请实施例提供的显示模组的控制方法还包括：

获取所述用户的身份信息；

将所述身份信息与所述预设成像区建立映射规则并保存。

此处的用户即是在显示模组当前连接的镜片上设置预设成像区的用户。可以是前述步骤S12中按照第一触摸模式触摸显示模组的触摸部的用户，也可以是前述步骤S21中第二虚拟轮廓模型对应的用户。

用户的身份信息可以是用户的账号/密码、声纹、指纹、虹膜等等。

当用户在佩戴一个眼镜完成预设成像区的设置后，可以将该用户的身份信息与该用户设置的预设成像区建立一条映射规则，并保存该映射规则，用户下次使用该眼镜时，直接根据该映射规则获取该用户在该眼镜上设置的预设成像区。

示例性地，针对显示模组2，用户A在护目镜5上设置的预设成像区A1，就将用户A的身份信息ID-A与预设成像区A1建立映射，用户在眼镜1上设置的预设成像区A2，就将用户A的身份信息ID-A与预设成像区A2建立映射。针对显示模组2，用户B在护目镜5上设置的预设成像区B1，就将用户B的身份信息ID-B与预设成像区B1建立映射。并保存这些映射规则。

如图18所示，图18是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。请参见图18，本申请实施例提供了一种显示模组的控制方法，在前述的实施例的基础上，还包括：

S15，在退出所述成像区设置模式后又启动成像区设置模式的情况下，又检测到所述显示模组静止于所述镜片上的第二相对位置处且所述触摸部被按照第一触摸模式触摸的情况下，将所述第二相对位置标记为第二拟合点；所述第二相对位置是所述镜片上与所述第一相对位置不同的一任意位置；

S16，在标记出至少一个第二拟合点的情况下，将所述至少三个第一拟合点和所述至少一个第二拟合点拟合成一个第一新封闭区域，将所述第一新封闭区域更新设置为所述显示模组在所述镜片上的预设成像区；或

S17，在标记出至少三个第二拟合点的情况下，将所述至少三个第二拟合点拟合成一个第二新封闭区域，将所述第二新封闭区域更新设置为所述显示模组在所述镜片上的预设成像区。

用户在设置了预设成像区后，可能觉着设置的预设成像区不太理想，想要对原来设置的预设成像区进行局部更新或者完全重新设置。因此，用户在设置好预设成像区后可以又重新进入成像区设置模式，更新或重设预设成像区。即用户在再次进入成像区设置模式时，可以在镜片再次进行“瞄点”定位，找出一些与第一拟合点不同的定位点(即第二拟合点)，将第二拟合点加入第一拟合点中重新拟合预设成像区(即步骤S16)以更新预设成像区，或者找出至少三个第二拟合点并依据这至少三个第二拟合点重新拟合出新的预设成像区(即步骤S17)以重新设置预设成像区。

如图19所示，图19是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。请参见图19，本申请实施例提供了一种显示模组的控制方法，在前述的实施例的基础上，还包括：

S31，识别佩戴第一眼镜的第一用户的第一身份，所述第一眼镜包括所述镜片；

S32，在预置的映射集中搜索与所述第一身份相匹配的映射规则；

S33，在从所述映射集中搜索到有且仅有一条映射规则的情况下，将搜索到的该映射规则中的预设成像区设置为所述显示模组在所述镜片上成像的成像区；所述映射集中每一条映射规则是预先设定的一个用户身份与一个预设成像区之间的映射关系，所述映射集中的各个映射规则各不相同。

第一用户可以任意的一个用户。

在一些可选的实施方式中，可以通过与显示模组通信连接的智能终端获取用户登录的账号/密码、指纹信息从而识别佩戴第一眼镜的第一用户的第一身份，也可以通过显示模组上的摄像头采集第一用户的虹膜信息从而识别第一用户的身份信息。

显示模组可以连接在任何的眼镜上，因此映射集与每个眼镜相关联。例如，可以为眼镜A配置映射集A，在映射集A中记录各个用户佩戴眼镜A时设置的预设成像区的至少一个映射规则。可以为眼镜B配置映射集B，在映射集B中记录各个用户佩戴眼镜B时设置的预设成像区的至少一个映射规则。

在识别到第一用户的第一身份后，可以从第一眼镜的映射集中搜索与第一身份相匹配的映射规则。在从第一眼镜的映射集中搜索到有且仅有一条映射规则的情况下，将搜索到的该映射规则中的预设成像区设置为显示模组在镜片上成像的成像区。

如图20所示，图20是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。请参见图20，本申请实施例提供了一种显示模组的控制方法在图19所示的实施例的基础上，还包括：

S34，在从所述映射集中搜索到至少两条映射规则的情况下，检测针对所述至少两条映射规则中各自的预设成像区的选择指令，并将被所述选择指令所选中预设成像区设置为所述显示模组在所述镜片上成像的成像区，或将所述至少两条映射规则中第一预设成像区设置为所述显示模组在所述镜片上成像的成像区，所述第一预设成像区是所述第一用户选择预设成像区的历史选择记录中最后一次选中的预设成像区。

如果从第一眼镜的映射集中搜索到至少两条映射规则的情况下，说明第一用户在第一眼镜上设置了多个预设成像区，可以在与显示模组通信连接的智能终端上示出这些预设成像区以供第一用户选择，并将用户输入的选择指令选中的预设成像区设置为显示模组在所述镜片上成像的成像区。或者还可以将第一用户选择预设成像区的历史选择记录中最后一次选中的预设成像区设置为显示模组在所述镜片上成像的成像区。

如图21所示，图21是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。请参见图21，本申请实施例提供了一种显示模组的控制方法在图20所示的实施例的基础上，还包括：

S35，在从所述映射集中未搜索到映射规则的情况下，启动所述成像区设置模式；

S36，在所述成像区设置模式下检测到所述显示模组静止于所述镜片上的第三相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第三相对位置标记为第三拟合点；所述第三相对位置是所述显示模组在所述镜片上的一任意位置；

S37，在标记出至少三个第三拟合点的情况下，将所述至少三个第三拟合点拟合成一个第三封闭区域；

S38，将所述第三封闭区域设置为所述显示模组在所述镜片上的第三预设成像区。

在从所述映射集中未搜索到映射规则的情况下，说明第一用户尚未在第一眼镜上设置预设成像区，因此启动成像区设置模式，以便第一用户在第一眼镜上为显示模组设置预设成像区。有关第一用户在第一镜片上寻找第三拟合点，并将找出的第三拟合点拟合成第三预设成像区的具体过程可以参照前文中设置预设成像区的说明，在此不再赘述。

在一些可选的实施方式中，在上述图20所示的实施方式的基础上，所述显示模组的控制方法，还包括：将所述第一身份与所述第三预设成像区建立第三映射规则，并将所述第三映射规则归入所述映射集中。

将第一用户的第一身份与第三预设成像区建立第三映射规则，并归于第一眼镜的映射集中，以便第一用户下次使用第一眼镜时快速确定第一用户使用第一眼镜所对应的预设成像区。

如图22所示，图22是本申请实施例提供的显示模组的控制方法的步骤流程的示意图。请参见图22，本申请实施例提供了一种显示模组的控制方法，在前述的实施例的基础上，还包括：

S41，在退出所述成像区设置模式后又启动成像区设置模式的情况下，又检测到所述显示模组静止于所述镜片上的第四相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第四相对位置标记为第四拟合点；所述第四相对位置是所述显示模组在所述镜片上一任意位置；

S42，在标记出至少三个第四拟合点的情况下，确定所述至少三个第四拟合点与所述至少三个第一拟合点重复率；

S43，在确定所述重复率不小于预设阈值时，将所述预设成像区设置为所述显示模组在所述镜片上成像的当前成像区。

在一些可选的实施方式中，用户可能已经忘记自己曾经为当前所佩戴的眼镜已经设置过预设成像区，当显示模组检测到再次进入预设成像区设置模式的情况下，检测到的第四拟合点与第一拟合点的在镜片上的相对位置的重复率达到预设阈值(例如90％)，则放弃设置预设成像区，而直接将依据第一拟合点拟合出的预设成像区配置为显示模组在所述镜片上成像的当前成像区。

在一些可选的实施方式中，在上述图21所示的实施方式的基础上，所述显示模组的控制方法，还包括：在确定所述重复率小于预设阈值时，将所述至少三个第四拟合点拟合成一个第四封闭区域，将所述第四封闭区域设置为所述显示模组在所述镜片上成像的当前成像区。

需要说明的是，虽然以上示例中均以单目(即只在眼镜的一个镜片上连接有本申请实施例所提供的显示模组)为例进行了说明，但是，很显然本申请所提供的所有实施方式也可以适用于双目(即在眼镜的两个镜片上均连接有本申请实施例所提供的显示模组)的场景。

本申请实施例提供的显示模组的控制方法，执行主体可以为显示模组的控制装置。本申请实施例中以显示模组的控制装置执行显示模组的控制方法为例，说明本申请实施例提供的显示模组的控制装置。

如图23所示，示出了本申请实施例提供的一种显示模组的控制装置的结构示意图。请参见图23，所述显示模组的控制装置7，所述显示模组被配置成放置在光学镜片上，以及显示模组被配置成输出图像内容，控制装置7包括：

第一检测模块71，用于检测所述显示模组在当前所连接的镜片上的相对位置以及所述显示模组的触摸部的接触；

第一标记模块72，用于在成像区设置模式下检测到所述显示模组静止于所述镜片上的第一相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第一相对位置标记为第一拟合点；所述第一相对位置是所述显示模组在所述镜片上的一任意位置，在所述成像区设置模式下所述第一触摸模式是用于表示用户确认能看清所述显示模组的显示区的触摸模式；

第一拟合模块73，用于在标记出至少三个第一拟合点的情况下，将所述至少三个第一拟合点拟合成一个封闭区域；

第一设置模块74，用于将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区。

在一些可选的实施方式中，所述控制装置7还包括：

在检测到所述显示模组位于所述预设成像区外的情况下，启动低功耗模式。

在一些可选的实施方式中，所述控制装置7还包括：

第一划分模块，用于在接收到分区指令的情况下，将所述预设成像区划分成至少两个子成像区；

第一成像模块，用于在接收到在第一子成像区域内成像第一图形界面的映射指令时，控制所述显示模组在所述第一子成像区域内成像所述第一图形界面；所述第一子成像区域是所述至少两个子成像区中的任意一子成像区域。

在一些可选的实施方式中，所述控制装置7还包括：

第二标记模块，用于在退出所述成像区设置模式后又启动成像区设置模式的情况下，又检测到所述显示模组静止于所述镜片上的第二相对位置处且所述触摸部被按照第一触摸模式触摸的情况下，将所述第二相对位置标记为第二拟合点；所述第二相对位置是所述镜片上与所述第一相对位置不同的一任意位置；

第二拟合模块，用于在标记出至少一个第二拟合点的情况下，将所述至少三个第一拟合点和所述至少一个第二拟合点拟合成一个第一新封闭区域，将所述第一新封闭区域更新设置为所述显示模组在所述镜片上的预设成像区；或在标记出至少三个第二拟合点的情况下，将所述至少三个第二拟合点拟合成一个第二新封闭区域，将所述第二新封闭区域更新设置为所述显示模组在所述镜片上的预设成像区。

在一些可选的实施方式中，所述控制装置7还包括：

第一识别模块，用于识别佩戴第一眼镜的第一用户的第一身份，所述第一眼镜包括所述镜片；

第一搜索模块，用于在预置的映射集中搜索与所述第一身份相匹配的映射规则；

第二设置模块，用于在从所述映射集中搜索到有且仅有一条映射规则的情况下，将搜索到的该映射规则中的预设成像区设置为所述显示模组在所述镜片上成像的成像区；所述映射集中每一条映射规则是预先设定的一个用户身份与一个预设成像区之间的映射关系，所述映射集中的各个映射规则各不相同。

在一些可选的实施方式中，所述控制装置7还包括：

第三设置模块，用于在从所述映射集中搜索到至少两条映射规则的情况下，检测针对所述至少两条映射规则中各自的预设成像区的选择指令，并将被所述选择指令所选中预设成像区设置为所述显示模组在所述镜片上成像的成像区，或将所述至少两条映射规则中第一预设成像区设置为所述显示模组在所述镜片上成像的成像区，所述第一预设成像区是所述第一用户选择预设成像区的历史选择记录中最后一次选中的预设成像区。

在一些可选的实施方式中，所述控制装置7还包括：

第一启动模块，用于在从所述映射集中未搜索到映射规则的情况下，启动所述成像区设置模式；

第三标记模块，用于在所述成像区设置模式下检测到所述显示模组静止于所述镜片上的第三相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第三相对位置标记为第三拟合点；所述第三相对位置是所述显示模组在所述镜片上的一任意位置；

第三拟合模块，用于在标记出至少三个第三拟合点的情况下，将所述至少三个第三拟合点拟合成一个第三封闭区域；

第四设置模块，用于将所述第三封闭区域设置为所述显示模组在所述镜片上的第三预设成像区。

在一些可选的实施方式中，所述控制装置7还包括：

第一建立模块，用于将所述第一身份与所述第三预设成像区建立第三映射规则，并将所述第三映射规则归入所述映射集中。

在一些可选的实施方式中，所述控制装置7还包括：

第四标记模块，用于在退出所述成像区设置模式后又启动成像区设置模式的情况下，又检测到所述显示模组静止于所述镜片上的第四相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第四相对位置标记为第四拟合点；所述第四相对位置是所述显示模组在所述镜片上一任意位置；

第四拟合模块，用于在标记出至少三个第四拟合点的情况下，确定所述至少三个第四拟合点与所述至少三个第一拟合点重复率；

第五设置模块，用于在确定所述重复率不小于预设阈值时，将所述预设成像区设置为所述显示模组在所述镜片上成像的当前成像区。

在一些可选的实施方式中，所述控制装置7还包括：

第六设置模块，用于在确定所述重复率小于预设阈值时，将所述至少三个第四拟合点拟合成一个第四封闭区域，将所述第四封闭区域设置为所述显示模组在所述镜片上成像的当前成像区。

在一些可选的实施方式中，所述控制装置7还包括：

第一获取模块，用于获取所述镜片的第一虚拟轮廓模型和所述用户的眼部的第二虚拟轮廓模型；

第七设置模块，用于在所述第一虚拟轮廓模型上扫描出与所述第二虚拟轮廓模型相同的或相似的轮廓区域，将所述轮廓区域设置为所述显示模组在所述镜片上的预设成像区。

在一些可选的实施方式中，所述控制装置7还包括：

第二获取模块，用于获取所述用户的身份信息；

第二建立模块，用于将所述身份信息与所述预设成像区建立映射规则并保存。

本申请实施例中的显示模组的控制装置7可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device，MID)、增强现实(augmented reality，AR)/虚拟现实(virtual reality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobilepersonal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，还可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的显示模组的控制装置7可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的显示模组的控制装置7能够实现图1至图22的实施例实现的各个过程，为避免重复，这里不再赘述。

在一些可选的实施方式中，如图24所示，本申请实施例还提供一种电子设备130，包括处理器131和存储器132，存储器132上存储有可在所述处理器131上运行的程序或指令，该程序或指令被处理器131执行时实现上述显示模组的控制方法实施例的各个步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图25为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备140包括但不限于：射频单元141、网络模块142、音频输出单元143、输入单元144、传感器145、显示单元146、用户输入单元147、接口单元148、存储器149以及处理器1410等部件。本领域技术人员可以理解，电子设备140还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器1410逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图14中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，处理器1410，用于：

检测所述显示模组在当前所连接的镜片上的相对位置以及所述显示模组的触摸部的接触；

在成像区设置模式下检测到所述显示模组静止于所述镜片上的第一相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第一相对位置标记为第一拟合点；所述第一相对位置是所述显示模组在所述镜片上的一任意位置，在所述成像区设置模式下所述第一触摸模式是用于表示用户确认能看清所述显示模组的显示区的触摸模式；

在标记出至少三个第一拟合点的情况下，将所述至少三个第一拟合点拟合成一个封闭区域；

将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区。

应理解的是，本申请实施例中，输入单元144可以包括图形处理器(GraphicsProcessing Unit，GPU)1441和麦克风1442，图形处理器1441对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元146可包括显示面板1461，可以采用液晶显示器、有机发光二极管等形式来配置显示面板1461。用户输入单元147包括触控面板1471以及其他输入设备1472中的至少一种。触控面板1471，也称为触摸屏。触控面板1471可包括触摸检测装置和触摸控制器两个部分。其他输入设备1472可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

存储器149可用于存储软件程序以及各种数据。存储器149可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器149可以包括易失性存储器或非易失性存储器，或者，存储器149可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本申请实施例中的存储器149包括但不限于这些和任意其它适合类型的存储器。

处理器1410可包括一个或多个处理单元；可选的，处理器1410集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器1410中。

本申请实施例提供的显示模组的控制方法，执行主体可以为AR眼镜。本申请实施例中以近眼显示装置执行显示模组的控制方法为例，说明本申请实施例提供的电子系统。

在一些可选的实施方式中，如图26所示，本申请实施例还提供一种近眼显示装置150，包括处理器151和存储器152，存储器152上存储有可在所述处理器151上运行的程序或指令，该程序或指令被处理器131执行时实现上述显示模组的控制方法实施例的各个步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。

上述任一产品实施例均能通过其自身的处理器运行实现上述显示模组的控制方法实施例的各个过程，均能达到相同的技术效果，为避免重复，不再一一赘述。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述显示模组的控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述处理器为上述实施例中所述的电子设备或电子系统中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述显示模组的控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如上述显示模组的控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

在本申请实施例所提供的实施方式中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施方式仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

另外，在本申请实施例各个实施方式中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请实施例各个实施方式所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本申请实施例的实施方式，并非因此限制本申请实施例的专利范围，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，凡是利用本申请实施例说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均同理包括在本申请实施例的专利保护范围内。

Claims (13)

1.一种显示模组的控制方法，其特征在于，所述显示模组被配置成放置在光学镜片上，以及显示模组被配置成输出图像内容，所述方法包括：

检测所述显示模组在当前所连接的镜片上的相对位置以及所述显示模组的触摸部的接触；

在成像区设置模式下检测到所述显示模组静止于所述镜片上的第一相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第一相对位置标记为第一拟合点；所述第一相对位置是所述显示模组在所述镜片上的一任意位置，在所述成像区设置模式下所述第一触摸模式是用于表示用户确认能看清所述显示模组的显示区的触摸模式；

在标记出至少三个第一拟合点的情况下，将所述至少三个第一拟合点拟合成一个封闭区域；

将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区。

2.根据权利要求1所述的方法，其特征在于，在所述将所述封闭区域设置为所述显示模组在所述镜片上的预设成像区之后，所述方法还包括：

在检测到所述显示模组位于所述预设成像区外的情况下，启动低功耗模式。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在接收到分区指令的情况下，将所述预设成像区划分成至少两个子成像区；

在接收到在第一子成像区域内成像第一图形界面的映射指令时，控制所述显示模组在所述第一子成像区域内成像所述第一图形界面；所述第一子成像区域是所述至少两个子成像区中的任意一子成像区域。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在退出所述成像区设置模式后又启动成像区设置模式的情况下，又检测到所述显示模组静止于所述镜片上的第二相对位置处且所述触摸部被按照第一触摸模式触摸的情况下，将所述第二相对位置标记为第二拟合点；所述第二相对位置是所述镜片上与所述第一相对位置不同的一任意位置；

在标记出至少一个第二拟合点的情况下，将所述至少三个第一拟合点和所述至少一个第二拟合点拟合成一个第一新封闭区域，将所述第一新封闭区域更新设置为所述显示模组在所述镜片上的预设成像区；或在标记出至少三个第二拟合点的情况下，将所述至少三个第二拟合点拟合成一个第二新封闭区域，将所述第二新封闭区域更新设置为所述显示模组在所述镜片上的预设成像区。

5.根据权利要求1所述的方法，其特征在于，所述方法包括：

识别佩戴第一眼镜的第一用户的第一身份，所述第一眼镜包括所述镜片；

在预置的映射集中搜索与所述第一身份相匹配的映射规则；

在从所述映射集中搜索到有且仅有一条映射规则的情况下，将搜索到的该映射规则中的预设成像区设置为所述显示模组在所述镜片上成像的成像区；所述映射集中每一条映射规则是预先设定的一个用户身份与一个预设成像区之间的映射关系，所述映射集中的各个映射规则各不相同。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

在从所述映射集中搜索到至少两条映射规则的情况下，检测针对所述至少两条映射规则中各自的预设成像区的选择指令，并将被所述选择指令所选中预设成像区设置为所述显示模组在所述镜片上成像的成像区，或将所述至少两条映射规则中第一预设成像区设置为所述显示模组在所述镜片上成像的成像区，所述第一预设成像区是所述第一用户选择预设成像区的历史选择记录中最后一次选中的预设成像区。

7.根据权利要求5所述的方法，其特征在于，所述方法还包括：

在从所述映射集中未搜索到映射规则的情况下，启动所述成像区设置模式；

在所述成像区设置模式下检测到所述显示模组静止于所述镜片上的第三相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第三相对位置标记为第三拟合点；所述第三相对位置是所述显示模组在所述镜片上的一任意位置；

在标记出至少三个第三拟合点的情况下，将所述至少三个第三拟合点拟合成一个第三封闭区域；

将所述第三封闭区域设置为所述显示模组在所述镜片上的第三预设成像区。

8.根据权利要求7所述的方法，其特征在于，所述方法还包括：

将所述第一身份与所述第三预设成像区建立第三映射规则，并将所述第三映射规则归入所述映射集中。

9.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在退出所述成像区设置模式后又启动成像区设置模式的情况下，又检测到所述显示模组静止于所述镜片上的第四相对位置处所述触摸部被按照第一触摸模式触摸的情况下，将所述第四相对位置标记为第四拟合点；所述第四相对位置是所述显示模组在所述镜片上一任意位置；

在标记出至少三个第四拟合点的情况下，确定所述至少三个第四拟合点与所述至少三个第一拟合点重复率；

在确定所述重复率不小于预设阈值时，将所述预设成像区设置为所述显示模组在所述镜片上成像的当前成像区。

10.根据权利要求9所述的方法，其特征在于，所述方法还包括：

在确定所述重复率小于预设阈值时，将所述至少三个第四拟合点拟合成一个第四封闭区域，将所述第四封闭区域设置为所述显示模组在所述镜片上成像的当前成像区。

11.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述镜片的第一虚拟轮廓模型和所述用户的眼部的第二虚拟轮廓模型；

在所述第一虚拟轮廓模型上扫描出与所述第二虚拟轮廓模型相同的或相似的轮廓区域，将所述轮廓区域设置为所述显示模组在所述镜片上的预设成像区。

12.根据权利要求11所述的方法，其特征在于，所述方法还包括：

获取所述用户的身份信息；

将所述身份信息与所述预设成像区建立映射规则并保存。

13.一种近眼显示装置，其特征在于，所述近眼显示装置包括：处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1至12中任一项所述的显示模组的控制方法的步骤。