CN110174936A - 头戴式可视设备的控制方法、装置及设备 - Google Patents
头戴式可视设备的控制方法、装置及设备 Download PDFInfo
- Publication number
- CN110174936A CN110174936A CN201910269922.5A CN201910269922A CN110174936A CN 110174936 A CN110174936 A CN 110174936A CN 201910269922 A CN201910269922 A CN 201910269922A CN 110174936 A CN110174936 A CN 110174936A
- Authority
- CN
- China
- Prior art keywords
- eyes
- wear
- image
- open state
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 128
- 238000000034 method Methods 0.000 title claims abstract description 44
- 210000001508 eye Anatomy 0.000 claims abstract description 185
- 238000001514 detection method Methods 0.000 claims abstract description 28
- 238000003384 imaging method Methods 0.000 claims description 15
- 208000003464 asthenopia Diseases 0.000 claims description 6
- 210000005252 bulbus oculi Anatomy 0.000 claims description 6
- 230000005611 electricity Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 16
- 239000011521 glass Substances 0.000 description 11
- 210000003128 head Anatomy 0.000 description 6
- 230000004297 night vision Effects 0.000 description 5
- 238000012549 training Methods 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000003447 ipsilateral effect Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000001757 thermogravimetry curve Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012634 optical imaging Methods 0.000 description 1
- 230000000149 penetrating effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 210000000162 simple eye Anatomy 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/176—Dynamic expression
Abstract
本说明书实施例提供一种头戴式可视设备的控制方法、装置及设备，本实施例通过获取设置在头戴式可视设备中图像采集装置采集的图像，并对图像进行人眼检测，以识别图像中的眼睛状态，由于眼睛状态包括非睁眼状态或睁眼状态，则在依据至少一张图像的识别结果确定佩戴者的眼睛处于非睁眼状态的情况下，控制头戴式可视设备的显示部进入息屏状态和/或控制头戴式可视设备的操作系统切换至低功耗模式，从而节约头戴式可视设备的电量，避免在头戴式可视设备中内置较重的电池。
Description
技术领域
本说明书涉及控制技术领域，尤其涉及头戴式可视设备的控制方法、装置及设备。
背景技术
头戴式可视设备，可以是通过佩戴在用户头部以提供用户可视化内容的设备。例如，头戴式可视设备可以是VR(Virtual Reality，虚拟现实)头戴式设备、AR(Augmentedreality，增强现实)头戴式设备、MR(Mixed Reality，混合现实)头戴式设备等。头戴式可视设备为了给用户提供可视化内容，往往内置有电池，而由于可穿戴设备穿戴在用户头上，如果内置重量较大的电池影响用户体验，因此，需要提供一种能节约头戴式可视设备电量的方案。
发明内容
为克服相关技术中存在的问题，本说明书提供了头戴式可视设备的控制方法、装置及设备。
根据本说明书实施例的第一方面，提供一种头戴式可视设备，包括处理器，显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述处理器用于：
获取所述图像采集装置采集的图像；
对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：睁眼状态或非睁眼状态；
在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
在一个实施例中，所述图像采集装置是可采集黑暗环境中图像的装置。
在一个实施例中，所述图像采集装置包括红外成像装置，或所述图像采集装置包括可见光源模块和可见光拍摄模块，所述可见光源模块在可见光拍摄模块拍摄图像时提供可见光，以供所述可见光拍摄模块拍摄佩戴者的眼部。
根据本说明书实施例的第二方面，提供一种头戴式可视设备的控制方法，所述头戴式可视设备包括显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述方法包括：
获取所述图像采集装置采集的图像；
对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：非睁眼状态或睁眼状态；
在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
在一个实施例中，所述图像采集装置是可采集黑暗环境中图像的装置。
在一个实施例中，所述图像采集装置包括红外成像装置，或所述图像采集装置包括可见光源模块和可见光拍摄模块，所述可见光源模块在可见光拍摄模块拍摄图像时提供可见光，以供所述可见光拍摄模块拍摄佩戴者的眼部。
在一个实施例中，所述图像按预设时间间隔获取，所述依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态，包括：
依据至少一张图像的识别结果确定预设非睁眼状态条件满足时，判定所述佩戴者的眼睛处于非睁眼状态；
所述预设非睁眼状态条件包括以下一种或多种：
连续识别到非睁眼状态的次数达到第一指定次数；
连续第二指定次数没有识别到睁眼状态。
在一个实施例中，所述方法还包括：
依据所述非睁眼状态和睁眼状态确定所述穿戴者在预设时间段内的眨眼频次；
若依据所述眨眼次数确定所述佩戴者的眼睛处于疲劳状态，输出眼睛疲劳的提醒信息；
若在预设延迟时间段内接收到息屏指令或没有收到继续显示的指令时，控制所述头戴式可视设备的显示部进入息屏状态。
在一个实施例中，所述方法还包括：
在所述图像的识别结果为睁眼状态、且显示部当前处于息屏状态或者操作系统处于低功耗模式的情况下，控制所述头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式。
根据本说明书实施例的第三方面，提供一种头戴式可视设备的控制装置，所述头戴式可视设备包括显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述装置包括：
图像获取模块，用于：获取所述图像采集装置采集的图像；
人眼检测模块，用于：对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：非睁眼状态或睁眼状态；
设备控制模块，用于：在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
在一个实施例中，所述图像按预设时间间隔获取，所述设备控制模块还用于：依据至少一张图像的识别结果确定预设非睁眼状态条件满足时，判定所述佩戴者的眼睛处于非睁眼状态；
所述预设非睁眼状态条件包括以下一种或多种：
连续识别到非睁眼状态的次数达到第一指定次数；
连续第二指定次数没有识别到睁眼状态。
在一个实施例中，所述设备控制模块还用于：
依据所述非睁眼状态和睁眼状态确定所述穿戴者在预设时间段内的眨眼频次；
若依据所述眨眼次数确定所述佩戴者的眼睛处于疲劳状态，输出眼睛疲劳的提醒信息；
若在预设延迟时间段内接收到息屏指令或没有收到继续显示的指令时，控制所述头戴式可视设备的显示部进入息屏状态。
在一个实施例中，所述设备控制模块还用于：
在所述图像的识别结果为睁眼状态、且显示部当前处于息屏状态或者操作系统处于低功耗模式的情况下，控制所述头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式。
本说明书的实施例提供的技术方案可以包括以下有益效果：
本说明书实施例通过获取设置在头戴式可视设备中图像采集装置采集的图像，并对图像进行人眼检测，以识别图像中的眼睛状态，由于眼睛状态包括非睁眼状态或睁眼状态，则在依据至少一张图像的识别结果确定佩戴者的眼睛处于非睁眼状态的情况下，控制头戴式可视设备的显示部进入息屏状态和/或控制头戴式可视设备的操作系统切换至低功耗模式，从而节约头戴式可视设备的电量，避免在头戴式可视设备中内置较重的电池。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本说明书。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本说明书的实施例，并与说明书一起用于解释本说明书的原理。
图1是本说明书根据一示例性实施例示出的一种头戴式可视设备的结构示意图。
图2A是本说明书根据一示例性实施例示出的一种头戴式可视设备的示意图。
图2B是本说明书根据一示例性实施例示出的另一种头戴式可视设备的示意图。
图2C是本说明书根据一示例性实施例示出的另一种头戴式可视设备的示意图。
图3是本说明书根据一示例性实施例示出的一种头戴式可视设备的控制方法流程示意图。
图4是本说明书根据一示例性实施例示出的一种虚拟现实设备的控制方法流程示意图。
图5是本说明书根据一示例性实施例示出的一种头戴式可视设备的控制装置所在计算机设备的硬件结构图。
图6是本说明书根据一示例性实施例示出的一种头戴式可视设备的控制装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本说明书相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本说明书的一些方面相一致的装置和方法的例子。
在本说明书使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本说明书。在本说明书和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解，尽管在本说明书可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本说明书范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
虚拟现实(Virtual Reality，简称VR)技术，可以是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该环境中。VR交互的特点是能够接管用户的全部视野，面向用户提供“沉浸式体验”。
混合现实(Mixed Reality，简称MR)技术，是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。
增强现实技术(Augmented Reality，简称AR)，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
本实施例头戴式可视设备的控制方法可以通过软件执行，也可以通过软件和硬件相结合或者硬件执行的方式实现，所涉及的硬件可以由两个或多个物理实体构成，也可以由一个物理实体构成。本实施例方法可以由头戴式可视设备执行，也可以由独立于头戴式可视设备的控制设备执行。控制设备可以是智能手机、平板电脑、笔记本电脑、台式电脑、PDA(Personal Digital Assistant，个人数字助理)等设备。控制设备可以通过发送控制指令的方式控制头戴式可视设备。头戴式可视设备，可以是通过佩戴在用户头部以提供用户可视化内容的设备。例如，头戴式可视设备可以是VR头戴式设备、AR头戴式设备、MR头戴式设备等。而VR头戴式设备可以是VR眼镜，AR头戴式设备可以是AR眼镜，MR头戴式设备可以是MR眼镜等。
如图1所示，是本说明书根据一示例性实施例示出的一种头戴式可视设备的结构示意图，该示意图以头戴式可视设备的控制方法由头戴式可视设备执行为例进行示例说明。所述头戴式可视设备包括处理器12，显示部14以及图像采集装置16，所述图像采集装置16的拍摄范围可以包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述处理器12用于：获取所述图像采集装置采集的图像；对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：非睁眼状态或睁眼状态；在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或控制头戴式可视设备的操作系统切换至低功耗模式。
图像采集装置的拍摄范围可以包括在头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围。佩戴者的眼部范围可以是全部眼部的范围，也可以是部分眼部的范围，例如，可以是单只眼所在范围。
在一个示例中，为了实现图像采集装置的拍摄范围包括在头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，可以将显示部和图像采集装置设在头戴式可视设备的同侧。以显示部为显示屏为例，显示屏往往设于头戴式可视设备内侧，以便佩戴者在穿戴头戴式可视设备后，可以看到显示屏上显示的内容。则，图像采集装置也设置在头戴式可视设备的内侧，如，设置在显示屏附近指定范围内，以能拍摄到佩戴者全部或部分眼部为准。
若一个图像采集装置适合采集一只眼睛的图像，作为一个示例，可以在头戴式可视设备中配置一个图像采集装置，利用单个图像采集装置进行单眼检测，从而节约成本。如图2A所述，是本说明书根据一示例性实施例示出的一种头戴式可视设备的示意图。在该示意图中，头戴式可视设备可以是VR眼镜，VR眼镜包括图像采集装置、显示部和鼻托部。显示部包括镜片，在其中一个镜片的上方设置图像采集装置，从而节约成本。
在某些应用场景中，可能存在采集佩戴者两只眼睛图像的需求，一个例子中，图像采集装置可以直接采集到包含两只眼睛的图像，相应的，图像采集装置的拍摄范围包括在头戴式可视设备被佩戴者穿戴时佩戴者两只眼睛的范围。在另一个例子中，若一个图像采集装置适合采集一只眼睛的图像，则可以配置两个图像采集装置，每个图像采集装置各采集相应的眼睛图像。换言之，两个图像采集装置的拍摄范围总和包括佩戴者两只眼睛所在范围。如图2B所述，是本说明书根据一示例性实施例示出的另一种头戴式可视设备的示意图。在该示意图中，头戴式可视设备可以是VR眼镜，VR眼镜包括两个图像采集装置、显示部和鼻托部。显示部包括镜片，在每个镜片的上方分别设置图像采集装置，以便通过不同图像采集装置采集包含不同眼睛的图像。
可见，不管是采用拍摄范围更广的图像采集装置，还是配置多个图像采集装置，都可以实现对双目进行检测。
可以理解的是，图像采集装置的个数可以不限于两个，可以根据不同需求配置多个图像采集装置，在此不一一列举。
实际应用中，某些头戴式可视设备在使用过程中，佩戴者眼睛所处环境为黑暗且密闭的环境，以便用户能更好的沉浸到显示部所提供的显示画面中。例如，佩戴者带上VR眼镜或非穿透式的AR眼睛时，佩戴者眼睛处于黑暗且封闭的环境中。为此，所述图像采集装置是可以采集黑暗环境中图像的采集装置。
在一个示例中，图像采集装置可以包括可见光拍摄模块，可见光拍摄模块借助显示部显示时所提供可见光来拍摄佩戴者的眼睛图像。而在某个示例中，可能期望拍摄到屏幕息屏情况下的眼睛图像，为此，图像采集装置还可以包括可见光源模块，所述可见光源模块在可见光拍摄模块拍摄图像时提供可见光，以供所述可见光拍摄模块拍摄佩戴者的眼部。为了尽量减少可见光源模块对佩戴者的影响，作为一个示例，在可见光拍摄模块拍摄图像前，可见光源模块启动，以通过可见光源模块提供可见光；在可见光拍摄模块拍摄图像后，可见光源模块关闭。甚至，可以仅在可见光拍摄模块无法拍摄图像时才启动可见光源模块。例如，仅在显示部的显示屏处于息屏状态时，或者当前环境亮度低于指定亮度时，才启动可见光源模块。
该实施例通过控制可见光源模块的开关，来减少额外的可见光对佩戴者的影响。
在另一个例子中，为了进一步降低额外可见光对佩戴者的影响，可以基于夜视技术采用能在光强不足的环境中拍摄图像的夜视设备拍摄人眼图像，则图像采集装置可以是夜视设备。夜视技术可以分为：微光夜视、红外夜视，激光夜视。作为一个示例，图像采集装置可以包括红外成像装置。红外成像装置可以是利用对物体散发出的红外线进行感光成像的装置。以红外热像图为例，红外成像装置可以是利用红外探测器和光学成像物镜接受被测目标的红外辐射能量分布图形反映到红外探测器的光敏元件上，从而获得红外热像图。这种热像图与物体表面的热分布场相对应。通俗地讲，是将物体发出的不可见红外能量转变为可见的热图像。热图像的上面的不同颜色代表被测物体的不同温度。在一个示例中，红外成像装置可以包括红外发射器和红外接收器，红外发射器和红外接收器设置在显示部显示屏附近指定区域。图像采集装置和显示部设在头戴式可视设备的同侧，可以是图像采集装置的部分模块(如探测模块)设置在头戴式可视设备的同侧。如图2C所述，是本说明书根据一示例性实施例示出的另一种头戴式可视设备的示意图。在该示意图中，头戴式可视设备可以是VR眼镜，VR眼镜包括一个图像采集装置、显示部和鼻托部。显示部可以包括镜片。红外成像装置的红外发射器和红外接收器设置在镜片的上方区域。在实施例中，可以采用一个主动红外光源，根据红外图像清晰度调整光源强度，获得效果更好的图像。
该实施例通过红外成像装置拍摄黑暗环境中的图像，可以实现光强弱的环境中眼睛图像的采集。
可以理解的是，图像采集装置还可以是其他能采集图像的装置，在此不一一赘述。
为了节约篇幅，结合头戴式可视设备的控制方法对头戴式可视设备的处理器的功能进行介绍。头戴式可视设备的控制方法可以通过软件执行，也可以通过软件和硬件相结合或者硬件执行的方式实现，所涉及的硬件可以由两个或多个物理实体构成，也可以由一个物理实体构成。本实施例方法可以由头戴式可视设备执行，也可以由独立于头戴式可视设备的控制设备执行。
如图3所示，是本说明书根据一示例性实施例示出的一种头戴式可视设备的控制方法流程示意图，所述方法包括：
在步骤302中，获取所述图像采集装置采集的图像；
在步骤304中，对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：睁眼状态或非睁眼状态；
在步骤306中，在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
其中，所述图像可以是图像采集装置所采集视频中的视频帧，也可以是图像采集装置所采集的照片。图像采集装置可以按预设时间间隔采集佩戴者的眼睛图像；也可以由本执行端按预设时间间隔从图像采集装置中获取图像。在一个示例中，预设时间间隔可以是0.5秒至1秒。
关于对图像进行人眼检测，在一个实施例中，可以采用人眼检测算法识别获得图像中佩戴者眼睛的眼睛状态。由于睁眼状态和闭眼状态下，眼睛呈现出来的特征不同，例如，针对睁眼状态下的图像，可以从图像中提取到瞳孔、虹膜等睁眼特征。因此，可以根据图像中的睁眼特征或非睁眼特征来识别图像中的眼睛状态。例如，可以利用训练样本进行模型训练，获得用于识别人眼的眼睛状态的人眼检测模型。如，采用有监督学习的方式对深度学习网络进行训练。训练样本中包括带标签的样本图像，标签可以是样本图像中的眼睛状态，如为非睁眼状态或睁眼状态。在训练获得人眼检测模型后，在人眼检测模型的应用阶段，可以直接调用已训练好的人眼检测模型对图像进行人眼检测，以识别所述图像中眼睛的眼睛状态。例如，利用两个值来表示这两种状态，如，true表示睁眼状态，false表示非睁眼状态。将图像输入人眼检测模型，输出true，表示该图像的识别结果为睁眼状态，输出false，表示该图像的识别结果为非睁眼状态。
可以理解的是，还可以采用其他人眼检测方法对图像进行人眼检测，只要能识别出图像中眼睛的眼睛状态即可，在此不一一赘述。
所述眼睛状态可以包括非睁眼状态或睁眼状态。非睁眼状态可以是指示眼睛处于闭合状态。可能因为图像中没有人眼或者图像模糊等因素出现无法识别到人眼状态的情况，因此，非睁眼状态还可以包括未识别到眼睛等非睁眼的状态，睁眼状态可以是指示眼睛处于睁开状态。示例的，可以将不是睁眼状态的其他状态都判定为非睁眼状态。而关于睁开多少被判定睁眼状态，睁开多少被判定非睁眼状态，可以根据需求设定。例如，由训练样本训练出睁眼特征/非睁眼特征与眼睛状态的映射关系。
在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
其中，息屏状态可以是熄灭屏幕后显示部所处状态。显示部进入息屏状态，可以是执行熄灭屏幕处理。低功耗模式可以是耗电量低的模式，例如，可以是休眠模式、待机模式等。操作系统切换至低功耗模式，可以是操作系统从当前模式切换至低功耗模式。头戴式可视设备的操作系统可以是Android系统、Windows系统等操作系统，可以由设备厂商决定。
关于控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式，在一个实施例中，若头戴式可视设备的控制方法是由独立于头戴式可视设备的控制设备执行，可以向头戴式可视设备发送控制指令，所述控制指令用于控制头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
在另一个实施例中，若头戴式可视设备的控制方法是由头戴式可视设备执行，则可以通过调用相应的API，以控制头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。或者，采用其他手段控制头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式，在此不一一列举。
关于依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态，在一个实施例中，可以根据一张图像的识别结果来判断佩戴者眼睛所处状态。然而，为了避免由于眨眼而误识别为非睁眼状态，在另一个实施例中，依据至少两张图像的识别结果来确定所述佩戴者的眼睛是否处于非睁眼状态。
示例的，所述依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态，包括：依据至少一张图像的识别结果确定预设非睁眼状态条件满足时，判定所述佩戴者的眼睛处于非睁眼状态。
预设非睁眼状态条件可以是用于判断佩戴者的眼睛是否处于非睁眼状态的条件。例如，可以根据是否识别出非睁眼状态来判断佩戴者的眼睛是否处于非睁眼状态。在一个示例中，为了提高判断准确率，可以将预设非睁眼状态条件设置为连续识别到非睁眼状态的次数达到第一指定次数，相应的，若连续识别到非睁眼状态的次数达到第一指定次数，可以判定佩戴者的眼睛处于非睁眼状态。第一指定次数可以预先设定，或者依据历史记录中，在判定眼睛处于非睁眼状态并息屏或切换至低功耗模式后，佩戴者是否调回亮屏或切换至工作模式的情况，来动态调整第一指定次数。
又如，对图像进行人眼检测，可能因为图像中没有人眼或者图像模糊等因素导致无法识别到人眼状态的情况，为了避免上述原因导致没有识别到睁眼状态而一直处于耗电的情况，为此，作为一种示例，可以在识别不到睁眼状态的识别结果时，都判定识别结果为非睁眼状态。如，可以根据是否没有识别出睁眼状态来判断佩戴者的眼睛是否处于非睁眼状态。没有识别出睁眼状态，可能是因为图像中眼睛处于闭合状态，也可能是因为没有识别到眼睛状态或者识别到其他类型的眼睛状态，从而可以减少各种情况下的耗电量。
为了提高判断准确率，在另一个实施例中，还可以将预设非睁眼状态条件设置为连续第二指定次数没有识别到睁眼状态，相应的，若连续识别结果中，存在第二指定次数的识别结果不是睁眼状态，可以判定佩戴者的眼睛处于非睁眼状态。第二指定次数可以预先设定，或者依据历史记录中，在判定眼睛处于非睁眼状态并息屏或切换至低功耗模式后，佩戴者是否调回亮屏状态或切换至工作模式的情况，来动态调整第二指定次数。
可以理解的是，上述预设非睁眼状态条件还可以组合，在一个例子中，只要其中任一项条件满足，即可判定所述佩戴者的眼睛处于非睁眼状态。此外，预设非睁眼状态条件还可以是其他条件，只要能用于判断佩戴者的眼睛处于非睁眼状态即可，在此不一一赘述。
如果能采集到两只眼睛的眼睛状态，若两只眼睛的眼睛状态不一致，在一个示例中，可以在其中一只眼睛的眼睛状态满足预设非睁眼状态条件时，判定佩戴者的眼睛处于非睁眼状态。在另一个示例中，仅在两只眼睛的眼睛状态同时满足预设非睁眼状态条件时，才判定眼睛处于非睁眼状态，提高闭眼判断的准确性。
在一个实施例中，还可以结合眼睛状态来判断佩戴者的眼睛是否处于疲劳状态，进而判断是否需要控制所述头戴式可视设备的显示部进入息屏状态，甚至将操作系统切换至低功耗模式。
例如，依据所述非睁眼状态和睁眼状态确定所述穿戴者在预设时间段内的眨眼频次；
若依据所述眨眼次数确定所述佩戴者的眼睛处于疲劳状态，输出眼睛疲劳的提醒信息；
若在预设延迟时间段内没有收到继续显示的指令时，控制所述头戴式可视设备的显示部进入息屏状态。
关于如何依据非睁眼状态和睁眼状态确定眨眼，在一个例子中，可以在连续人眼检测的识别结果中，若识别出睁眼状态后，又识别到非睁眼状态，可以判定为一次眨眼。
在某些场景中，眨眼过快表示可能眼睛已经疲劳，过长时间不眨眼，可能导致眼睛处于疲劳状态，为此，可以设置一个频次范围，若所确定的眨眼频次不在预设频次范围内，则判定佩戴者的眼睛处于疲劳状态。当然，判断佩戴者的眼睛是否处于疲劳状态，包括但不限于上述手段，也可以采用其他手段判断佩戴者的眼睛是否处于疲劳状态，在此不一一赘述。
眼睛疲劳的提醒信息，可以提醒佩戴者眼睛处于疲劳状态，还可以提醒佩戴者是否继续显示或者进行灭屏处理。
继续显示的指令可以是佩戴者触发的指令，通过预设延迟时间段延迟显示部进入息屏状态，以供佩戴者在预设延迟时间段内考虑是否继续，可以提高佩戴者的用户体验，同时在用户认可疲劳判断的情况下，无需手动操作，本方案即可直接控制头戴式可视设备的显示部进入息屏状态，方便佩戴者休息。
示例的，所述提醒信息中除了提醒佩戴者是否继续显示或者进行灭屏处理，还可以提醒佩戴者是否将头戴式可视设备的操作系统切换至低功耗模式。若在预设延迟时间段内没有收到拒绝切换的指令时，控制所述头戴式可视设备的操作系统切换至低功耗模式。
在其他实施例中，也可以是在预设延迟时间段内接收到息屏指令和/或低功耗切换指令时，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至工作模式。
在一个实施例中，所述方法还包括：在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于睁眼状态的情况下，控制所述头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式。
其中，亮屏状态可以是点亮屏幕后显示部所处状态。显示部进入亮屏状态，可以是执行点亮屏幕处理。工作模式可以是亮屏状态下操作系统所处的正常工作模式。操作系统切换至工作模式，可以是操作系统从当前模式切换至工作模式。当前模式可以包括息屏状态下的模式，如低功耗模式。
关于依据至少一张图像的识别结果确定佩戴者的眼睛处于睁眼状态，在一个例子中，可以是检测到一次睁眼状态。示例的，在所述图像的识别结果为睁眼状态、且显示部当前处于息屏状态或者操作系统处于低功耗模式的情况下，控制所述头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式。
本实施例在发现佩戴者睁眼的情况下，可以自动控制头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式，无需用户手动操作，提高用户体验。
在一个实施例中，还可以在头戴式可视设备中配置距离传感器，通过测量佩戴者面部和眼镜佩戴处的距离，可以判断到佩戴者是否正确佩戴或者已经佩戴了眼镜，并以此确定是否启动头戴式可视设备或是否点亮头戴式可视设备的显示屏幕。
以上实施方式中的各种技术特征可以任意进行组合，只要特征之间的组合不存在冲突或矛盾，但是限于篇幅，未进行一一描述，因此上述实施方式中的各种技术特征的任意进行组合也属于本说明书公开的范围。
以下以其中一种组合进行示例说明。
如图4所示，是本说明书根据一示例性实施例示出的一种虚拟现实设备的控制方法流程示意图，所述虚拟现实设备包括显示部以及红外成像装置，所述红外成像装置用于采集穿戴虚拟显示设备的佩戴者的眼睛图像，所述方法包括：
在步骤402中，获取所述红外成像装置采集的图像；
在步骤404中，对所述图像进行人眼检测，以识别所述图像中的眼睛状态。
其中，所述眼睛状态可以包括：非睁眼状态(闭眼状态、未知状态)、睁眼状态。未知状态可以是检测不到眼睛或者识别不出是否为睁眼状态时的状态。
在步骤406中，在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态、以及控制操作系统切换至低功耗模式。
例如，系统处于正常模式时，如果连续n次(n可根据检查时间间隔配置，比如2～5次)检测到非“睁眼”状态(即检测到n次闭眼状态或者未知状态)，则判定佩戴者的眼睛处于非睁眼状态。
在步骤408中，在所述图像的识别结果为睁眼状态、且显示部当前处于息屏状态或者操作系统处于低功耗模式的情况下，控制所述头戴式可视设备的显示部进入亮屏状态、以及控制操作系统切换至工作模式。
例如，系统处于低功耗模式时，如检测到1次睁眼状态，则可以判定佩戴者的眼睛处于睁眼状态。
本实施例基于红外成像装置对人眼的开闭状态进行检查，然后根据人眼开闭状态将虚拟现实设备(如虚拟显示眼镜)的显示屏幕置于亮屏状态或息屏状态，将虚拟现实设备的系统置于“低功耗模式”或“正常模式”，对虚拟现实设备的屏幕或系统的运行状态进行更精准的控制，达到节能的效果。
与前述头戴式可视设备的控制方法的实施例相对应，本说明书还提供了头戴式可视设备的控制装置及其所应用的电子设备的实施例。
本说明书头戴式可视设备的控制装置的实施例可以应用在计算机设备。装置实施例可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为一个逻辑意义上的装置，是通过其所在计算机设备的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，如图5所示，为本说明书头戴式可视设备的控制装置所在计算机设备的一种硬件结构图，除了图5所示的处理器510、网络接口520、内存530、以及非易失性存储器540之外，实施例中头戴式可视设备的控制装置531所在的计算机设备通常根据该设备的实际功能，还可以包括其他硬件，对此不再赘述。
如图6所示，是本说明书根据一示例性实施例示出的一种头戴式可视设备的控制装置的框图，所述头戴式可视设备包括显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述装置包括：
图像获取模块62，用于：获取所述图像采集装置采集的图像；
人眼检测模块64，用于：对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：非睁眼状态或睁眼状态；
设备控制模块66，用于：在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
在一个实施例中，所述图像按预设时间间隔获取，所述设备控制模块66还用于：依据至少一张图像的识别结果确定预设非睁眼状态条件满足时，判定所述佩戴者的眼睛处于非睁眼状态；
所述预设非睁眼状态条件包括以下一种或多种：
连续识别到非睁眼状态的次数达到第一指定次数；
连续第二指定次数没有识别到睁眼状态。
在一个实施例中，所述设备控制模块66还用于：
依据所述非睁眼状态和睁眼状态确定所述穿戴者在预设时间段内的眨眼频次；
若依据所述眨眼次数确定所述佩戴者的眼睛处于疲劳状态，输出眼睛疲劳的提醒信息；
若在预设延迟时间段内接收到息屏指令或没有收到继续显示的指令时，控制所述头戴式可视设备的显示部进入息屏状态。
在一个实施例中，所述设备控制模块66还用于：
在所述图像的识别结果为睁眼状态、且显示部当前处于息屏状态或者操作系统处于低功耗模式的情况下，控制所述头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本说明书方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
相应的，本说明书实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述程序时实现如上任一项所述头戴式可视设备的控制方法。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于设备实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
相应的，本说明书实施例还提供一种计算机存储介质，所述存储介质中存储有程序指令，所述程序指令包括上述任一项所述头戴式可视设备的控制方法的步骤。
本说明书实施例可采用在一个或多个其中包含有程序代码的存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机可用存储介质包括永久性和非永久性、可移动和非可移动媒体，可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括但不限于：相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
本领域技术人员在考虑说明书及实践这里申请的发明后，将容易想到本说明书的其它实施方案。本说明书旨在涵盖本说明书的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本说明书的一般性原理并包括本说明书未申请的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本说明书的真正范围和精神由下面的权利要求指出。
应当理解的是，本说明书并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本说明书的范围仅由所附的权利要求来限制。
以上所述仅为本说明书的较佳实施例而已，并不用以限制本说明书，凡在本说明书的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本说明书保护的范围之内。
Claims (10)
1.一种头戴式可视设备，包括处理器，显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述处理器用于：
获取所述图像采集装置采集的图像；
对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：睁眼状态或非睁眼状态；
在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
2.根据权利要求1所述的设备，所述图像采集装置是可采集黑暗环境中图像的装置。
3.根据权利要求2所述的设备，所述图像采集装置包括红外成像装置，或所述图像采集装置包括可见光源模块和可见光拍摄模块，所述可见光源模块在可见光拍摄模块拍摄图像时提供可见光，以供所述可见光拍摄模块拍摄佩戴者的眼部。
4.一种头戴式可视设备的控制方法，所述头戴式可视设备包括显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述方法包括：
获取所述图像采集装置采集的图像；
对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：非睁眼状态或睁眼状态；
在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
5.根据权利要求4所述的方法，所述图像采集装置是可采集黑暗环境中图像的装置。
6.根据权利要求5所述的方法，所述图像采集装置包括红外成像装置，或所述图像采集装置包括可见光源模块和可见光拍摄模块，所述可见光源模块在可见光拍摄模块拍摄图像时提供可见光，以供所述可见光拍摄模块拍摄佩戴者的眼部。
7.根据权利要求4至6任一项所述的方法，所述图像按预设时间间隔获取，所述依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态，包括：
依据至少一张图像的识别结果确定预设非睁眼状态条件满足时，判定所述佩戴者的眼睛处于非睁眼状态；
所述预设非睁眼状态条件包括以下一种或多种：
连续识别到非睁眼状态的次数达到第一指定次数；
连续第二指定次数没有识别到睁眼状态。
8.根据权利要求4至6任一项所述的方法，所述方法还包括：
依据所述非睁眼状态和睁眼状态确定所述穿戴者在预设时间段内的眨眼频次；
若依据所述眨眼次数确定所述佩戴者的眼睛处于疲劳状态，输出眼睛疲劳的提醒信息；
若在预设延迟时间段内接收到息屏指令或没有收到继续显示的指令时，控制所述头戴式可视设备的显示部进入息屏状态。
9.根据权利要求4至6任一项所述的方法，所述方法还包括：
在所述图像的识别结果为睁眼状态、且显示部当前处于息屏状态或者操作系统处于低功耗模式的情况下，控制所述头戴式可视设备的显示部进入亮屏状态和/或操作系统切换至工作模式。
10.一种头戴式可视设备的控制装置，所述头戴式可视设备包括显示部以及图像采集装置，所述图像采集装置的拍摄范围包括在所述头戴式可视设备被佩戴者穿戴时佩戴者的眼部范围，所述装置包括：
图像获取模块，用于：获取所述图像采集装置采集的图像；
人眼检测模块，用于：对所述图像进行人眼检测，以识别所述图像中的眼睛状态，所述眼睛状态包括：非睁眼状态或睁眼状态；
设备控制模块，用于：在依据至少一张图像的识别结果确定所述佩戴者的眼睛处于非睁眼状态的情况下，控制所述头戴式可视设备的显示部进入息屏状态和/或操作系统切换至低功耗模式。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910269922.5A CN110174936A (zh) | 2019-04-04 | 2019-04-04 | 头戴式可视设备的控制方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910269922.5A CN110174936A (zh) | 2019-04-04 | 2019-04-04 | 头戴式可视设备的控制方法、装置及设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110174936A true CN110174936A (zh) | 2019-08-27 |
Family
ID=67689410
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910269922.5A Pending CN110174936A (zh) | 2019-04-04 | 2019-04-04 | 头戴式可视设备的控制方法、装置及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110174936A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112019758B (zh) * | 2020-10-16 | 2021-01-08 | 湖南航天捷诚电子装备有限责任公司 | 一种机载双目头戴夜视装置使用方法与夜视装置 |
| CN113138659A (zh) * | 2020-01-16 | 2021-07-20 | 七鑫易维(深圳)科技有限公司 | 一种工作模式的控制方法、装置、设备及存储介质 |
| CN114661134A (zh) * | 2022-03-30 | 2022-06-24 | 青岛虚拟现实研究院有限公司 | Vr设备的低功耗控制方法 |
| WO2022206488A1 (zh) * | 2021-03-27 | 2022-10-06 | 华为技术有限公司 | 一种控制方法、相关设备及系统 |
| TWI802909B (zh) * | 2021-06-15 | 2023-05-21 | 兆豐國際商業銀行股份有限公司 | 金融交易系統及其操作方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150268473A1 (en) * | 2014-03-18 | 2015-09-24 | Seiko Epson Corporation | Head-mounted display device, control method for head-mounted display device, and computer program |
| CN105929926A (zh) * | 2016-04-08 | 2016-09-07 | 惠州Tcl移动通信有限公司 | Vr眼镜及其省电方法 |
| CN106125913A (zh) * | 2016-06-17 | 2016-11-16 | 深圳市金立通信设备有限公司 | 一种启动方法及vr眼镜 |
| CN109116991A (zh) * | 2018-08-30 | 2019-01-01 | Oppo广东移动通信有限公司 | 穿戴式设备的控制方法、装置、存储介质及穿戴式设备 |
| CN109240504A (zh) * | 2018-09-25 | 2019-01-18 | 北京旷视科技有限公司 | 控制方法、模型训练方法、装置及电子设备 |
-
2019
- 2019-04-04 CN CN201910269922.5A patent/CN110174936A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150268473A1 (en) * | 2014-03-18 | 2015-09-24 | Seiko Epson Corporation | Head-mounted display device, control method for head-mounted display device, and computer program |
| CN105929926A (zh) * | 2016-04-08 | 2016-09-07 | 惠州Tcl移动通信有限公司 | Vr眼镜及其省电方法 |
| CN106125913A (zh) * | 2016-06-17 | 2016-11-16 | 深圳市金立通信设备有限公司 | 一种启动方法及vr眼镜 |
| CN109116991A (zh) * | 2018-08-30 | 2019-01-01 | Oppo广东移动通信有限公司 | 穿戴式设备的控制方法、装置、存储介质及穿戴式设备 |
| CN109240504A (zh) * | 2018-09-25 | 2019-01-18 | 北京旷视科技有限公司 | 控制方法、模型训练方法、装置及电子设备 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113138659A (zh) * | 2020-01-16 | 2021-07-20 | 七鑫易维(深圳)科技有限公司 | 一种工作模式的控制方法、装置、设备及存储介质 |
| CN112019758B (zh) * | 2020-10-16 | 2021-01-08 | 湖南航天捷诚电子装备有限责任公司 | 一种机载双目头戴夜视装置使用方法与夜视装置 |
| WO2022206488A1 (zh) * | 2021-03-27 | 2022-10-06 | 华为技术有限公司 | 一种控制方法、相关设备及系统 |
| TWI802909B (zh) * | 2021-06-15 | 2023-05-21 | 兆豐國際商業銀行股份有限公司 | 金融交易系統及其操作方法 |
| CN114661134A (zh) * | 2022-03-30 | 2022-06-24 | 青岛虚拟现实研究院有限公司 | Vr设备的低功耗控制方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110174936A (zh) | 头戴式可视设备的控制方法、装置及设备 | |
| JP5456791B2 (ja) | 空間領域の映像に対する人の注視点を決定するためのシステム及びその方法 | |
| CN107341468B (zh) | 驾驶员状态识别方法、装置、存储介质及处理器 | |
| EP3750028B1 (en) | Devices, systems and methods for predicting gaze-related parameters | |
| CN104090659B (zh) | 基于人眼图像和视线追踪的操作指针指示控制设备 | |
| CN103501406B (zh) | 图像采集系统及图像采集方法 | |
| EP4011274A1 (en) | Eye tracking using eyeball center position | |
| WO2017223042A1 (en) | Image alignment systems and methods | |
| CN110187855A (zh) | 近眼显示设备的避免全息影像阻挡视线的智能调节方法 | |
| CN107690617A (zh) | 用于控制可穿戴计算设备的视力矫正的技术 | |
| CN106843491A (zh) | 带增强现实的智能设备及电子设备 | |
| EP3749172B1 (en) | Devices, systems and methods for predicting gaze-related parameters | |
| CN107077593A (zh) | 用于显示屏增强的系统和方法 | |
| US11428955B1 (en) | Personalized optics | |
| CN108897423A (zh) | 一种vr眼镜及其在线考试防作弊方法 | |
| CN109246463A (zh) | 用于显示弹幕的方法和装置 | |
| CN106406501A (zh) | 一种控制渲染的方法以及装置 | |
| CN109376621A (zh) | 一种样本数据生成方法、装置以及机器人 | |
| CN104656257A (zh) | 信息处理方法及电子设备 | |
| CN113467619B (zh) | 画面显示方法、装置和存储介质及电子设备 | |
| CN104535059A (zh) | 针对全盲人群的室内定位系统 | |
| CN110333779A (zh) | 控制方法、终端和存储介质 | |
| KR20110035585A (ko) | 눈 영상을 통해 판단한 사용자 상태에 반응하는 게임기 및 그의 게임 제공방법 | |
| CN108133573A (zh) | 疲劳驾驶报警系统 | |
| CN109725719A (zh) | 设备控制方法、装置及电子设备、存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20200929 Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands Applicant after: Innovative advanced technology Co.,Ltd. Address before: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands Applicant before: Advanced innovation technology Co.,Ltd. Effective date of registration: 20200929 Address after: Cayman Enterprise Centre, 27 Hospital Road, George Town, Grand Cayman Islands Applicant after: Advanced innovation technology Co.,Ltd. Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands Applicant before: Alibaba Group Holding Ltd. |
|
| TA01 | Transfer of patent application right | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190827 |
|
| RJ01 | Rejection of invention patent application after publication |