WO2018045669A1 - 一种电子设备界面的控制方法及电子设备 - Google Patents

一种电子设备界面的控制方法及电子设备 Download PDF

Info

Publication number
WO2018045669A1
WO2018045669A1 PCT/CN2016/111287 CN2016111287W WO2018045669A1 WO 2018045669 A1 WO2018045669 A1 WO 2018045669A1 CN 2016111287 W CN2016111287 W CN 2016111287W WO 2018045669 A1 WO2018045669 A1 WO 2018045669A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
sight
electronic device
line
information
Prior art date
Application number
PCT/CN2016/111287
Other languages
English (en)
French (fr)
Inventor
刘均
刘新
宋朝忠
欧阳张鹏
Original Assignee
深圳市元征科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 深圳市元征科技股份有限公司 filed Critical 深圳市元征科技股份有限公司
Publication of WO2018045669A1 publication Critical patent/WO2018045669A1/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer

Definitions

  • the present invention relates to the field of electronic device control, and in particular, to a method for controlling an interface of an electronic device and an electronic device.
  • the control mode for the interface of such products is basically touch type, and the user needs to touch the screen by the user to operate.
  • the user holds the thing with both hands or the operation of one hand is unstable, although the voice has been realized.
  • the control function, but the application of this function is also limited. For example, in public places, the surrounding environment is rather noisy, and the effect of the voice control function is not ideal, resulting in inconvenience to the user in such cases.
  • Embodiments of the present invention provide a method for controlling an interface of an electronic device and an electronic device, in order to provide a method for controlling an interface of an electronic device by using an eye when the user holds something with both hands or the operation of one hand is unstable.
  • a first aspect of the embodiments of the present invention provides a method for controlling an interface of an electronic device, including:
  • the acquiring, by the electronic device, the line of sight acquiring device, the user's line of sight includes: adopting a front end of the electronic device
  • the camera tracks the eyeball of the user, identifies the position and direction of the user's eyeball, and analyzes the projection point of the user's pupil focus on the current display interface of the electronic device according to the position and direction of the user's eyeball. Position, thereby obtaining the user's line of sight.
  • the acquiring, by the electronic device, the line of sight acquisition device, the user's line of sight includes: using an infrared camera, by using the user The pupil of the eye reflects the infrared light to obtain the user's line of sight.
  • the change track information of the user's line of sight includes at least one of the following:
  • control instruction includes at least one of the following:
  • a second aspect of the embodiments of the present invention provides an electronic device, including:
  • an obtaining unit configured to acquire a user's line of sight through a line of sight collection device of the electronic device
  • an analyzing unit configured to analyze the user's line of sight, and obtain a change track information of the user's line of sight
  • an instruction generating unit configured to generate a control instruction according to the changed trajectory information of the user's line of sight
  • an execution unit configured to control, according to the control instruction, a current display interface of the electronic device.
  • the acquiring unit further includes:
  • a tracking and identifying unit configured to chase the eyeball of the user by using a front camera of the electronic device Tracking, identifying the location and direction of the user's eyeball;
  • an analysis obtaining unit configured to analyze, according to the position and direction of the user's eyeball, a specific position projected by the projection point of the user's pupil on the current display interface of the electronic device, thereby acquiring the user's line of sight
  • the acquiring unit is specifically configured to: use an infrared camera to reflect infrared through a pupil of the user's eye. Light to obtain the user's line of sight.
  • the change track information of the user's line of sight includes at least one of the following:
  • control instruction includes at least one of the following:
  • a third aspect of the present invention provides an electronic device, including:
  • a processor configured to implement a connection between the processor, the display screen, the memory, and the user interface Communication
  • the processor may invoke a program stored in the memory through the communication bus to perform the method described in the first aspect.
  • the solution of the embodiment simplifies the operation method of the user on the electronic device.
  • the interface of the electronic device can be controlled by the eyes, which is convenient for the user to use.
  • the peers also enrich the operation mode of the electronic device, increase the user's interest in using the electronic device, and enhance the user experience.
  • FIG. 1 is a flowchart of a method for controlling an interface of an electronic device according to an embodiment of the present invention
  • FIG. 2A is a flowchart showing a scenario demonstration according to an embodiment of the present invention.
  • FIG. 2 is a schematic diagram of a scenario according to an embodiment of the present invention.
  • FIG. 3 is a schematic structural diagram of an electronic device according to an embodiment of the present invention.
  • FIG. 4 is a schematic structural diagram of an acquiring unit according to an embodiment of the present invention.
  • FIG. 5 is a schematic structural diagram of another electronic device according to an embodiment of the present invention.
  • Embodiments of the present invention provide a method for controlling an interface of an electronic device and an electronic device, and a method for controlling an interface of an electronic device by using an eye when the user holds something with one hand or is unstable in one hand.
  • FIG. 1 is a flow chart of a method for controlling an interface of an electronic device according to an embodiment of the present disclosure, which specifically includes:
  • Step S101 Acquire a user's line of sight through a line of sight collection device of the electronic device.
  • the electronic device mentioned in the embodiment of the present invention may be, for example, a mobile phone, a tablet computer, a palmtop computer, a smart watch or other mobile terminal.
  • the line-of-sight collecting device mentioned in the embodiment of the present invention may be, for example, a front camera or an infrared camera. , sensors, etc.
  • the front camera of the electronic device is used to track the eyeball of the user, the position and direction of the user's eyeball are recognized, and the user's pupil is analyzed according to the position and direction of the user's eyeball.
  • the focused projection point is at a specific position projected by the electronic device currently displaying the interface, thereby acquiring the user's line of sight.
  • an infrared camera and a front camera are used, and the infrared light emitted by the infrared camera hair reflected by the pupil of the user's eyes is collected by the front camera to obtain the user's line of sight.
  • Step S102 Perform analysis on the line of sight of the user to obtain change track information of the user's line of sight.
  • the change track information of the user's line of sight may include at least one of the following:
  • At least one blink information may include one blink information and two blink information; when the pause after one blink is greater than the diurnal threshold X ⁇ (the value of X may be, for example, ls, 1.5s. 2s), When the blinking action ends, the system saves the blinking information once; when the number of consecutive blinks is twice and the pause after the second blink is greater than the inter-turn threshold X ⁇ , it is judged that the blinking operation ends, and the system saves the blink information twice.
  • the user's line of sight is fixedly projected on the current display interface preset area to reach a preset inter-turn threshold Y ⁇ (the value of Y may be, for example, ls, 1.5s. 2s), and is determined to be a fixed projection.
  • the system saves fixed projection information.
  • Step S103 Generate a control instruction according to the change trajectory information of the user's line of sight.
  • the control instruction may include at least one of the following: left sliding, right sliding, sliding, sliding, zooming, screenshot, clicking, long pressing, dragging. It will be understood that the control instructions are not limited to the ones listed.
  • the user can preset a control instruction library on the electronic device according to his own usage habit, and different line of sight change tracks correspond to different control commands.
  • the corresponding control command can be called according to the change track information of the user's line of sight in the preset control command library.
  • the electronic device comes with a control instruction library, and the specific line of sight change track information corresponds to a specific Control instructions.
  • the user can call the corresponding control command with a specific line of sight change track information according to the instructions.
  • the obtained user's line of sight change trajectory information is right shift information and down shift information or left shift information and up shift information ⁇
  • a control instruction for reducing the interface is generated; wherein the right shift information and the down shift information can be obtained simultaneously;
  • the left shift information and the up shift information can be obtained simultaneously;
  • the user's line of sight change trajectory information is a fixed projection information ⁇ , and a long press control command is generated.
  • the fixed projection information refers to that the user's line of sight is fixedly projected on the current display interface preset area to reach a preset time threshold.
  • the mobile information may include: left shift information, right shift information, up shift information, and down shift information, and the generated drag and drop instruction includes a drag direction instruction corresponding to the direction information included in the mobile information.
  • the obtained user's line of sight change trajectory information is right shift information and down shift information or left shift information and up shift information ⁇
  • generate a control command for interface enlargement wherein right shift information and down shift information can be obtained simultaneously;
  • the left shift information and the up shift information can be obtained simultaneously.
  • Step S104 Control, according to the control instruction, a current display interface of the electronic device.
  • control command is a left slider
  • current display interface of the electronic device slides to the left
  • control command is a right slider
  • current display interface of the electronic device Slip to the right
  • control instruction is a screenshot
  • the current display interface of the electronic device is screenshotd, and the screenshot result is saved
  • the preset line of the user's line of sight fixedly projected on the current display interface is dragged; wherein the preset area may include a function icon.
  • the solution of the embodiment simplifies the operation method of the user on the electronic device.
  • the user can control the interface of the electronic device with eyes, which is convenient for the user to use.
  • the same also enriches the operation mode of the electronic device, increases the user's interest in using the electronic device, and enhances the user. Experience.
  • FIG. 2-a is a flowchart illustrating a scenario according to an embodiment of the present invention.
  • a schematic diagram of a scene provided by an embodiment of the present invention takes a mobile phone as an example.
  • 210 is the front camera of the mobile phone
  • 220 is the eyes of the user.
  • the process may include the following steps:
  • Step S201 The user presses the power button, the screen of the mobile phone is lit, and the current display interface displays “slide to unlock”
  • Figure 2-b shows the phone display interface before the user's eyes move
  • Step S202 the user eyes staring at any position of the mobile phone screen from left to right;
  • Step S203 The front camera of the mobile phone acquires a user's line of sight
  • Step S204 analyzing the line of sight of the user, and obtaining the change track information of the user's line of sight as the right shift information; [0101] Step S205, generating a right shift control command according to the obtained right shift information, and moving the screen of the mobile phone to the right, displaying "Please Enter the password "unlock interface”; as shown in Figure 2-b, the phone display interface after the user's eyes move.
  • the solution of the embodiment simplifies the user's operation method on the electronic device.
  • the user can control the interface of the electronic device with eyes, which is convenient for the user to use.
  • the same also enriches the operation mode of the electronic device, increases the user's interest in using the electronic device, and enhances the user. Experience.
  • the present invention further provides an electronic device, and a schematic structural diagram of an electronic device according to an embodiment of the present invention, as shown in FIG. 300 may include: an obtaining unit 310, an analyzing unit 320, an instruction generating unit 330, and an executing unit 340.
  • the acquiring unit 310 is configured to acquire a user's line of sight through a line of sight collection device of the electronic device.
  • the acquiring unit 310 includes: a tracking identifying unit 3110 and an analyzing obtaining unit 3120, where
  • the tracking and identifying unit 3110 is configured to track the eyeball of the user by using a front camera of the electronic device, and identify a position and a direction of the eyeball of the user;
  • the analysis obtaining unit 3120 is configured to analyze, according to the position and direction of the user's eyeball, a specific position projected by the projection point of the user's pupil focus on the current display interface of the electronic device, thereby acquiring the user's line of sight.
  • the acquiring unit is specifically configured to: use an infrared camera and a front camera to collect infrared light emitted by the infrared camera from the pupil of the user's eye through the front camera, thereby acquiring The user is in sight.
  • the analyzing unit 320 is configured to analyze the line of sight of the user to obtain a change trajectory f ⁇ of the user's line of sight.
  • the change track information of the user's line of sight may include at least one of the following: left shift information, right shift information, up shift information, down shift information, at least one blink information, fixed projection information; wherein the fixed projection
  • the information refers to that the user's line of sight is fixedly projected on the current display interface preset area to reach a preset time threshold. It can be understood that the change track information of the user's line of sight is not limited to the listed ones.
  • At least one blink information may include one blink information and two blink information; when the pause after one blink is greater than the diurnal threshold X ⁇ (the value of X may be, for example, ls, 1.5s. 2s), judging When the blinking action ends, the system saves the blinking information once; when the number of consecutive blinks is twice and the pause after the second blink is greater than the inter-turn threshold X ⁇ , it is judged that the blinking operation ends, and the system saves the blink information twice.
  • the user's line of sight is fixedly projected on the current display interface preset area to reach a preset time threshold Y ⁇ (the value of Y may be, for example, ls, 1.5s. 2s), and is determined to be a fixed projection.
  • the system saves fixed projection information.
  • the instruction generating unit 330 is configured to generate a control instruction according to the changed trajectory information of the user's line of sight.
  • the control instruction may include at least one of the following: left slide, right slide, slide up, slide down, zoom, screenshot, click, long press, drag and drop. It will be understood that the control instructions are not limited to the ones listed.
  • the user can preset a control instruction library on the electronic device according to his own usage habit, and different line of sight change tracks correspond to different control commands.
  • the corresponding control command can be called according to the change track information of the user's line of sight in the preset control command library.
  • the electronic device comes with a control instruction library, and the specific line of sight change track information corresponds to a specific control instruction.
  • the user can call the corresponding control command with a specific line of sight change track information according to the instructions.
  • the obtained user's line of sight change trajectory information is right shift information and down shift information or left shift information and up shift information ⁇
  • a control instruction for reducing the interface is generated; wherein the right shift information and the down shift information can be obtained simultaneously;
  • the left shift information and the up shift information can be obtained simultaneously;
  • the user's line of sight change trajectory information is a fixed projection information ⁇ , and a long press control command is generated.
  • the fixed projection information refers to that the user's line of sight is fixedly projected on the current display interface preset area to reach a preset time threshold.
  • the mobile information includes: left shift information, right shift information, up shift information, and down shift information
  • the generated drag command includes a drag direction command corresponding to the direction information included in the mobile information.
  • the obtained user's line of sight change trajectory information is right shift information and down shift information or left shift information and up shift information ⁇
  • a control command for interface enlargement is generated; wherein the right shift information and the down shift information can be obtained simultaneously;
  • the left shift information and the up shift information can be obtained simultaneously.
  • the executing unit 340 is configured to control, according to the control instruction, a current display interface of the electronic device
  • control instruction is a left slider
  • the current display interface of the electronic device slides to the left
  • control instruction is a screenshot
  • the current display interface of the electronic device is screenshotd, and the screenshot result is saved
  • the solution of the embodiment simplifies the user's operation method on the electronic device.
  • the user can control the interface of the electronic device with eyes, which is convenient for the user to use.
  • the same also enriches the operation mode of the electronic device, increases the user's interest in using the electronic device, and enhances the user. Experience.
  • FIG. 5 is a schematic structural diagram of another electronic device according to an embodiment of the present invention.
  • the electronic device 500 can include: at least one processor 510, such as a CPU, a user interface 530, a memory 540, at least one communication bus 520, and a display screen 550.
  • the communication bus 520 is used to implement connection communication between these components.
  • the user interface 530 can be a front camera.
  • the memory 540 may be a high speed RAM memory or a non-volatile memory such as at least one disk memory.
  • the memory 540 can optionally also be at least one storage system located remotely from the aforementioned processor 510.
  • a memory 540 as a computer storage medium It may include an operating system, a network communication module, a user interface module, and an interface control program.
  • the processor 510 can be used to call an interface control program stored in the memory 540 and perform the following operations:
  • the user interface 530 obtains the user's line of sight, and may include: tracking the eyeball of the user by using a front camera, identifying the position and direction of the eyeball of the user, and analyzing the position and direction of the eyeball of the user
  • the projection point of the user's pupil focus is at a specific position projected by the current display interface of the electronic device, thereby acquiring the user's line of sight.
  • the user interface 530 acquires the user's line of sight, and may further include: using an infrared camera to obtain the user's line of sight through the infrared light reflected by the pupil of the user's eye.
  • the change track information of the user's line of sight may include at least one of the following:
  • control instruction may include at least one of the following:
  • the solution of the embodiment simplifies the user's operation method on the electronic device.
  • the user can control the interface of the electronic device with eyes, which is convenient for the user to use.
  • the same also enriches the operation mode of the electronic device, increases the user's interest in using the electronic device, and enhances the user. Experience.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

一种电子设备界面的控制方法及电子设备。一种电子设备界面的控制方法包括：通过电子设备的视线采集装置获取用户视线(S101)；对所述用户视线进行分析，得到所述用户视线的变化轨迹信息(S102)；根据所述用户视线的变化轨迹信息生成控制指令(S103)；根据所述控制指令对所述电子设备当前显示界面进行控制(S104)。本方案便于用户在不方便用手操作电子设备的情况下，用眼睛实现对电子设备界面的控制，给用户的使用带来便利，同时也丰富了电子设备的操作方式，增加用户使用电子设备的趣味性，提升用户体验。

Description

发明名称：一种电子设备界面的控制方法及电子设备
[0001] 本发明要求 2016年 9月 8日递交的发明名称为 "一种电子设备界面的控制方法及 电子设备"的申请号 201610811405.2的在先申请优先权， 上述在先申请的内容以 引入的方式并入本文本中。
[0002] 技术领域
[0003] 本发明涉及电子设备控制领域， 特别涉及一种电子设备界面的控制方法及电 子设备。
[0004] 背景技术
[0005] 随着科技的迅猛发展， 电子设备在人们的生活中已经越来越普及， 例如智能手 机、 平板电脑、 智能手表等。 人们可以通过这类电子设备在日常生活中获取信 息， 例如査询交通信息、 天气信息、 娱乐设施信息、 新闻资讯等。 因此， 对于 这类产品的应用， 已经渗透到了人们生活中的方方面面。
[0006] 目前， 对于这类产品界面的控制方式基本上为触摸式， 需要用户用手触摸其屏 幕进行操作， 当用户双手拿着东西或者单手操作不稳的情况下， 虽然已经实现 了语音控制功能， 但这种功能的应用也受到了限制， 例如在公共场合， 周围环 境较为嘈杂吋， 语音控制功能的效果并不理想， 导致了用户在这类情况下对电 子设备的操作不便。
[0007] 发明内容
[0008] 本发明实施例提供了一种电子设备界面的控制方法及电子设备， 以期提供一种 当用户双手拿着东西或者单手操作不稳吋， 能用眼睛控制电子设备界面的方法
， 方便用户使用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备 的趣味性， 提升用户体验。
[0009] 本发明实施例第一方面提供了一种电子设备界面的控制方法， 包括：
[0010] 通过电子设备的视线采集装置获取用户视线；
[0011] 对所述用户视线进行分析， 得到所述用户视线的变化轨迹信息；
[0012] 根据所述用户视线的变化轨迹信息生成控制指令； [0013] 根据所述控制指令对所述电子设备当前显示界面进行控制。
[0014] 结合本发明实施例第一方面， 在本发明实施例第一方面的第一种实现方式中， 所述通过电子设备视线采集装置获取用户视线， 包括： 采用所述电子设备的前 置摄像头对所述用户的眼球进行追踪， 识别出所述用户眼球的位置及方向， 根 据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备 当前显示界面投射的具体位置， 从而获取所述用户视线。
[0015] 结合本发明实施例第一方面， 在本发明实施例第一方面的第二种实现方式中， 所述通过电子设备视线采集装置获取用户视线， 包括： 采用红外摄像头， 通过 所述用户眼睛的瞳孔反射的红外光来获取所述用户视线。
[0016] 结合本发明实施例第一方面或本发明实施例第一方面的第一种至第二种中的任 一种实现方式， 在本发明实施例第一方面的第三种实现方式中， 所述用户视线 的变化轨迹信息包括以下至少一种：
[0017] 左移信息、 右移信息、 上移信息、 下移信息、 至少一次眨眼信息、 固定投射信 息； 其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预 设区域的吋长达到预设吋间阈值。
[0018] 结合本发明实施例第一方面或本发明实施例第一方面的第一种至第三种中的任 一种实现方式， 在本发明实施例第一方面的第四种实现方式中， 所述控制指令 包括以下至少一种：
[0019] 左滑、 右滑、 上滑、 下滑、 缩放、 截图、 点击、 长按、 拖拽。
[0020] 本发明实施例第二方面提供了一种电子设备， 包括：
[0021] 获取单元， 用于通过电子设备的视线采集装置获取用户视线；
[0022] 分析单元， 用于对所述用户视线进行分析， 得到所述用户视线的变化轨迹信息
[0023] 指令生成单元， 用于根据所述用户视线的变化轨迹信息生成控制指令；
[0024] 执行单元， 用于根据所述控制指令对所述电子设备当前显示界面进行控制。
[0025] 结合本发明实施例第二方面， 在本发明实施例第二方面的第一种实现方式中， 所述获取单元还包括：
[0026] 追踪识别单元， 用于采用所述电子设备的前置摄像头对所述用户的眼球进行追 踪， 识别出所述用户眼球的位置及方向；
[0027] 分析获取单元， 用于根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的 投射点在所述电子设备当前显示界面投射的具体位置， 从而获取所述用户视线
[0028] 结合本发明实施例第二方面， 在本发明实施例第二方面的第二种实现方式中， 所述获取单元具体用于， 采用红外摄像头， 通过所述用户眼睛的瞳孔反射的红 外光来获取所述用户视线。
[0029] 结合本发明实施例第二方面或本发明实施例第二方面的第一种至第二种中的任 一种实现方式， 在本发明实施例第二方面的第三种实现方式中， 所述用户视线 的变化轨迹信息包括以下至少一种：
[0030] 左移信息、 右移信息、 上移信息、 下移信息、 至少一次眨眼信息、 固定投射信 息； 其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预 设区域的吋长达到预设吋间阈值。
[0031] 结合本发明实施例第二方面或本发明实施例第二方面的第一种至第三种中的任 一种实现方式， 在本发明实施例第二方面的第四种实现方式中， 所述控制指令 包括以下至少一种：
[0032] 左滑、 右滑、 上滑、 下滑、 缩放、 截图、 点击、 长按、 拖拽。
[0033] 本发明第三方面提供了一种电子设备， 包括：
[0034] 处理器、 显示屏、 存储器、 用户接口和通信总线， 其中， 所述通信总线用于实 现所述处理器、 所述显示屏、 所述存储器和所述用户接口两两之间的连接通信
[0035] 所述存储器中存储有程序；
[0036] 所述处理器可通过所述通信总线， 调用所述存储器中存储的程序以执行第一方 面所描述的方法。
[0037] 可以看出， 本实施例的方案简化了用户对电子设备的操作方法， 当用户双手拿 着东西或者单手操作不稳吋， 能用眼睛对电子设备界面进行控制， 方便用户使 用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备的趣味性， 提 升用户体验。 [0038] 附图说明
[0039] 为了更清楚地说明本发明实施例中的技术方案， 下面将对实施例中所需使用的 附图作简单地介绍， 显而易见地， 下面描述中的附图仅仅是本发明的一些实施 例， 对于本领域普通技术人员来讲， 在不付出创造性劳动的前提下， 还可以根 据这些附图获得其他的附图。
[0040] 图 1为本发明实施例提供的一种电子设备界面的控制方法流程图；
[0041] 图 2-a为本发明实施例提供一种场景演示流程图；
[0042] 图 2-b为本发明实施例提供的一种场景示意效果图；
[0043] 图 3为本发明实施例提供的一种电子设备结构示意图；
[0044] 图 4为本发明实施例提供的一种获取单元的结构示意图；
[0045] 图 5为本发明实施例提供的另一种电子设备结构示意图。
[0046] 具体实施方式
[0047] 本发明实施例提供了一种电子设备界面的控制方法及电子设备， 以期提供一种 当用户双手拿着东西或者单手操作不稳吋， 能用眼睛控制电子设备界面的方法
， 方便用户使用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备 的趣味性， 提升用户体验。
[0048] 本发明说明书、 权利要求书和附图中出现的术语"包括"和"具有"以及它们任何 变形， 意图在于覆盖不排他的包含。 例如包含了一系列步骤或单元的过程、 方 法、 系统、 产品或设备没有限定于已列出的步骤或单元， 而是可选地还包括没 有列出的步骤或单元， 或可选地还包括对于这些过程、 方法、 产品或设备固有 的其它步骤或单元。
[0049] 下面首先结合相关附图来举例介绍下本申请实施例方案可能用到的流程图。
[0050] 具体参见图 1所示， 图 1为本发明实施例提供的一种电子设备界面的控制方法流 程图， 具体包括：
[0051] 步骤 S101、 通过电子设备的视线采集装置获取用户视线。
[0052] 其中， 本发明实施例中提及的电子设备例如可为手机、 平板电脑、 掌上电脑、 智能手表或其它移动终端。
[0053] 其中， 本发明实施例中提及的视线采集装置例如可为前置摄像头、 红外摄像头 、 传感器等。
[0054] 可选的， 采用所述电子设备的前置摄像头对所述用户的眼球进行追踪， 识别出 所述用户眼球的位置及方向， 根据所述用户眼球的位置及方向分析所述用户瞳 孔聚焦的投射点在所述电子设备当前显示界面投射的具体位置， 从而获取所述 用户视线。
[0055] 可选的， 采用红外摄像头和前置摄像头， 通过前置摄像头来搜集所述用户眼睛 的瞳孔反射的由红外摄像头发出的红外光， 从而获取所述用户视线。
[0056] 步骤 S102、 对所述用户视线进行分析， 得到所述用户视线的变化轨迹信息。
[0057] 其中， 所述用户视线的变化轨迹信息可以包括以下至少一种：
[0058] 左移信息、 右移信息、 上移信息、 下移信息、 至少一次眨眼信息、 固定投射信 息； 其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预 设区域的吋长达到预设吋间阈值。 可以理解， 所述用户视线变化轨迹信息不限 定于已列出的这几种。
[0059] 其中， 至少一次眨眼信息可以包括一次眨眼信息和两次眨眼信息； 当一次眨眼 之后的停顿吋间大于吋间阈值 X吋 （X的值例如可为 ls、 1.5s. 2s) ， 判断眨眼动 作结束， 系统保存一次眨眼信息； 当连续眨眼次数为两次且第二次眨眼之后的 停顿吋间大于吋间阈值 X吋， 判断眨眼动作结束， 系统保存两次眨眼信息。
[0060] 其中， 所述用户视线固定投射在所述当前显示界面预设区域的吋长达到预设吋 间阈值 Y吋 (Y的值例如可为 ls、 1.5s. 2s), 判断为固定投射动作， 系统保存固定 投射信息。
[0061] 步骤 S103、 根据所述用户视线的变化轨迹信息生成控制指令。
[0062] 其中， 所述控制指令可以包括以下至少一种： 左滑、 右滑、 上滑、 下滑、 缩放 、 截图、 点击、 长按、 拖拽。 可以理解， 所述控制指令不限定于已列出的这几 种。
[0063] 优选的， 用户可以根据自己的使用习惯， 在电子设备上预设控制指令库， 不同 的视线变化轨迹对应于不同的控制指令。 当用户视线发生变化吋， 可以在预设 的控制指令库内， 根据用户视线的变化轨迹信息， 调用相应的控制指令。
[0064] 可选的， 电子设备自带一个控制指令库， 特定的视线变化轨迹信息对应于特定 的控制指令。 用户可以根据说明， 用特定的视线变化轨迹信息， 来调用相应的 控制指令。
[0065] 例如， 当得到的用户视线变化轨迹信息为左移信息吋， 生成界面左滑的控制指 令；
[0066] 当得到的用户视线变化轨迹信息为右移信息吋， 生成界面右滑的控制指令； [0067] 当得到的用户视线变化轨迹信息为上移信息吋， 生成界面上滑的控制指令； [0068] 当得到的用户视线变化轨迹信息为下移信息吋， 生成界面下滑的控制指令； [0069] 当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信 息吋， 生成界面放大的指令； 其中， 右移信息和上移信息可以同吋得到； 左移 信息和下移信息可以同吋得到；
[0070] 当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信 息吋， 生成界面缩小的控制指令； 其中， 右移信息和下移信息可以同吋得到； 左移信息和上移信息可以同吋得到；
[0071] 当得到的用户视线变化轨迹信息为一次眨眼信息吋， 生成点击控制指令； [0072] 当得到的用户视线变化轨迹信息为两次眨眼信息吋， 生成截图控制指令； [0073] 当得到的用户视线变化轨迹信息为固定投射信息吋， 生成长按控制指令； 其中 所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的 吋长达到预设吋间阈值；
[0074] 当得到的用户视线变化轨迹信息为固定投射信息和移动信息吋， 生成拖拽指令
； 其中移动信息可以包括： 左移信息、 右移信息、 上移信息、 下移信息， 生成 的拖拽指令包含的拖拽方向指令与移动信息包含的方向信息相对应。
[0075] 以上根据用户视线变化轨迹信息产生的相应的控制指令为优选方案， 但是不限 定于此方案， 也可以有其它的方案。
[0076] 又例如， 当得到的用户视线变化轨迹信息为左移信息吋， 生成界面右滑的控制 指令；
[0077] 当得到的用户视线变化轨迹信息为右移信息吋， 生成界面左滑的控制指令； [0078] 当得到的用户视线变化轨迹信息为上移信息吋， 生成界面下滑的控制指令； [0079] 当得到的用户视线变化轨迹信息为下移信息吋， 生成界面上滑的控制指令； [0080] 当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信 息吋， 生成界面缩小的指令； 其中， 右移信息和上移信息可以同吋得到； 左移 信息和下移信息可以同吋得到；
[0081] 当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信 息吋， 生成界面放大的控制指令； 其中， 右移信息和下移信息可以同吋得到； 左移信息和上移信息可以同吋得到。
[0082] 步骤 S104、 根据所述控制指令对所述电子设备当前显示界面进行控制。
[0083] 可选的， 当所述控制指令为左滑吋， 所述电子设备的当前显示界面往左滑； [0084] 当所述控制指令为右滑吋， 所述电子设备的当前显示界面往右滑；
[0085] 当所述控制指令为上滑吋， 所述电子设备的当前显示界面往上滑；
[0086] 当所述控制指令为下滑吋， 所述电子设备的当前显示界面往下滑；
[0087] 当所述控制指令为放大吋， 所述电子设备的当前显示界面被放大；
[0088] 当所述控制指令为缩小吋， 所述电子设备的当前显示界面被缩小；
[0089] 当所述控制指令为点击吋， 所述用户视线固定投射在所述当前显示界面的预设 区域被点击；
[0090] 当所述控制指令为截图吋， 所述电子设备的当前显示界面被截图， 并保存截图 结果；
[0091] 当所述控制指令为长按吋， 所述用户视线固定投射在所述当前显示界面的预设 区域被长按；
[0092] 当所述控制指令为拖拽吋， 所述用户视线固定投射在所述当前显示界面的预设 区域被拖拽； 其中， 此预设区域内可包含功能图标。
[0093] 可以看出， 本实施例的方案简化了用户对电子设备的操作方法。 当用户双手拿 着东西或者单手操作不稳吋， 能用眼睛对电子设备界面进行控制， 方便用户使 用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备的趣味性， 提 升用户体验。
[0094] 为了更好地理解和实施本发明实施例的上述方法以及使用效果， 下面结合具体 的应用场景来进行举例说明。
[0095] 请参见图 2-a和图 2-b， 图 2-a为本发明实施例提供一种场景演示流程图； 图 2-b为 本发明实施例提供的一种场景示意效果图， 以手机为例。 其中， 210为手机的前 置摄像头， 220为用户的眼睛。
[0096] 其中， 如图 2-a所示， 当用户需要手机显示解锁界面吋， 该过程可以包括以下 步骤：
[0097] 步骤 S201、 用户按下电源键， 手机屏幕点亮， 当前显示界面显示"滑动来解锁"
； 如图 2-b用户眼睛移动之前的手机显示界面所示；
[0098] 步骤 S202、 用户眼睛盯着手机屏幕任一位置从左往右看；
[0099] 步骤 S203、 手机的前置摄像头获取用户视线；
[0100] 步骤 S204、 对用户视线进行分析， 得到用户视线的变化轨迹信息为右移信息； [0101] 步骤 S205、 根据得到的右移信息生成右移控制指令， 手机屏幕右移， 显示"请 输入密码"的解锁界面； 如图 2-b用户眼睛移动之后的手机显示界面所示。
[0102] 可以看出， 本实施例的方案简化了用户对电子设备的操作方法。 当用户双手拿 着东西或者单手操作不稳吋， 能用眼睛对电子设备界面进行控制， 方便用户使 用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备的趣味性， 提 升用户体验。
[0103] 为了更好地实施本发明实施例的上述方案， 本发明还对应提供了一种电子设备 ， 如图 3示出的本发明的一个实施例提供的一种电子设备结构示意图， 电子设备 300可以包括： 获取单元 310、 分析单元 320、 指令生成单元 330和执行单元 340。
[0104] 其中， 获取单元 310， 用于通过电子设备的视线采集装置获取用户视线。
[0105] 具体地， 如图 4示出的本发明实施例提供的一种获取单元的结构示意图， 获取 单元 310包括： 追踪识别单元 3110和分析获取单元 3120， 其中，
[0106] 追踪识别单元 3110， 用于采用所述电子设备的前置摄像头对所述用户的眼球进 行追踪， 识别出所述用户眼球的位置及方向；
[0107] 分析获取单元 3120， 用于根据所述用户眼球的位置及方向分析所述用户瞳孔聚 焦的投射点在所述电子设备当前显示界面投射的具体位置， 从而获取所述用户 视线。
[0108] 可选的， 所述获取单元具体用于， 采用红外摄像头和前置摄像头， 通过前置摄 像头来搜集所述用户眼睛的瞳孔反射的由红外摄像头发出的红外光， 从而获取 所述用户视线。
[0109] 分析单元 320， 用于对所述用户视线进行分析， 得到所述用户视线的变化轨迹 f π息。
[0110] 其中， 所述用户视线的变化轨迹信息可以包括以下至少一种： 左移信息、 右移 信息、 上移信息、 下移信息、 至少一次眨眼信息、 固定投射信息； 其中所述固 定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的吋长达 到预设吋间阈值。 可以理解， 所述用户视线的变化轨迹信息不限定于已列出的 这几种。
[0111] 其中， 至少一次眨眼信息可以包括一次眨眼信息和两次眨眼信息； 当一次眨眼 之后的停顿吋间大于吋间阈值 X吋 （X的值例如可为 ls、 1.5s . 2s) ， 判断眨眼动 作结束， 系统保存一次眨眼信息； 当连续眨眼次数为两次且第二次眨眼之后的 停顿吋间大于吋间阈值 X吋， 判断眨眼动作结束， 系统保存两次眨眼信息。
[0112] 其中， 所述用户视线固定投射在所述当前显示界面预设区域的吋长达到预设吋 间阈值 Y吋 (Y的值例如可为 ls、 1.5s. 2s) , 判断为固定投射动作， 系统保存固定 投射信息。
[0113] 指令生成单元 330， 用于根据所述用户视线的变化轨迹信息生成控制指令。
[0114] 其中， 所述控制指令可以包括以下至少一种： 左滑、 右滑、 上滑、 下滑、 缩放 、 截图、 点击、 长按、 拖拽。 可以理解， 所述控制指令不限定于已列出的这几 种。
[0115] 优选的， 用户可以根据自己的使用习惯， 在电子设备上预设控制指令库， 不同 的视线变化轨迹对应于不同的控制指令。 当用户视线发生变化吋， 可以在预设 的控制指令库内， 根据用户视线的变化轨迹信息， 调用相应的控制指令。
[0116] 可选的， 电子设备自带一个控制指令库， 特定的视线变化轨迹信息对应于特定 的控制指令。 用户可以根据说明， 用特定的视线变化轨迹信息， 来调用相应的 控制指令。
[0117] 例如， 当得到的用户视线变化轨迹信息为左移信息吋， 生成界面左滑的控制指 令；
[0118] 当得到的用户视线变化轨迹信息为右移信息吋， 生成界面右滑的控制指令； [0119] 当得到的用户视线变化轨迹信息为上移信息吋， 生成界面上滑的控制指令； [0120] 当得到的用户视线变化轨迹信息为下移信息吋， 生成界面下滑的控制指令； [0121] 当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信 息吋， 生成界面放大的指令； 其中， 右移信息和上移信息可以同吋得到； 左移 信息和下移信息可以同吋得到；
[0122] 当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信 息吋， 生成界面缩小的控制指令； 其中， 右移信息和下移信息可以同吋得到； 左移信息和上移信息可以同吋得到；
[0123] 当得到的用户视线变化轨迹信息为一次眨眼信息吋， 生成点击控制指令； [0124] 当得到的用户视线变化轨迹信息为两次眨眼信息吋， 生成截图控制指令； [0125] 当得到的用户视线变化轨迹信息为固定投射信息吋， 生成长按控制指令； 其中 所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的 吋长达到预设吋间阈值；
[0126] 当得到用的户视线变化轨迹信息为固定投射信息和移动信息吋， 生成拖拽指令
； 其中移动信息包括： 左移信息、 右移信息、 上移信息、 下移信息， 生成的拖 拽指令包含的拖拽方向指令与移动信息包含的方向信息相对应。
[0127] 以上根据用户视线变化轨迹信息产生的相应的控制指令为优选方案， 但是不限 定于此方案， 也可以有其它的方案。
[0128] 又例如， 当得到的用户视线变化轨迹信息为当得到的用户视线变化轨迹信息为 左移信息吋， 生成界面右滑的控制指令；
[0129] 当得到的用户视线变化轨迹信息为右移信息吋， 生成界面左滑的控制指令； [0130] 当得到的用户视线变化轨迹信息为上移信息吋， 生成界面下滑的控制指令； [0131] 当得到的用户视线变化轨迹信息为下移信息吋， 生成界面上滑的控制指令； [0132] 当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信 息吋， 生成界面缩小的指令； 其中， 右移信息和上移信息可以同吋得到； 左移 信息和下移信息可以同吋得到；
[0133] 当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信 息吋， 生成界面放大的控制指令； 其中， 右移信息和下移信息可以同吋得到； 左移信息和上移信息可以同吋得到。
执行单元 340， 用于根据所述控制指令对所述电子设备当前显示界面进行控制
[0135] 可选的， 当所述控制指令为左滑吋， 所述电子设备的当前显示界面往左滑；
[0136] 当所述控制指令为右滑吋， 所述电子设备的当前显示界面往右滑；
[0137] 当所述控制指令为上滑吋， 所述电子设备的当前显示界面往上滑；
[0138] 当所述控制指令为下滑吋， 所述电子设备的当前显示界面往下滑；
[0139] 当所述控制指令为放大吋， 所述电子设备的当前显示界面被放大；
[0140] 当所述控制指令为缩小吋， 所述电子设备的当前显示界面被缩小；
[0141] 当所述控制指令为截图吋， 所述电子设备的当前显示界面被截图， 并保存截图 结果；
[0142] 当所述控制指令为点击吋， 所述用户视线固定投射在所述当前显示界面的预设 区域被点击；
[0143] 当所述控制指令为长按吋， 所述用户视线固定投射在所述当前显示界面的预设 区域被长按；
[0144] 当所述控制指令为拖拽吋， 所述用户视线固定投射在所述当前显示界面的预设 区域被拖拽； 其中， 此预设区域内可包含功能图标。
[0145] 可以看出， 本实施例的方案简化了用户对电子设备的操作方法。 当用户双手拿 着东西或者单手操作不稳吋， 能用眼睛对电子设备界面进行控制， 方便用户使 用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备的趣味性， 提 升用户体验。
[0146] 请参阅图 5， 图 5是本发明实施例提供的另一种电子设备结构示意图。 其中， 如 图 5所示， 电子设备 500可以包括： 至少一个处理器 510， 例如 CPU , 用户接口 530 ， 存储器 540， 至少一个通信总线 520以及显示屏 550。 其中， 通信总线 520用于 实现这些组件之间的连接通信。 其中， 用户接口 530可以是前置摄像头。 存储器 540可以是高速 RAM存储器， 也可以是非不稳定的存储器 （non- volatile memory ) ， 例如至少一个磁盘存储器。 存储器 540可选的还可以是至少一个位于远离前 述处理器 510的存储系统。 如图 5所示， 作为一种计算机存储介质的存储器 540中 可以包括操作系统、 网络通信模块、 用户接口模块以及界面控制程序。
[0147] 在图 5所示的电子设备 500中， 处理器 510可以用于调用存储器 540中存储的界面 控制程序， 并执行以下操作：
[0148] 通过用户接口 530获取用户视线；
[0149] 对所述用户视线进行分析， 得到所述用户视线的变化轨迹信息；
[0150] 根据所述用户视线的变化轨迹信息生成控制指令；
[0151] 根据所述控制指令对所述电子设备当前显示界面进行控制， 通过显示屏 550显 示出来。
[0152] 具体地， 用户接口 530获取用户视线， 可以包括： 采用前置摄像头对所述用户 的眼球进行追踪， 识别出所述用户眼球的位置及方向， 根据所述用户眼球的位 置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的 具体位置， 从而获取所述用户视线。
[0153] 用户接口 530获取用户视线， 还可以包括： 采用红外摄像头， 通过所述用户眼 睛的瞳孔反射的红外光来获取所述用户视线。
[0154] 具体的， 所述用户视线的变化轨迹信息可以包括以下至少一种：
[0155] 左移信息、 右移信息、 上移信息、 下移信息、 至少一次眨眼信息、 固定投射信 息； 其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预 设区域的吋长达到预设吋间阈值。 可以理解， 所述用户视线变化轨迹信息不限 定于已列出的这几种。
[0156] 具体的， 所述控制指令可以包括以下至少一种：
[0157] 左滑、 右滑、 上滑、 下滑、 缩放、 截图、 点击、 长按、 拖拽。 可以理解， 所述 控制指令不限定于已列出的这几种。
[0158] 可以看出， 本实施例的方案简化了用户对电子设备的操作方法。 当用户双手拿 着东西或者单手操作不稳吋， 能用眼睛对电子设备界面进行控制， 方便用户使 用， 同吋也丰富了电子设备的操作方式， 增加用户使用电子设备的趣味性， 提 升用户体验。
[0159] 以上对本发明实施例所提供的一种电子设备界面的控制方法及电子设备进行了 详细的介绍， 本文中应用了具体个例对本发明的具体实施步骤进行了详细的阐 述， 以上实施例的说明只是用于帮助理解本发明的方法及其核心思想； 同吋， 对于本领域的一般技术人员， 依据本发明的思想， 在具体实施方式及应用范围 上均会有改变之处， 综上所述， 本说明书内容不应理解为对本发明的限制。 技术问题
问题的解决方案
发明的有益效果

Claims

权利要求书
[权利要求 1] 一种电子设备界面的控制方法， 其特征在于， 包括：
通过电子设备的视线采集装置获取用户视线；
对所述用户视线进行分析， 得到所述用户视线的变化轨迹信息; 根据所述用户视线的变化轨迹信息生成控制指令； 根据所述控制指令对所述电子设备当前显示界面进行控制。
[权利要求 2] 如权利要求 1所述的方法， 其特征在于， 所述通过电子设备视线采集 装置获取用户视线， 包括：
采用所述电子设备的前置摄像头对所述用户的眼球进行追踪， 识别出 所述用户眼球的位置及方向， 根据所述用户眼球的位置及方向分析所 述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具体位 置， 从而获取所述用户视线。
[权利要求 3] 如权利要求 1所述的方法， 其特征在于， 所述通过电子设备视线采集 装置获取用户视线， 包括：
采用红外摄像头， 通过所述用户眼睛的瞳孔反射的红外光来获取所述 用户视线。
[权利要求 4] 如权利要求 1-3任一项所述的方法， 其特征在于， 所述用户视线的变 化轨迹信息包括以下至少一种：
左移信息、 右移信息、 上移信息、 下移信息、 至少一次眨眼信息、 固 定投射信息； 其中所述固定投射信息是指所述用户视线固定投射在所 述当前显示界面预设区域的吋长达到预设吋间阈值。
[权利要求 5] 如权利要求 1-4任一项所述的方法， 其特征在于， 所述控制指令包括 以下至少一种：
左滑、 右滑、 上滑、 下滑、 缩放、 截图、 点击、 长按、 拖拽。
[权利要求 6] —种电子设备， 其特征在于， 包括：
获取单元， 用于通过电子设备的视线采集装置获取用户视线； 分析单元， 用于对所述用户视线进行分析， 得到所述用户视线的变化 轨迹信息；
指令生成单元， 用于根据所述用户视线的变化轨迹信息生成控制指令 执行单元， 用于根据所述控制指令对所述电子设备当前显示界面进行 控制。
[权利要求 7] 如权利要求 6所述的电子设备， 其特征在于， 所述获取单元还包括： 追踪识别单元， 用于采用所述电子设备的前置摄像头对所述用户的眼 球进行追踪， 识别出所述用户眼球的位置及方向； 分析获取单元， 用于根据所述用户眼球的位置及方向分析所述用户瞳 孔聚焦的投射点在所述电子设备当前显示界面投射的具体位置， 从而 获取所述用户视线。
[权利要求 8] 如权利要求 6所述的电子设备， 其特征在于， 所述获取单元具体用于
， 采用红外摄像头， 通过所述用户眼睛的瞳孔反射的红外光来获取所 述用户视线。
[权利要求 9] 如权利要求 6-8任一项所述的电子设备， 其特征在于， 所述用户视线 的变化轨迹信息包括以下至少一种：
左移信息、 右移信息、 上移信息、 下移信息、 至少一次眨眼信息、 固 定投射信息； 其中所述固定投射信息是指所述用户视线固定投射在所 述当前显示界面预设区域的吋长达到预设吋间阈值。
[权利要求 10] 如权利要求 6-9任一项所述的电子设备， 所述控制指令包括以下至少 一种：
左滑、 右滑、 上滑、 下滑、 缩放、 截图、 点击、 长按、 拖拽。 [权利要求 11] 一种电子设备， 其特征在于， 包括：
处理器、 显示屏、 存储器、 用户接口和通信总线， 其中， 所述通信总 线用于实现所述处理器、 所述显示屏、 所述存储器和所述用户接口两 两之间的连接通信；
所述存储器中存储有程序；
所述处理器可通过所述通信总线， 调用所述存储器中存储的程序以执 行如权利要求 1-5任一项所描述的方法。
PCT/CN2016/111287 2016-09-08 2016-12-21 一种电子设备界面的控制方法及电子设备 WO2018045669A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201610811405.2A CN106502378A (zh) 2016-09-08 2016-09-08 一种电子设备界面的控制方法及电子设备
CN201610811405.2 2016-09-08

Publications (1)

Publication Number Publication Date
WO2018045669A1 true WO2018045669A1 (zh) 2018-03-15

Family

ID=58291363

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/111287 WO2018045669A1 (zh) 2016-09-08 2016-12-21 一种电子设备界面的控制方法及电子设备

Country Status (2)

Country Link
CN (1) CN106502378A (zh)
WO (1) WO2018045669A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107492339A (zh) * 2017-06-30 2017-12-19 柳州贵族酒业有限公司 一种瞳孔控制led显示玻璃幕墙
CN107596690B (zh) * 2017-10-10 2020-12-08 网易（杭州）网络有限公司 界面显示方法及终端设备
CN110069960A (zh) * 2018-01-22 2019-07-30 北京亮亮视野科技有限公司 基于视线运动轨迹的拍摄控制方法、系统及智能眼镜
CN109462694A (zh) * 2018-11-19 2019-03-12 维沃移动通信有限公司 一种语音助手的控制方法及移动终端
CN109739344B (zh) * 2018-11-20 2021-12-14 平安科技（深圳）有限公司 基于眼球运动轨迹的解锁方法、装置、设备和存储介质
CN109828812B (zh) * 2018-12-29 2022-06-17 维沃移动通信有限公司 截图方法、装置及终端设备
CN111045516A (zh) * 2019-12-05 2020-04-21 珠海格力电器股份有限公司 终端的操作方法、装置、终端及存储介质
CN112967796A (zh) * 2019-12-13 2021-06-15 深圳迈瑞生物医疗电子股份有限公司 体外诊断设备的非接触式控制方法、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308400A (zh) * 2007-05-18 2008-11-19 肖斌 基于眼动和头动检测的新型人机交互装置
CN104023127A (zh) * 2014-05-16 2014-09-03 深圳市中兴移动通信有限公司 一种短信息处理的方法及装置
CN104360751A (zh) * 2014-12-05 2015-02-18 三星电子（中国）研发中心 一种实现智能控制的方法和设备
CN104536654A (zh) * 2014-12-25 2015-04-22 小米科技有限责任公司 智能穿戴设备上的菜单选取方法、装置及智能穿戴设备
CN105892642A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术（北京）有限公司 一种根据眼部动作对终端进行控制的方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8235529B1 (en) * 2011-11-30 2012-08-07 Google Inc. Unlocking a screen using eye tracking information
CN104461014A (zh) * 2014-12-26 2015-03-25 小米科技有限责任公司 屏幕解锁方法及装置
CN105320261A (zh) * 2015-01-07 2016-02-10 维沃移动通信有限公司 移动终端的控制方法及移动终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308400A (zh) * 2007-05-18 2008-11-19 肖斌 基于眼动和头动检测的新型人机交互装置
CN104023127A (zh) * 2014-05-16 2014-09-03 深圳市中兴移动通信有限公司 一种短信息处理的方法及装置
CN104360751A (zh) * 2014-12-05 2015-02-18 三星电子（中国）研发中心 一种实现智能控制的方法和设备
CN104536654A (zh) * 2014-12-25 2015-04-22 小米科技有限责任公司 智能穿戴设备上的菜单选取方法、装置及智能穿戴设备
CN105892642A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术（北京）有限公司 一种根据眼部动作对终端进行控制的方法及装置

Also Published As

Publication number Publication date
CN106502378A (zh) 2017-03-15

Similar Documents

Publication Publication Date Title
WO2018045669A1 (zh) 一种电子设备界面的控制方法及电子设备
US11816303B2 (en) Device, method, and graphical user interface for navigating media content
US10416789B2 (en) Automatic selection of a wireless connectivity protocol for an input device
US11967039B2 (en) Automatic cropping of video content
AU2017100683B4 (en) User interface for camera effects
KR102085181B1 (ko) 데이터 전송 방법, 데이터 수신 방법, 및 디바이스
EP3576014A1 (en) Fingerprint recognition method, electronic device, and storage medium
CN108538291A (zh) 语音控制方法、终端设备、云端服务器及系统
WO2017166621A1 (zh) 一种分屏显示方法、装置和电子设备
WO2016045579A1 (zh) 一种应用程序交互控制方法、装置及终端
WO2016169343A1 (zh) 一种基于可穿戴设备的触摸操作响应方法和装置
CN105980971B (zh) 多任务和全屏幕菜单环境
US11281313B2 (en) Mobile device comprising stylus pen and operation method therefor
CN110825302A (zh) 一种响应操作轨迹的方法以及操作轨迹响应装置
US11588969B2 (en) Devices, methods, and graphical user interfaces for assisted photo-taking
US10474324B2 (en) Uninterruptable overlay on a display
CN104090721A (zh) 终端控制方法和装置
US20180267624A1 (en) Systems and methods for spotlight effect manipulation
CN107688385A (zh) 一种控制方法及装置
CN114489331A (zh) 区别于按钮点击的隔空手势交互方法、装置、设备和介质
CN108073291A (zh) 一种输入方法和装置、一种用于输入的装置
US10606920B2 (en) Eye control of a text stream
CN110134305A (zh) 一种语速调节方法、装置和用于语速调节的装置
US20240045572A1 (en) Device, method, and graphical user interface for navigating media content
CN111433730A (zh) 一种基于智能终端的歌曲试听方法及歌曲试听系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16915603

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16915603

Country of ref document: EP

Kind code of ref document: A1