CN102207822A - 一种人机交互的方法及装置 - Google Patents

一种人机交互的方法及装置 Download PDF

Info

Publication number
CN102207822A
CN102207822A CN2011101142862A CN201110114286A CN102207822A CN 102207822 A CN102207822 A CN 102207822A CN 2011101142862 A CN2011101142862 A CN 2011101142862A CN 201110114286 A CN201110114286 A CN 201110114286A CN 102207822 A CN102207822 A CN 102207822A
Authority
CN
China
Prior art keywords
human eye
display screen
terminal display
parameter
respect
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011101142862A
Other languages
English (en)
Inventor
蔡畅
王德锁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN2011101142862A priority Critical patent/CN102207822A/zh
Priority to PCT/CN2011/078867 priority patent/WO2012149713A1/zh
Publication of CN102207822A publication Critical patent/CN102207822A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开一种人机交互的方法及装置，该方法包括获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者，根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整。本发明通过以上技术方案，解决在视效上实现人机交互的技术问题。

Description

一种人机交互的方法及装置
技术领域
本发明涉及电子技术领域，尤其涉及一种人机交互的方法及装置。
背景技术
随着电子技术的发展，电子终端设备从黑白屏幕到彩色液晶屏幕，再到3D屏幕，用户对显示屏画面的追求越来越高，人机交互的设计越来越受到关注。
在现有的人机交互方案中，比如触摸技术、声控技术、摄像头手势等，虽然在一定程度上达到了可用性、易用性、情趣性、安全性等效果，但是其采用的都是简单的功能替代技术，即通过触摸方式、声控方式、摄像头手势等方式替代以往的按键方式。所以，在人机交互领域，技术人员都倾向于功能替代方案的设计，而在视效上未能实现人机交互。
发明内容
本发明提供一种人机交互的方法及装置，解决在视效上实现人机交互的技术问题。
为解决上述技术问题，本发明采用以下技术方案：
一种人机交互的方法，包括：
获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者；
根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整。
获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者的方法具体为：
通过摄像头获取终端显示屏前方的图片；
判断所述图片中是否有人眼；
如果有，则从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者。
从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者的方法具体为：
从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值；
根据预设的人眼特征参数和人眼相对于终端显示屏的位置参数与其映射值的映射关系，由从所述图片中获取的人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值得到相对应的人眼特征参数和/或人眼相对于终端显示屏的位置参数。
根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整的方法包括：根据当前时刻的所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数直接对终端显示屏的显示图像进行预设调整。
根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整的方法包括：根据当前时刻与前一时刻的所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数的变化对终端显示屏的显示图像进行预设调整。
所述人眼特征参数包括人眼大小或形状特征参数中的一种或多种。
一种人机交互装置，包括终端显示屏，还包括参数获取模块和调整模块，其中，
所述参数获取模块用于获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者；
所述调整模块用于根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整。
还包括摄像头，所述摄像头用于获取终端显示屏前方的图片，所述参数获取模块具体用于判断所述图片中是否有人眼，如果有，则从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者。
所述参数获取模块具体用于从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值，并根据预设的人眼特征参数和人眼相对于终端显示屏的位置参数与其映射值的映射关系，由从所述图片中获取的人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值得到相对应的人眼特征参数和/或人眼相对于终端显示屏的位置参数。
所述调整模块具体用于根据当前时刻的人眼特征参数和/或人眼相对于终端显示屏的位置参数直接对终端显示屏的显示图像进行预设调整，或者根据当前时刻与前一时刻的人眼特征参数和/或人眼相对于终端显示屏的位置参数的变化对终端显示屏的显示图像进行预设调整。
本发明提供一种人机交互的方法及装置，该方法包括获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者，根据获取的人眼特征参数和/或所人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整，本发明通过该技术方案实现了在视效上的人机交互，使终端显示屏的画面根据眼睛的变化而调整，从而极大的提升人机交互的体验度。
附图说明
图1为本发明实施例一种人机交互方法的流程图；
图2为本发明实施例一种人机交互装置的模块图。
具体实施方式
下面通过具体实施方式结合附图对本发明作进一步详细说明。
一种人机交互的方法，包括：
获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者；
根据获取的人眼特征参数和/或人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整。
图1为本发明实施例一种人机交互方法的流程图，请参考图1：
S11、用户在手机3D界面开启动态跟踪人眼功能后，前置摄像头开始运行，通过手机前置摄像头获取手机显示屏前方视频。
S12、从视频中获取图片，将图片与数据库中预存的人眼图像进行比对，判断图片中是否存在人眼，如果否，则回到S11，继续进行视频采集；如果是，则执行S13。
S13、获取人眼在图片中的位置、大小或形状信息中的一种或多种，位置信息可以通过坐标体现，比如人眼在图片中的坐标。
S14、将当前时刻与前一时刻获取的人眼在图片中的位置、大小或形状信息中的一种或多种进行比较，判断比较结果是否一致，如果是，则回到S11，如果否，则执行S15。
S15、将当前时刻获取的人眼在图片中的位置、大小或形状信息中的一种或多种作为当前时刻人眼特征参数和/或人眼相对于终端显示屏的位置参数的映射值，根据数据库中预设的人眼特征参数和/或人眼相对于终端显示屏的位置参数与其映射值的映射关系，得到相对应的人眼特征参数和/或人眼相对于终端显示屏的位置参数，比如在数据库中设定一映射表，映射表中列出多种人眼在图片中的位置、大小或形状信息，并相应地列出与每一种人眼在图片中的位置信息相对应的人眼相对于终端显示屏的位置参数，与每一种人眼在图片中的大小或形状信息相对应的人眼特征参数，将当前时刻的人眼在图片中的位置、大小或形状信息与列表一比对，可得出当前时刻的人眼特征参数和人眼相对于终端显示屏的位置参数。人眼特征参数包括人眼大小、形状等特征参数中的一种或多种，人眼相对于终端显示屏的位置参数包括人眼相对于终端显示屏的方向、角度、距离等位置参数，可以通过人眼相对于显示屏的坐标来表示。
S16、根据当前时刻的人眼特征参数和/或人眼相对于终端显示屏的位置参数直接对终端显示屏的显示图像进行预设调整。S16中还可以是根据当前时刻与前一时刻的人眼特征参数和/或人眼相对于终端显示屏的位置参数的变化对终端显示屏的显示图像进行预设调整。预设调整包括多种调整方案，比如当前时刻与前一时刻相比，人眼相对于终端显示屏的位置发生从左到右、从右到左、从上到下或者从下到上等变化，则可以调整终端显示屏的显示图像跟随人眼的变化而变化，相应地发生从左到右、从右到左、从上到下或者从下到上等变化，使得调整后的图像总是对准人眼。
进一步，还可以在UI(User Interface，用户界面)上设计一只小动物，让手机画面上显示的动物始终看着用户的眼睛方向，并在用户的眼睛相对手机坐标剧烈变化时，让手机画面上显示的动物做出相应的肢体动作，比如当前时刻与前一时刻相比，人眼特征参数发生变化，如睁大眼睛或闭上眼睛，则可以调整手机画面上显示的动物跟随人眼的变化而变化，相应地睁大眼睛或闭上。还比如，当前时刻与前一时刻相比，人眼相对于终端显示屏的位置发生急速靠近或急速远离等变化，可以让手机画面上显示的动物始终看着用户的眼睛方向，同时让动物做出类似惊吓或开心的肢体动作。
图2为本发明实施例一种人机交互装置的模块图，请参考图2：一种人机交互装置，包括终端显示屏21，还包括参数获取模块22和调整模块23，其中，参数获取模块22用于获取人眼特征参数和人眼相对于终端显示屏21的位置参数中的至少一者；调整模块23用于根据获取的人眼特征参数和/或所述人眼相对于终端显示屏21的位置参数对终端显示屏21的显示图像进行预设调整。
进一步，还包括摄像头24，摄像头24用于获取显示屏21前方的图片，参数获取模块22具体用于判断图片中是否有人眼，如果有，从图片中获取人眼特征参数和人眼相对于终端显示屏21的位置参数中至少一者的映射值，并根据预设的人眼特征参数和人眼相对于终端显示屏21的位置参数与其映射值的映射关系，由从图片中获取的人眼特征参数和人眼相对于终端显示屏21的位置参数中至少一者的映射值得到相对应的人眼特征参数和/或人眼相对于终端显示屏21的位置参数。
进一步，调整模块23具体用于根据当前时刻的人眼特征参数和/或人眼相对于终端显示屏21的位置参数直接对终端显示屏21的显示图像进行预设调整，或者根据当前时刻与前一时刻的人眼特征参数和/或人眼相对于终端显示屏21的位置参数的变化对终端显示屏21的显示图像进行预设调整。
本实施例以3D手机为例，通过手机前置摄像头获取视频，从视频中获取图片，从图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者，再根据获取的人眼特征参数和/或人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整，使得调整后的终端显示屏的显示图像可以根据预设的方式对准人眼，或做出相应的变化，实现了在视效上的人机交互，从而极大的提升了人机交互的体验度。
以上内容是结合具体的实施方式对本发明所作的进一步详细说明，不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干简单推演或替换，都应当视为属于本发明的保护范围。

Claims (10)

1.一种人机交互的方法，其特征在于，包括：
获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者；
根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整。
2.如权利要求1所述的方法，其特征在于，获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者的方法具体为：
通过摄像头获取终端显示屏前方的图片；
判断所述图片中是否有人眼；
如果有，则从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者。
3.如权利要求2所述的方法，其特征在于，从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者的方法具体为：
从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值；
根据预设的人眼特征参数和人眼相对于终端显示屏的位置参数与其映射值的映射关系，由从所述图片中获取的人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值得到相对应的人眼特征参数和/或人眼相对于终端显示屏的位置参数。
4.如权利要求1所述的方法，其特征在于，根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整的方法包括：根据当前时刻的所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数直接对终端显示屏的显示图像进行预设调整。
5.如权利要求1所述的方法，其特征在于，根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整的方法包括：根据当前时刻与前一时刻的所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数的变化对终端显示屏的显示图像进行预设调整。
6.如权利要求1至5任一项所述的方法，其特征在于，所述人眼特征参数包括人眼大小或形状特征参数中的一种或多种。
7.一种人机交互装置，包括终端显示屏，其特征在于，还包括参数获取模块和调整模块，其中，
所述参数获取模块用于获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者；
所述调整模块用于根据所述人眼特征参数和/或所述人眼相对于终端显示屏的位置参数对终端显示屏的显示图像进行预设调整。
8.如权利要求7所述的装置，其特征在于，还包括摄像头，所述摄像头用于获取终端显示屏前方的图片，所述参数获取模块具体用于判断所述图片中是否有人眼，如果有，则从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中的至少一者。
9.如权利要求8所述的装置，其特征在于，所述参数获取模块具体用于从所述图片中获取人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值，并根据预设的人眼特征参数和人眼相对于终端显示屏的位置参数与其映射值的映射关系，由从所述图片中获取的人眼特征参数和人眼相对于终端显示屏的位置参数中至少一者的映射值得到相对应的人眼特征参数和/或人眼相对于终端显示屏的位置参数。
10.如权利要求7至9任一项所述的装置，其特征在于，所述调整模块具体用于根据当前时刻的人眼特征参数和/或人眼相对于终端显示屏的位置参数直接对终端显示屏的显示图像进行预设调整，或者根据当前时刻与前一时刻的人眼特征参数和/或人眼相对于终端显示屏的位置参数的变化对终端显示屏的显示图像进行预设调整。
CN2011101142862A 2011-05-04 2011-05-04 一种人机交互的方法及装置 Pending CN102207822A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2011101142862A CN102207822A (zh) 2011-05-04 2011-05-04 一种人机交互的方法及装置
PCT/CN2011/078867 WO2012149713A1 (zh) 2011-05-04 2011-08-24 一种人机交互的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011101142862A CN102207822A (zh) 2011-05-04 2011-05-04 一种人机交互的方法及装置

Publications (1)

Publication Number Publication Date
CN102207822A true CN102207822A (zh) 2011-10-05

Family

ID=44696681

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011101142862A Pending CN102207822A (zh) 2011-05-04 2011-05-04 一种人机交互的方法及装置

Country Status (2)

Country Link
CN (1) CN102207822A (zh)
WO (1) WO2012149713A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102880289A (zh) * 2012-08-20 2013-01-16 广东步步高电子工业有限公司 检测眼球注视点可实现视频播放和暂停的控制系统及方法
CN102945077A (zh) * 2012-10-24 2013-02-27 广东欧珀移动通信有限公司 一种图片查看方法、装置及智能终端
CN103377643A (zh) * 2012-04-26 2013-10-30 富泰华工业（深圳）有限公司 字体调整系统及方法
CN103713728A (zh) * 2014-01-14 2014-04-09 东南大学 一种复杂系统人机界面可用性的检测方法
CN103941984A (zh) * 2013-01-18 2014-07-23 维沃移动通信有限公司 一种应用于移动手持设备中的浏览器网页界面智能滑动的方法及系统
CN104423546A (zh) * 2013-08-28 2015-03-18 联芯科技有限公司 一种方向传感实现方法及终端设备
CN106873853A (zh) * 2017-01-18 2017-06-20 上海木爷机器人技术有限公司 屏幕显示方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103024146A (zh) * 2012-11-20 2013-04-03 广东欧珀移动通信有限公司 一种控制显示屏的方法及移动智能终端

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090153472A1 (en) * 2006-05-31 2009-06-18 Koninklijke Philips Electronics N.V. Controlling a viewing parameter
CN101751209A (zh) * 2008-11-28 2010-06-23 联想(北京)有限公司 一种调整屏幕呈现元素的方法及计算机
CN101893934A (zh) * 2010-06-25 2010-11-24 宇龙计算机通信科技(深圳)有限公司 一种智能调整屏幕显示的方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090153472A1 (en) * 2006-05-31 2009-06-18 Koninklijke Philips Electronics N.V. Controlling a viewing parameter
CN101751209A (zh) * 2008-11-28 2010-06-23 联想(北京)有限公司 一种调整屏幕呈现元素的方法及计算机
CN101893934A (zh) * 2010-06-25 2010-11-24 宇龙计算机通信科技(深圳)有限公司 一种智能调整屏幕显示的方法和装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103377643A (zh) * 2012-04-26 2013-10-30 富泰华工业（深圳）有限公司 字体调整系统及方法
CN102880289A (zh) * 2012-08-20 2013-01-16 广东步步高电子工业有限公司 检测眼球注视点可实现视频播放和暂停的控制系统及方法
CN102945077A (zh) * 2012-10-24 2013-02-27 广东欧珀移动通信有限公司 一种图片查看方法、装置及智能终端
CN102945077B (zh) * 2012-10-24 2015-12-16 广东欧珀移动通信有限公司 一种图片查看方法、装置及智能终端
CN103941984A (zh) * 2013-01-18 2014-07-23 维沃移动通信有限公司 一种应用于移动手持设备中的浏览器网页界面智能滑动的方法及系统
CN104423546A (zh) * 2013-08-28 2015-03-18 联芯科技有限公司 一种方向传感实现方法及终端设备
CN103713728A (zh) * 2014-01-14 2014-04-09 东南大学 一种复杂系统人机界面可用性的检测方法
CN103713728B (zh) * 2014-01-14 2016-09-21 东南大学 一种复杂系统人机界面可用性的检测方法
CN106873853A (zh) * 2017-01-18 2017-06-20 上海木爷机器人技术有限公司 屏幕显示方法及装置

Also Published As

Publication number Publication date
WO2012149713A1 (zh) 2012-11-08

Similar Documents

Publication Publication Date Title
CN102207822A (zh) 一种人机交互的方法及装置
JP7090210B2 (ja) シミュレートされた深度効果のためのユーザインタフェース
US10021319B2 (en) Electronic device and method for controlling image display
US10650790B2 (en) System, apparatus, and method for optimizing viewing experience on an intelligent terminal
KR101988279B1 (ko) 얼굴 인식 기반 사용자 기능 운용 방법 및 이를 지원하는 단말기
US20180329523A1 (en) Automatic selection of a wireless connectivity protocol for an input device
US8762895B2 (en) Camera zoom indicator in mobile devices
EP3576014A1 (en) Fingerprint recognition method, electronic device, and storage medium
TWI545496B (zh) 用於調整控制件外觀之裝置、方法及圖形使用者介面
CN109739361B (zh) 基于眼睛跟踪的可见度提高方法和电子装置
CN105814522B (zh) 基于运动识别来显示虚拟输入设备的用户界面的设备和方法
WO2015161653A1 (zh) 一种终端操作方法及终端设备
EP2784653A2 (en) Apparatus and method of controlling overlapping windows in a device
KR102362042B1 (ko) 전자 장치의 제어 방법 및 장치
DE202014004572U1 (de) Vorrichtung und grafische Benutzerschnittstelle zum Schalten zwischen Kameraschnittstellen
EP2682859A3 (en) Mobile terminal, image display device and user interface provision method using the same
CN105472174A (zh) 一种通过控制移动终端与眼部距离的智能护眼方法
US20230319413A1 (en) User interfaces for camera sharing
JP2015158748A (ja) 制御装置、情報処理装置、制御方法、情報処理方法、情報処理システム、ウェアラブル機器
US10474324B2 (en) Uninterruptable overlay on a display
US20230345113A1 (en) Display control method and apparatus, electronic device, and medium
CN105677040A (zh) 一种终端控制方法、装置及可穿戴设备
CN107526428A (zh) 显示装置及其驱动方法
CN104333794A (zh) 一种基于深度手势的频道选择方法
DE112020002244T5 (de) Vorrichtung, Verfahren und grafische Benutzerschnittstelle zur Erzeugung von CGR-Objekten

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20111005