CN112463097B - 信息显示方法及其系统 - Google Patents

信息显示方法及其系统 Download PDF

Info

Publication number
CN112463097B
CN112463097B CN202011460957.6A CN202011460957A CN112463097B CN 112463097 B CN112463097 B CN 112463097B CN 202011460957 A CN202011460957 A CN 202011460957A CN 112463097 B CN112463097 B CN 112463097B
Authority
CN
China
Prior art keywords
information
display screen
user
display
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011460957.6A
Other languages
English (en)
Other versions
CN112463097A (zh
Inventor
蒙淮
张俊
吴志刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Pinjie Network Technology Co Ltd
Original Assignee
Hangzhou Pinjie Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Pinjie Network Technology Co Ltd filed Critical Hangzhou Pinjie Network Technology Co Ltd
Priority to CN202011460957.6A priority Critical patent/CN112463097B/zh
Publication of CN112463097A publication Critical patent/CN112463097A/zh
Application granted granted Critical
Publication of CN112463097B publication Critical patent/CN112463097B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了一种信息显示方法，包括以下步骤：S1、系统初始化；S10、初始化显示屏的相对位置信息；S11、各个显示屏屏幕上显示对应的图文信息；S2、确定用户注视的显示屏；S20、经显示屏上的摄像头采集用户起始面部信息；S21、用户目光注视需要输入信息的显示屏；S22、摄像头采集用户当前面部信息；S23、确定用户注视的显示屏；S3、获取用户键盘输入信息；S4、将用户的键盘输入信息发送至用户注视的显示屏的程序窗口。本发明采用上述信息显示方法，用户无需通过鼠标或键盘的手工方式来移动光标焦点，只需用眼睛注视对应显示屏即可在对应显示屏上输入信息，实现了快捷方便的进行键盘输入。

Description

信息显示方法及其系统
技术领域
本发明涉及一种多屏幕切换技术，尤其涉及一种信息显示方法及其系统。
背景技术
随着计算机及信息技术的快速发展，多屏显示在计算机应用的各个领域均得到了广泛的应用。随着计算机硬件的不断发展以及性能的不断提高，对多个显示屏屏幕上的多个界面单独进行指令操作技术也逐步成熟，在各行各业中应用特别广泛，如电商平台的供应链、销售等数字看板和可视化分析系统，其数据丰富度决定了相关的数据分析和决策分析普遍采用多屏显示；再如股票投资用户在多显示屏上观看行情走势、程序员进行多屏编程、玩家在多屏幕显示游戏场景等。多屏幕转换操作旨在克服单一屏幕下由于屏幕尺寸的限制而导致的单个程序多个界面以及多个程序同时运行的多个界面的层叠缺陷，以实现用户快速、精确的操作需求。
现有技术中，多屏幕切换操作用户一般在不同显示屏屏幕之间切换操作时会采用下述两种方法：(1)通过鼠标将光标焦点切换至选择屏幕的窗口中，从而指定然后通过键盘进行指令输入。(2)使用多套键盘鼠标套件，每套键盘对应一个指定的显示器屏幕；或者，在多屏幕切换使用一套键盘或鼠标时，用户往往只能通过先进行鼠标移动操作后方能实现双手敲击进行操作信息的输入，这无疑对用户的对快速操作的需求造成障碍。
发明内容
本发明的目的是提供一种信息显示方法，用户无需通过鼠标或键盘的手工方式来移动光标焦点，只需用眼睛注视对应显示屏即可在对应显示屏上输入信息，实现了快捷方便的进行键盘输入。
为实现上述目的，本发明提供了一种信息显示方法，包括以下步骤：
S1、系统初始化
S10、初始化显示屏的相对位置信息；
将多个显示屏与计算机主机连接后，计算机主机根据显示屏相对位置给每个显示屏分配位置编号；
S11、各个显示屏屏幕上显示对应的图文信息；
S2、确定用户注视的显示屏
S20、经显示屏上的摄像头采集用户起始面部信息；
S21、用户目光注视需要输入信息的显示屏；
S22、摄像头采集用户当前面部信息；
S23、根据采集到当前面部信息和起始面部信息，确定用户注视的显示屏
根据当前面部信息和起始面部信息，确定用户面部倾斜程度和瞳孔位置，计算出当前用户面部相对于各个显示屏上的摄像头的偏移程度，对比得到偏移程度最小的显示屏为用户注视显示屏，并依据步骤S1中存储的显示屏图文信息以及相对位置信息，得到用户正在注视的显示屏编号；
S3、获取用户键盘输入信息
S4、将用户的键盘输入信息发送至用户注视的显示屏的程序窗口
根据中S23获得的注视显示屏的图文信息，然后遍历该显示屏的所有窗口位置，判断显示屏中的激活窗口，将键盘输入信息发往指定的程序窗口。
优选的，在步骤S1中的计算机主机具有应用程序编程接口以供各程序界面在各屏幕的显示或操作。
优选的，在步骤S1中当显示屏的相对位置发生变化后，再执行一次初始化显示屏的位置信息。
优选的，在步骤S20步骤具体包括：经显示屏上的摄像头采集用户起始面部图像，计算机主机根据预设对起始面部图像的亮度、色调、锐度进行调整，根据调整后的起始面部图像获取起始面部信息。
优选的，步骤S20和步骤S22中当前面部信息和起始面部信息均包括面部角度信息和瞳孔位置信息。
优选的，瞳孔位置信息确定步骤具体包括：以摄像头位置为角顶点，确定的用户双眼分别与角顶点连线的夹角值。
优选的，在步骤S21中用户目光注视需要输入信息的显示屏上的多点定位图形。
优选的，在步骤S3中计算机主机通过调用应用程序与计算机操作系统的接口，获取用户的键盘输入信息。
一种基于所述的信息显示方法的系统，包括计算机主机、与所述计算机主机相连的多个显示屏、镶嵌于所述显示屏上的摄像头和与所述计算机主机相连的鼠标以及键盘，所述计算机主机包括用于执行系统初始化步骤的初始化模块、用于存储系统初始化信息以及用户面部信息的信息存储模块、用于对比所述摄像头获得的起始面部信息以及当前面部信息并根据对比结果确定注视显示屏的对比分析模块以及用于接收所述对比分析模块的结果并根据结果将键盘命令投射到对应显示屏上的信息投射模块。
优选的，所述显示屏上设置有多点定位图形，所述多点定位图形包括设置于所述显示屏上的多个特征位置点，用于在用户眼睛注视所述显示屏上任一特征位置点时所述摄像头进行拍摄。
因此，本发明采用上述信息显示方法，通过摄像头判断用户的目光聚焦在哪个显示屏上，然后当用户通过键盘输入时，自动把用户的输入内容发送至用户目光聚焦的显示器上的窗口。用户既不用先切换窗口焦点，也不需要购买多套输入设备，可以在手不离开当前输入设备的情况，就可以实现高效简单的多屏幕输入方式，只需使用一套键盘鼠标，减少了购置多套键盘的成本消耗。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
图1为本发明的实施例一种信息显示方法的流程图；
图2为本发明的实施例一种基于信息显示方法的系统的结构框图；
图3为本发明的实施例一种基于信息显示方法的系统的结构简图。
其中：1、显示屏；10、摄像头；11、多点定位图形。
具体实施方式
以下将结合附图对本发明作进一步的描述，需要说明的是，本实施例以本技术方案为前提，给出了详细的实施方式和具体的操作过程，但本发明的保护范围并不限于本实施例。
图1为本发明的实施例一种信息显示方法的流程图；图2为本发明的实施例一种基于信息显示方法的系统的结构框图；图3为本发明的实施例一种基于信息显示方法的系统的结构简图，如图1、图2和图3所示，本发明所述的信息显示方法，包括以下步骤：
S1、系统初始化
S10、初始化显示屏1的相对位置信息；
将多个显示屏1与计算机主机连接后，计算机主机根据显示屏1相对位置给每个显示屏1分配位置编号；
S11、各个显示屏1屏幕上显示对应的图文信息；
优选的，在步骤S1中的计算机主机具有应用程序编程接口以供各程序界面在各屏幕的显示或操作。在步骤S1中当显示屏1的相对位置发生变化后，再执行一次初始化显示屏1的位置信息。
S2、确定用户注视的显示屏1
S20、经显示屏1上的摄像头10采集用户起始面部信息；
优选的，在步骤S20步骤具体包括：经显示屏1上的摄像头10采集用户起始面部图像，计算机主机根据预设对起始面部图像的亮度、色调、锐度进行调整，根据调整后的起始面部图像获取起始面部信息。
S21、用户目光注视需要输入信息的显示屏1；
优选的，在步骤S21中用户目光注视需要输入信息的显示屏1上的多点定位图形11。
S22、摄像头10采集用户当前面部信息；
优选的，步骤S20和步骤S22中当前面部信息和起始面部信息均包括面部角度信息和瞳孔位置信息。
优选的，瞳孔位置信息确定步骤具体包括：以摄像头10位置为角顶点，确定的用户双眼分别与角顶点连线的夹角值。
S23、根据采集到当前面部信息和起始面部信息，确定用户注视的显示屏1
根据当前面部信息和起始面部信息，确定用户面部倾斜程度和瞳孔位置，计算出当前用户面部相对于各个显示屏1上的摄像头10的偏移程度，对比得到偏移程度最小的显示屏1为用户注视显示屏1，并依据步骤S1中存储的显示屏1图文信息以及相对位置信息，得到用户正在注视的显示屏1编号；
S3、获取用户键盘输入信息
优选的，在步骤S3中计算机主机通过调用应用程序与计算机操作系统的接口，获取用户的键盘输入信息。
S4、将用户的键盘输入信息发送至用户注视的显示屏1的程序窗口
根据中S23获得的注视显示屏1的图文信息，然后遍历该显示屏1的所有窗口位置，判断显示屏1中的激活窗口，将键盘输入信息发往指定的程序窗口。
一种基于所述的信息显示方法的系统，包括计算机主机、与所述计算机主机相连的多个显示屏1、镶嵌于所述显示屏1上的摄像头10和与所述计算机主机相连的鼠标以及键盘，所述计算机主机包括用于执行系统初始化步骤的初始化模块、用于存储系统初始化信息以及用户面部信息的信息存储模块、用于对比所述摄像头10获得的起始面部信息以及当前面部信息并根据对比结果确定注视显示屏1的对比分析模块以及用于接收所述对比分析模块的结果并根据结果将键盘命令投射到对应显示屏1上的信息投射模块。且所述显示屏1上设置有多点定位图形11，所述多点定位图形11包括设置于所述显示屏1上的多个特征位置点，用于在用户眼睛注视所述显示屏1上任一特征位置点时所述摄像头10进行拍摄。
因此，本发明采用上述信息显示方法，用户无需通过鼠标或键盘的手工方式来移动光标焦点，只需用眼睛注视对应显示屏即可在对应显示屏上输入信息，实现了快捷方便的进行键盘输入。
最后应说明的是：以上实施例仅用以说明本发明的技术方案而非对其进行限制，尽管参照较佳实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对本发明的技术方案进行修改或者等同替换，而这些修改或者等同替换亦不能使修改后的技术方案脱离本发明技术方案的精神和范围。

Claims (4)

1.一种信息显示方法，其特征在于：包括以下步骤：
S1、系统初始化
S10、初始化显示屏的相对位置信息；
将多个显示屏与计算机主机连接后，计算机主机根据显示屏相对位置给每个显示屏分配位置编号；
S11、各个显示屏屏幕上显示对应的图文信息；
S2、确定用户注视的显示屏
S20、经显示屏上的摄像头采集用户起始面部信息；
S21、用户目光注视需要输入信息的显示屏；
S22、摄像头采集用户当前面部信息；
S23、根据采集到当前面部信息和起始面部信息，确定用户注视的显示屏
根据当前面部信息和起始面部信息，确定用户面部倾斜程度和瞳孔位置，计算出当前用户面部相对于各个显示屏上的摄像头的偏移程度，对比得到偏移程度最小的显示屏为用户注视显示屏，并依据步骤S1中存储的显示屏图文信息以及相对位置信息，得到用户正在注视的显示屏编号；
S3、获取用户键盘输入信息
S4、将用户的键盘输入信息发送至用户注视的显示屏的程序窗口根据中S23获得的注视显示屏的图文信息，然后遍历该显示屏的所有窗口位置，判断显示屏中的激活窗口，将键盘输入信息发往指定的程序窗口；
在步骤S1中当显示屏的相对位置发生变化后，再执行一次初始化显示屏的位置信息；
在步骤S20步骤具体包括：经显示屏上的摄像头采集用户起始面部图像，计算机主机根据预设对起始面部图像的亮度、色调、锐度进行调整，根据调整后的起始面部图像获取起始面部信息；
瞳孔位置信息确定步骤具体包括：以摄像头位置为角顶点，确定的用户双眼分别与角顶点连线的夹角值；
在步骤S21中用户目光注视需要输入信息的显示屏上的多点定位图形；
基于信息显示方法的系统，包括计算机主机、与所述计算机主机相连的多个显示屏、镶嵌于所述显示屏上的摄像头和与所述计算机主机相连的鼠标以及键盘，所述计算机主机包括用于执行系统初始化步骤的初始化模块、用于存储系统初始化信息以及用户面部信息的信息存储模块、用于对比所述摄像头获得的起始面部信息以及当前面部信息并根据对比结果确定注视显示屏的对比分析模块以及用于接收所述对比分析模块的结果并根据结果将键盘命令投射到对应显示屏上的信息投射模块；
所述显示屏上设置有多点定位图形，所述多点定位图形包括设置于所述显示屏上的多个特征位置点，用于在用户眼睛注视所述显示屏上任一特征位置点时所述摄像头进行拍摄。
2.根据权利要求1所述的信息显示方法，其特征在于：在步骤S1中的计算机主机具有应用程序编程接口以供各程序界面在各屏幕的显示或操作。
3.根据权利要求1述的信息显示方法，其特征在于：步骤S20和步骤S22中当前面部信息和起始面部信息均包括面部角度信息和瞳孔位置信息。
4.根据权利要求1述的信息显示方法，其特征在于：在步骤S3中计算机主机通过调用应用程序与计算机操作系统的接口，获取用户的键盘输入信息。
CN202011460957.6A 2020-12-11 2020-12-11 信息显示方法及其系统 Active CN112463097B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011460957.6A CN112463097B (zh) 2020-12-11 2020-12-11 信息显示方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011460957.6A CN112463097B (zh) 2020-12-11 2020-12-11 信息显示方法及其系统

Publications (2)

Publication Number Publication Date
CN112463097A CN112463097A (zh) 2021-03-09
CN112463097B true CN112463097B (zh) 2022-11-15

Family

ID=74804745

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011460957.6A Active CN112463097B (zh) 2020-12-11 2020-12-11 信息显示方法及其系统

Country Status (1)

Country Link
CN (1) CN112463097B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113655886A (zh) * 2021-08-18 2021-11-16 统信软件技术有限公司 一种输入方法、输入系统、计算设备及存储介质
CN113729967B (zh) * 2021-09-16 2023-09-19 上海微创医疗机器人（集团）股份有限公司 医生控制台的控制方法、医生控制台、机器人系统和介质
CN114092992A (zh) * 2021-10-11 2022-02-25 中国核电工程有限公司 一种多屏幕监控系统快速人脸定位方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106878559A (zh) * 2017-02-17 2017-06-20 宇龙计算机通信科技(深圳)有限公司 一种屏幕状态调整方法和装置
CN108469893B (zh) * 2018-03-09 2021-08-27 海尔优家智能科技（北京）有限公司 显示屏的控制方法、装置、设备及计算机可读存储介质
CN111176425A (zh) * 2018-11-12 2020-05-19 宏碁股份有限公司 多屏幕操作方法与使用此方法的电子系统
CN111176524B (zh) * 2019-12-25 2021-05-28 歌尔股份有限公司 一种多屏显示系统及其鼠标切换控制方法

Also Published As

Publication number Publication date
CN112463097A (zh) 2021-03-09

Similar Documents

Publication Publication Date Title
CN112463097B (zh) 信息显示方法及其系统
US9674425B2 (en) Image acquisition method and apparatus
CN102591451B (zh) 影像处理装置和影像显示装置
JP5464083B2 (ja) 情報処理装置、情報処理方法およびプログラム
US20120110516A1 (en) Position aware gestures with visual feedback as input method
CN107977141B (zh) 交互控制方法、装置、电子设备及存储介质
CN111586459B (zh) 一种控制视频播放的方法、装置、电子设备及存储介质
US20230325062A1 (en) Method for adjusting interface display state, and electronic device
CN108776544B (zh) 增强现实中的交互方法及装置、存储介质、电子设备
CN112306443A (zh) 一种信息展示方法和存储介质
CN111679772B (zh) 一种屏幕录制方法、系统、多屏设备和可读存储介质
CN104516481B (zh) 一种信息处理方法和电子设备
CN114025237B (zh) 视频生成方法、装置和电子设备
CN114125297B (zh) 视频拍摄方法、装置、电子设备及存储介质
WO2022247318A1 (zh) 一种游戏界面显示的方法、装置、设备及介质
CN113457117B (zh) 游戏中的虚拟单位选取方法及装置、存储介质及电子设备
CN115002551A (zh) 视频播放方法、装置、电子设备和介质
CN116069229A (zh) 显示装置及其控制方法
CN108499102B (zh) 信息界面展示方法及装置、存储介质、电子设备
CN110568972B (zh) 一种用于呈现快捷方式的方法和装置
CN113923392A (zh) 视频录制方法、视频录制装置和电子设备
CN115769182A (zh) 一种智能交互平板及其亮度调节方法
CN113612978A (zh) 几何失真校正方法、装置、系统与计算机可读存储介质
CN112068699A (zh) 一种交互方法、装置、电子设备和存储介质
CN114339050B (zh) 显示方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant