CN107422843A - 一种信息处理方法及电子设备 - Google Patents
一种信息处理方法及电子设备 Download PDFInfo
- Publication number
- CN107422843A CN107422843A CN201710166039.4A CN201710166039A CN107422843A CN 107422843 A CN107422843 A CN 107422843A CN 201710166039 A CN201710166039 A CN 201710166039A CN 107422843 A CN107422843 A CN 107422843A
- Authority
- CN
- China
- Prior art keywords
- display device
- display
- user
- electronic equipment
- viewing area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 16
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 230000004886 head movement Effects 0.000 claims abstract description 62
- 238000000034 method Methods 0.000 claims abstract description 18
- 238000006073 displacement reaction Methods 0.000 claims description 13
- 210000003128 head Anatomy 0.000 description 54
- 210000001508 eye Anatomy 0.000 description 36
- 238000005516 engineering process Methods 0.000 description 8
- 210000005252 bulbus oculi Anatomy 0.000 description 5
- 230000005611 electricity Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
- G06F3/1431—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明实施例提供一种信息处理方法及电子设备，信息处理方法用以解决电子设备对显示装置的切换方式的灵活性较差的技术问题，该方法包括获取当前用户的至少一个用户信息，其中，至少一个用户信息包括用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，该头部运动信息及视线运动信息能够用于指示用户当前注视的与电子设备相连的第二显示装置所处的位置；基于至少一个用户信息，确定第二显示装置与第一显示装置之间的相对位置关系，相对位置关系至少能够表征由第一显示装置指向第二显示装置的方向；基于相对位置关系，生成与电子设备对应的显示控制参数，并根据显示控制参数显示电子设备中的显示内容。
Description
技术领域
本发明涉及信息技术领域，尤其涉及一种信息处理方法及电子设备。
背景技术
随着科学技术的不断发展，社会的不断进步，无论是在生活中还是在工作上，电脑的单个显示器已经越来越不能够满足人们的使用需求。因此，一台主机对应多个显示器的技术应运而生。
目前，用户在使用多台显示器或者多计算机切换器(Keyboard Video Mouse，KVM)时，需要用户事先设定好显示器的位置，包括多台显示器分别在计算机内所对应的虚拟位置和多台显示器的物理摆放位置，且为了符合用户在实际使用过程中的习惯，需要显示器的物理摆放位置与虚拟位置一一对应。若显示器的物理摆放位置和虚拟位置之间不对应，这时，则需要用户手动调整显示器的虚拟位置或者显示器的物理摆放位置，直到显示器的物理位置与设置的虚拟位置一致，否则可能会导致显示的画面错乱。
综上所述，现有技术中存在电子设备对显示装置的切换方式的灵活性较差的技术问题。
发明内容
本发明实施例提供一种信息处理方法及电子设备，用以解决现有技术中存在电子设备对显示装置的切换方式的灵活性较差的技术问题。
一方面，本发明实施例提供一种信息处理方法，应用于电子设备中，该信息处理方法包括：
获取当前用户的至少一个用户信息；其中，所述至少一个用户信息包括所述用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，所述头部运动信息及所述视线运动信息能够用于指示所述用户当前注视的与所述电子设备相连的第二显示装置所处的位置；基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，所述相对位置关系至少能够表征由所述第一显示装置指向所述第二显示装置的方向；基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，并根据所述显示控制参数显示所述电子设备中的显示内容；其中，所述显示控制参数用于指示所述电子设备在显示过程中将所述显示内容发送到所述第一显示装置的第一显示区域和/或所述第二显示装置的第二显示区域，所述第一显示区域和所述第二显示区域之间的位置关系与所述第一显示装置和所述第二显示装置之间的相对位置关系一致。
可选的，获取当前用户的至少一个用户信息，包括：通过所述电子设备的采集装置采集所述用户在第一时间段内的至少两个用户图像；所述至少两个用户图像中的每个用户图像包括所述用户的人眼图像信息和/或头部图像信息；根据所述至少两个用户图像中的所述人眼图像信息及所述头部图像信息，确定在所述第一时间段内，所述用户相对于所述第一显示装置的头部运动信息和/或视线运动信息。
可选的，基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，包括：基于所述至少一个用户信息中的所述头部运动信息所指示的头部运动方向及头部转动角度，和/或所述视线运动信息所指示的视线移动方向及视线移动角度，确定所述第二显示装置的位置；基于所述第二显示装置的位置及所述第一显示装置的当前位置，确定所述第二显示装置与所述第一显示装置的相对位置关系。
可选的，基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，包括：基于所述相对位置关系，确定所述第一显示装置的第一显示区域和所述第二显示装置的第二显示区域之间的显示位置关系，所述显示位置关系用于指示显示过程中所述第一显示区域与所述第二显示区域之间的显示方向及显示位置的关系；基于所述显示位置关系，生成所述显示控制参数。
可选的，所述方法还包括：确定所述用户针对所述第一显示装置进行的第一操作的操作方向及移动距离；若所述操作方向与所述显示控制参数所指示的显示方向一致，将所述第一显示区域显示的显示内容按照所述操作方向移动向所述第二显示区域移动所述移动距离。
另一方面，本发明实施例提供一种电子设备，该电子设备包括：
获取模块，用于获取当前用户的至少一个用户信息；其中，所述至少一个用户信息包括所述用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，所述头部运动信息及所述视线运动信息能够用于指示所述用户当前注视的与所述电子设备相连的第二显示装置所处的位置；第一确定模块，用于基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，所述相对位置关系至少能够表征由所述第一显示装置指向所述第二显示装置的方向；生成模块，用于基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，并根据所述显示控制参数显示所述电子设备中的显示内容；其中，所述显示控制参数用于指示所述电子设备在显示过程中将所述显示内容发送到所述第一显示装置的第一显示区域和/或所述第二显示装置的第二显示区域，所述第一显示区域和所述第二显示区域之间的位置关系与所述第一显示装置和所述第二显示装置之间的相对位置关系一致。
可选的，所述获取模块用于：通过所述电子设备的采集装置采集所述用户在第一时间段内的至少两个用户图像；所述至少两个用户图像中的每个用户图像包括所述用户的人眼图像信息和/或头部图像信息；根据所述至少两个用户图像中的所述人眼图像信息及所述头部图像信息，确定在所述第一时间段内，所述用户相对于所述第一显示装置的头部运动信息和/或视线运动信息。
可选的，所述第一确定模块用于：基于所述至少一个用户信息中的所述头部运动信息所指示的头部运动方向及头部转动角度，和/或所述视线运动信息所指示的视线移动方向及视线移动角度，确定所述第二显示装置的位置；基于所述第二显示装置的位置及所述第一显示装置的当前位置，确定所述第二显示装置与所述第一显示装置的相对位置关系。
可选的，所述生成模块用于：基于所述相对位置关系，确定所述第一显示装置的第一显示区域和所述第二显示装置的第二显示区域之间的显示位置关系，所述显示位置关系用于指示显示过程中所述第一显示区域与所述第二显示区域之间的显示方向及显示位置的关系；基于所述显示位置关系，生成所述显示控制参数。
可选的，所述电子设备还包括：第二确定模块，用于确定所述用户针对所述第一显示装置进行的第一操作的操作方向及移动距离；运行模块，用于若所述操作方向与所述显示控制参数所指示的显示方向一致，将所述第一显示区域显示的显示内容按照所述操作方向移动向所述第二显示区域移动所述移动距离。
上述技术方案中的一个或多个技术方案，具有如下技术效果或优点：
本发明实施例提供一种信息处理方法，该方法通过获取当前用户的至少一个用户信息，包括用户相对于电子设备的第一显示装置的能够用于指示用户当前注视的与电子设备相连的第二显示装置所处的位置的头部运动信息和/或视线运动信息，来确定至少能够表征由第一显示装置指向第二显示装置的方向的相对位置关系；然后，基于该相对位置关系，生成与电子设备对应的显示控制参数，并根据显示控制参数显示电子设备中的显示内容；其中，显示控制参数用于指示电子设备在显示过程中将显示内容发送到第一显示装置的第一显示区域和/或第二显示装置的第二显示区域；其中，第一显示区域和第二显示区域之间的位置关系与第一显示装置和第二显示装置之间的相对位置关系一致，具有较好的显示效果，解决了现有技术中存在的用户在切换显示装置时需要手动调整显示装置的位置，从而导致的电子设备对显示装置的切换方式的灵活性较差的技术问题，简化了切换显示装置的过程，提高了显示装置使用的方便性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中信息处理方法的流程图；
图2为本发明实施例中基于头部运动信息确定第二显示位置的示意图；
图3为本发明实施例中基于视线运动信息确定第二显示位置的示意图；
图4为本发明实施例中屏幕扩展界面的设置示意图；
图5为本发明实施例中电子设备的模块示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例中的信息处理方法，可以应用于电子设备中，该电子设备可以是连接有多个显示器的电脑、手机、电视等，具体为何种电子设备，本发明实施例不作任何的限制，且需要说明的是本发明实施例中的第一、第二、第三等词汇只是为了便于理解，并不是用于对显示装置或者显示区域顺序的限定。
另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。
下面结合附图对本发明优选的实施方式进行详细说明。
如图1所示，本发明实施例提供一种信息处理方法，该信息处理方法可以应用于上述的电子设备中，该方法的过程可以描述如下。
S100：获取当前用户的至少一个用户信息，至少一个用户信息包括用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，头部运动信息及视线运动信息能够用于指示用户当前注视的与电子设备相连的第二显示装置所处的位置。
本发明实施例中，可以通过电子设备本身的摄像头、与电子设备相连的外部摄像头等装置来获取当前用户的至少一个用户信息，该至少一个用户信息可以是当前用户的人脸信息、运动信息等，其中运动信息可以包括用户的头部运动信息、视线运动信息等。
比如，若电子设备为带有前置摄像头的笔记本电脑，则可以通过笔记本电脑的前置摄像头来采集当前用户的用户信息；或者，若电子设备为未设置摄像头的台式电脑、电视机等，则可以通过与台式电脑或者电视机相连的外接摄像头采集当前用户的用户信息。
其中，第一显示装置可以是电子设备本身设置的显示器，而头部运动信息可以是使用电子设备的当前用户的头部相对于第一显示装置的运动信息，例如用户头部相对于用户当前面向的显示器的移动方向，如相对于显示器向左移动，则获取的头部运动信息可以是用户头部相对于用户面向的显示器向左移动的信息，或者头部运动信息可以是用户头部相对于显示器向右移动的运动信息，则头部运动信息可以是用户头部相对于用户面向的显示器向右移动的信息。
相应地，可以通过电子设备的采集装置，如摄像头等，利用眼球追踪、红外线追踪、超声波追踪等技术对用户的视线运动信息进行采集，而该视线运动信息可以是用于指示用户目光或者眼球等在运动过程中相对于用户当前所面向的显示器的移动方向、移动角度等运动信息。
在实际应用中，电子设备连接的第二显示装置可以是一个或多个，第二显示装置具体数量可以根据用户实际使用需求而定，而在显示装置的切换过程中，可以根据用户使用的实际情况设定主显示装置、副显示装置。
比如，可以设置用户当前所面向的显示装置为主显示装置，即若用户当前面向电子设备本身设置的显示器，则可以设置该显示器为主显示器，而与电子设备外接的一个或者多个显示器为副显示器，或者，若用户当前面向的是电子设备外接的一个或者多个显示器中的其中一个显示器，则可以设置该一个外接显示器为主显示器，而电子设备本身设置的显示器和除主显示器外的其他外接的显示器为副显示器。
根据用户的头部运动信息及视线运动信息，可以确定用户当前注视的第二显示装置所处的位置，该位置可以是物理位置，即第二显示装置的摆放位置。
可选的，在S100中，可以通过电子设备的采集装置，如摄像头等，采集用户在第一时间段内的至少两个用户图像，第一时间段可以是预设时间段，例如第一时间段可以根据用户对显示装置的切换习惯来自定义设置的，或者也可以根据电子设备的显示装置与电子设备的外接显示装置的相关参数来进行设定，如5s、4s等，本发明实施例对此不作具体限制。
在实际应用中，至少两个用户图像中的每个用户图像可以包括用户的人眼图像信息和/或头部图像信息，人眼图像信息可以是用户眼球的转动信息、瞳孔信息等，而头部图像信息可以为用户头部朝向的方向信息、角度信息等。
即可以在第一时间段内通过电子设备的采集装置连续采集多张用户头部的图像，可以利用图像分析等方式，来确定出可以表征用户在第一时间段内相对于第一显示装置的头部运动信息，包括头部运动的方向、头部运动的轨迹等信息。
相应地，也可以在第一时间段内，通过电子设备的采集装置连续采集多张用户眼部的图像，通过对多张眼部图像的分析，可以确定表征用户在第一时间段内相对于第一显示装置的视线运动信息，如在第一时间段内用户视线点所形成的眼球运动轨迹等信息。
比如，电子设备为本身设置有显示器的笔记本电脑，当前，该笔记本电脑通过视频图形阵列(Video Graphics Array，VGA)线连接有一个外接显示器。而用户当前在使用这台笔记本电脑时，面向该笔记本电脑的显示器，可以通过笔记本电脑的摄像头在第一时间段内，比如5s内，实时采集用户图像，如第1秒采集第一用户图像，该第一用户图像可以包括用户面向笔记本电脑时的人眼图像信息和/或头部图像信息，第2秒采集第二用户图像信息，该第二用户图像信息可以包括用户头部或者眼部偏向外接显示器时的人眼图像信息和/或头部图像信息等。然后，根据在5s内采集的至少两个用户图像，即可以确定在5s内，用户相对于笔记本电脑的头部运动信息和/或视线运动信息。
S200：基于至少一个用户信息，确定第二显示装置与第一显示装置之间的相对位置关系，该相对位置关系至少能够表征由第一显示装置指向第二显示装置的方向。
在实际应用中，用户在使用多个显示器时，需要在多个显示器之间进行来回的切换，而在切换之前，电子设备根据通过采集装置采集的至少一个用户信息，可以确定出每两个显示装置之间的相对位置关系，后续当用户有显示器切换需求时，则电子设备可以根据该相对位置关系表征的第一显示装置指向第二显示装置的方向自动地进行切换。
比如，若用户头部相对于第一显示装置向左移动，则可以表明用户当前所注视的第二显示装置位于第一显示装置的左边，或者，若用户头部相对于第一显示装置向右移动，则可以表明用户当前所注视的第二显示装置位于第一显示装置的右边。
可选的，在基于至少一个用户信息确定第二显示装置与第一显示装置之间的相对位置关系时，可以根据至少一个用户信息中的头部运动信息所指示的头部运动方向及头部转动角度，和/或视线运动信息所指示的视线移动方向及视线移动角度，确定第二显示装置的位置。
其中，头部运动方向可以是用户头部在当前时刻相对于前一时刻运动时，由用户头部在前一时刻的所在位置指向用户头部在当前时刻的所在位置的方向，而头部转动角度可以是用户头部在前一时刻到当前时刻转动时形成的角度。
视线移动方向可以是用户视线在当前时刻相对于前一时刻移动时，由用户视线在前一时刻指示的位置指向用户视线在当前时刻指示的位置的方向，视线移动角度可以是由前一时刻的用户视线、当前时刻的用户视线及用户当前所在的位置所构成的角度；第二显示装置的位置可以是第二显示装置的物理摆放位置。
进而，可以根据第二显示装置的位置及第一显示装置的当前位置，确定第二显示装置与第一显示装置的相对位置关系，如若以第一显示装置为用户当前所面向的显示装置，则以第一显示装置的当前位置为参照，可以确定出第二显示装置位于第一显示装置的右边；或者，若以第二显示装置为用户当前所面向的显示装置，则以第二显示装置的位置为参照，可以确定第一显示装置位于第一显示装置的左边。也可以是确定第一显示装置、第二显示装置及用户三者之间的角度关系等，即以用户所在位置为顶点，第一显示装置和第二显示装置为两边所形成的角度，如40°、50°等。
可选的，在根据至少一个用户信息确定第二显示装置的位置时，可以包括但不仅限于以下两种情况。
情况一：若至少一个用户信息中包括头部运动信息，则可以根据该头部运动信息所指示的头部运动方向及头部转动角度，确定第二显示装置的位置。
其中，确定头部运动信息所指示的头部运动方向的过程可以是：电子设备根据头部运动信息确定第一时间段内第一时刻采集的第一用户图像中头部图像信息所指示的用户的第一头部位置，及确定第一时间段内且第一时刻之后的第二时刻采集的第二用户图像中头部图像信息所指示的用户的第二头部位置，其中，第一头部位置可以是用户在第一时刻面向第一显示装置时用户头部所处的位置，第二头部位置可以是用户在第二时刻对应于第二显示装置时用户头部所处的位置。
那么，电子设备可以确定由第一头部位置指向第二头部位置的方向即为用户的头部运动方向。
同时，电子设备根据第二头部位置与第一头部位置还可以确定用户头部运动信息所指示的头部转动角度，即用户头部由第一头部位置向第二头部位置转动后，第一头部位置、第二头部位置及用户所在位置三者之间所形成的角度即为头部转动角度，其中，用户所在的位置为头部转动角度的顶点。
从而，根据用户的头部运动方向及头部转动角度，可以确定相对于第一显示装置位于头部运动方向上，且与头部转动角度对应的显示装置为第二显示装置，进一步地，可以确定出第二显示装置的位置。
比如，如图2所示，以笔记本电脑的显示器为第一显示装置，位于笔记本电脑显示器上的摄像头在5s内实时采集用户图像，如第1秒采集第一用户图像，该第一用户图像可以包括用户的头部运动信息，该头部运动信息可以表明用户在第1秒时正面向笔记本电脑，此时用户头部所在的位置为第一头部位置；在第1秒之后的第2秒摄像头采集第二用户图像，该第二用户图像中的头部图像信息指示了用户头部当前所在的第二头部位置，由第一头部位置指向第二头部位置的方向即用户的头部运动方向，在图2中用箭头1所指的方向表示用户的头部运动方向。而第一头部位置、第二头部位置相对于用户所在的位置可以形成一定大小的角度，即可以以第一头部位置与第一显示装置之间的虚拟连线为角度的第一边，以第二头部位置所指方向上的虚拟射线为角度的第二边，且用户所在位置为角度的顶点，那么第一边、第二边、及用户所在位置所形成的角度即为用户的头部转动角度，该头部转动角度可以为50°、60°等。
进一步地，笔记本电脑可以根据第一头部位置指向第二头部位置的方向，及以用户所在位置为顶点，第一头部位置与第一显示装置之间的虚拟连线和第二头部位置所指方向上的虚拟射线为两边所形成的角度，确定出第二显示装置所在的位置。
情况二：若至少一个用户信息中包括视线运动信息，则可以根据该视线运动信息所指示的视线移动方向及视线移动角度，确定第二显示装置的位置。
其中，确定头部运动信息所指示的视线移动方向的过程可以是：首先，电子设备可以确定在第一时间段内第三时刻采集的第三用户图像中的人眼图像信息所指示的用户的第一视线位置，即用户在第三时刻视线所指向的位置；然后，电子设备可以确定在第三时刻之后的第四时刻采集的第四用户图像中的人眼图像信息所指示的用户的第二视线位置，即在第四时刻用户视线所指向的位置。
那么，电子设备可以根据第一视线位置和第二视线位置，确定用户的视线由第一视线位置指向第二视线位置的方向即为用户的视线运动信息所指示的视线移动方向。
同时，电子设备还可以确定第一视线位置与第二视线位置相对于用户所在位置的角度为用户的视线运动信息所指示的视线移动角度，
进一步地，电子设备可以根据用户的视线移动方向及视线移动角度，确定相对于第一显示装置处于移动方向上，且与视线移动角度对应的显示装置为第二显示装置，然后，可以确定出第二显示装置的位置。在实际应用中，可以通过眼球追踪等技术，来确定用户的视线移动方向，及以用户所在位置为顶点、第一视线和第二视线为两边所形成的用户的视线移动角度，进而确定出第二显示装置的位置。当用户需要从第一显示装置切换到第二显示装置时，可以直接进行切换，以将电子设备的显示内容显示到第二显示装置上，不需要用户再手动调整第一显示装置和第二显示装置在电子设备中的虚拟位置，从而提高了用户使用电子设备时切换显示装置的便捷性。
比如，如图3所示，在5s内，用户在第4秒看向第一显示装置，即第一显示装置的第一显示位置为第一视线位置，图3中表示为虚线1指向的位置，而在第5秒时用户视线移动到另一个方向，在该另一个方向时用户视线所指向的位置为第二视线位置，即图3中虚线2所指向的位置，从第一视线位置指向第二视线位置的方向即为用户的视线移动方向，其中，图3中箭头2所指的方向为用户的视线移动方向。从而可以确定位于用户的视线移动方向上，第一视线位置、第二视线位置相对于用户所在位置的视线移动角度所对应的显示装置为第二显示装置，其中，相应的视线移动角度可以是50°、60°等。
需要说明的是，在实际应用中确定第二显示装置的位置时，可以采用上述方式之一或结合使用。例如，在使用其中任意一种方式进行计算时，若当前用户的身高较低，电子设备所采集的当前用户的至少一个用户信息中头部运动信息比视线运动信息可能更为准确或者丰富，这时，可以根据当前用户的头部运动信息来确定第二显示装置的物理摆放位置。或者，若电子设备所采集的当前用户的至少一个用户信息中视线运动信息比头部运动信息更为准确或者丰富，这时，可以根据当前用户的视线运动信息来确定第二显示装置的物理摆放位置。也可以同时根据用户信息中的头部运动信息和视线运动信息来确定第二显示装置的位置，从而提高了确定第二显示装置的位置的准确性。
S300：基于相对位置关系，生成与电子设备对应的显示控制参数，并根据显示控制参数显示电子设备中的显示内容；其中，显示控制参数用于指示电子设备在显示过程中将显示内容发送到第一显示装置的第一显示区域和/或第二显示装置的第二显示区域，第一显示区域和第二显示区域之间的位置关系与第一显示装置和第二显示装置之间的相对位置关系一致。
在实际应用中，显示内容可以是图片、视频、文件夹等内容，而显示控制参数可以是控制显示内容所显示的位置、显示内容最后所呈现的显示效果等相关的参数。第一显示装置的第一显示区域可以是第一显示装置在电子设备的屏幕扩展界面中所对应的虚拟区域；而第二显示装置可以是电子设备外接的显示装置，相应的，其第二显示区域可以是在电子设备的屏幕扩展界面中所对应的虚拟区域。
而第一显示装置在电子设备中的虚拟位置和第二显示装置在电子设备中的虚拟位置之间的位置关系，与第一显示装置和第二显示装置物理摆放位置对应一致，如若在电子设备的屏幕扩展界面中，第二显示装置的虚拟区域位于第一显示装置的虚拟的左边，则在实际中第二显示装置可以摆放于第一显示装置的左边。
在实际应用中，若第二显示装置与第一显示装置的物理摆放位置固定，电子设备可以自动根据用户视线或者头部转向来更改电子设备中第一显示装置的虚拟区域与第二显示装置的虚拟区域之间的位置，从而不需要用户手动设置屏幕扩展界面中虚拟区域的位置，提高了用户切换显示器的切换效率及用户体验。
比如，以笔记本电脑的显示器为第一显示装置，与笔记本电脑相连的外接显示器为第二显示装置，其中，第二显示装置可以是一个，也可以是多个。可以通过笔记本的摄像头采集包括用户头部运动信息和/或视线运动信息的至少一个用户信息，根据该至少一个用户信息可以确定出一个或者多个外接显示器与笔记本电脑的显示器之间的相对位置关系，然后根据该相对位置关系，可以生成与笔记本电脑相对应的显示控制参数。
也就是说，笔记本电脑可以根据用户的头部的转向，自动的确定将文件夹、视频、图像等显示内容发送到笔记本电脑的显示器还是外接的显示器中，或者也可以根据用户的视线的转向，自动的确定出将文件夹、视频、图像等显示内容发送到笔记本电脑的显示器还是笔记本电脑外接的显示器中。从而避免了在第一显示装置的虚拟区域和第二显示装置的虚拟区域之间的位置关系，与第一显示装置和第二显示装置物理摆放位置不一致时，需要手动设置第一显示位置及第二显示装置的虚拟区域所对应的虚拟位置，从而确保了显示装置的显示内容不发生错乱，解决了现有技术中存在的用户在切换显示装置时的灵活性较差的技术问题，提高了用户使用的方便性及用户体验。
在实际应用中，笔记本电脑也可以根据用户鼠标光标的移动方向及位置，来自动的判断是将文件夹、视频、图像等显示内容发送到笔记本电脑的显示器中还是外接的显示器中。
可选的，基于相对位置关系，生成与电子设备对应的显示控制参数，可以包括：基于相对位置关系，确定第一显示装置的第一显示区域和第二显示装置的第二显示区域之间的显示位置关系，显示位置关系用于指示显示过程中第一显示区域与第二显示区域之间的显示方向及显示位置的关系；基于显示位置关系，生成显示控制参数。
其中，第一显示区域可以为第一显示装置在电子设备中的虚拟区域，第二显示区域可以是第二显示装置在电子设备中的虚拟区域，而显示位置关系可以是第一显示装置在电子设备中的虚拟区域所对应的虚拟位置与第二显示装置在电子设备中的虚拟区域所对应的虚拟位置之间的显示方向及显示位置的关系，如电子设备的屏幕扩展模式界面下第一显示装置与第二显示装置之间的显示位置关系。根据显示位置关系，可以生成用于指示电子设备在显示过程中将显示内容发送到第一显示装置的第一显示区域和/或第二显示装置的第二显示区域的显示控制参数。
可选的，确定用户针对第一显示装置进行的第一操作的操作方向及移动距离；若操作方向与显示控制参数所指示的显示方向一致，将第一显示区域显示的显示内容按照操作方向移动向第二显示区域移动上述移动距离。
在实际应用中，第一操作可以是用户使用鼠标时的点击操作、拖拽操作等，操作方向可以是用户使用鼠标从当前鼠标光标所在的位置移动到下一个位置所指示的方向，其中，当前鼠标光标所在的位置与下一个位置之间的距离可以为用户操作的移动距离。若用户的操作方向与显示控制参数中显示内容的显示方向一致，则可以将用户当前针对的第一显示装置的第一显示区域所显示的显示内容在操作方向上移动鼠标光标移动的移动距离。
下面，本发明实施例将通过举例来说明信息处理方法在实际应用中的应用场景。
请参见图4，笔记本电脑的显示器在屏幕扩展界面下的虚拟位置对应于区域1，与笔记本电脑相连的第二显示装置在屏幕扩展界面下的虚拟位置对应于区域2。若在物理摆放位置上，第二显示装置位于第一显示装置的右边，而区域1和区域2的位置在屏幕扩展界面下的当前位置如图4所示，即区域1位于区域2的右边。这时，若用户需要将第一显示装置中的文件夹、图片等显示内容拖拽到第二显示装置，则用户需要将显示内容往左边拖拽，才能将显示内容拖拽到第二显示装置中，显然，这并不符合用户的使用习惯。
本发明实施例中，可以通过笔记本电脑的摄像头等采集装置采集用户头部的移动方向或目光焦点的方向，根据对采集的信息的分析结果自动设置笔记本电脑的显示器与外接显示器在屏幕扩展界面中区域1与区域2的相对位置，即用户只要按物理摆放位置从第一显示装置向第二显示装置的方向拖拽文件夹、图片等显示内容就可以，而不用考虑笔记本电脑内的虚拟位置。
请参见图5，本发明实施例还提供一种电子设备，可以应用上述信息处理方法，该电子设备包括获取模块10、第一确定模块20、生成模块30。
其中获取模块10用于获取当前用户的至少一个用户信息；其中，所述至少一个用户信息包括所述用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，所述头部运动信息及所述视线运动信息能够用于指示所述用户当前注视的与所述电子设备相连的第二显示装置所处的位置。
第一确定模块20用于基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，所述相对位置关系至少能够表征由所述第一显示装置指向所述第二显示装置的方向；
生成模块30用于基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，并根据所述显示控制参数显示所述电子设备中的显示内容；其中，所述显示控制参数用于指示所述电子设备在显示过程中将所述显示内容发送到所述第一显示装置的第一显示区域和/或所述第二显示装置的第二显示区域，所述第一显示区域和所述第二显示区域之间的位置关系与所述第一显示装置和所述第二显示装置之间的相对位置关系一致。
可选的，所述获取模块10还可以用于：通过所述电子设备的采集装置采集所述用户在第一时间段内的至少两个用户图像；所述至少两个用户图像中的每个用户图像包括所述用户的人眼图像信息和/或头部图像信息；根据所述至少两个用户图像中的所述人眼图像信息及所述头部图像信息，确定在所述第一时间段内，所述用户相对于所述第一显示装置的头部运动信息和/或视线运动信息。
可选的，所述第一确定模块20还可以用于：基于所述至少一个用户信息中的所述头部运动信息所指示的头部运动方向及头部转动角度，和/或所述视线运动信息所指示的视线移动方向及视线移动角度，确定所述第二显示装置的位置；基于所述第二显示装置的位置及所述第一显示装置的当前位置，确定所述第二显示装置与所述第一显示装置的相对位置关系。
在实际应用中，若所述至少一个用户信息中包括所述头部运动信息，所述第一确定模块20还可以用于：确定所述第一时间段内第一时刻采集的第一用户图像中头部图像信息所指示的所述用户的第一头部位置；及，确定所述第一时间段内且所述第一时刻之后的第二时刻采集的第二用户图像中头部图像信息所指示的所述用户的第二头部位置；基于所述第一头部位置及所述第二头部位置，确定所述用户的头部运动方向及所述第二头部位置与所述第一头部位置相对于所述用户所在位置的角度；基于所述头部运动方向及所述角度，确定相对于所述第一显示装置位于所述头部运动方向上，且与所述角度对应的显示装置为所述第二显示装置，并获取所述第二显示装置的位置。
以及，若所述至少一个用户信息中包括所述视线运动信息，则所述第一确定模块20还可以用于：确定在所述第一时间段内第三时刻采集的第三用户图像中的人眼图像信息所指示的用户的第一视线位置；确定所述第三时刻之后的第四时刻采集的第四用户图像中的人眼图像信息所指示的用户的第二视线位置；基于所述第一视线位置和所述第二视线位置确定用户的视线移动方向，及所述第一视线位置与所述第二视线位置相对于所述用户所在位置的视线角度；基于所述移动方向及所述视线角度，确定相对于所述第一显示装置处于所述移动方向上，且与所述视线角度对应的显示装置为所述第二显示装置，并获取所述第二显示装置的位置。
可选的，所述生成模块30还可以用于：基于所述相对位置关系，确定所述第一显示装置的第一显示区域和所述第二显示装置的第二显示区域之间的显示位置关系，所述显示位置关系用于指示显示过程中所述第一显示区域与所述第二显示区域之间的显示方向及显示位置的关系；基于所述显示位置关系，生成所述显示控制参数。
可选的，所述电子设备还包括：第二确定模块，用于确定所述用户针对所述第一显示装置进行的第一操作的操作方向及移动距离；运行模块，用于若所述操作方向与所述显示控制参数所指示的显示方向一致，将所述第一显示区域显示的显示内容按照所述操作方向移动向所述第二显示区域移动所述移动距离。
以上所述，以上的所有实施例仅用以对本发明的技术方案进行的详细的介绍，且以上实施例的说明仅仅只是用于帮助理解本发明的方法及其核心思想，不应该理解为对本发明的限定。本技术领域的技术人员在本发明揭露的技术范围内，可以轻易的想到的变化或者替换，都应该涵盖在本发明的保护范围之内。
显然，本领域的技术人员可以对本发明进行各种修改和变形而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同的技术范围之内，则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种信息处理方法，应用于一电子设备，所述方法包括：
获取当前用户的至少一个用户信息；其中，所述至少一个用户信息包括所述用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，所述头部运动信息及所述视线运动信息能够用于指示所述用户当前注视的与所述电子设备相连的第二显示装置所处的位置；
基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，所述相对位置关系至少能够表征由所述第一显示装置指向所述第二显示装置的方向；
基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，并根据所述显示控制参数显示所述电子设备中的显示内容；其中，所述显示控制参数用于指示所述电子设备在显示过程中将所述显示内容发送到所述第一显示装置的第一显示区域和/或所述第二显示装置的第二显示区域，所述第一显示区域和所述第二显示区域之间的位置关系与所述第一显示装置和所述第二显示装置之间的相对位置关系一致。
2.如权利要求1所述的方法，其特征在于，获取当前用户的至少一个用户信息，包括：
通过所述电子设备的采集装置采集所述用户在第一时间段内的至少两个用户图像；所述至少两个用户图像中的每个用户图像包括所述用户的人眼图像信息和/或头部图像信息；
根据所述至少两个用户图像中的所述人眼图像信息及所述头部图像信息，确定在所述第一时间段内，所述用户相对于所述第一显示装置的头部运动信息和/或视线运动信息。
3.如权利要求2所述的方法，其特征在于，基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，包括：
基于所述至少一个用户信息中的所述头部运动信息所指示的头部运动方向及头部转动角度，和/或所述视线运动信息所指示的视线移动方向及视线移动角度，确定所述第二显示装置的位置；
基于所述第二显示装置的位置及所述第一显示装置的当前位置，确定所述第二显示装置与所述第一显示装置的相对位置关系。
4.如权利要求1所述的方法，其特征在于，基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，包括：
基于所述相对位置关系，确定所述第一显示装置的第一显示区域和所述第二显示装置的第二显示区域之间的显示位置关系，所述显示位置关系用于指示显示过程中所述第一显示区域与所述第二显示区域之间的显示方向及显示位置的关系；
基于所述显示位置关系，生成所述显示控制参数。
5.如权利要求4所述的方法，其特征在于，所述方法还包括：
确定所述用户针对所述第一显示装置进行的第一操作的操作方向及移动距离；
若所述操作方向与所述显示控制参数所指示的显示方向一致，将所述第一显示区域显示的显示内容按照所述操作方向移动向所述第二显示区域移动所述移动距离。
6.一种电子设备，其特征在于，所述电子设备包括：
获取模块，用于获取当前用户的至少一个用户信息；其中，所述至少一个用户信息包括所述用户相对于电子设备的第一显示装置的头部运动信息和/或视线运动信息，所述头部运动信息及所述视线运动信息能够用于指示所述用户当前注视的与所述电子设备相连的第二显示装置所处的位置；
第一确定模块，用于基于所述至少一个用户信息，确定所述第二显示装置与所述第一显示装置之间的相对位置关系，所述相对位置关系至少能够表征由所述第一显示装置指向所述第二显示装置的方向；
生成模块，用于基于所述相对位置关系，生成与所述电子设备对应的显示控制参数，并根据所述显示控制参数显示所述电子设备中的显示内容；其中，所述显示控制参数用于指示所述电子设备在显示过程中将所述显示内容发送到所述第一显示装置的第一显示区域和/或所述第二显示装置的第二显示区域，所述第一显示区域和所述第二显示区域之间的位置关系与所述第一显示装置和所述第二显示装置之间的相对位置关系一致。
7.如权利要求6所述的电子设备，其特征在于，所述获取模块用于：
通过所述电子设备的采集装置采集所述用户在第一时间段内的至少两个用户图像；所述至少两个用户图像中的每个用户图像包括所述用户的人眼图像信息和/或头部图像信息；
根据所述至少两个用户图像中的所述人眼图像信息及所述头部图像信息，确定在所述第一时间段内，所述用户相对于所述第一显示装置的头部运动信息和/或视线运动信息。
8.如权利要求7所述的电子设备，其特征在于，所述第一确定模块用于：
基于所述至少一个用户信息中的所述头部运动信息所指示的头部运动方向及头部转动角度，和/或所述视线运动信息所指示的视线移动方向及视线移动角度，确定所述第二显示装置的位置；
基于所述第二显示装置的位置及所述第一显示装置的当前位置，确定所述第二显示装置与所述第一显示装置的相对位置关系。
9.如权利要求6所述的电子设备，其特征在于，所述生成模块用于：
基于所述相对位置关系，确定所述第一显示装置的第一显示区域和所述第二显示装置的第二显示区域之间的显示位置关系，所述显示位置关系用于指示显示过程中所述第一显示区域与所述第二显示区域之间的显示方向及显示位置的关系；
基于所述显示位置关系，生成所述显示控制参数。
10.如权利要求9所述的电子设备，其特征在于，所述电子设备还包括：
第二确定模块，用于确定所述用户针对所述第一显示装置进行的第一操作的操作方向及移动距离；
运行模块，用于若所述操作方向与所述显示控制参数所指示的显示方向一致，将所述第一显示区域显示的显示内容按照所述操作方向移动向所述第二显示区域移动所述移动距离。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710166039.4A CN107422843A (zh) | 2017-03-20 | 2017-03-20 | 一种信息处理方法及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710166039.4A CN107422843A (zh) | 2017-03-20 | 2017-03-20 | 一种信息处理方法及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107422843A true CN107422843A (zh) | 2017-12-01 |
Family
ID=60424066
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710166039.4A Pending CN107422843A (zh) | 2017-03-20 | 2017-03-20 | 一种信息处理方法及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107422843A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111459436A (zh) * | 2020-03-31 | 2020-07-28 | 联想(北京)有限公司 | 输出控制方法及装置 |
| CN114600062A (zh) * | 2019-09-26 | 2022-06-07 | 谷歌有限责任公司 | 利用显示设备的物理位置的设备管理器 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101149673A (zh) * | 2006-09-18 | 2008-03-26 | 联想(北京)有限公司 | 多显示器系统及自动识别调整多个显示器的相对位置的方法 |
| WO2011022014A1 (en) * | 2009-08-20 | 2011-02-24 | Displaylink Corporation | Configuration of additional display devices |
| CN104769524A (zh) * | 2012-11-07 | 2015-07-08 | 高通股份有限公司 | 用于使用具有多个计算机的计算机输入设备的技术 |
| CN105094741A (zh) * | 2015-09-14 | 2015-11-25 | 联想(北京)有限公司 | 一种多屏显示系统和方法 |
-
2017
- 2017-03-20 CN CN201710166039.4A patent/CN107422843A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101149673A (zh) * | 2006-09-18 | 2008-03-26 | 联想(北京)有限公司 | 多显示器系统及自动识别调整多个显示器的相对位置的方法 |
| WO2011022014A1 (en) * | 2009-08-20 | 2011-02-24 | Displaylink Corporation | Configuration of additional display devices |
| CN104769524A (zh) * | 2012-11-07 | 2015-07-08 | 高通股份有限公司 | 用于使用具有多个计算机的计算机输入设备的技术 |
| CN105094741A (zh) * | 2015-09-14 | 2015-11-25 | 联想(北京)有限公司 | 一种多屏显示系统和方法 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114600062A (zh) * | 2019-09-26 | 2022-06-07 | 谷歌有限责任公司 | 利用显示设备的物理位置的设备管理器 |
| CN111459436A (zh) * | 2020-03-31 | 2020-07-28 | 联想(北京)有限公司 | 输出控制方法及装置 |
| CN111459436B (zh) * | 2020-03-31 | 2021-11-16 | 联想(北京)有限公司 | 输出控制方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108499105B (zh) | 在虚拟环境中进行视角调整的方法、装置及存储介质 | |
| US8330793B2 (en) | Video conference | |
| US9250746B2 (en) | Position capture input apparatus, system, and method therefor | |
| CN102662577B (zh) | 一种基于三维显示的光标操作方法及移动终端 | |
| CN108463789B (zh) | 信息处理设备、信息处理方法和程序 | |
| US20100100853A1 (en) | Motion controlled user interface | |
| CN105892642A (zh) | 一种根据眼部动作对终端进行控制的方法及装置 | |
| CN108762492A (zh) | 基于虚拟场景实现信息处理的方法、装置、设备及存储介质 | |
| US20140176676A1 (en) | Image interaction system, method for detecting finger position, stereo display system and control method of stereo display | |
| KR20130108643A (ko) | 응시 및 제스처 인터페이스를 위한 시스템들 및 방법들 | |
| CN103530061A (zh) | 显示装置及控制方法、手势识别方法、头戴显示装置 | |
| CN104270623B (zh) | 一种显示方法及电子设备 | |
| CN108319362B (zh) | 一种全景信息显示方法、电子设备和计算机存储介质 | |
| KR20150040580A (ko) | 가상 공간 멀티 터치 인터랙션 장치 및 방법 | |
| CN112817453A (zh) | 虚拟现实设备和虚拟现实场景中物体的视线跟随方法 | |
| US20210014468A1 (en) | Information processing apparatus, information processing method, and recording medium | |
| CN109782913A (zh) | 一种控制屏幕内容显示的方法及装置 | |
| CN104749980A (zh) | 一种显示控制方法及电子设备 | |
| JP2021010101A (ja) | 遠隔作業支援システム | |
| CN205485920U (zh) | 一种显示控制装置及显示控制系统 | |
| US20240045502A1 (en) | Peripheral luminance or color remapping for power saving | |
| CN107422843A (zh) | 一种信息处理方法及电子设备 | |
| US20170155827A1 (en) | Camera pan-tilt-zoom (ptz) control apparatus | |
| CN107957781B (zh) | 信息显示方法及装置 | |
| CN106293065A (zh) | 应用程序的控制方法及控制系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171201 |