CN114413141A - 一种显示屏的位姿调整方法、装置、终端设备和存储介质 - Google Patents

一种显示屏的位姿调整方法、装置、终端设备和存储介质 Download PDF

Info

Publication number
CN114413141A
CN114413141A CN202210324889.3A CN202210324889A CN114413141A CN 114413141 A CN114413141 A CN 114413141A CN 202210324889 A CN202210324889 A CN 202210324889A CN 114413141 A CN114413141 A CN 114413141A
Authority
CN
China
Prior art keywords
display screen
target
pose
user
target display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210324889.3A
Other languages
English (en)
Other versions
CN114413141B (zh
Inventor
何成伟
邝彬强
肖松林
刘科
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Chuntex Elite Electronic Technology Co Ltd
Original Assignee
Guangdong Chuntex Elite Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Chuntex Elite Electronic Technology Co Ltd filed Critical Guangdong Chuntex Elite Electronic Technology Co Ltd
Priority to CN202210324889.3A priority Critical patent/CN114413141B/zh
Publication of CN114413141A publication Critical patent/CN114413141A/zh
Application granted granted Critical
Publication of CN114413141B publication Critical patent/CN114413141B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16MFRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00Stands or trestles as supports for apparatus or articles placed thereon Stands for scientific apparatus such as gravitational force meters
    • F16M11/02Heads
    • F16M11/04Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand
    • F16M11/06Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting
    • F16M11/12Means for attachment of apparatus; Means allowing adjustment of the apparatus relatively to the stand allowing pivoting in more than one direction
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F16ENGINEERING ELEMENTS AND UNITS; GENERAL MEASURES FOR PRODUCING AND MAINTAINING EFFECTIVE FUNCTIONING OF MACHINES OR INSTALLATIONS; THERMAL INSULATION IN GENERAL
    • F16MFRAMES, CASINGS OR BEDS OF ENGINES, MACHINES OR APPARATUS, NOT SPECIFIC TO ENGINES, MACHINES OR APPARATUS PROVIDED FOR ELSEWHERE; STANDS; SUPPORTS
    • F16M11/00Stands or trestles as supports for apparatus or articles placed thereon Stands for scientific apparatus such as gravitational force meters
    • F16M11/02Heads
    • F16M11/18Heads with mechanism for moving the apparatus relatively to the stand
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D3/00Control of position or direction
    • G05D3/12Control of position or direction using feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Abstract

本申请适用于显示屏技术领域,提供了一种显示屏的位姿调整方法、装置、终端设备和存储介质。其中,所述位姿调整方法包括:确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。本申请的实施例中将目标显示屏的部分或全部显示区域设为预设位置,能够有利于使每个观看目标显示屏的用户均拥有较好的观看体验。

Description

一种显示屏的位姿调整方法、装置、终端设备和存储介质
技术领域
本申请属于显示屏技术领域,尤其涉及一种显示屏的位姿调整方法、装置、终端设备和存储介质。
背景技术
显示屏用于显示图像及色彩,目前广泛应用于手机、笔记本电脑、显示器、电视以及其他具有图像或者文字显示功能的设备上。目前的显示屏往往以固定位姿安装在特定位置上,或需人工地进行位姿调整,当显示屏前的用户较多时,往往难以使每个观看显示屏的用户均拥有较好的观看效果。
发明内容
本申请实施例提供一种显示屏的位姿调整方法、装置、终端设备和存储介质,能够有利于使每个观看显示屏的用户均拥有较好的观看体验。
本申请实施例第一方面提供一种显示屏的位姿调整方法,所述位姿调整方法包括:
确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;
基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;
基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
本申请实施例第二方面提供的一种显示屏的位姿调整装置,所述位姿调整装置包括:
目标用户确定单元,用于确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;
目标位置确定单元,用于基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;
位姿调整单元,用于基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
本申请实施例第三方面提供一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述位姿调整方法的步骤。
本申请实施例第四方面提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述位姿调整方法的步骤。
本申请实施例第五方面提供了一种计算机程序产品,当计算机程序产品在终端设备上运行时,使得终端设备执行时实现方法的步骤。
在本申请的实施方式中,终端设备能够确定目标用户,基于每个目标用户的实时位置,确定与每个实时位置的距离均在预设距离范围内的目标位置,并基于目标位置和目标显示屏的初始位姿,调整目标显示屏的位姿,其中,目标用户为注视预设位置的实时用户;由于目标显示屏可基于目标位置进行位姿调整,且预设位置在目标显示屏的显示区域内;在实际应用中,可以将目标显示屏的部分或全部显示区域设为预设位置,从而使得目标显示屏的位姿可以根据观看显示区域的用户的实时位置进行调整,有利于使每个观看目标显示屏的用户均拥有较好的观看体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种显示屏的位姿调整方法的实现流程示意图;
图2是本申请实施例提供的确定目标位置的示意图;
图3是本申请实施例提供的辅助设备进行位姿调整的示意图;
图4是本申请实施例提供的目标显示屏与协同显示屏共同工作的具体实现流程示意图;
图5是本申请实施例提供的显示区域模板的示意图;
图6是本申请实施例提供的调整非共用类型的辅助装置的位姿的示意图;
图7是本申请实施例提供的调整共用类型的辅助装置的位姿的示意图;
图8是本申请实施例提供的重新进行目标显示屏的位姿调整的具体实现流程示意图;
图9是本申请实施例提供的智能支架的立体结构示意图;
图10是图9所示的智能支架的正视示意图,其中虚线示意出了具有显示功能的显示设备;
图11是图9所示的智能支架向上移动预定距离后的立体结构示意图;
图12是图11所示的智能支架实现上下移动的移动机构的结构示意图;
图13是本申请实施例提供的一种显示屏的位姿调整装置的结构示意图;
图14是本申请实施例提供的终端设备的内部结构示意图;
以上附图中所涉及到的标号明细如下:
90、智能支架;92、固定结构;93、显示设备;94、摄像头;95、底座;96、移动臂;97、第一转动臂;98、第二转动臂;99、第三转动臂;100、移动机构;101、固定轨;102、滑轨;103、电机;14、终端设备;140、处理器;141、存储器;142、计算机程序。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护。
显示屏用于显示图像及色彩,目前广泛应用于手机、笔记本电脑、显示器、电视以及其他具有图像或者文字显示功能的设备上。目前的显示屏往往以固定位姿安装在特定位置上,或需人工地进行位姿调整,当显示屏前的用户较多时,往往难以使每个观看显示屏的用户均拥有较好的观看效果。
本申请的技术方案正是为了解决这一问题。
为了说明本申请的技术方案,下面通过具体实施例来进行说明。
请同时参阅图1,图1示出了本申请提供的显示屏的位姿调整方法的流程示意图,该位姿调整方法应用于终端设备上,可适用于需使每个观看显示屏的用户均拥有较好的观看体验的情形。
其中,上述终端设备可以为智能手机、智能电视、电脑显示器或其他配有显示功能的显示设备,相应的,上述位姿调整方法所调整的位姿即为终端设备的显示屏的位姿;上述终端设备也可以是智能支架等固定设备,该固定设备能够固定配有显示屏的显示设备,相应的,上述位姿调整方法所调整的位姿即为终端设备所固定的显示设备的显示屏的位姿。
具体的,上述显示屏的位姿调整方法可以包括以下步骤S101至步骤S103。
步骤S101,确定目标用户。
在本申请的实施方式中,上述目标用户为注视预设位置的实时用户。
其中,预设位置是对目标显示屏进行位姿调整的参考位置,并且,预设位置在目标显示屏的显示区域内。在本申请的一些实施方式中,预设位置具体可以为目标显示屏的部分或全部显示区域。目标显示屏即为当前进行位姿调整的显示屏。
为了满足用户在不同使用场景的功能需求,上述终端设备可以提供不同的功能模式。用户在使用终端设备时,可以控制终端设备进入对应的功能模式。
其中,用户控制终端设备的方式可以根据实际情况进行选择。例如,当终端设备为显示设备时,用户可以通过触发终端设备上的按键,或者在目标显示屏上进行触屏操作等方式,控制智能设备进入对应的功能模式。当终端设备为智能支架时,用户可以通过触发智能支架上的按键、触发智能支架的控制遥控器上的按键,或者,在被智能支架固定且与智能支架连接的显示设备上对智能支架进行设置等方式,控制智能支架进入对应的功能模式。
相应的,终端设备可以确定有效用户,并依据当前所处的功能模式,筛选出至少一位有效用户作为目标用户。其中,有效用户为注视预设位置,且位于显示屏预设范围内的用户。
在本申请的一些实施方式中,终端设备可以获取第一用户图像,以识别出第一用户图像中的有效用户。
具体的,终端设备可以通过摄像头对有效采集区域进行拍摄,得到第一用户图像。一些实施方式中,摄像头可以是终端设备自身的摄像头,且终端设备可以具有控制摄像头移动的移动机构和/或控制摄像头旋转的齿轮机构,相应的,有效采集区域即为摄像头基于移动机构的移动和/或齿轮机构的旋转所能扫描到的区域。在另一些实施方式中,上述摄像头也可以是与终端设备分离的传感器。
摄像头通过对有效采集区域进行扫描与拍摄,可以得到多帧图像。终端设备在获取到摄像头拍摄的多帧图像之后,可以将多帧图像中拍摄到用户的图像确认为第一用户图像。
获取到第一用户图像之后,终端设备可以进行人脸识别以及眼部特征点识别,将注视预设位置,且位于目标显示屏预设范围内的用户确认为有效用户。
具体的,通过对第一用户图像进行识别,终端设备可以得到第一用户图像中人眼所在的像素位置。依据预先标定好的摄像头内外参进行坐标转换与计算,可以得到用户双眼的绝对位置。利用双眼的绝对位置以及目标显示屏所在的绝对位置,终端设备可以确认用户是否位于目标显示屏的预设范围内。其中,预设范围可以包括角度范围和距离范围,可以根据实际情况或经验值进行设置。
并且,利用双眼的绝对位置,终端设备可以确定人眼和目标显示屏之间的相对位置关系,进而预估人眼注视的焦点是否位于预设位置上。
如果某个用户的视线焦点位于预设位置上,也即注视预设位置,且该用户位于目标显示屏的预设范围内,则终端设备可以将其确认为有效用户。
得到第一用户图像中的有效用户之后,终端设备可以依据当前所处的功能模式,筛选出至少一位有效用户作为目标用户。
在本申请的一些实施方式中,上述功能模式可以包括个人模式和会议模式。
个人模式对应的使用场景为需使目标显示屏朝向一位特定用户的场景。例如,当某个用户在目标显示屏前工作时,可以控制终端设备进入个人模式。若终端设备所处的功能模式为个人模式,终端设备可以将与目标显示屏距离最近的有效用户作为目标用户,避免因其他用户影响目标显示屏的位姿调整而导致的不能为目标用户提供观看目标显示屏的最佳效果的问题。
在另一些实施方式中,终端设备还可以获取预先配置好的用户标识,如果第一用户图像中存在与用户标识匹配的有效用户,则可以将该有效用户确认为目标用户,否则,将与目标显示屏距离最近的有效用户作为目标用户。
其中,用户标识可以包括但不限于人脸信息和瞳孔信息。
会议模式对应的使用场景则为需使目标显示屏朝向一位或多位用户的场景。例如,当多位工作人员在会议室中使用目标显示屏进行视频演示,或者,多位家庭成员使用目标显示屏进行观影时,可以控制终端设备进入会议模式。若终端设备所处的功能模式为会议模式,终端设备可以将第一用户图像中的所有有效用户作为目标用户。
此外,如果第一用户图像中不存在有效用户,终端设备可以在经过预设时长后重新采集用户图像,或者,也可以通过语音或指示灯对用户进行提醒。
在本申请的实施方式中,终端设备根据不同的功能模式,可以确定出对应的目标用户,进而满足用户在不同使用场景中的使用需求。并且,所确定出的目标用户均为有效用户,即,目标用户不是场景中位于目标显示屏预设范围之外,或者未注视预设位置的用户。将目标显示屏的部分或全部显示区域设为预设位置时,可以剔除掉未有效观看目标显示屏的用户,能够避免这些用户影响目标显示屏的位姿调整效果。
在本申请的另一些实施方式中,终端设备还可以通过红外传感器、温度传感器或其他信息采集设备采集目标显示屏一定范围内用户的用户信息,进而确定出其中的目标用户。例如,基于红外传感器,终端设备可以确定出与目标显示屏最接近的用户,将其作为目标用户。
步骤S102,基于每个目标用户的实时位置,确定目标位置。
其中,上述实时位置可以为用于表征目标用户的用户参考点的位置。其中,用户参考点可以包括但不限于用户的重心点、脸部中心点、用户双眼连线的中心点或其他特征点。实时位置可以通过图像识别、红外测距等方式确定。应理解,以用户双眼连线的中心点作为用户参考点时,完成位姿调整后目标显示屏的位姿可以使目标用户拥有更好的观看效果。
在本申请的实施方式中,上述目标位置与每个实时位置的距离均在预设距离范围内,预设距离范围可以根据实际情况进行设置。
在本申请的一些实施方式中,若目标用户的数量等于一,终端设备可以将实时位置作为目标位置。若目标用户的数量大于一,终端设备可以基于实时位置,确定各个目标用户的几何中心位置,并将几何中心位置作为目标位置。具体的,如果目标用户的数量为二,则几何中心位置可以为两个目标用户的实时位置的中点。如果目标用户的数量大于二,则几何中心点可以为以各个目标用户的实时位置为角点所构成的多边形的重心点或中心点。
例如,如图2所示,根据目标用户21、22和23的实时位置确定出的目标位置可以为以目标用户21、22和23的实时位置为角点所构成的三角形的中心点24。
需要说明的是,其他确定目标位置的方式同样适用于本申请,所确定出的目标位置与每个实时位置的距离均在预设距离范围内即可。例如,终端设备可以以每个实时位置为圆心,以预先设置好的半径作圆,将所有圆形的交集区域内任意位置确认为目标位置。又例如,终端设备可以计算相机坐标系中所有实时位置对应坐标的平均值,进而确定目标位置。
步骤S103,基于目标位置和目标显示屏的初始位姿,调整目标显示屏的位姿。
其中,初始位姿可以指进行位姿调整前目标显示屏的位置和朝向。
在本申请的一些实施方式中,终端设备可以在每次完成调整位姿后记录目标显示屏的位姿,本次进行目标显示屏的位姿调整时,终端设备可以将上一次记录的目标显示屏的位姿作为初始位姿。
在本申请的另一些实施方式中,终端设备也可以在用户选择功能模式之后,进行目标显示屏的复位,复位后目标显示屏的位姿可以是预先配置好的默认位姿,相应的,每次进行位姿调整时,目标显示屏的初始位姿即为复位后目标显示屏的位姿。
本申请的实施方式中,基于目标位置和目标显示屏的初始位姿,目标显示屏可以确定目标显示屏的目标位姿,以基于目标位姿和初始位姿调整目标显示屏的位姿。
在本申请的一些实施方式中,上述终端设备可以具有支持目标显示屏进行位姿调整的调整结构。调整结构可以为目标显示屏提供多个可调节方向。终端设备基于目标位姿,可以控制调整结构在其中至少一个可调节方向上进行调节,进而实现目标显示屏的位姿调节。
需要说明的是,若需进行位姿调节的可调节方向的数量大于一,终端设备可以依次在每个可调节方向上进行目标显示屏的位姿调整,即,完成目标显示屏在某个可调节方向上的位姿调整后,再继续调整目标显示屏在下一个可调节方向上的位姿,以此类推,直至完成目标显示屏在所有可调节方向上的位姿调整。调整位姿时,可调节方向的选择顺序可以根据实际情况决定。
在本申请的实施方式中,终端设备能够确定目标用户,基于每个目标用户的实时位置,确定与每个实时位置的距离均在预设距离范围内的目标位置,并基于目标位置和目标显示屏的初始位姿,调整目标显示屏的位姿,其中,目标用户为注视预设位置的实时用户;由于目标显示屏可基于目标位置进行位姿调整,并且预设位置在目标显示屏的显示区域内,在实际应用中,可以将目标显示屏的部分或全部显示区域设为预设位置,从而使得目标显示屏的位姿可以根据观看显示区域的用户的实时位置进行调整,有利于使每个观看目标显示屏的用户均拥有较好的观看体验。
在本申请的一些实施方式中,终端设备可以基于目标位置、目标显示屏的初始位姿和预设约束条件,计算目标显示屏在每个可调节方向上的第一调节参数,并根据每个可调节方向上的第一调节参数,调整目标显示屏的位姿。
其中,上述预设约束条件可以包括:使目标显示屏的中心点位于目标位置的最佳视点上。
具体的,终端设备可以建立参考坐标系,并将目标位置用参考坐标系中的坐标矢量表示。例如,终端设备可以依据初始位姿,以目标显示屏的中心点为原点,以目标显示屏的显示区域所在平面为xOy面,建立参考坐标系。接着,利用目标位置的坐标矢量,确定使目标位置的中心点位于目标位置的最佳视点时目标显示屏的目标位姿,进而确定从初始位姿调整至目标位姿的第一调节参数。
在本申请的一些实施方式中,终端设备可以确定使与目标位置之间高度差为预设高度差值、与目标位置之间距离差为预设距离差值,且目标显示屏的显示区域与目标位置的坐标矢量之间的夹角在预设角度范围内时目标显示屏的位姿,将其作为目标位姿。其中,预设高度差值、预设距离差值和预设角度范围均可以根据实际情况或经验值进行设置。
考虑到硬件结构的限制,实际应用中,每个可调节方向可以存在对应的可调节范围。基于此,终端设备可以获取各个可调节方向上的可调节范围,调整目标显示屏的位姿,直至每个可调节方向上的调节量满足第一调节参数,或者到达可调节范围的边界值,进而,在可调节范围内尽可能地为观看目标显示屏的用户提供较好的视角。
在实际使用过程中,上述终端设备可以与其它设备共同完成工作任务。其中,终端设备可以通过有线连接或无线连接的方式和其他设备连接,以进行数据交互。
在本申请的一些实施方式中,上述其他设备可以指辅助设备,该辅助设备可以是输入输出设备或者用于固定输入输出设备的辅助支架,输入输出设备可以指蓝牙音箱、键盘等设备,辅助支架可以是与智能支架结构相同或不同的支架。
终端设备在根据每个可调节方向上的第一调节参数,调整目标显示屏的位姿之后,可以将第一调节参数发送至辅助设备,以使辅助设备根据第一调节参数进行辅助装置的位姿调整。
其中,上述辅助装置可以用于辅助所述目标显示屏工作。
例如,当上述辅助设备为蓝牙音箱时,辅助装置可以指蓝牙音箱的音频输出装置;当上述辅助设备为键盘时,辅助装置可以指键盘的主键盘区。当上述辅助设备为辅助支架时,辅助装置可以指辅助支架固定的输入输出设备的装置,例如辅助支架固定的蓝牙音箱的音频输出装置。
具体的,辅助设备可以根据辅助装置的初始位姿和第一调节参数,对辅助装置进行位姿调整,使得辅助装置可以和目标显示屏进行位姿的同步调整。
在一些实施方式中,由于位姿调整前,辅助装置和目标显示屏之间的相对位姿一般能够使辅助装置为目标显示屏提供最好的辅助效果,因此,辅助设备可以直接根据第一调节参数和辅助装置的初始位姿进行位姿调整,以保持位姿调整前辅助装置和目标显示屏之间的相对位姿,进而可以使得目标位置拥有辅助装置的最佳辅助效果。
例如,如图3所示,上述终端设备为智能支架90,上述辅助设备为辅助支架31,且上述辅助支架31的辅助装置为其固定的智能音箱的音频输出装置。其中,智能支架90进行位姿调整前的效果示意图如3a所示,基于本申请提供的显示屏的位姿调整方法,智能支架90可以对其固定的显示设备的显示屏进行位姿调整,完成位姿调整后的效果示意图如3b所示。此时,目标位置上可以拥有目标显示屏的最佳视角。智能支架90完成目标显示屏的位姿调整后,将第一调节参数发送至辅助支架31,辅助支架31根据第一调节参数进行位姿调整,完成位姿调整后的效果示意图如3c所示。此时,目标位置上可以拥有音频输出装置的最佳收听效果。
在本申请的另一些实施方式中,上述其他设备可以为协同设备,同样的,协同设备可以是显示设备或固定显示设备的协同支架,所述的显示设备安装有协同显示屏,可以与目标显示屏共同完成显示工作。其中,协同显示屏所属的显示设备可以与目标显示屏所属的显示设备类型相同或不同,例如,目标显示屏可以指智能手机的显示屏,而协同显示屏可以指平板电脑的显示屏。
并且,当协同设备为协同支架时,协同支架可以是与智能支架结构相同或不同的支架。
此时,如图4所示,上述位姿调整方法可以包括步骤S401至步骤S403。
步骤S401,获取协同显示屏的协同显示屏信息。
其中,协同显示屏信息可以包括协同显示屏的数量、位置等信息。
在本申请的一些实施方式中,终端设备在与某一设备连接后,可以获取该设备发送的配置信息。配置信息中可以记录有该设备的设备信息,比如该设备自身的设备信息,或该设备固定的设备的设备信息;配置信息中还可以记录有该设备所在的绝对位置(例如在世界坐标系中的位置)。根据设备信息,终端设备可以判断该设备或该设备固定的设备是否为显示设备。若是显示设备,并且该设备的绝对位置位于终端设备的预设范围之内,则可以将该设备确定为协同设备。遍历所有已连接的设备,可以统计得到所有协同设备的数量。相应的,可以将每个协同设备关联的显示屏作为协同显示屏,并获取协同显示屏的协同显示屏信息。
此外,上述协同显示屏信息可以包括协同显示屏的显示区域大小,例如可以是协同显示屏的尺寸数据。
步骤S402,基于协同显示屏信息,确定由协同显示屏和目标显示屏构成的显示区域。
步骤S403,根据目标显示屏在显示区域中的相对位置、目标位置和目标显示屏的初始位姿,调整目标显示屏的位姿。
在本申请的一些实施方式中,终端设备可以获取目标显示屏的显示区域大小,然后,基于目标显示屏的显示区域大小、协同显示屏的数量及协同显示屏的显示区域大小,确定由目标显示屏和协同显示屏构成的显示区域。
其中,若终端设备为显示设备,则目标显示屏的显示区域大小可以由用户预先存储至终端设备的存储器中,若终端设备为智能支架,则目标显示屏的显示区域大小可以由终端设备在与其固定的显示设备建立连接后进行数据交互获得。
具体的,终端设备可以获取不同显示屏总数量对应的显示区域模板。显示区域模板中包括多个子区域,每个子区域有对应的区域大小。若协同显示屏和目标显示屏的总数量与某个显示区域模板对应的显示屏总数量相同,且目标显示屏的显示区域大小及协同显示屏的显示区域大小分别与显示区域模板中不同子区域的区域大小匹配,则可以利用该显示区域模板,确定由协同显示屏和目标显示屏组成的显示区域,以及该显示区域的显示中心点。
并且,根据与目标显示屏的显示区域大小匹配的子区域在显示区域模板中的位置,可以得到目标显示屏在显示区域内的相对位置。
例如,某一显示区域模板如图5所示,其中,显示区域模板50对应的显示屏总数量为三,显示区域模板50中子区域51的区域大小为
Figure 730801DEST_PATH_IMAGE001
,子区域52的区域大小为
Figure 116783DEST_PATH_IMAGE002
,子区域53的区域大小为
Figure 252446DEST_PATH_IMAGE003
。假设目标显示屏的显示区域大小为
Figure 116497DEST_PATH_IMAGE002
,协同显示屏包括协同显示屏A和协同显示屏B,协同显示屏A的显示区域大小为
Figure 727607DEST_PATH_IMAGE004
,同时协同显示屏B的显示区域大小为
Figure 143545DEST_PATH_IMAGE003
。则终端设备可以将该显示区域模板50作为由协同显示屏和目标显示屏组成的显示区域,同时确定出该显示区域的显示中心点。并且,将子区域52在显示区域模板50中的相对位置作为目标显示屏在显示区域内的相对位置。此外,协同显示屏A和协同显示屏B也可以得到自身在显示区域内的相对位置。
此时,根据目标显示屏在显示区域中的相对位置、目标位置和目标显示屏的初始位姿,终端设备可以调整目标显示屏的位姿。例如,在一些实施方式中,可以参考前述终端设备单独工作时确定目标显示屏的目标位姿的方式,将目标显示屏的中心点替换为目标显示屏和协同显示屏构成的显示区域的中心点,计算出使目标显示屏和协同显示屏构成的显示区域的中心点位于目标位置的最佳视点上时该显示区域的目标位姿。同时,利用目标显示屏在显示区域中的相对位置,预估目标显示屏的朝向与目标显示屏和协同显示屏所构成的显示区域的朝向之间的偏移量,进而依据偏移量、目标显示屏在显示区域中的相对位置、显示区域的目标位姿,确定目标显示屏的目标位姿。
接着,基于目标显示屏的目标位姿,终端设备可以计算目标显示屏在每个可调节方向上的第二调节参数,并根据每个可调节方向上的第二调节参数,调整目标显示屏的位姿。其中,第二调节参数的计算方式可以参考第一调节参数的计算方式,本申请对此不进行赘述。
应理解,协同设备可以通过与终端设备相同的方式对协同显示屏进行位姿调整。
一些实施方式中,当终端设备和协同设备均完成位姿调节后,目标显示屏和协同显示屏构成的显示区域的中心点位于目标位置的最佳视点上,目标用户使用目标显示屏和协同显示屏时均能够有较好的使用体验。
在本申请的另一些实施方式中,终端设备还可以获取目标显示屏和协同显示屏之间的参考相对位姿,然后,依据目标显示屏和每个协同显示屏之间的参考相对位姿、协同显示屏的数量、目标显示屏的显示区域大小和协同显示屏的显示区域大小,确定由目标显示屏和协同显示屏组成的显示区域,以及该显示区域的显示中心点。
其中,上述参考相对位姿可以由用户进行设置,也可以根据用户历史使用目标显示屏和协同显示屏时,在完成调节位姿后目标显示屏和每个协同显示屏之间的相对位姿确定。
例如,以图5继续进行说明,完成协同显示屏A和协同显示屏B的位姿调整之后,对应的协同设备可以将协同显示屏的目标位姿发送给终端设备。终端设备可以基于目标显示屏的目标位姿、协同显示屏A的目标位姿和协同显示屏B的目标位姿,确定并存储目标显示屏和协同显示屏A之间的相对位姿,以及目标显示屏和协同显示屏B之间的相对位姿,作为参考相对位姿。下一次使用终端设备时,终端设备即可利用已存储的参考相对位姿、协同显示屏A和协同显示屏B的显示区域大小,反推由目标显示屏、协同显示屏A和协同显示屏B组成的显示区域,以及目标显示屏的目标位姿。
本申请的实施方式中,通过获取协同显示屏信息,并基于协同支架信息,确定由目标显示屏和协同显示屏构成的显示区域,以根据目标显示屏在显示区域中的相对位置、目标位置和目标显示屏的初始位姿,调整目标显示屏的位姿,实际应用中,可以使显示区域的中心点位于目标位置的最佳视点上,进而在完成位姿调节后,每个目标用户观看目标显示屏和协同显示屏的视角均接近于最佳视角,有利于提高用户的观看体验。
需要说明的是,在目标显示屏与协同显示屏协同工作时,前述辅助装置可以是单独辅助目标显示屏使用的辅助装置,也可以是同时辅助目标显示屏和协同显示屏使用的辅助装置。
在完成目标显示屏和协同显示屏的位姿调节后,终端设备可以获取辅助设备关联的辅助装置的装置信息。基于装置信息,终端设备可以确定辅助装置的装置类型为共用类型还是非共用类型,也即,确定辅助设备是单独辅助目标显示屏使用的辅助装置,还是同时辅助目标显示屏和协同显示屏使用的辅助装置。
如果辅助装置的装置类型为非共用类型,则终端设备可以将第二调节参数发送至辅助设备,以使辅助设备根据第二调节参数对辅助装置进行位姿调整。辅助设备调整位姿的具体方式可以参考前述辅助设备根据第一调节参数调整位姿的说明,本申请对此不进行赘述。
同样的,协同设备可以有对应的辅助设备,协同设备也可以将其对应的调节参数发送给其对应的辅助设备,以使其对应的辅助设备对单独辅助协同显示屏使用的辅助装置进行位姿调整。
例如,如图6所示,上述终端设备为智能支架90,上述辅助设备为辅助支架62,辅助支架62的辅助装置为其固定的键盘的主键盘区,装置类型为非共用类型。智能支架90、辅助支架62和协同支架61进行位姿调整前的效果示意图如6a所示。智能支架90根据本申请提供的位姿调整方法对目标显示屏进行位姿调整之后,可以将第二调节参数发送至智能支架90的辅助支架62。智能支架90的辅助支架62可以根据第二调节参数调整主键盘区的位姿,完成位姿调整后的效果示意图如6b所示,能够方便用户使用辅助支架上的主键盘区进行键盘输入操作。
如果辅助装置的装置类型为共用类型,终端设备可以将目标显示屏和协同显示屏构成的显示区域的目标位姿发送至辅助设备,以使辅助设备根据显示区域的目标位姿和辅助装置的初始位姿调整辅助装置的位姿。
例如,辅助设备可以根据辅助装置和显示区域的参考相对位姿关系、显示区域的目标位姿,以及辅助装置的初始位姿,确定辅助装置的目标位姿,以使调整后辅助装置和显示区域之间的相对位姿满足参考相对位姿关系,进而使辅助装置可以同时为目标显示屏和协同显示屏提供辅助效果。其中,参考相对位姿关系可以由用户提前配置好。
一些情况下,参考相对位姿关系可以为:辅助装置与目标显示屏和协同显示屏构成的显示区域之间的距离小于预设阈值、辅助装置的中心点与目标显示屏和协同显示屏构成的显示区域的中心点之间的连线与显示区域所在平面垂直,且辅助装置的朝向与目标显示屏和协同显示屏构成的显示区域的朝向之间的夹角小于预设角度阈值。
例如,如图7所示,上述终端设备为智能支架90,上述辅助设备为辅助支架72,辅助支架72的辅助装置为其固定的蓝牙音箱的音频输出装置,装置类型为共用类型。智能支架90、辅助支架72和协同支架71完成位姿调整前的效果示意图如7a所示。智能支架90根据本申请提供的位姿调整方法对目标显示屏进行位姿调整之后,可以将目标显示屏和协同显示屏构成的显示区域73的目标位姿发送至辅助支架72。辅助支架72可以根据显示区域73的目标位姿和音频输出装置的初始位姿确定音频输出装置的调节参数,以使调整后音频输出装置和显示区域73之间的相对位姿满足参考相对位姿关系。完成位姿调整后的效果示意图如7b所示。此时,音频输出装置可以同时满足目标显示屏的播放需求和协同显示屏的播放需求。目标位置上的用户使用目标显示屏和协同显示屏进行视频显示时均可以有较好的音频收听效果。
实际应用中,目标显示屏的使用场景可能在使用过程中发生变化。
例如,会议室中的工作人员选择会议模式,且终端设备在会议模式下完成目标显示屏的位姿调整后,如果新的工作人员进入到会议室参与会议,或者,会议室中工作人员的位置发生了移动,原先调整好的位姿将不能够使每个观看目标显示屏的用户均拥有较好的观看体验。
基于此,终端设备可以进行多次位姿调整。
具体的,如图8所示,在基于目标位置和目标显示屏的初始位姿,调整目标显示屏的位姿之后,上述位姿调整方法还可以包括以下步骤S801至步骤S802。
步骤S801,确定目标显示屏所在场景的场景信息。
其中,上述场景信息用于标识目标显示屏的使用场景。
在本申请的一些实施方式中,终端设备可以采集第二用户图像,识别出第二用户图像的图像信息,并将图像信息作为场景信息。
其中,图像信息可以包括图像中的人脸数量、有效用户的用户数量、目标用户的位姿数据,以及用户背景的背景类型中的至少一项。
第二用户图像的获取方式可以参考第一用户图像的获取方式,本申请不进行赘述。
步骤S802,在场景信息发生变化时,重新调整目标显示屏的位姿。
在本申请的一些实施方式中,终端设备可以判断前后获取到的场景信息的相似度,并在相似度小于相似度阈值时,确认场景信息发生变化,并重新调整目标显示屏的位姿。
其中,相似度阈值可以根据实际情况进行设置。位姿的调整方式可以参考前述步骤S103的描述,本申请对此不进行赘述。
如果相似度大于或等于相似度阈值,则终端设备可以确认场景信息未发生变化,保持目标显示屏的当前位姿,并继续以预设的频率确定目标显示屏所在场景的场景信息。
在本申请的一些实施方式中,上述场景信息即为前述图像信息。上述图像信息可以包含人脸数量。
具体的,终端设备可以分别识别出第一用户图像中的人脸和第二用户图像中的人脸,并统计其中的人脸数量。将第一用户图像中的人脸数量与第二用户图像的人脸数量作差,如果人脸数量的差值大于或等于第一差值阈值,则终端设备可以确认场景信息的相似度小于相似度阈值,也即确认场景信息发生变化。否则,终端设备可以确认场景信息的相似度大于或等于相似度阈值,也即确认场景信息未发生变化。
其中,人脸识别可以通过将用户图像输入卷积神经网络(Convolutional NeuralNetworks,CNN)或基于区域的卷积神经网络(region with CNN features,RCNN)实现,也可以通过其他人脸识别算法实现,本申请对此不做限定。
在本申请的另一些实施方式中,上述图像信息可以包含有效用户的用户数量。
具体的,终端设备可以分别识别出第一用户图像中有效用户的数量和第二用户图像中有效用户的数量。将第二用户图像对应的用户数量与第一用户图像对应的用户数量作差,如果用户数量的差值大于或等于第二差值阈值,则终端设备可以确认场景信息的相似度小于相似度阈值,也即确认场景信息发生变化。否则,终端设备可以确认场景信息的相似度大于或等于相似度阈值,也即确认场景信息未发生变化。
其中,有效用户的确定方式可以参考前述说明,本申请对此不进行赘述。
在本申请的另一些实施方式中,上述图像信息可以包含目标用户的位姿数据。
具体的,在第一次进行位姿调整的过程中,终端设备确定出目标用户之后,可以利用第一用户图像识别目标用户的位姿数据,同时记录目标用户的用户标识。在获取到第二用户图像之后,终端设备可以利用用户标识,确定第二图像中的目标用户,并识别目标用户的位姿数据。接着,终端设备可以计算两个位姿数据之间的误差量。如果误差量大于或等于误差阈值,则终端设备可以确认场景信息的相似度小于相似度阈值,也即确认场景信息发生变化。否则,终端设备可以确认场景信息的相似度大于或等于相似度阈值,也即确认场景信息未发生变化。
在本申请的另一些实施方式中,上述图像信息可以包含用户背景的背景类型。
具体的,终端设备分别可以识别出第一用户图像中用户背景的背景类型和第二用户图像中用户背景的背景类型。如果背景类型不相同,则终端设备可以确认场景信息的相似度小于相似度阈值,也即确认场景信息发生变化。否则,终端设备可以确认场景信息的相似度大于或等于相似度阈值,也即确认场景信息未发生变化。
其中,背景类型的确定方式可以根据实际情况选择。例如,终端设备可以将用户图像输入至背景识别模型中,确定用户背景的背景类型。又例如,终端设备可以在识别出用户所在的图像区域之后,从第二用户图像中剔除用户所在的图像区域,得到用户背景的图像区域,然后,确定用户背景的图像区域中物品的物品信息,并依据物品信息确定背景类型。比如,识别到茶几时,终端设备可以将背景类型确定为居家环境类型。
需要说明的是,如果上述图像信息包含图像中的人脸数量、有效用户的用户数量、目标用户的位姿数据,以及用户背景的背景类型中的多项,终端设备可以对第一用户图像和第二用户图像之间每项图像信息的误差进行加权相加操作,如果加权相加操作后得到的数值大于加权相加阈值,则终端设备可以确认场景信息的相似度小于相似度阈值,也即确认场景信息发生变化。否则,终端设备可以确认场景信息的相似度大于或等于相似度阈值,也即确认场景信息未发生变化。
例如,终端设备可以将人脸数量的差值和用户数量的差值进行加权相加均操作。
在另一些实施方式中,终端设备也可以将用户图像中的每项图像信息组合成用户图像对应的特征向量,然后计算第一用户图像对应的特征向量与第二用户图像对应的特征向量之间的欧氏距离值。如果欧氏距离值大于欧氏距离阈值,则终端设备可以确认场景信息的相似度小于相似度阈值,也即确认场景信息发生变化。否则,终端设备可以确认场景信息的相似度大于或等于相似度阈值,也即确认场景信息未发生变化。
本申请的实施方式中,通过确定目标显示屏所在场景的场景信息,并在场景信息发生变化时,重新调整目标显示屏的位姿,能够在使用场景发生变化时,及时对目标显示屏的位姿进行调整,能够避免因使用场景发生变化而导致的用户观看体验降低的问题。
在本申请的一些实施方式中,上述终端设备可以指智能支架。请参阅图9和图10,图9示出了本申请实施例提供的智能支架90的立体结构示意图,智能支架90配置有可活动的固定结构92,该固定结构92可以用于固定配有显示功能的显示设备93,显示设备93的显示屏即为前述目标显示屏。
在本实施例中,智能支架90包括底座95、座于底座95上的移动臂96、与移动臂96的远离底座95一端转动连接的第一转动臂97、与第一转动臂97的远离移动臂96的一端转动连接的第二转动臂98及与第二转动臂98的远离第一转动臂97的一端转动连接的第三转动臂99。所述固定结构92与第三转动臂99的远离第二转动臂98的一端转动连接。第一转动臂97与移动臂96相对转动,如图9所示的R1方向;第二转动臂98与第一转动臂97相对转动,如图9所示的R2方向;第三转动臂99和第二转动臂98相对转动,如图9所示的R3方向;固定结构92相对于第三转动臂99是转动的,如图9所示的R4方向。在本实施例中,R1、R2、R3、R4的转向各不相同,以实现智能支架90的灵活动作。在其他实施例中,R1、R2、R3、R4的转向可以部分相同。
在本实施例中,前述可调节方向可以由智能支架90的结构决定。例如,请参考图9,可调节方向可以包括如图9所示的R1、R2、R3、R4的四个方向的旋转和m方向的移动,在本实施例中,R1、R2、R3、R4的四个方向的旋转均是通过电机驱动齿轮机构实现的,在其他实施例中,R1、R2、R3、R4的四个方向的旋转可以通过其他被公众所知的机构来完成。智能支架90可以控制各个电机动作,从而实现固定结构92的三个自由度的旋转及固定结构92在m方向上的上下移动。这里所说的三个自由度的旋转,这三个自由度的旋转轴线可以相互垂直组成直角坐标系。
需要说明的是,智能支架90可以获取固定结构92与目标显示屏之间的相对位姿,进而依据目标显示屏的目标位姿和固定结构92与目标显示屏之间的相对位姿,确定固定结构92的目标位姿,以通过对固定结构92进行位姿调整实现目标显示屏的位姿调整。
此外,智能支架90可以包括摄像头94,摄像头94与移动臂96可以一同上下移动,见图9中所示的m方向。摄像头94也可以绕自身轴线转动。如此,摄像头94可以上下移动,也可以绕自身轴线转动。可以理解地,摄像头94绕自身轴线转动的实现可以通过电机驱动齿轮机构(图未示)来实现转动。
请同时参阅图10至图12,移动臂96相对于底座95是可以上下移动的,通过移动机构100实现二者的相对移动的。移动机构100包括固定连接于底座95上的固定轨101、相对于固定轨101上下滑动的滑轨102及驱动滑轨102在固定轨101上滑动的电机103。
智能支架90可以利用移动机构100来移动,同时靠电机驱动齿轮机构实现自转,实现摄像头94的旋转和平移。
应理解,若前述协同设备为协同支架、前述辅助设备为辅助支架,则协同支架和辅助支架的结构均可以与图9至图12所描述的智能支架相同。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为根据本申请,某些步骤可以采用其它顺序进行。
如图13所示为本申请实施例提供的一种显示屏的位姿调整装置1300的结构示意图,所述显示屏的位姿调整装置1300配置于终端设备上。具体的,所述显示屏的位姿调整装置1300可以包括:
目标用户确定单元1301,用于确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;
目标位置确定单元1302,用于基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;
位姿调整单元1303,用于基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
在本申请的一些实施方式中,上述位姿调整单元1303可以具体用于:基于所述目标位置、所述目标显示屏的初始位姿和预设约束条件,计算所述目标显示屏在每个可调节方向上的第一调节参数,所述预设约束条件包括:使所述目标显示屏的中心点位于所述目标位置的最佳视点上;根据每个所述可调节方向上的第一调节参数,调整所述目标显示屏的位姿。
在本申请的一些实施方式中,上述位姿调整单元1303可以具体用于:将所述第一调节参数发送至辅助设备,以使所述辅助设备根据所述第一调节参数进行辅助装置的位姿调整,所述辅助装置用于辅助所述目标显示屏工作。
在本申请的一些实施方式中,上述位姿调整单元1303可以具体用于:获取各个所述可调节方向上的可调节范围;调整所述目标显示屏的位姿,直至每个所述可调节方向上的调节量满足所述第一调节参数,或者到达所述可调节范围的边界值。
在本申请的一些实施方式中,上述位姿调整单元1303可以具体用于:获取协同显示屏的协同显示屏信息,所述协同显示屏用于与所述目标显示屏共同完成显示工作;基于所述协同显示屏信息,确定由所述协同显示屏和所述目标显示屏构成的显示区域;根据所述目标显示屏在所述显示区域中的相对位置、所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
在本申请的一些实施方式中,上述位姿调整单元1303可以具体用于:获取辅助设备关联的辅助装置的装置信息;根据所述装置信息,确认所述辅助装置的装置类型;若所述装置类型为共用类型,将所述目标显示屏和所述协同显示屏构成的显示区域的目标位姿发送至所述辅助设备,以使所述辅助设备根据所述显示区域的目标位姿和所述辅助装置的初始位姿调整所述辅助装置的位姿。在本申请的一些实施方式中,上述位姿调整单元1303可以具体用于:确定所述目标显示屏所在场景的场景信息;在所述场景信息发生变化时,重新调整所述目标显示屏的位姿。
在本申请的一些实施方式中,上述目标用户确定单元1301可以具体用于:确定有效用户,所述有效用户为注视所述预设位置,且位于所述目标显示屏预设范围内的用户;依据所述目标显示屏当前所处的功能模式,筛选出至少一位所述有效用户作为所述目标用户。
在本申请的一些实施方式中,上述目标位置确定单元1302可以具体用于:若所述目标用户的数量等于一,则将所述实时位置作为所述目标位置;若所述目标用户的数量大于一,则基于所述实时位置,确定各个所述目标用户的几何中心位置,并将所述几何中心位置作为所述目标位置。
需要说明的是,为描述的方便和简洁,上述显示屏的位姿调整装置1300的具体工作过程,可以参考图1至图12所述方法的对应过程,在此不再赘述。
如图14所示,为本申请实施例提供的一种终端设备的示意图。该终端设备14可以包括:处理器140、存储器141以及存储在所述存储器141中并可在所述处理器140上运行的计算机程序142,例如显示屏的位姿调整程序。所述处理器140执行所述计算机程序142时实现上述各个显示屏的位姿调整方法实施例中的步骤,例如图1所示的步骤S101至S103。或者,所述处理器140执行所述计算机程序142时实现上述各装置实施例中各模块/单元的功能,例如图13所示的目标用户确定单元1301、目标位置确定单元1302和位姿调整单元1303。
所述计算机程序可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器141中,并由所述处理器140执行,以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述终端设备中的执行过程。
例如,所述计算机程序可以被分割成:目标用户确定单元、目标位置确定单元和位姿调整单元。
各单元具体功能如下:目标用户确定单元,用于确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;目标位置确定单元,用于基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;位姿调整单元,用于基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
所述终端设备可包括,但不仅限于,处理器140、存储器141。本领域技术人员可以理解,图14仅仅是终端设备的示例,并不构成对终端设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器140可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列 (Field-Programmable Gate Array,FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器141可以是所述终端设备的内部存储单元,例如终端设备的硬盘或内存。所述存储器141也可以是所述终端设备的外部存储设备,例如所述终端设备上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器141还可以既包括所述终端设备的内部存储单元也包括外部存储设备。所述存储器141用于存储所述计算机程序以及所述终端设备所需的其他程序和数据。所述存储器141还可以用于暂时地存储已经输出或者将要输出的数据。
需要说明的是,为描述的方便和简洁,上述终端设备的结构还可以参考方法实施例中对结构的具体描述,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对各个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。

Claims (12)

1.一种显示屏的位姿调整方法,其特征在于,包括:
确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;
基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;
基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
2.如权利要求1所述的显示屏的位姿调整方法,其特征在于,所述基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿,包括:
基于所述目标位置、所述目标显示屏的初始位姿和预设约束条件,计算所述目标显示屏在每个可调节方向上的第一调节参数,所述预设约束条件包括:使所述目标显示屏的中心点位于所述目标位置的最佳视点上;
根据每个所述可调节方向上的第一调节参数,调整所述目标显示屏的位姿。
3.如权利要求2所述的显示屏的位姿调整方法,其特征在于,在所述根据每个所述可调节方向上的第一调节参数,调整所述目标显示屏的位姿之后,所述位姿调整方法包括:
将所述第一调节参数发送至辅助设备,以使所述辅助设备根据所述第一调节参数进行辅助装置的位姿调整,所述辅助装置用于辅助所述目标显示屏工作。
4.如权利要求2所述的显示屏的位姿调整方法,其特征在于,所述根据每个所述可调节方向上的第一调节参数,调整所述目标显示屏的位姿,包括:
获取各个所述可调节方向上的可调节范围;
调整所述目标显示屏的位姿,直至每个所述可调节方向上的调节量满足所述第一调节参数,或者到达所述可调节范围的边界值。
5.如权利要求1所述的显示屏的位姿调整方法,其特征在于,所述基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿,包括:
获取协同显示屏的协同显示屏信息,所述协同显示屏用于与所述目标显示屏共同完成显示工作;
基于所述协同显示屏信息,确定由所述协同显示屏和所述目标显示屏构成的显示区域;
根据所述目标显示屏在所述显示区域中的相对位置、所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
6.如权利要求5所述的显示屏的位姿调整方法,其特征在于,在所述根据所述目标显示屏在所述显示区域中的相对位置、所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿之后,所述位姿调整方法包括:
获取辅助设备关联的辅助装置的装置信息;
根据所述装置信息,确认所述辅助装置的装置类型;
若所述装置类型为共用类型,将所述目标显示屏和所述协同显示屏构成的显示区域的目标位姿发送至所述辅助设备,以使所述辅助设备根据所述显示区域的目标位姿和所述辅助装置的初始位姿调整所述辅助装置的位姿。
7.如权利要求1至6任意一项所述的显示屏的位姿调整方法,其特征在于,在所述基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿之后,所述位姿调整方法包括:
确定所述目标显示屏所在场景的场景信息;
在所述场景信息发生变化时,重新调整所述目标显示屏的位姿。
8.如权利要求1至6任意一项所述的显示屏的位姿调整方法,其特征在于,所述确定目标用户,包括:
确定有效用户,所述有效用户为注视所述预设位置,且位于所述目标显示屏预设范围内的用户;
依据所述目标显示屏当前所处的功能模式,筛选出至少一位所述有效用户作为所述目标用户。
9.如权利要求1至6任意一项所述的显示屏的位姿调整方法,其特征在于,所述基于每个所述目标用户的实时位置,确定目标位置,包括:
若所述目标用户的数量等于一,则将所述实时位置作为所述目标位置;
若所述目标用户的数量大于一,则基于所述实时位置,确定各个所述目标用户的几何中心位置,并将所述几何中心位置作为所述目标位置。
10.一种显示屏的位姿调整装置,其特征在于,包括:
目标用户确定单元,用于确定目标用户,所述目标用户为注视预设位置的实时用户,所述预设位置在目标显示屏的显示区域内;
目标位置确定单元,用于基于每个所述目标用户的实时位置,确定目标位置,所述目标位置与每个所述实时位置的距离均在预设距离范围内;
位姿调整单元,用于基于所述目标位置和所述目标显示屏的初始位姿,调整所述目标显示屏的位姿。
11.一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至9任一项所述位姿调整方法的步骤。
12.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至9任一项所述位姿调整方法的步骤。
CN202210324889.3A 2022-03-30 2022-03-30 一种显示屏的位姿调整方法、装置、终端设备和存储介质 Active CN114413141B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210324889.3A CN114413141B (zh) 2022-03-30 2022-03-30 一种显示屏的位姿调整方法、装置、终端设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210324889.3A CN114413141B (zh) 2022-03-30 2022-03-30 一种显示屏的位姿调整方法、装置、终端设备和存储介质

Publications (2)

Publication Number Publication Date
CN114413141A true CN114413141A (zh) 2022-04-29
CN114413141B CN114413141B (zh) 2022-06-24

Family

ID=81263141

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210324889.3A Active CN114413141B (zh) 2022-03-30 2022-03-30 一种显示屏的位姿调整方法、装置、终端设备和存储介质

Country Status (1)

Country Link
CN (1) CN114413141B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114776981A (zh) * 2022-06-20 2022-07-22 四川创丰产融信息技术有限公司 一种企业孵化器公共会议室影音装置及控制方法
CN115268511A (zh) * 2022-09-28 2022-11-01 深圳中科智能技术有限公司 一种工业智能终端显示器调节方法及系统
CN115599219A (zh) * 2022-10-31 2023-01-13 深圳市九洲智和科技有限公司(Cn) 一种显示屏的护眼控制方法、系统、设备及存储介质

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103645749A (zh) * 2013-12-23 2014-03-19 张志增 自动调节型显示设备及调节方法
WO2016107344A1 (zh) * 2014-12-30 2016-07-07 北京奇虎科技有限公司 对输入法的上屏候选项进行筛选的方法和装置
CN105892647A (zh) * 2016-03-23 2016-08-24 京东方科技集团股份有限公司 一种显示屏调整方法、其装置及显示装置
CN106254802A (zh) * 2016-08-08 2016-12-21 Tcl海外电子(惠州)有限公司 电视屏幕观看位置的调节方法及装置
US20170277332A1 (en) * 2016-03-24 2017-09-28 GM Global Technology Operations LLC Dynamic adjustment of touch sensitive area in a display assembly
CN109658886A (zh) * 2018-12-13 2019-04-19 维沃移动通信有限公司 一种显示屏的控制方法及终端
WO2019136256A1 (en) * 2018-01-05 2019-07-11 L'oreal Trackable cosmetic device to assist users in makeup application
CN110007756A (zh) * 2019-03-20 2019-07-12 四川乐仕达电子科技有限公司 一种可调节位置的lcd显示器的调节方法
CN111459284A (zh) * 2020-04-10 2020-07-28 西安航科工程技术有限责任公司 显示屏的调整机构、显示屏、调整系统、调整方法和可调床垫
CN111853445A (zh) * 2020-07-20 2020-10-30 广州心蛙科技有限责任公司 一种便于自动调节角度的自动化计算机显示屏用支架
US20210180740A1 (en) * 2019-12-13 2021-06-17 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Display and audio systems and methods for controlling positioning of displays and speakers based on viewer and listener attention
CN113076007A (zh) * 2021-04-29 2021-07-06 深圳创维-Rgb电子有限公司 一种显示屏视角调节方法、设备及存储介质
CN113330413A (zh) * 2019-04-03 2021-08-31 深圳市柔宇科技股份有限公司 显示控制方法、电子设备及计算机可读存储介质
US20220014867A1 (en) * 2018-10-29 2022-01-13 Goertek Inc. Orientated display method and apparatus for audio device, and audio device
CN215891671U (zh) * 2021-08-05 2022-02-22 广东中强精英电子科技有限公司 一种可调节的屏幕支架

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103645749A (zh) * 2013-12-23 2014-03-19 张志增 自动调节型显示设备及调节方法
WO2016107344A1 (zh) * 2014-12-30 2016-07-07 北京奇虎科技有限公司 对输入法的上屏候选项进行筛选的方法和装置
CN105892647A (zh) * 2016-03-23 2016-08-24 京东方科技集团股份有限公司 一种显示屏调整方法、其装置及显示装置
US20170277332A1 (en) * 2016-03-24 2017-09-28 GM Global Technology Operations LLC Dynamic adjustment of touch sensitive area in a display assembly
CN106254802A (zh) * 2016-08-08 2016-12-21 Tcl海外电子(惠州)有限公司 电视屏幕观看位置的调节方法及装置
WO2019136256A1 (en) * 2018-01-05 2019-07-11 L'oreal Trackable cosmetic device to assist users in makeup application
US20220014867A1 (en) * 2018-10-29 2022-01-13 Goertek Inc. Orientated display method and apparatus for audio device, and audio device
CN109658886A (zh) * 2018-12-13 2019-04-19 维沃移动通信有限公司 一种显示屏的控制方法及终端
CN110007756A (zh) * 2019-03-20 2019-07-12 四川乐仕达电子科技有限公司 一种可调节位置的lcd显示器的调节方法
CN113330413A (zh) * 2019-04-03 2021-08-31 深圳市柔宇科技股份有限公司 显示控制方法、电子设备及计算机可读存储介质
US20210180740A1 (en) * 2019-12-13 2021-06-17 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Display and audio systems and methods for controlling positioning of displays and speakers based on viewer and listener attention
CN111459284A (zh) * 2020-04-10 2020-07-28 西安航科工程技术有限责任公司 显示屏的调整机构、显示屏、调整系统、调整方法和可调床垫
CN111853445A (zh) * 2020-07-20 2020-10-30 广州心蛙科技有限责任公司 一种便于自动调节角度的自动化计算机显示屏用支架
CN113076007A (zh) * 2021-04-29 2021-07-06 深圳创维-Rgb电子有限公司 一种显示屏视角调节方法、设备及存储介质
CN215891671U (zh) * 2021-08-05 2022-02-22 广东中强精英电子科技有限公司 一种可调节的屏幕支架

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114776981A (zh) * 2022-06-20 2022-07-22 四川创丰产融信息技术有限公司 一种企业孵化器公共会议室影音装置及控制方法
CN115268511A (zh) * 2022-09-28 2022-11-01 深圳中科智能技术有限公司 一种工业智能终端显示器调节方法及系统
CN115599219A (zh) * 2022-10-31 2023-01-13 深圳市九洲智和科技有限公司(Cn) 一种显示屏的护眼控制方法、系统、设备及存储介质

Also Published As

Publication number Publication date
CN114413141B (zh) 2022-06-24

Similar Documents

Publication Publication Date Title
CN114413141B (zh) 一种显示屏的位姿调整方法、装置、终端设备和存储介质
US10593088B2 (en) System and method for enabling mirror video chat using a wearable display device
CN107911621B (zh) 一种全景图像的拍摄方法、终端设备以及存储介质
US9467654B2 (en) Video-conference terminal device, video-conference system, image distortion correction method, and image distortion correction processing program product
US20050104848A1 (en) Image processing device and method
US20170316582A1 (en) Robust Head Pose Estimation with a Depth Camera
CN105718887A (zh) 基于移动终端摄像头实现动态捕捉人脸摄像的方法及系统
EP3544286B1 (en) Focusing method, device and storage medium
JP2012523630A (ja) 改良されたハンドヘルド画面検知ポインタ
CN104484858B (zh) 人物图像处理方法及装置
KR20040107890A (ko) 휴대폰의 영상 기울기 제어 방법
CN106713740B (zh) 定位跟踪摄像方法与系统
US10326929B2 (en) Camera driving device and method for see-through displaying
CN106657951A (zh) 投影控制方法及装置、移动设备、投影仪
CN110706283B (zh) 用于视线追踪的标定方法、装置、移动终端及存储介质
CN113329172B (zh) 拍摄方法、装置及电子设备
US20210118148A1 (en) Method and electronic device for changing faces of facial image
CN111914693A (zh) 一种人脸姿态调整方法、系统、装置、设备及介质
US20120320500A1 (en) Portable electronic device and method for using the same
WO2021189927A1 (zh) 图像处理方法、装置、电子设备及存储介质
WO2022061541A1 (zh) 控制方法、手持云台、系统及计算机可读存储介质
US9536133B2 (en) Display apparatus and control method for adjusting the eyes of a photographed user
CN108398845A (zh) 投影设备控制方法和投影设备控制装置
CN109934168B (zh) 人脸图像映射方法及装置
US20220091487A1 (en) Shooting control method and shooting control device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant