CN114594853A - 动态交互设备及屏幕控制方法 - Google Patents

动态交互设备及屏幕控制方法 Download PDF

Info

Publication number
CN114594853A
CN114594853A CN202011439277.6A CN202011439277A CN114594853A CN 114594853 A CN114594853 A CN 114594853A CN 202011439277 A CN202011439277 A CN 202011439277A CN 114594853 A CN114594853 A CN 114594853A
Authority
CN
China
Prior art keywords
screen
target object
target
determining
orientation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011439277.6A
Other languages
English (en)
Inventor
姚远
米海鹏
杨文波
杨昌源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN202011439277.6A priority Critical patent/CN114594853A/zh
Publication of CN114594853A publication Critical patent/CN114594853A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及一种动态交互设备及屏幕控制方法,屏幕控制方法包括根据传感部件采集的预设区域的传感信息,识别出处于预设区域内的目标对象,并确定目标对象相对于动态交互设备的屏幕的方位信息,根据目标对象的方位信息,确定屏幕的目标方位以及与目标方位对应的运动方式,控制屏幕以所述运动方式,向目标方位运动。根据本公开实施例的屏幕控制方法,使得屏幕能够随用户在屏幕前的位置变化而运动到适应于用户的状态的目标方位,实现在空间内的平移以及一定方向范围内的旋转,从而使得屏幕对用户的响应更具针对性,可以吸引用户的注意并提升用户的观看体验。

Description

动态交互设备及屏幕控制方法
技术领域
本公开涉及计算机技术领域,尤其涉及一种动态交互设备及屏幕控制方法。
背景技术
智能大屏幕是一种将互联网应用于离线显示终端上以使得大屏幕实现“智能化”的显示装置。互联网应用在智能大屏幕上不仅意味着离线显示终端和网络服务器可以实时通信,更可以利用实时数据采集与分析的功能,赋予大屏幕本身的交互式信息传递的价值。基于这些实时反馈的数据的交互智能大屏使得在公共场所为用户提供更准确的、个性化的信息服务成为可能。当前的动态交互屏幕电子产品中一般仅能在竖直方向上实现屏幕的自动旋转功能,而不能实时感应环境信息进行适应性的动态调整,更不能实现随人物靠近、远离、经过而改变其旋转方式以适应用户的观看需求。
发明内容
有鉴于此,本公开提出了一种动态交互设备及屏幕控制方法,能够随用户在屏幕前的位置变化而改变屏幕的运动方式,实现在空间内的平移以及全方向的旋转。
根据本公开的一方面,提供了一种屏幕控制方法,所述方法包括:
根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,并确定所述目标对象相对于动态交互设备的屏幕的方位信息,所述方位信息至少包括所述目标对象与所述屏幕之间的水平距离;根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,所述目标方位包括适应于所述目标对象观看屏幕内容的屏幕位置和/或屏幕朝向;控制所述屏幕以所述运动方式,向所述目标方位运动。
在一种可能的实现方式中,所述动态交互设备包括机械臂及导轨,所述机械臂分别连接所述屏幕及所述导轨,其中,所述目标对象的方位信息还包括第一夹角,所述第一夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,包括:在所述水平距离大于或等于第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标位置,并确定所述运动方式为导轨位移方式,所述第一目标位置包括使得所述第一夹角小于所述第一角度阈值的屏幕位置;
所述控制所述屏幕以所述运动方式,向所述目标方位运动,包括:在所述导轨位移方式下,控制所述机械臂沿所述导轨移动,以使所述屏幕达到所述第一目标位置。
在一种可能的实现方式中,所述机械臂包括多个舵机,用于驱动所述屏幕位移和/或旋转,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,还包括:在所述水平距离小于所述第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标朝向,并确定所述运动方式为舵机旋转方式,所述第一目标朝向包括使得所述第一夹角小于所述第一角度阈值的屏幕朝向;
所述控制所述屏幕以所述运动方式,朝向所述目标方位运动,包括:在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第一目标朝向。
在一种可能的实现方式中,所述目标对象的方位信息还包括所述目标对象的视野高度与所述屏幕中心之间的高度差,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,还包括:在所述水平距离小于所述第一距离阈值,且所述高度差大于或等于高度阈值时,确定所述屏幕的第二目标位置,并确定所述运动方式为舵机位移方式,所述第二目标位置包括使得所述高度差小于所述高度阈值的屏幕位置;
所述控制所述屏幕以所述运动方式,朝向所述目标方位运动,包括:在所述舵机位移方式下,控制所述机械臂的舵机位移,以使所述屏幕达到所述第二目标位置。
在一种可能的实现方式中,所述目标对象的方位信息还包括第二夹角,所述第二夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,还包括:在所述水平距离小于所述第一距离阈值,且所述第二夹角大于或等于第二角度阈值时,确定所述屏幕的第二目标朝向,并确定所述运动方式为舵机旋转方式,所述第二目标朝向包括使得所述第二夹角小于所述第二角度阈值的屏幕朝向;
所述控制所述屏幕以所述运动方式,朝向所述目标方位运动,包括:在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第二目标朝向。
在一种可能的实现方式中,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,包括:根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的对象,并确定各个对象与所述屏幕之间的距离;当存在小于或等于第二距离阈值的对象时,将距离最小的对象确定为目标对象。
在一种可能的实现方式中,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,还包括:当所述目标对象与所述屏幕之间的距离小于或等于第三距离阈值时,跟踪所述目标对象,所述第三距离阈值小于所述第二距离阈值。
在一种可能的实现方式中,所述方法还包括:响应于目标对象的状态信息调整待显示内容的显示方式并控制所述动态交互设备在屏幕上显示所述待显示内容。
根据本公开的另一方面,提供了一种动态交互设备,包括第一确定模块、第二确定模块和控制模块,
所述第一确定模块,用于根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,并确定所述目标对象相对于动态交互设备的屏幕的方位信息,所述方位信息至少包括所述目标对象与所述屏幕之间的水平距离;
所述第二确定模块,用于根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,所述目标方位包括适应于所述目标对象观看屏幕内容的屏幕位置和/或屏幕朝向;
所述控制模块,用于控制所述屏幕以所述运动方式,向所述目标方位运动。
根据本公开的另一方面,提供了一种电子装置,包括:处理器;用于存储处理器可执行指令的存储器;其中,所述处理器被配置为执行上述方法。
根据本公开的另一方面,提供了一种非易失性计算机可读存储介质,其上存储有计算机程序指令,其中,所述计算机程序指令被处理器执行时实现上述方法。
根据本公开实施例的屏幕控制方法,能够根据传感信息识别目标对象并确定其方位信息,根据方位信息确定屏幕的目标方位以及对应的运动方式,并控制屏幕以该运动方式向所述目标方位运动,使得屏幕能够随用户在屏幕前的位置变化而运动到适应于用户的状态的目标方位,实现在空间内的平移以及一定方向范围内的旋转,从而使得屏幕对用户的响应更具针对性,可以吸引用户的注意并提升用户的观看体验。
根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将变得清楚。
附图说明
包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本公开的示例性实施例、特征和方面,并且用于解释本公开的原理。
图1示出根据本公开实施例的屏幕控制方法的示例性应用场景的示意图。
图2出根据本公开实施例的屏幕控制方法的流程图。
图3示出根据本公开实施例的多种屏幕运动方式的示意图。
图4示出根据本公开实施例的机械臂的结构示意图。
图5示出根据本公开实施例的动态交互设备的框图。
图6示出根据本公开实施例的一种电子装置800的框图。
图7示出根据本公开实施例的一种电子装置1900的框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
另外,为了更好的说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
图1示出根据本公开实施例的屏幕控制方法的示例性应用场景的示意图。如图1所示,该示意图显示的场景位于满足屏幕以及传感部件设置条件的室内环境或室外环境中。
如图1所示,该场景中可设置有传感部件101及动态交互设备102。传感部件101可以包括摄像头阵列、仰角控制马达以及麦克风阵列等部件,用于采集预设区域的传感信息;动态交互设备102可包括机械臂、导轨、滑轮、导电滑环、阻尼以及屏幕等部件,其中,屏幕可以为LCD(Liquid Crystal Display,液晶显示器)、LED(Light Emitting Diode,发光二极管)、OLED(Organic Light-Emitting Diode,有机发光二极管)等任意类型的显示屏,用于显示预设的显示内容。本公开对传感部件所包括的部件类型以及动态交互设备所包括的部件的类型均不作限制。
在示例中,可以根据屏幕在应用场景中的位置确定传感部件的设置位置,例如,可使传感部件设置在屏幕的中轴线上;也可以设置在屏幕的周围区域。本领域技术人员应理解,只要能完成使传感部件采集预设区域的传感信息即可,本公开对传感部件与屏幕的相对位置不作限制。
如图1所示,目标对象103可以为进入传感部件的传感信息采集范围(也即预设区域)内的人物对象。当目标对象103进入预设区域时,可根据传感信息识别出目标对象103,并确定目标对象103相对于屏幕的方位信息,包括目标对象相对于屏幕的水平距离以及目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角、目标对象的视野高度与所述屏幕中心之间的高度差等信息,还可包括目标对象的行动速率、运动位置等与运动状态相关的信息。本公开对方位信息包括的具体内容不作限制。
在示例中,可控制动态交互设备102响应于目标对象103的方位信息进行相应的运动,从而改变屏幕显示角度与空间位置,以提升用户对大屏幕的观看体验。
图2示出根据本公开实施例的屏幕控制方法的流程图。如图2所示,根据本公开实施例的屏幕控制方法包括:
在步骤S21中,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,并确定所述目标对象相对于动态交互设备的屏幕的方位信息,所述方位信息至少包括所述目标对象与所述屏幕之间的水平距离;
在步骤S22中,根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,所述目标方位包括适应于所述目标对象观看屏幕内容的屏幕位置和/或屏幕朝向;
在步骤S23中,控制所述屏幕以所述运动方式向所述目标方位运动。
在一种可能的实现方式中,该方法可以由终端设备或服务器等电子设备执行,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、终端、计算设备等,所述方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。或者,可通过服务器执行所述方法。
在一种可能的实现方式中,执行该方法的主体可与动态交互设备和/或传感部件集成设置,例如具有计算功能的智能电视;也可以与动态交互设备和传感部件分开设置,例如本地的前置服务器或云端服务器等。本公开对执行该方法的主体的具体类型及设置方式均不作限制。
在一种可能的实现方式中,在步骤S21中,可获取传感部件采集到的传感信息,例如,可接收麦克风阵列采集的声音信息以及摄像头阵列采集的图像信息或视频信息。
在一种可能的实现方式中,基于传感信息,可识别出处于预设区域内的目标对象。例如,对图像或视频中的视频帧进行人脸识别和/或人体识别,识别出图像或视频帧中的对象。如果仅存在一个对象,则可将该对象直接确定为目标对象;如果存在多个对象,则可根据传感信息,从多个对象中确定出目标对象。
在一种可能的实现方式中,可根据传感信息中的深度图像,确定各个对象与屏幕的之间的距离,当至少一个对象的距离满足阈值条件时,将至少一个对象中与屏幕之间的距离最小的对象确定为目标对象;还可确定图像或视频帧中至少一个对象的图像尺寸(例如人体框的尺寸),将图像尺寸最大的对象确定为目标对象。本公开对目标对象的具体确定方式不作限制。
在一种可能的实现方式中,在确定目标对象后,根据传感信息以及传感部件与屏幕的相对位置,可确定目标对象相对于屏幕的方位信息。该方位信息至少可以包括目标对象与屏幕之间的水平距离。例如,通过传感信息可确定传感部件与目标对象的水平距离,以及目标对象与传感部件和屏幕的连线之间的夹角,结合传感部件与屏幕的水平距离可确定出目标对象与屏幕之间的水平距离。本公开对完成目标对象与屏幕之间的水平距离的确定的具体方式不做限制。
在一种可能的实现方式中,该方位信息还可包括目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角、目标对象的视野高度与所述屏幕中心之间的高度差等信息,还可包括目标对象的行动速率、运动位置等与运动状态相关的信息。本公开对方位信息包括的具体内容不作限制。
在一种可能的实现方式中,在步骤S22中,可以根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式。例如,在方位信息包括水平距离时,目标方位可包括适应于目标对象观看屏幕内容的屏幕位置和屏幕朝向中的至少一种。可以预先设定有触发各种运动方式的条件,在目标对象的方位信息满足预设条件中的至少一个时,确定与该预设条件对应的运动方式。例如,屏幕的当前位置与确定的目标方位中的屏幕位置的距离较远(超出预设的距离阈值的范围)时,可以为导轨位移的运动方式,以控制屏幕靠近目标对象;屏幕的当前朝向与确定的目标方位中的屏幕朝向相差较大(超出预设的角度阈值的范围)时,可以为舵机旋转的运动方式,以控制屏幕朝向目标对象旋转。
通过这种方式,可以使得屏幕的运动方式更加灵活。
在一种可能的实现方式中,在步骤S23中,可以控制屏幕以步骤S22中确定的运动方式向所述目标方位运动。其中,目标方位可以包括满足适应于目标对象观看屏幕内容的多组屏幕位置和屏幕朝向,也可以包括满足适应于目标对象观看屏幕内容的多个屏幕位置或多个屏幕朝向,可以根据实际应用场景确定最优的目标方位以及与目标方位对应的运动方式,以提高对用户的方位信息作出响应的效率。本公开对目标方位以及运动方式的确定不作限制。
在一种可能的实现方式中,可向动态交互设备发送控制指令,以控制动态交互设备,使得屏幕以所述运动方式向所述目标方位运动。
根据本公开实施例的屏幕控制方法,能够根据传感信息识别目标对象并确定其方位信息,根据方位信息确定屏幕的目标方位以及对应的运动方式,并控制屏幕以该运动方式向所述目标方位运动,使得屏幕能够随用户在屏幕前的位置变化而运动到适应于用户的状态的目标方位,实现在空间内的平移以及一定方向范围内的旋转,从而使得屏幕对用户的响应更具针对性,可以吸引用户的注意并提升用户的观看体验。
在一种可能的实现方式中,所述传感部件包括红外深度摄像头、红外摄像头、彩色摄像头以及麦克风阵列中的至少一个。
举例来说,红外深度摄像头用于采集预设区域的红外深度图像,以便确定对象的距离、方向等信息。红外摄像头用于采集预设区域的红外图像,以便识别预设区域中的对象,确定对象的距离、朝向、视野高度等信息。彩色摄像头用于采集预设区域的彩色图像或彩色视频,以便识别预设区域中的对象,确定对象的距离、朝向、视野高度等信息。麦克风阵列用于采集声音信息,以便确定预设区域中是否存在对象,确定对象的距离、方向(例如定位声源方向)等信息。
在一种可能的实现方式中,在传感部件包括上述部件中的多个部件的情况下,可对多个部件的采集信息进行融合分析,识别预设区域中的对象并确定方位信息。例如,将彩色摄像头的彩色图像及红外深度摄像头的红外深度图像进行结合,实现环境建模,对环境中的目标对象的运动状态进行分析;将红外深度摄像头的红外深度图像及麦克风阵列的声音信息结合,目标对象的运动状态进行分析,从而确定目标对象相对于屏幕的方位信息。
在对精度要求不高时,可减少传感部件的部件数量,从而降低成本;在对精度要求较高时,可增加传感部件的部件数量,从而提高处理精度。
应当理解,本领域技术人员可根据实际情况设置传感部件的部件数量及部件类型,本公开对此不作限制。
通过这种方式,可以提高传感部件设置的灵活性。
在一种可能的实现方式中,所述传感部件还可包括仰角控制马达,用于调整传感部件的俯仰角度。其中,本公开实施例的屏幕控制方法还可包括:
根据所述传感信息,控制所述仰角控制马达调整所述传感部件的俯仰角度,以使所述传感部件的传感角度与待识别对象的高度相适应。
举例来说,可通过仰角控制马达调整传感部件的俯仰角度,以便获取数据采集的最佳视角。
在一种可能的实现方式中,在接收到传感部件采集的传感信息后,可以根据接收到的传感信息,确定出图像中待识别的对象,并确定对象在图像中的位置,例如处于图像的上部区域。在该情况下,可控制仰角控制马达调整传感部件的俯仰角度(例如使仰角减小),以使传感部件的传感角度与待识别对象的高度相适应,也即,使得待识别的对象处于图像的中间区域,从而提高传感信息的质量,便于后续的分析处理。
在步骤S21中识别出目标对象并确定目标对象的方位信息后,可在步骤S22及步骤S23中确定屏幕运动方式并控制屏幕运动。
在一种可能的实现方式中,所述动态交互设备包括机械臂及导轨,所述机械臂分别连接所述屏幕及所述导轨,其中,所述目标对象的方位信息还包括第一夹角,所述第一夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角,
步骤S22可包括:所述水平距离大于或等于第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标位置,并确定所述运动方式为导轨位移方式,所述第一目标位置包括使得所述第一夹角小于所述第一角度阈值的屏幕位置;
步骤S23可包括:在所述导轨位移方式下,控制所述机械臂沿所述导轨移动,以使所述屏幕达到所述第一目标位置。
举例来说,屏幕的运动可由动态交互设备实现。动态交互设备可包括机械臂、导轨、屏幕,以及滑轮、导电滑环、阻尼等,其中,机械臂的一端可用于固定屏幕,另一端连接导轨,滑轮、导电滑环、阻尼等其他部件辅助机械臂以及导轨进行作业。可通过机械臂(舵机)实现屏幕的旋转,可通过机械臂在导轨上移动实现屏幕的位移。
在一种可能的实现方式中,根据传感信息确定的目标对象的方位信息还可包括第一夹角。其中,第一夹角是目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角,第一夹角越大,说明屏幕的朝向与目标对象的在水平方向偏离越大;在第一夹角在一个比较小的范围内时,可认为在水平方向上,屏幕的朝向与目标对象的朝向较为接近。
在一种可能的实现方式中,可在步骤S22中根据目标对象的方位信息中的水平距离以及第一夹角,确定适应于目标对象的屏幕位置以及运动方式,以使目标对象在不同位置时确定的动态交互设备的运动方式不同。
在一种可能的实现方式中,可预设有第一距离阈值和第一角度阈值,在目标对象与屏幕之间的距离超出第一距离阈值,并且目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角超出第一角度阈值时,可认为目标对象离屏幕较远,目标对象可能无法观看到屏幕上的内容细节。在该情况下,可以以导轨位移方式,将屏幕移动到目标对象的附近,从而引起目标对象的注意,吸引目标对象接近屏幕进行观看。
其中,第一距离阈值可例如设置为5米,第一角度阈值可例如设为15度,本公开对第一距离阈值以及第一角度阈值的具体取值不作限制。
在一种可能的实现方式中,在目标对象与屏幕之间的距离大于或等于第一距离阈值,并且目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角大于或等于第一角度阈值时,可以确定所述运动方式为导轨位移方式。其中,导轨位移方式可包括使连接屏幕的机械臂在导轨上移动。本公开对移动方式的具体设置不做限制。
在一种可能的实现方式中,确定适合目标对象在当前位置观看屏幕内容的屏幕的第一目标位置时,可确定使得水平距离小于预设的第一距离阈值的屏幕位置,或者确定使得第一夹角小于预设的第一角度阈值的屏幕朝向。在确定出的屏幕位置或屏幕朝向有多个时,可以根据屏幕的当前位置,确定在最短的时间内屏幕能够到达的一个屏幕位置或屏幕朝向,作为第一目标位置。第一目标位置的选择还可根据与屏幕当前位置的距离最近等条件来确定,本公开对此不作限制。
在一种可能的实现方式中,导轨可以有种形态,例如,可以是由一组平行导轨和与该组导轨垂直的另一组平行导轨共同组成的井字形导轨,机械臂在导轨上移动时,根据实际应用场景中的导轨形状,可能有多条移动路线,本公开对导轨的形状以及移动路线的具体选择方式不作限制。
在一种可能的实现方式中,确定运动方式为导轨位移方式后,可在步骤S23输出包括运动方式信息的指令,以指示屏幕以该导轨位移方式进行运动。
图3示出根据本公开实施例的多种屏幕运动方式的示意图。如图3所示,处于预设区域中的目标对象沿箭头方向从右向左行走,在行走过程中可能接近或远离屏幕。在此情况下,屏幕运动方式可包括水平方向的前后平移与左右平移,以使目标对象在不同位置时屏幕能够运动到与目标对象距离较近的一个位置。
通过这种方式,能够在目标对象与屏幕之间的距离较远时,以导轨位移的方式移动屏幕至目标对象附近,吸引目标对象的注意力,从而提高屏幕的显示效果。
在一种可能的实现方式中,所述机械臂包括多个舵机,用于驱动所述屏幕位移和/或旋转,
步骤S22可包括:在所述水平距离小于所述第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标朝向,并确定所述运动方式为舵机旋转方式,所述第一目标朝向包括使得所述第一夹角小于所述第一角度阈值的屏幕朝向;
步骤S23可包括:在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第一目标朝向。
图4示出根据本公开实施例的机械臂的结构示意图。如图4所示,本公开实施例的机械臂可包括多个舵机41,每个舵机均能够实现旋转一定的角度,其中,机械臂的一端可固定有屏幕,多个舵机分别按照动态交互设备确定的旋转角度进行旋转,可以满足将屏幕旋转到空间的任意角度。
在一种可能的实现方式中,可在步骤S22中根据目标对象的方位信息中的水平距离或第一夹角,确定适应于目标对象的屏幕位置以及运动方式,以使目标对象在不同位置时确定的动态交互设备的运动方式不同。
在一种可能的实现方式中,在目标对象与屏幕之间的距离小于第一距离阈值,并且目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角超出第一角度阈值时,可认为目标对象离屏幕较近,但是目标对象的朝向与屏幕朝向的角度差异较大,目标对象可能无法观看到屏幕上的内容细节。在该情况下,可以以舵机旋转方式,将屏幕转动到适应于目标对象观看的角度,从而引起目标对象的注意,吸引目标对象进行观看。
其中,屏幕的旋转可通过机械臂上的舵机实现。例如,机械臂可包括多个舵机,每个舵机连接机械臂的两个形状固定的部分,可以调节舵机的旋转角度,使得其中一个部分与另外一个部分的夹角产生变化。每个舵机的放置方式可以不同,例如,使得一个舵机能够调整水平方向的旋转角度,另一个舵机能够调整竖直方向的旋转角度等,以此类推,多个舵机能够控制机械臂运动使得机械臂连接的屏幕旋转至空间中的任意角度。本公开对舵机的数量以及旋转方式的具体设置不做限制。
在一种可能的实现方式中,确定运动方式为舵机旋转方式后,可在步骤S23输出包括运动方式信息的指令,以指示屏幕以该舵机旋转方式进行运动。
通过这种方式,能够在目标对象与屏幕之间的距离较近且目标对象的朝向与屏幕的朝向的夹角较大时,以舵机旋转的方式旋转屏幕,使得目标对象不需改变朝向也能够以适合的角度观看到屏幕内容。
在一种可能的实现方式中,所述目标对象的方位信息还包括所述目标对象的视野高度与所述屏幕中心之间的高度差,
步骤S22可包括:在所述水平距离小于所述第一距离阈值,且所述高度差大于或等于高度阈值时,确定所述屏幕的第二目标位置,并确定所述运动方式为舵机位移方式,所述第二目标位置包括使得所述高度差小于所述高度阈值的屏幕位置;
步骤S23可包括:在所述舵机位移方式下,控制所述机械臂的舵机位移,以使所述屏幕达到所述第二目标位置。
举例来说,根据传感信息确定的目标对象的方位信息还可包括高度差。其中,高度差是目标对象的视野高度与屏幕中心之间的高度差,高度差越大,说明屏幕与目标对象的竖直方向的距离越大;在高度差在一个比较小的范围内时,可认为屏幕与目标对象的高度较为接近。
在一种可能的实现方式中,可在步骤S22中根据目标对象的方位信息中的水平距离以及高度差,确定适应于目标对象的屏幕位置以及运动方式,以使目标对象在不同位置时确定的动态交互设备的运动方式不同。
在一种可能的实现方式中,在目标对象与屏幕之间的距离小于第一距离阈值,并且目标对象与屏幕的高度差超出高度阈值时,可认为目标对象与屏幕的竖直距离较远,目标对象可能无法观看到屏幕上的内容细节。在该情况下,可以以舵机位移方式,将屏幕移动到目标对象的附近,从而引起目标对象的注意,吸引目标对象接近屏幕进行观看。
其中,高度阈值可例如设为0.2米,本公开对高度阈值的具体取值不作限制。
在一种可能的实现方式中,在目标对象与屏幕之间的距离小于第一距离阈值,并且目标对象的视野高度与屏幕中心之间的高度差大于或等于高度阈值时,可以确定所述运动方式为舵机位移方式。其中,舵机可包括伸缩装置,舵机位移方式可包括使控制伸缩装置的长度使得连接屏幕的机械臂在竖直方向上伸长或缩短。本公开对移动方式的具体设置不做限制。
在一种可能的实现方式中,确定适合目标对象在当前位置观看屏幕内容的屏幕的第二目标位置时,可确定使得高度差小于预设的高度阈值的屏幕位置。在确定出的屏幕位置有多个时,可以根据屏幕的当前位置,确定在最短的时间内屏幕能够到达的一个屏幕位置,作为第二目标位置。第二目标位置的选择还可根据与屏幕当前位置的距离最近等条件来确定,本公开对此不作限制。
在一种可能的实现方式中,伸缩装置可以有种形态,例如,可以是内管和外管组成的伸缩杆,也可以是剪式伸缩架等伸缩机构,根据实际应用场景中的伸缩装置的形状,可能有多种伸缩方式,本公开对伸缩装置的具体设置方式以及进行高度差调节的方式不作限制。
在一种可能的实现方式中,确定运动方式为导轨位移方式后,可在步骤S23输出包括运动方式信息的指令,以指示屏幕以该导轨位移方式进行运动。
如图3所示,处于预设区域中的目标对象沿箭头方向从右向左行走,目标对象的视野高度可能与屏幕的高度存在一定差异。在此情况下,屏幕运动方式可包括竖直方向的上下平移,以使屏幕位置能够适应视野高度不同的目标对象。
通过这种方式,能够在目标对象与屏幕之间的竖直距离较大时,以舵机位移的方式移动屏幕至目标对象附近,从而针对目标对象视野高度的调节屏幕高度,便于目标对象观看屏幕的显示内容。
在一种可能的实现方式中,所述目标对象的方位信息还包括第二夹角,所述第二夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角,
步骤S22包括:在所述水平距离小于所述第一距离阈值,且所述第二夹角大于或等于第二角度阈值时,确定所述屏幕的第二目标朝向,并确定所述运动方式为舵机旋转方式,所述第二目标朝向包括使得所述第二夹角小于所述第二角度阈值的屏幕朝向;
步骤S23包括:在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第二目标朝向。
举例来说,根据传感信息确定的目标对象的方位信息还可包括第二夹角。其中,第二夹角是目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角,第二夹角越大,说明屏幕的朝向与目标对象的在竖直方向的偏离越大;在第二夹角在一个比较小的范围内时,可认为竖直方向上屏幕的朝向与目标对象较为接近。
在一种可能的实现方式中,可在步骤S22中根据目标对象的方位信息中的水平距离以及第二夹角,确定适应于目标对象的屏幕位置以及运动方式,以使目标对象在不同位置时确定的动态交互设备的运动方式不同。
在一种可能的实现方式中,可预设有第一距离阈值和第二角度阈值,在目标对象与屏幕之间的距离未超出第一距离阈值,并且目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角超出第二角度阈值时,可认为目标对象离屏幕较近,且屏幕朝向与目标对象的竖直偏差较大。并且目标对象可能无法观看到屏幕上的内容细节。在该情况下,可以以舵机旋转方式,将屏幕转动到适应于目标对象观看的角度,从而引起目标对象的注意,吸引目标对象接近屏幕进行观看。
其中,第一距离阈值可例如设置为5米,第二角度阈值可例如设为30度,本公开对第一距离阈值以及第二角度阈值的具体取值不作限制。
在一种可能的实现方式中,在目标对象与屏幕之间的距离大于或等于第一距离阈值,并且目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角大于或等于第二角度阈值时,可以确定所述运动方式为舵机旋转方式。其中,舵机旋转方式可包括使连接屏幕的机械臂的舵机在竖直方向上旋转。本公开对旋转方式的具体设置不做限制。
在一种可能的实现方式中,确定适合目标对象在当前位置观看屏幕内容的屏幕的第二目标朝向时,可确定使得第二夹角小于预设的第二角度阈值的屏幕朝向。在确定出的屏幕朝向有多个时,可以根据屏幕的当前朝向,确定在最短的时间内屏幕能够到达的一个屏幕朝向,作为第二目标朝向。第二目标朝向的选择还可根据与屏幕当前朝向的角度差异最小等条件来确定,本公开对此不作限制。
在一种可能的实现方式中,确定运动方式为舵机旋转方式后,可在步骤S23输出包括运动方式信息的指令,以指示屏幕以该舵机旋转方式进行运动。
通过这种方式,能够在目标对象与屏幕之间的距离较近且目标对象的朝向与屏幕的朝向的夹角较大时,以舵机旋转的方式旋转屏幕,便于目标对象在当前朝向能以适合的角度观看到屏幕内容。
在一种可能的实现方式中,目标对象的方位信息在满足确定屏幕运动方式包括舵机旋转的运动方式中的同时,还可满足确定屏幕运动方式包括舵机位移的运动方式,通过不同运动方式的组合,可以使屏幕运动方式的选择的多样化获得更大的提升。
举例来说,在目标对象与终端屏幕的水平距离满足小于所述第一距离阈值,且所述第一夹角大于或等于第一角度阈值、所述高度差大于或等于高度阈值时,可确定的运动方式可包括使屏幕在垂直方向平移的舵机位移方式以及使屏幕在水平方向旋转的舵机旋转方式中;如果动态交互设备跟随该目标对象的行动进行运动,随着目标对象的方位信息的变化,运动方式中以舵机旋转方式确定的屏幕朝向以及以舵机位移方式确定的屏幕高度也会实时发生变化,以最大化地向目标对象展示内容信息。
本领域技术人员应理解,屏幕的运动方式应不限于以上列举的运动方式的组合形式。通过这种方式,在目标对象与屏幕的距离满足不同的阈值条件时,可以确定多样化的屏幕运动方式,使得屏幕的运动方式可以随用户在屏幕前的距离和朝向信息等灵活调整,从而给予用户更好的观看体验。
在一种可能的实现方式中,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,包括:
根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的对象,并确定各个对象与所述屏幕之间的距离;当存在小于或等于第二距离阈值的对象时,将距离最小的对象确定为目标对象。
举例来说,基于传感信息,可识别出处于预设区域内的目标对象。例如,对图像或视频中的视频帧进行人脸识别和/或人体识别,识别出图像或视频帧中的对象。如果仅存在一个对象,则可将该对象直接确定为目标对象;如果存在多个对象,则可根据传感信息,从多个对象中确定出目标对象。
在一种可能的实现方式中,可根据传感信息中的深度图像,确定各个对象与屏幕的之间的距离,可以预设第二距离阈值,当多个对象与屏幕之间的距离满足小于或等于第二距离阈值时,将距离最小的对象确定为目标对象。
其中,第二距离阈值可例如设置为6米,本领域技术人员应理解,只要满足使得第二距离阈值大于或者等于第一距离阈值即可,本公开对第二距离阈值的具体取值不作限制。
本领域技术人员应理解,目标对象的确认应不限于上述方式,例如,还可确定图像或视频帧中对象的图像尺寸(例如人体框的尺寸),将图像尺寸最大的对象确定为目标对象。本公开对目标对象的具体确定方式不作限制。
在一种可能的实现方式中,随着已经确定的目标对象的位置变化,根据某一时刻采集到的传感信息,在与屏幕的距离小于或等于第二距离阈值的全部对象中,除目标对象之外的其他对象与屏幕的距离可能小于目标对象与屏幕的距离。在此情况下,可以重新确定目标对象,动态交互设备也将基于重新确定的目标对象的方位信息作出响应。
通过这种方式,能够自动识别出预设区域内最佳的目标对象。
在一种可能的实现方式中,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,还包括:
当所述目标对象与所述屏幕之间的距离小于或等于第三距离阈值时,跟踪所述目标对象,所述第三距离阈值小于所述第二距离阈值。
举例来说,动态交互设备可以确定目标对象与屏幕的距离,在距离较近时,可使得动态交互设备跟随所述目标进行移动。
在一种可能的实现方式中,可以预设第三距离阈值,在目标对象与屏幕的距离小于或等于第三距离阈值时,可认为目标对象与屏幕距离较近,此时,即便其他对象与屏幕的距离比目标对象与屏幕的距离更小,也不再重新确认目标对象;动态交互设备仍然针对目标对象的方位信息进行响应,直到目标对象与屏幕之间的距离大于第三距离阈值再重新确定目标对象。
在一种可能的实现方式中,第三距离阈值可例如设置为3米,本领域技术人员应理解,只要满足使得第三距离阈值小于或等于第二距离阈值即可,本公开对第三距离阈值的具体数值不作限制。
通过这种方式,避免了在较近的范围内同时出现多个目标对象时频繁切换动态交互设备的响应对象,使得提供给目标对象进行观看的显示内容更加完整、全面,提高用户体验。
图5示出根据本公开实施例的动态交互设备的框图。根据本公开的实施例还提供了一种动态交互设备,如图5所示,所述设备包括:第一确定模块51、第二确定模块52、控制模块53,
第一确定模块51,用于根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,并确定所述目标对象相对于动态交互设备的屏幕的方位信息,所述方位信息至少包括所述目标对象与所述屏幕之间的水平距离;
第二确定模块52,用于根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,所述目标方位包括适应于所述目标对象观看屏幕内容的屏幕位置和/或屏幕朝向;
控制模块53,用于控制所述屏幕以所述运动方式,向所述目标方位运动。
在一种可能的实现方式中,所述目标对象的方位信息还包括第一夹角,所述第一夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角,
所述第二确定模块,用于在所述水平距离大于或等于第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标位置,并确定所述运动方式为导轨位移方式,所述第一目标位置包括使得所述第一夹角小于所述第一角度阈值的屏幕位置;
所述控制模块,用于在所述导轨位移方式下,控制所述机械臂沿所述导轨移动,以使所述屏幕达到所述第一目标位置。
在一种可能的实现方式中,所述动态交互设备还包括机械臂,所述机械臂包括多个舵机,用于驱动所述屏幕位移和/或旋转,
所述第二确定模块,还用于在所述水平距离小于所述第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标朝向,并确定所述运动方式为舵机旋转方式,所述第一目标朝向包括使得所述第一夹角小于所述第一角度阈值的屏幕朝向;
所述控制模块,还用于在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第一目标朝向。
在一种可能的实现方式中,所述目标对象的方位信息还包括所述目标对象的视野高度与所述屏幕中心之间的高度差,
所述第二确定模块,还用于在所述水平距离小于所述第一距离阈值,且所述高度差大于或等于高度阈值时,确定所述屏幕的第二目标位置,并确定所述运动方式为舵机位移方式,所述第二目标位置包括使得所述高度差小于所述高度阈值的屏幕位置;
所述控制模块,还用于在所述舵机位移方式下,控制所述机械臂的舵机位移,以使所述屏幕达到所述第二目标位置。
在一种可能的实现方式中,所述目标对象的方位信息还包括第二夹角,所述第二夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角,
所述第二确定模块,还用于在所述水平距离小于所述第一距离阈值,且所述第二夹角大于或等于第二角度阈值时,确定所述屏幕的第二目标朝向,并确定所述运动方式为舵机旋转方式,所述第二目标朝向包括使得所述第二夹角小于所述第二角度阈值的屏幕朝向;
所述控制模块,还用于在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第二目标朝向。
在一种可能的实现方式中,所述第一确定模块,还用于根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的对象,并确定各个对象与所述屏幕之间的距离;当存在小于或等于第二距离阈值的对象时,将距离最小的对象确定为目标对象。
在一种可能的实现方式中,所述第一确定模块,还用于当所述目标对象与所述屏幕之间的距离小于或等于第三距离阈值时,跟踪所述目标对象,所述第三距离阈值小于所述第二距离阈值。
在一种可能的实现方式中,所述动态交互设备还用于:
响应于目标对象的状态信息调整待显示内容的显示方式并在屏幕上显示所述待显示内容。
举例来说,可以根据目标对象的方位信息,确定与目标对象对应的屏幕显示方式。其中,可以预先设定有触发各种显示方式的条件,在目标对象的方位信息满足预设条件中的至少一个时,确定与该预设条件对应的显示方式。例如,距离较远(超出预设的阈值范围)时,可以为动态提示的显示方式,以抖动或者明亮度变化的方式显示屏幕上的内容,以提示目标对象观看屏幕内容;距离较近(处于预设的阈值范围内)时,可以为动态跟随的显示方式,使显示内容跟随目标对象的移动在屏幕上相应地向靠近目标对象的方向移动,以提高目标对象的观看体验,等等。通过这种方式,可以使得屏幕显示的内容更加多样化。
在一种可能的实现方式中,可以使得屏幕以确定的屏幕显示方式显示预设的显示内容。其中,预设的显示内容可以是预先设置好的,可以包括文字内容、图形内容、视频内容等多媒体内容,也可以是预先设置显示内容的主题,在屏幕上显示通过互联网上实时检索获得的与主题相关的多媒体内容,本公开预设显示内容的具体方式不作限制。
在一种可能的实现方式中,可向屏幕发送控制指令,以使屏幕以该屏幕显示方式进行显示;也可向屏幕发送与该屏幕显示方式对应的显示内容,以使屏幕进行显示。本公开对此不作限制。
图6示出根据本公开实施例的一种电子装置800的框图。例如,装置800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图6,装置800可以包括以下一个或多个组件:处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在装置800的操作。这些数据的示例包括用于在装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为装置800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为装置800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述装置800和目标对象之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自目标对象的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当装置800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当装置800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到装置800的打开/关闭状态,组件的相对定位,例如所述组件为装置800的显示器和小键盘,传感器组件814还可以检测装置800或装置800一个组件的位置改变,目标对象与装置800接触的存在或不存在,装置800方位或加速/减速和装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于装置800和其他设备之间有线或无线方式的通信。装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种非易失性计算机可读存储介质,例如包括计算机程序指令的存储器804,上述计算机程序指令可由装置800的处理器820执行以完成上述方法。
图7示出根据本公开实施例的一种电子装置1900的框图。例如,装置1900可以被提供为一服务器。参照图7,装置1900包括处理组件1922,其进一步包括一个或多个处理器,以及由存储器1932所代表的存储器资源,用于存储可由处理组件1922的执行的指令,例如应用程序。存储器1932中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件1922被配置为执行指令,以执行上述方法。
装置1900还可以包括一个电源组件1926被配置为执行装置1900的电源管理,一个有线或无线网络接口1950被配置为将装置1900连接到网络,和一个输入输出(I/O)接口1958。装置1900可以操作基于存储在存储器1932的操作系统,例如Windows ServerTM,MacOS XTM,UnixTM,LinuxTM,FreeBSDTM或类似。
在示例性实施例中,还提供了一种非易失性计算机可读存储介质,例如包括计算机程序指令的存储器1932,上述计算机程序指令可由装置1900的处理组件1922执行以完成上述方法。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质,其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身,诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如,通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备,或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令,并转发该计算机可读程序指令,以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码,所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等,以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在目标对象计算机上执行、部分地在目标对象计算机上执行、作为一个独立的软件包执行、部分在目标对象计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到目标对象计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中,通过利用计算机可读程序指令的状态信息来个性化定制电子电路,例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA),该电子电路可以执行计算机可读程序指令,从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解,流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合,都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器,从而生产出一种机器,使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时,产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中,这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作,从而,存储有指令的计算机可读介质则包括一个制造品,其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上,使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤,以产生计算机实现的过程,从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分,所述模块、程序段或指令的一部分包括一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中技术的改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (10)

1.一种屏幕控制方法,其特征在于,所述方法包括:
根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,并确定所述目标对象相对于动态交互设备的屏幕的方位信息,所述方位信息至少包括所述目标对象与所述屏幕之间的水平距离;
根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,所述目标方位包括适应于所述目标对象观看屏幕内容的屏幕位置和/或屏幕朝向;
控制所述屏幕以所述运动方式,向所述目标方位运动。
2.根据权利要求1所述的方法,其特征在于,所述动态交互设备包括机械臂及导轨,所述机械臂分别连接所述屏幕及所述导轨,
其中,所述目标对象的方位信息还包括第一夹角,所述第一夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的水平夹角,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,包括:
在所述水平距离大于或等于第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标位置,并确定所述运动方式为导轨位移方式,所述第一目标位置包括使得所述第一夹角小于所述第一角度阈值的屏幕位置;
所述控制所述屏幕以所述运动方式,向所述目标方位运动,包括:
在所述导轨位移方式下,控制所述机械臂沿所述导轨移动,以使所述屏幕达到所述第一目标位置。
3.根据权利要求2所述的方法,其特征在于,所述机械臂包括多个舵机,用于驱动所述屏幕位移和/或旋转,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,还包括:
在所述水平距离小于所述第一距离阈值,且所述第一夹角大于或等于第一角度阈值时,确定所述屏幕的第一目标朝向,并确定所述运动方式为舵机旋转方式,所述第一目标朝向包括使得所述第一夹角小于所述第一角度阈值的屏幕朝向;
所述控制所述屏幕以所述运动方式,朝向所述目标方位运动,包括:
在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第一目标朝向。
4.根据权利要求3所述的方法,其特征在于,所述目标对象的方位信息还包括所述目标对象的视野高度与所述屏幕中心之间的高度差,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,还包括:
在所述水平距离小于所述第一距离阈值,且所述高度差大于或等于高度阈值时,确定所述屏幕的第二目标位置,并确定所述运动方式为舵机位移方式,所述第二目标位置包括使得所述高度差小于所述高度阈值的屏幕位置;
所述控制所述屏幕以所述运动方式,朝向所述目标方位运动,包括:
在所述舵机位移方式下,控制所述机械臂的舵机位移,以使所述屏幕达到所述第二目标位置。
5.根据权利要求3所述的方法,其特征在于,所述目标对象的方位信息还包括第二夹角,所述第二夹角包括所述目标对象和屏幕中心的连线与所述屏幕所在平面的垂线之间的竖直夹角,
所述根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,还包括:
在所述水平距离小于所述第一距离阈值,且所述第二夹角大于或等于第二角度阈值时,确定所述屏幕的第二目标朝向,并确定所述运动方式为舵机旋转方式,所述第二目标朝向包括使得所述第二夹角小于所述第二角度阈值的屏幕朝向;
所述控制所述屏幕以所述运动方式,朝向所述目标方位运动,包括:
在所述舵机旋转方式下,控制所述机械臂的舵机旋转,以使所述屏幕达到所述第二目标朝向。
6.根据权利要求1所述的方法,其特征在于,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,包括:
根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的对象,并确定各个对象与所述屏幕之间的距离;
当存在小于或等于第二距离阈值的对象时,将距离最小的对象确定为目标对象。
7.根据权利要求6所述的方法,其特征在于,根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,还包括:
当所述目标对象与所述屏幕之间的距离小于或等于第三距离阈值时,跟踪所述目标对象,所述第三距离阈值小于所述第二距离阈值。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于目标对象的状态信息调整待显示内容的显示方式并控制所述动态交互设备在屏幕上显示所述待显示内容。
9.一种动态交互设备,其特征在于,包括第一确定模块、第二确定模块和控制模块,
所述第一确定模块,用于根据传感部件采集的预设区域的传感信息,识别出处于所述预设区域内的目标对象,并确定所述目标对象相对于动态交互设备的屏幕的方位信息,所述方位信息至少包括所述目标对象与所述屏幕之间的水平距离;
所述第二确定模块,用于根据所述目标对象的方位信息,确定所述屏幕的目标方位以及与所述目标方位对应的运动方式,所述目标方位包括适应于所述目标对象观看屏幕内容的屏幕位置和/或屏幕朝向;
所述控制模块,用于控制所述屏幕以所述运动方式,向所述目标方位运动。
10.一种电子装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为调用所述存储器存储的指令,以执行权利要求1至8中任意一项所述的方法。
CN202011439277.6A 2020-12-07 2020-12-07 动态交互设备及屏幕控制方法 Pending CN114594853A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011439277.6A CN114594853A (zh) 2020-12-07 2020-12-07 动态交互设备及屏幕控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011439277.6A CN114594853A (zh) 2020-12-07 2020-12-07 动态交互设备及屏幕控制方法

Publications (1)

Publication Number Publication Date
CN114594853A true CN114594853A (zh) 2022-06-07

Family

ID=81802877

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011439277.6A Pending CN114594853A (zh) 2020-12-07 2020-12-07 动态交互设备及屏幕控制方法

Country Status (1)

Country Link
CN (1) CN114594853A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090037023A1 (en) * 2007-06-29 2009-02-05 Sony Computer Entertainment Inc. Information processing system, robot apparatus, and control method therefor
CN103901901A (zh) * 2014-03-21 2014-07-02 小米科技有限责任公司 一种视频终端的屏幕旋转方法及装置
CN106708270A (zh) * 2016-12-29 2017-05-24 宇龙计算机通信科技(深圳)有限公司 一种虚拟现实设备的显示方法、装置以及虚拟现实设备
CN106843821A (zh) * 2015-12-07 2017-06-13 百度在线网络技术(北京)有限公司 自动调整屏幕的方法和装置
CN109079809A (zh) * 2018-07-27 2018-12-25 平安科技(深圳)有限公司 一种机器人屏幕解锁方法、装置、服务器及存储介质
CN110069198A (zh) * 2019-03-11 2019-07-30 清华大学 一种用户交互平台及用户交互信息识别展示方法
CN209571160U (zh) * 2019-08-28 2019-11-01 福建省软众数字科技股份有限公司 客户跟随式广告展示牌
CN111142660A (zh) * 2019-12-10 2020-05-12 广东中兴新支点技术有限公司 一种显示装置、画面显示方法和存储介质
US20200226971A1 (en) * 2019-01-14 2020-07-16 Sony Corporation Display apparatus and method for motion control of a display screen based on a viewing mode
CN111443772A (zh) * 2020-03-26 2020-07-24 合肥联宝信息技术有限公司 一种调节电子设备的方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090037023A1 (en) * 2007-06-29 2009-02-05 Sony Computer Entertainment Inc. Information processing system, robot apparatus, and control method therefor
CN103901901A (zh) * 2014-03-21 2014-07-02 小米科技有限责任公司 一种视频终端的屏幕旋转方法及装置
CN106843821A (zh) * 2015-12-07 2017-06-13 百度在线网络技术(北京)有限公司 自动调整屏幕的方法和装置
CN106708270A (zh) * 2016-12-29 2017-05-24 宇龙计算机通信科技(深圳)有限公司 一种虚拟现实设备的显示方法、装置以及虚拟现实设备
CN109079809A (zh) * 2018-07-27 2018-12-25 平安科技(深圳)有限公司 一种机器人屏幕解锁方法、装置、服务器及存储介质
US20200226971A1 (en) * 2019-01-14 2020-07-16 Sony Corporation Display apparatus and method for motion control of a display screen based on a viewing mode
CN110069198A (zh) * 2019-03-11 2019-07-30 清华大学 一种用户交互平台及用户交互信息识别展示方法
CN209571160U (zh) * 2019-08-28 2019-11-01 福建省软众数字科技股份有限公司 客户跟随式广告展示牌
CN111142660A (zh) * 2019-12-10 2020-05-12 广东中兴新支点技术有限公司 一种显示装置、画面显示方法和存储介质
CN111443772A (zh) * 2020-03-26 2020-07-24 合肥联宝信息技术有限公司 一种调节电子设备的方法

Similar Documents

Publication Publication Date Title
CN109257645B (zh) 视频封面生成方法及装置
CN109923852B (zh) 通过安装在云台上的相机的询问响应方法、系统和介质
US11216904B2 (en) Image processing method and apparatus, electronic device, and storage medium
CN107784279B (zh) 目标跟踪方法及装置
EP3176776A1 (en) Luminance adjusting method and apparatus, computer program and recording medium
CN109840917B (zh) 图像处理方法及装置、网络训练方法及装置
EP3352453B1 (en) Photographing method for intelligent flight device and intelligent flight device
CN105469056A (zh) 人脸图像处理方法及装置
CN111666917A (zh) 姿态检测及视频处理方法、装置、电子设备和存储介质
CN106774849B (zh) 虚拟现实设备控制方法及装置
CN111104920A (zh) 视频处理方法及装置、电子设备和存储介质
CN109325908B (zh) 图像处理方法及装置、电子设备和存储介质
CN110490164B (zh) 生成虚拟表情的方法、装置、设备及介质
CN113194254A (zh) 图像拍摄方法及装置、电子设备和存储介质
CN112202962B (zh) 屏幕亮度调节方法、装置及存储介质
CN112884809A (zh) 目标跟踪方法及装置、电子设备和存储介质
CN111435422B (zh) 动作识别方法、控制方法及装置、电子设备和存储介质
CN107241535B (zh) 闪光灯调节装置及终端设备
CN109255839B (zh) 场景调整方法及装置
US11410268B2 (en) Image processing methods and apparatuses, electronic devices, and storage media
CN111832338A (zh) 对象检测方法及装置、电子设备和存储介质
CN114637390A (zh) 内容显示方法及装置
CN114594853A (zh) 动态交互设备及屏幕控制方法
CN114187874B (zh) 亮度调节方法、装置及存储介质
CN114550261A (zh) 人脸识别方法及装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination