CN113900525A - 数字人显示方法、装置及显示设备 - Google Patents
数字人显示方法、装置及显示设备 Download PDFInfo
- Publication number
- CN113900525A CN113900525A CN202111272764.2A CN202111272764A CN113900525A CN 113900525 A CN113900525 A CN 113900525A CN 202111272764 A CN202111272764 A CN 202111272764A CN 113900525 A CN113900525 A CN 113900525A
- Authority
- CN
- China
- Prior art keywords
- coordinate information
- image
- face
- digital
- human
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 238000012545 processing Methods 0.000 claims abstract description 68
- 230000003213 activating effect Effects 0.000 claims abstract description 12
- 238000004590 computer program Methods 0.000 claims description 23
- 230000004044 response Effects 0.000 claims description 14
- 230000000694 effects Effects 0.000 abstract description 16
- 230000008569 process Effects 0.000 description 19
- 230000009471 action Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 101100153581 Bacillus anthracis topX gene Proteins 0.000 description 1
- 101150041570 TOP1 gene Proteins 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010367 cloning Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本申请涉及一种数字人显示方法、装置及显示设备。所述方法包括：通过获取人脸图像；根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度，实现根据人脸角度来实时调整数字人图像的显示角度，让电视数字人更智能，呈现画面的呈现效果更真实。本申请通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
Description
技术领域
本申请涉及显示技术领域，特别是涉及一种数字人显示方法、装置及显示设备。
背景技术
随着显示技术的发展，数字人的呈现场景也越来越广泛。数字人指的是通过3D图形人物建模，声音克隆技术和动作驱动，塑造可以实时互动的并具有深度学习力的人工智能与生产力结合，利用信息科学的方法对人体在不同水平的形态和功能进行虚拟仿真的3D数字人图像。
现有技术中，当前3D数字人在显示设备(如电视等)上显示时，一般根据给定的参数来设定显示角度或者特定的动作。当人的位置发生变化时，数字人的角度调整存在延时，数字人的角度无法实时改变，呈现画面的呈现效果不逼真。
发明内容
基于此，有必要针对上述传统显示设备中数字人角度调整存在延时，数字人的角度无法实时改变，呈现画面的呈现效果不逼真的问题，提供一种能够实时优化数字人的角度调整，使数字人始终面朝人的方向的数字人显示方法、装置及显示设备。
第一方面，本申请提供一种数字人显示方法，包括：
获取人脸图像；
根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；
根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；
根据人脸偏向角，调整数字人图像的显示角度。
可选的，根据人脸图像，获取对应人脸图像的当前坐标信息的步骤，包括：
获取对应人脸图像的各组坐标信息，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息。
可选的，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息的步骤，包括：
获取各组对应坐标信息的第一位置坐标信息和第二位置坐标信息；
根据第一位置坐标信息和第二位置坐标信息，得到各图像距离信息；
将各图像距离信息进行比对处理，将对应最大值的图像距离信息的坐标信息确认为当前坐标信息。
可选的，根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角的步骤，包括：
获取屏幕分辨率；
根据对应当前坐标信息的第一位置坐标信息和第二位置坐标信息，得到人脸中心点信息；
根据屏幕分辨率和人脸中心点信息，得到人脸偏向角。
可选的，第一位置坐标信息和第二位置坐标信息互为对角坐标信息。
可选的，获取人脸图像的步骤，包括：
获取当前视频流数据，处理当前视频流数据，得到人脸图像。
可选的，获取当前视频流数据的步骤之后，包括：
处理当前视频流数据，并根据处理的结果，在当前视频流数据中未检测到人脸图像时，隐藏数字人图像。
可选的，数字人显示方法还包括：
获取当前视频流数据，处理当前视频流数据，得到手势信息；
根据手势信息，查询得到响应信息，并通过数字人图像反馈响应信息。
第二方面，本申请提供一种数字人显示装置，包括：
人脸图像获取单元，用于获取人脸图像；
人脸图像处理单元，用于根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；
偏向角处理单元，用于根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；
角度调整单元，用于根据人脸偏向角，调整数字人图像的显示角度。
第三方面，本申请提供一种显示设备，显示设备包括存储器，处理器，以及存储于存储器中并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述任一项数字人显示方法的步骤。
上述技术方案中的一个技术方案具有如下优点和有益效果：
上述的数字人显示方法中，通过获取人脸图像；根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度，实现根据人脸角度来实时调整数字人图像的显示角度，让电视数字人更智能，呈现画面的呈现效果更真实。本申请通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
附图说明
图1为本申请实施例中数字人显示方法的应用环境图。
图2为本申请实施例中数字人显示方法的第一流程示意图。
图3为本申请实施例中当前坐标信息处理步骤的流程示意图。
图4为本申请实施例中人脸偏向角处理步骤的流程示意图。
图5为本申请实施例中数字人显示方法的第二流程示意图。
图6为本申请实施例中手势信息处理步骤的流程示意图。
图7为本申请实施例中数字人显示装置的结构框图。
图8为本申请实施例中显示设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请提供的数字人显示方法，可以应用于如图1所示的应用环境中。其中，显示设备10包括处理器102、存储器104和显示屏106，处理器102可用来获取人脸图像；根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度。显示屏106可用来显示数字人图像，显示屏106可以但不限于是LCD(Liquid CrystalDisplay)显示屏106或LED(Light-Emitting Diode)显示屏106。存储器104可用来存储屏幕基准坐标信息和数字人图像等信息。显示设备10可以但不限于是显示屏106的各种个人计算机、笔记本电脑、智能手机、平板电脑、电视和会议平板。
在一个实施例中，如图2所示，提供了一种数字人显示方法，以该方法应用于图1中的处理器102为例进行说明，包括：
步骤S210，获取人脸图像。
其中，在显示设备上可设置有摄像模块，摄像模块可实时采集当前环境的图像数据，并将采集到的图像数据传输给处理器，进而处理器可获取得到相应的人脸图像。示例性的，处理器还可主动向摄像模块发生图像获取请求，进而摄像模块可根据图像获取请求，向处理器发送相应的人脸图像。
在一个示例中，处理器获取到摄像模块发生的图像数据后，可对图像数据进行处理，进而可得到相应的人脸图像。
步骤S220，根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像。
其中，人脸图像可包括人脸信息，如人脸图像可包括坐标信息。数字人图像指的是基于执行数字人程序，利用信息科学的方法对人体在不同水平的形态和功能进行虚拟仿真，并通过显示屏显示呈现的图像。数字人图像可以是3D数字人图像。
示例性的，处理器可对获取到的人脸图像进行识别处理，进而可得到人脸信息。处理器可对人脸信息进行解析处理，进而可得到相应的当前坐标信息。处理器还可根据获取到的人脸图像，激活数字人图像，使得数字人图像通过显示屏显示处理。
另外，处理器可通过人脸识别模块对人脸图像进行识别处理，识别人脸图像中的人脸特征，并输出相应的人脸信息。处理器可人脸图像建立坐标系，使得人脸图像上的每一个像素点对应一个坐标点，进而可获取得到人脸图纸中对应人脸特征的当前坐标信息。
步骤S230，根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角。
其中，人脸偏向角指的是人脸相对显示屏幕正前方的偏向角。预设屏幕基准坐标信息可以是对应显示屏幕正中心的坐标信息，即人脸偏向角为人脸相对显示屏幕正中央的偏向角。当前坐标信息可包括人脸特征上的至少2个坐标点信息。
示例性的，处理器可对根据预设屏幕基准坐标信息，对当前坐标信息进行处理，得到人脸偏向角，进而可得知人脸图像中的人脸相对显示屏幕正前方的偏向角度大小。
步骤S240，根据人脸偏向角，调整数字人图像的显示角度。
其中，处理器可根据人脸偏向角的大小，实时调整数字人图像的显示角度。例如当前的人脸图像中的人脸相对显示屏幕正前方偏向左边，则调节数字人图像的转向，即使得数字人图像的数字人转到与用户的人脸相对，实现根据用户不同站位来实时更新数字人图像的角度，使数字人图像转换的数字人始终面朝用户人脸的方向。
上述实施例中，通过获取人脸图像；根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度，实现根据人脸角度来实时调整数字人图像的显示角度，让电视数字人更智能，呈现画面的呈现效果更真实。本申请通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
为了优化人脸图像中的人脸特征，确认距离屏幕最近的人脸信息，提高数字人角度调整的准确度，在一个示例中，根据人脸图像，获取对应人脸图像的当前坐标信息的步骤，包括：
获取对应人脸图像的各组坐标信息，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息。
其中，人脸图像中包括有多个人脸信息时，可分别对各个人脸信息进行判断，选取距离数字人图像最近的人脸确认为最近的人脸信息，并将对应最近的人脸信息的坐标信息确认为当前坐标信息。
示例性的，处理器对获取到的人脸图像进行人脸识别处理，得到人脸图像中的人脸信息，例如人脸图像中的存在3个人脸，即得到人脸图像中的3个人脸信息。处理器分别对3个人脸信息进行处理，得到相应的3组坐标信息，将将3组坐标信息进行距离比对处理，判断3组坐标信息中与数字人图像距离最近的坐标信息，并将最近的坐标信息确认为当前坐标信息。进而处理器根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；并根据人脸偏向角，调整数字人图像的显示角度，实现根据人脸角度来实时调整数字人图像的显示角度，让电视数字人更智能，呈现画面的呈现效果更真实。通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
在一个示例中，如图3所示，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息的步骤，包括：
步骤S310，获取各组对应坐标信息的第一位置坐标信息和第二位置坐标信息。
其中，处理器可基于预设窗口从人脸图像中选取人脸特征，并基于预设窗口的人脸信息中获取第一位置坐标信息和第二位置坐标信息。在一个示例中，第一位置坐标信息和第二位置坐标信息互为对角坐标信息。第一位置坐标信息可以是人脸信息中的左上角坐标，第二位置坐标信息可以是人脸信息中的右上角坐标。
处理器对获取到的人脸图像进行人脸识别处理，得到人脸图像中的各个人脸信息。处理器基于坐标系模型对各人脸信息进行处理，进而可得到各组对应人脸信息的坐标信息。处理器可将人脸信息中对应左上角像素的坐标确认为第一位置坐标信息，将人脸信息中对应右下角像素的坐标确认为第二位置坐标信息。
步骤S320，根据第一位置坐标信息和第二位置坐标信息，得到各图像距离信息。
其中，图像距离信息可以是第一位置坐标信息与第二位置坐标信息之间的距离。
处理器可对获取到的第一位置坐标信息与第二位置坐标信息进行处理，确认第一位置坐标信息与第二位置坐标信息之间的距离，进而得到相应人脸信息的图像距离信息。
步骤S330，将各图像距离信息进行比对处理，将对应最大值的图像距离信息的坐标信息确认为当前坐标信息。
处理器可对同一人脸图像中的各个图像距离信息进行比对处理，进而确认各个图像距离信息中距离最大的图像距离信息，将对应最大值的图像距离信息的坐标信息确认为当前坐标信息，实现确认人脸图像中距离数字人图像最近的人脸信息，即实现确认距离显示屏幕最近的人脸信息，进而处理器根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；并根据人脸偏向角，调整数字人图像的显示角度，实现根据人脸角度来实时调整数字人图像的显示角度，让电视数字人更智能，呈现画面的呈现效果更真实。通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
为了提高数字人图像实时调整的精确度，使得3D数字人始终面朝用户人脸的方向。在一个示例中，如图4所示，根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角的步骤，包括：
步骤S410，获取屏幕分辨率。
其中，屏幕分辨率指的是显示屏幕的分辨率，处理器可通过查询当前的显示屏幕使用的分辨率，得到获取得到屏幕分辨率。例如，屏幕分辨率为(width，height)。
步骤S420，根据对应当前坐标信息的第一位置坐标信息和第二位置坐标信息，得到人脸中心点信息。
其中，人脸中心点信息可用来指示人脸的中心位置信息，第一位置坐标信息为(left1，top1)，第二位置坐标信息为(right1，bottom1)。
处理器可根据对应当前坐标信息的第一位置坐标信息和第二位置坐标信息进行处理，计算最近的人脸在水平方向的中心点。即得到人脸中心点信息face_center＝(right+left)/2。
步骤S430，根据屏幕分辨率和人脸中心点信息，得到人脸偏向角。
处理器可对屏幕分辨率(width，height)和人脸中心点信息face_center进行处理，进而得到人脸偏向角angle＝((width/2-face_center)/(width/2))*45。如屏幕正中间偏向角为0，屏幕左边为正数，屏幕右边为负数。人脸方向正对显示屏幕时，人脸偏向角为0；人脸方向偏向显示屏幕左边时，人脸偏向角为正数；人脸方向偏向显示屏幕右边时，人脸偏向角为负数。
上述实施例中，通过人脸图像来激活数字人，并且在电视上显示3D数字人时，计算人脸与屏幕正前方的偏向角，实现根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
在一个示例中，如图5所示，提供了一种数字人显示方法，以该方法应用于图1中的处理器102为例进行说明，包括：
步骤S510，获取当前视频流数据，处理当前视频流数据，得到人脸图像。
其中，当前视频流数据可通过摄像模块检测得到。摄像模块可实时监控当前环境的视频数据，并将检测到的当前视频流数据传输给处理器，进而处理器可获取得到当前视频流数据，并将获取到的当前视频流数据进行处理，得到人脸图像。
步骤S520，根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像。
步骤S530，根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角。
步骤S540，根据人脸偏向角，调整数字人图像的显示角度。
处理器可对获取到的当前视频流数据进行处理，得到人脸图像。处理器可根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度，实现根据人脸角度来实时调整数字人图像的显示角度，让电视数字人更智能，呈现画面的呈现效果更真实。通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，实现数字人呈现效果更智能化和更逼真。
为了提高数字人进一步增强3D数字人的智能化和真实性，在一个示例中，如图5所示，获取当前视频流数据的步骤之后，包括：
步骤S550，处理当前视频流数据，并根据处理的结果，在当前视频流数据中未检测到人脸图像时，隐藏数字人图像。
处理器可获取摄像模块传输的当前视频流数据，并将当前视频流数据进行处理，例如基于预设周期从当前视频流数据中截取图像，并对截取的图像进行人脸识别处理，判断截取的图像是否存在人脸信息。处理器在当前视频流数据中未检测到人脸图像时，隐藏数字人图像。
上述实施例中，通过人脸图像来激活数字人，并且在电视上显示3D数字人时，可以根据人不同站位来实时更新角度，使数字人始终面朝人的方向，在未检测到人脸图像时，隐藏数字人图像，实现数字人呈现效果更智能化和更逼真。
在一个示例中，如图6所示，数字人显示方法还包括：
步骤S610，获取当前视频流数据，处理当前视频流数据，得到手势信息。
其中，手势信息指的是用户的手势动作信息。在一个示例中，显示设备中设置有手语识别模块，通过手语识别模块可从摄像模块检测到的当前视频流数据中识别出用户手语，例如手势信息为：“明天天气怎么样？”。
需要说明的是，手语识别模块可由图像采集模块、图像识别模块、语义转换模块和语义输出模块组成，将手语转换为电信号，并转换成文字。
步骤S620，根据手势信息，查询得到响应信息，并通过数字人图像反馈响应信息。
处理器可根据手势信息，通过查询数据库或查询云端服务器后，得到对应手势信息的响应信息，并将响应信息通过数字人图像反馈给用户。示例性的，处理器可调用数字人的API接口设置用户通过手势提出的问题(如“明天天气怎么样？”)。数字人接收到手语识别的text，经过查询搜索后以文本和语音的方式把对应手势提出问题的结果返回给用户，使得显示设备的3D数字人更智能，受众更广。
应该理解的是，虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2-6中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中，如图7所示，提供了一种数字人显示装置，包括：
人脸图像获取单元710，用于获取人脸图像。
人脸图像处理单元720，用于根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像。
偏向角处理单元730，用于根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角。
角度调整单元740，用于根据人脸偏向角，调整数字人图像的显示角度。
在一个实施例中，人脸图像处理单元720，还用于获取对应人脸图像的各组坐标信息，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息。
在一个实施例中，人脸图像处理单元720，还用于获取各组对应坐标信息的第一位置坐标信息和第二位置坐标信息；根据第一位置坐标信息和第二位置坐标信息，得到各图像距离信息；将各图像距离信息进行比对处理，将对应最大值的图像距离信息的坐标信息确认为当前坐标信息。
在一个实施例中，偏向角处理单元730，还用于获取屏幕分辨率；根据对应当前坐标信息的第一位置坐标信息和第二位置坐标信息，得到人脸中心点信息；根据屏幕分辨率和人脸中心点信息，得到人脸偏向角。
在一个实施例中，人脸图像获取单元710，还用于获取当前视频流数据，处理当前视频流数据，得到人脸图像。
在一个实施例中，数字人显示装置，还用于处理当前视频流数据，并根据处理的结果，在当前视频流数据中未检测到人脸图像时，隐藏数字人图像。
在一个实施例中，数字人显示装置，还用于获取当前视频流数据，处理当前视频流数据，得到手势信息；根据手势信息，查询得到响应信息，并通过数字人图像反馈响应信息。
关于数字人显示装置的具体限定可以参见上文中对于数字人显示方法的限定，在此不再赘述。上述数字人显示装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于显示设备中的处理器中，也可以以软件形式存储于显示设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种显示设备，该显示设备可以但不限于是具有显示屏的各种个人计算机、笔记本电脑、智能手机、平板电脑、电视和会议平板。显示设备的内部结构图可以如图8所示。该显示设备包括通过系统总线连接的处理器、存储器和显示屏；该显示设备还可包括网络接口和输入装置。其中，该显示设备的处理器用于提供计算和控制能力。该显示设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该显示设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种亮度调节方法。该显示设备的显示屏可以是液晶显示屏，该显示设备的输入装置可以是显示屏上覆盖的触摸层，也可以是显示设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图8中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的显示设备的限定，具体的显示设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种显示设备，显示设备包括存储器和处理器，以及存储于存储器中并可在处理器上运行的计算机程序，该处理器执行计算机程序时实现以下步骤：
获取人脸图像；根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度。
示例性的，显示设备可包括摄像模块，摄像模块用来检测当前环境的视频数据，得到当前视频流数据。摄像模块可集成在显示设备上，例如摄像模块可设置在显示设备的显示屏的上侧边框的中部位置。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
获取对应人脸图像的各组坐标信息，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
获取各组对应坐标信息的第一位置坐标信息和第二位置坐标信息；根据第一位置坐标信息和第二位置坐标信息，得到各图像距离信息；将各图像距离信息进行比对处理，将对应最大值的图像距离信息的坐标信息确认为当前坐标信息。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
获取屏幕分辨率；根据对应当前坐标信息的第一位置坐标信息和第二位置坐标信息，得到人脸中心点信息；根据屏幕分辨率和人脸中心点信息，得到人脸偏向角。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：获取当前视频流数据，处理当前视频流数据，得到人脸图像。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：处理当前视频流数据，并根据处理的结果，在当前视频流数据中未检测到人脸图像时，隐藏数字人图像。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：获取当前视频流数据，处理当前视频流数据，得到手势信息；根据手势信息，查询得到响应信息，并通过数字人图像反馈响应信息。
在一个实施例中，提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
获取人脸图像；根据人脸图像，获取对应人脸图像的当前坐标信息，并激活数字人图像；根据预设屏幕基准坐标信息，处理当前坐标信息，得到人脸偏向角；根据人脸偏向角，调整数字人图像的显示角度。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
获取对应人脸图像的各组坐标信息，将各组坐标信息进行距离比对处理，并根据处理的结果，将对应距离数字人图像最近的坐标信息确认为当前坐标信息。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
获取各组对应坐标信息的第一位置坐标信息和第二位置坐标信息；根据第一位置坐标信息和第二位置坐标信息，得到各图像距离信息；将各图像距离信息进行比对处理，将对应最大值的图像距离信息的坐标信息确认为当前坐标信息。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
获取屏幕分辨率；根据对应当前坐标信息的第一位置坐标信息和第二位置坐标信息，得到人脸中心点信息；根据屏幕分辨率和人脸中心点信息，得到人脸偏向角。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：获取当前视频流数据，处理当前视频流数据，得到人脸图像。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：处理当前视频流数据，并根据处理的结果，在当前视频流数据中未检测到人脸图像时，隐藏数字人图像。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：获取当前视频流数据，处理当前视频流数据，得到手势信息；根据手势信息，查询得到响应信息，并通过数字人图像反馈响应信息。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种数字人显示方法，其特征在于，包括：
获取人脸图像；
根据所述人脸图像，获取对应所述人脸图像的当前坐标信息，并激活数字人图像；
根据预设屏幕基准坐标信息，处理所述当前坐标信息，得到人脸偏向角；
根据所述人脸偏向角，调整所述数字人图像的显示角度。
2.根据权利要求1所述的数字人显示方法，其特征在于，所述根据所述人脸图像，获取对应所述人脸图像的当前坐标信息的步骤，包括：
获取对应所述人脸图像的各组坐标信息，将各组所述坐标信息进行距离比对处理，并根据处理的结果，将对应距离所述数字人图像最近的坐标信息确认为所述当前坐标信息。
3.根据权利要求2所述的数字人显示方法，其特征在于，所述将各组所述坐标信息进行距离比对处理，并根据处理的结果，将对应距离所述数字人图像最近的坐标信息确认为所述当前坐标信息的步骤，包括：
获取各组对应所述坐标信息的第一位置坐标信息和第二位置坐标信息；
根据所述第一位置坐标信息和所述第二位置坐标信息，得到各图像距离信息；
将各所述图像距离信息进行比对处理，将对应最大值的图像距离信息的坐标信息确认为所述当前坐标信息。
4.根据权利要求3所述的数字人显示方法，其特征在于，所述根据预设屏幕基准坐标信息，处理所述当前坐标信息，得到人脸偏向角的步骤，包括：
获取屏幕分辨率；
根据对应所述当前坐标信息的第一位置坐标信息和第二位置坐标信息，得到人脸中心点信息；
根据所述屏幕分辨率和所述人脸中心点信息，得到所述人脸偏向角。
5.根据权利要求4所述的数字人显示方法，其特征在于，所述第一位置坐标信息和所述第二位置坐标信息互为对角坐标信息。
6.根据权利要求1所述的数字人显示方法，其特征在于，所述获取人脸图像的步骤，包括：
获取当前视频流数据，处理所述当前视频流数据，得到所述人脸图像。
7.根据权利要求6所述的数字人显示方法，其特征在于，获取当前视频流数据的步骤之后，包括：
处理所述当前视频流数据，并根据处理的结果，在所述当前视频流数据中未检测到人脸图像时，隐藏所述数字人图像。
8.根据权利要求1至7任一项所述的数字人显示方法，其特征在于，还包括：
获取当前视频流数据，处理所述当前视频流数据，得到手势信息；
根据所述手势信息，查询得到响应信息，并通过所述数字人图像反馈所述响应信息。
9.一种数字人显示装置，其特征在于，包括：
人脸图像获取单元，用于获取人脸图像；
人脸图像处理单元，用于根据所述人脸图像，获取对应所述人脸图像的当前坐标信息，并激活数字人图像；
偏向角处理单元，用于根据预设屏幕基准坐标信息，处理所述当前坐标信息，得到人脸偏向角；
角度调整单元，用于根据所述人脸偏向角，调整所述数字人图像的显示角度。
10.一种显示设备，其特征在于，所述显示设备包括存储器，处理器，以及存储于所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现权利要求1至8中任一项所述数字人显示方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111272764.2A CN113900525A (zh) | 2021-10-29 | 2021-10-29 | 数字人显示方法、装置及显示设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111272764.2A CN113900525A (zh) | 2021-10-29 | 2021-10-29 | 数字人显示方法、装置及显示设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113900525A true CN113900525A (zh) | 2022-01-07 |
Family
ID=79026856
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111272764.2A Pending CN113900525A (zh) | 2021-10-29 | 2021-10-29 | 数字人显示方法、装置及显示设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113900525A (zh) |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102917232A (zh) * | 2012-10-23 | 2013-02-06 | 深圳创维－Rgb电子有限公司 | 基于人脸识别的3d显示自适应调节方法和装置 |
| CN104125327A (zh) * | 2013-04-29 | 2014-10-29 | 深圳富泰宏精密工业有限公司 | 屏幕旋转控制方法及系统 |
| CN105279473A (zh) * | 2014-07-02 | 2016-01-27 | 深圳Tcl新技术有限公司 | 人脸图像校正方法及装置和人脸识别方法及系统 |
| CN107358207A (zh) * | 2017-07-14 | 2017-11-17 | 重庆大学 | 一种矫正人脸图像的方法 |
| CN107958479A (zh) * | 2017-12-26 | 2018-04-24 | 南京开为网络科技有限公司 | 一种移动端3d人脸增强现实实现方法 |
| CN108875479A (zh) * | 2017-08-15 | 2018-11-23 | 北京旷视科技有限公司 | 人脸图像的获取方法及装置 |
| CN109108968A (zh) * | 2018-08-17 | 2019-01-01 | 深圳市三宝创新智能有限公司 | 机器人头部运动调整的交互方法、装置、设备和存储介质 |
| CN110738142A (zh) * | 2019-09-26 | 2020-01-31 | 广州广电卓识智能科技有限公司 | 一种自适应改善人脸图像采集的方法、系统及存储介质 |
| CN110958416A (zh) * | 2019-12-06 | 2020-04-03 | 佳讯飞鸿（北京）智能科技研究院有限公司 | 目标跟踪系统和远程跟踪系统 |
| CN111739201A (zh) * | 2020-06-24 | 2020-10-02 | 上海商汤临港智能科技有限公司 | 车辆的交互方法及装置、电子设备、存储介质和车辆 |
| CN111914783A (zh) * | 2020-08-10 | 2020-11-10 | 深圳市视美泰技术股份有限公司 | 人脸偏转角度的确定方法、装置、计算机设备及介质 |
| CN212276782U (zh) * | 2020-08-23 | 2021-01-01 | 郭生文 | 一种无介质全息成像ai用户终端 |
| CN112540649A (zh) * | 2020-12-11 | 2021-03-23 | 深圳市创智成科技股份有限公司 | 一种显示屏的转动控制方法及笔记本电脑 |
-
2021
- 2021-10-29 CN CN202111272764.2A patent/CN113900525A/zh active Pending
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102917232A (zh) * | 2012-10-23 | 2013-02-06 | 深圳创维－Rgb电子有限公司 | 基于人脸识别的3d显示自适应调节方法和装置 |
| CN104125327A (zh) * | 2013-04-29 | 2014-10-29 | 深圳富泰宏精密工业有限公司 | 屏幕旋转控制方法及系统 |
| CN105279473A (zh) * | 2014-07-02 | 2016-01-27 | 深圳Tcl新技术有限公司 | 人脸图像校正方法及装置和人脸识别方法及系统 |
| CN107358207A (zh) * | 2017-07-14 | 2017-11-17 | 重庆大学 | 一种矫正人脸图像的方法 |
| CN108875479A (zh) * | 2017-08-15 | 2018-11-23 | 北京旷视科技有限公司 | 人脸图像的获取方法及装置 |
| CN107958479A (zh) * | 2017-12-26 | 2018-04-24 | 南京开为网络科技有限公司 | 一种移动端3d人脸增强现实实现方法 |
| CN109108968A (zh) * | 2018-08-17 | 2019-01-01 | 深圳市三宝创新智能有限公司 | 机器人头部运动调整的交互方法、装置、设备和存储介质 |
| CN110738142A (zh) * | 2019-09-26 | 2020-01-31 | 广州广电卓识智能科技有限公司 | 一种自适应改善人脸图像采集的方法、系统及存储介质 |
| CN110958416A (zh) * | 2019-12-06 | 2020-04-03 | 佳讯飞鸿（北京）智能科技研究院有限公司 | 目标跟踪系统和远程跟踪系统 |
| CN111739201A (zh) * | 2020-06-24 | 2020-10-02 | 上海商汤临港智能科技有限公司 | 车辆的交互方法及装置、电子设备、存储介质和车辆 |
| CN111914783A (zh) * | 2020-08-10 | 2020-11-10 | 深圳市视美泰技术股份有限公司 | 人脸偏转角度的确定方法、装置、计算机设备及介质 |
| CN212276782U (zh) * | 2020-08-23 | 2021-01-01 | 郭生文 | 一种无介质全息成像ai用户终端 |
| CN112540649A (zh) * | 2020-12-11 | 2021-03-23 | 深圳市创智成科技股份有限公司 | 一种显示屏的转动控制方法及笔记本电脑 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2022148083A1 (zh) | 仿真3d数字人交互方法、装置、电子设备及存储介质 | |
| US10248197B2 (en) | Systems and methodologies for real time eye tracking for electronic device interaction | |
| CN112243583B (zh) | 多端点混合现实会议 | |
| WO2021213067A1 (zh) | 物品显示方法、装置、设备及存储介质 | |
| CN111147880A (zh) | 视频直播的互动方法、装置、系统、电子设备及存储介质 | |
| US10887195B2 (en) | Computer system, remote control notification method and program | |
| CN112669422B (zh) | 仿真3d数字人生成方法、装置、电子设备及存储介质 | |
| CN111429338A (zh) | 用于处理视频的方法、装置、设备和计算机可读存储介质 | |
| CN108108024A (zh) | 动态手势获取方法及装置、显示装置 | |
| CN110928509A (zh) | 显示控制方法、显示控制装置、存储介质、通信终端 | |
| CN112866577B (zh) | 图像的处理方法、装置、计算机可读介质及电子设备 | |
| CN113918023B (zh) | 屏保显示方法、装置及显示设备 | |
| KR102330218B1 (ko) | 발달장애인의 언어 훈련을 위한 가상현실 교육 시스템 및 방법 | |
| CN111610886A (zh) | 触控屏幕亮度的调整方法、设备及计算机可读存储介质 | |
| CN113900525A (zh) | 数字人显示方法、装置及显示设备 | |
| CN113126859A (zh) | 情景模式的控制方法、装置、存储介质以及终端 | |
| KR20200079748A (ko) | 발달장애인의 언어 훈련을 위한 가상현실 교육 시스템 및 방법 | |
| CN115729544A (zh) | 桌面组件生成方法、装置、电子设备和可读存储介质 | |
| CN114242023A (zh) | 显示屏亮度调节方法、显示屏亮度调节装置和电子设备 | |
| CN114296627A (zh) | 内容显示方法、装置、设备及存储介质 | |
| CN112767520A (zh) | 数字人生成方法、装置、电子设备及存储介质 | |
| CN114443182A (zh) | 一种界面切换方法、存储介质及终端设备 | |
| JP7184835B2 (ja) | コンピュータプログラム、方法及びサーバ装置 | |
| WO2023103577A1 (zh) | 生成目标会话表情的方法、装置、计算设备、计算机可读存储介质及计算机程序产品 | |
| US20240129439A1 (en) | Terminal apparatus |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |