CN103916621A - 视频通信方法及装置 - Google Patents

视频通信方法及装置 Download PDF

Info

Publication number
CN103916621A
CN103916621A CN201310003670.4A CN201310003670A CN103916621A CN 103916621 A CN103916621 A CN 103916621A CN 201310003670 A CN201310003670 A CN 201310003670A CN 103916621 A CN103916621 A CN 103916621A
Authority
CN
China
Prior art keywords
terminal
video
video communication
video pictures
playing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310003670.4A
Other languages
English (en)
Inventor
江修才
陈波
刘海龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201310003670.4A priority Critical patent/CN103916621A/zh
Publication of CN103916621A publication Critical patent/CN103916621A/zh
Pending legal-status Critical Current

Links

Abstract

本发明涉及一种视频通信方法及装置,该视频通信方法包括步骤:第一终端获取第一终端的第一视频画面;第一终端对第一视频画面中的人脸位置进行识别;第一终端生成第一渲染图象,并根据第一渲染图象和识别后的人脸位置对第一视频画面进行渲染;以及第一终端发送渲染后的第一视频画面给第二终端进行显示。本发明还涉及一种视频通信装置。本发明的视频通信方法及装置通过人脸识别、表情识别、机器学习以及增强现实等技术实现了现实画面和虚拟画面的完美结合,丰富了视频聊天的内容。

Description

视频通信方法及装置
技术领域
本发明涉及网络通信领域,特别是涉及一种视频通信方法及视频通信装置。
背景技术
随着科技的发展,人们在网络上相互聊天越来越方便。当人们进行文字聊天时,一般都会发送图片来夸张表达自己的表情和动作,这样大大丰富了聊天的内容,得到广大用户的喜爱。
视频聊天是将来人们沟通发展的必然趋势,但是视频聊天中无法用到虚拟的表情和动作,视频内容仅为个人的头像和静态背景,单调乏味。即使现有部分视频聊天平台可以添加一些虚拟内容到视频画面上,但添加的内容一般也是静态的或仅能进行简单重复运动的动态图像,不能与当前用户进行通信,即不能与背景进行融合,因此造成整个画面不真实,使得画面缺少吸引力,大大制约了视频聊天功能的推广。
故,有必要提供一种视频通信方法及视频通信装置,以解决现有技术所存在的问题。
发明内容
本发明的目的在于提供一种可与背景进行融合的视频通信方法及视频通信装置,其可通过人脸识别、表情识别、机器学习以及增强现实等技术实现了现实画面和虚拟画面的完美结合,丰富了视频聊天的内容;以解决现有的视频通信方法及视频通信装置的视频聊天画面不真实,内容较空洞的技术问题。
为解决上述问题,本发明提供的技术方案如下:
本发明涉及一种视频通信方法,其包括步骤:
第一终端获取所述第一终端的第一视频画面;
所述第一终端对所述第一视频画面中的人脸位置进行识别;
所述第一终端生成第一渲染图象,并根据所述第一渲染图象和识别后的人脸位置对所述第一视频画面进行渲染;以及
所述第一终端发送渲染后的第一视频画面给第二终端进行显示。
本发明还涉及一种视频通信装置,其包括:
第一视频画面获取模块,用于第一终端获取第一终端的第一视频画面;
第一人脸位置识别模块,用于所述第一终端对所述第一视频画面中的人脸位置进行识别;
第一渲染模块,用于所述第一终端生成第一渲染图像,并根据所述第一渲染图像和识别后的人脸位置对所述第一视频画面进行渲染;以及
第一画面发送模块,用于所述第一终端发送渲染后的第一视频画面给第二终端进行显示。
相较于现有技术的视频通信方法及视频通信装置,本发明的视频通信方法及视频通信装置通过人脸识别、表情识别、机器学习以及增强现实等技术实现了现实画面和虚拟画面的完美结合,丰富了视频聊天的内容。解决了现有的视频通信方法及视频通信装置的视频聊天画面不真实,内容较空洞的技术问题。
附图说明
图1为本发明的视频通信方法的第一优选实施例的流程图;
图2为本发明的视频通信方法的第二优选实施例的流程图;
图3为本发明的视频通信方法的第三优选实施例的流程图;
图4为本发明的视频通信方法的第四优选实施例的流程图
图5为本发明的视频通信装置的第一优选实施例的结构示意图;
图6为本发明的视频通信装置的第二优选实施例的结构示意图;
图7为本发明的视频通信装置的第三优选实施例的结构示意图;
图8为本发明的视频通信装置的第四优选实施例的结构示意图;
图9为本发明的视频通信方法及装置的具体实施例的工作原理图。
具体实施方式
以下各实施例的说明是参考附加的图式,用以例示本发明可用以实施的特定实施例。
请参照图1,图1为本发明的视频通信方法的第一优选实施例的流程图。本优选实施例的视频通信方法包括:
步骤101,第一终端获取第一终端的第一视频画面;
步骤102,第一终端对第一视频画面中的人脸位置进行识别;
步骤103,第一终端生成第一渲染图象,并根据第一渲染图象和识别后的人脸位置对第一视频画面进行渲染;
步骤104,第一终端发送渲染后的第一视频画面给第二终端进行显示;
本优选实施例的视频通信方法结束于步骤104。
下面详细说明本优选实施例的视频通信方法的各步骤的具体流程。
在步骤101中,第一终端获取第一终端的第一视频画面,如本地客户端获取本地用户的本地视频画面。
随后来到步骤102。
在步骤102中,第一终端对第一视频画面中的人脸位置进行识别,如读取本地的具有人脸识别数据库的人脸识别程序对本地视频画面(第一视频画面)中的人脸位置进行识别。
这里的人脸位置检测是指对于任意一副给定的图像,采用一定的策略如统计机器学习模型,对图像进行搜索以确定其中是否含有人脸图像,如果有的话返回人脸的位置、大小以及表情。
统计机器学习模型原理具体为:基于已知人脸位置的图像或视频流,提取灰度梯度向量、运动特征、频率特征等识别特征,运用神经网络、聚类、支持向量机等模型分类方法在人脸识别数据库中训练出成熟的识别模型。然后再使用该识别模型对未知人脸位置的图像样本进行人脸位置的判断。可采用基于特征的人脸位置检测方法,如底层特征、组群特征以及变形特征;基于图像的人脸位置检测方法,如线性子空间、神经网络以及统计;或基于活动轮廓的人脸位置检测方法,如梯度向量以及chan-vese模型。
随后来到步骤103。
在步骤103中,第一终端使用本地的具有表情识别数据库的表情识别程序对在步骤102中进行人脸位置识别后的本地视频画面进行人脸的表情识别,并根据识别结果生成第一渲染图像。
这里的人脸表情检测与上述的人脸位置检测相似,对于任意一副给定的人脸位置的图像,采用一定的策略如统计学习模型,对图像进行搜索以确定人脸的表情。这里表情识别的方法具体有整体识别法和局部识别法、形变提取法和运动提取法、几何特征法和容貌特征法,在确定画面中的人脸表情后,便可生成第一渲染图像(如愤怒表情渲染图像、高兴表情渲染图像或痛苦表情渲染图像等)。
随后根据第一渲染图像,使用本地虚拟数据库中的虚拟物品(相应的愤怒表情、高兴表情或痛苦表情)对本地视频画面的相应人脸位置进行表情渲染。这里优选采用增强现实(AR,Augmented Reality)技术实现上述渲染操作。
这里的增强现实技术是指把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息以及声音信息等),通过模拟仿真后叠加到现实世界被人类感官所感知,从而达到超越现实的感官体验。增强现实的过程一般包括以下4个步骤:(1)获取现实场景信息;(2)对现实场景信息和相机位置信息进行分析;(3)获取虚拟数据库中的虚拟物品;(4)合并视频或直接显示,即首先根据相机位置信息和真实场景信息中的定位标记来计算虚拟物品坐标到相机视平面的仿射变换,然后按照仿射变换矩阵在视平面上绘制虚拟物品,最后直接将虚拟物品与现实场景的视频进行合并,一起进行显示。同时虚拟数据库中的虚拟物品可以是三维的表情,也可以是二维的图片或动画,如闪电、下雨、飘雪花等。
使用增强现实技术完成上述表情渲染操作后来到步骤104。
在步骤104中,第一终端将渲染后的本地视频画面发送给异地视频通信装置(第二终端)进行显示,完成整个视频通信过程。
本优选实施例的视频通信方法通过人脸识别、表情识别、机器学习以及增强现实等技术实现了本地客户端上的现实画面和虚拟画面的完美结合,并可将该渲染后的画面发送给任何异地视频通信装置(异地视频通信装置可不安装相应的人脸识别数据库、表情识别数据库以及虚拟物品数据库等识别渲染用数据库),丰富了视频聊天的内容。
请参照图2,图2为本发明的视频通信方法的第二优选实施例的流程图。本优选实施例的视频通信方法包括:
步骤201,第一终端获取第二终端的第二视频画面;
步骤202,第一终端对第二视频画面中的人脸位置进行识别;
步骤203,第一终端生成第二渲染图象,并根据第二渲染图象和识别后的人脸位置对第二视频画面进行渲染;
步骤204,第一终端显示渲染后的第二视频画面;
本优选实施例的视频通信方法结束于步骤204。
下面详细说明本优选实施例的视频通信方法的各步骤的具体流程。
在步骤201中,第一终端获取第二终端的第二视频画面,如本地客户端接收对方用户在异地视频通信装置的异地视频画面。
随后来到步骤202。
在步骤202中,第一终端对第二视频画面中的人脸位置进行识别,如读取本地的具有人脸识别数据库的人脸识别程序对该异地视频画面(第二视频画面)中的人脸位置进行识别。本优选实施例具体的人脸位置检测过程与视频通信方法的第一优选实施例的步骤102的人脸位置检测过程相同,可参见上述视频通信方法的第一优选实施例的步骤102中的相关描述。
随后来到步骤203。
在步骤203中,第一终端使用本地的具有表情识别数据库的表情识别程序对在步骤202中进行人脸位置识别后的异地视频画面进行人脸的表情识别,并根据识别结果生成第二渲染图像。
本优选实施例具体的人脸表情识别过程与视频通信方法的第一优选实施例的步骤103的人脸表情识别过程相同,可参见上述视频通信方法的第一优选实施例的步骤103中的相关描述。
随后根据第二渲染图像,使用本地虚拟数据库中的虚拟物品对异地视频画面的相应的人脸位置进行表情渲染。这里优选采用增强现实技术实现上述渲染操作。
本优选实施例具体的人脸表情渲染过程与视频通信方法的第一优选实施例的步骤103的人脸表情渲染过程相同,可参见上述视频通信方法的第一优选实施例的步骤103中的相关描述。
随后来到步骤204。
在步骤204中,第一终端显示渲染后的异地视频画面,完成整个视频通信过程。
本优选实施例的视频通信方法通过人脸识别、表情识别、机器学习以及增强现实等技术实现了本地客户端上的现实画面和虚拟画面的完美结合,并可将异地视频画面进行渲染后在本地显示,当然这里也可将该渲染后的异地视频画面发送给任何异地视频通信装置(此时异地视频通信装置需要有接收该异地视频画面的设置才能实现渲染后的异地视频画面的共享),丰富了视频聊天的内容。
请参照图3,图3为本发明的视频通信方法的第三优选实施例的流程图。本优选实施例的视频通信方法包括:
步骤301,第一终端发送第一视频画面给第二终端;
步骤302,第二终端对第一视频画面进行渲染;
步骤303,第一终端接收并显示渲染后的第一视频画面;
本优选实施例的视频通信方法结束于步骤303。
下面详细说明本优选实施例的视频通信方法的各步骤的具体流程。
在步骤301中,第一终端发送第一视频画面给第二终端,如发送本地视频画面(第一视频画面)至对方用户(第二终端),实现本地视频通信装置与异地通信装置的视频通信。这里的本地视频画面是没有经过本地渲染的本地视频画面。
随后来到步骤302。
在步骤302中,对方用户使用视频通信方法的第二优选实施例中的方法对视频画面进行渲染。
随后来到步骤303。
在步骤303中,本地的视频通信装置接收并显示该渲染后的本地视频画面,实现渲染后的本地视频画面的共享,完成整个视频通信过程。
本优选实施例的视频通信方法在本地设置接收异地客户端发送的渲染后的本地视频画面(现有技术中的本地客户端是不会接收本地视频画面),并在本地视频画面的位置进行播放,实现了渲染后的异地视频画面在视频通信双方的共享,增加了视频聊天的可操作性,丰富了视频聊天的内容。
请参照图4,图4为本发明的视频通信方法的第三优选实施例的流程图。本优选实施例的视频通信方法包括:
步骤401,第一终端发送渲染后的第一视频画面给第二终端;
步骤402,第二终端对渲染后的第一视频画面进行渲染;
步骤403,第一终端接收并显示第二终端渲染后的渲染后的第一视频画面;
本优选实施例的视频通信方法结束于步骤403。
下面详细说明本优选实施例的视频通信方法的各步骤的具体流程。
在步骤401中,第一终端发送渲染后的第一视频画面给第二终端,如发送渲染后的本地视频画面至对方用户,实现本地视频通信装置与异地通信装置的视频通信。这里本地视频画面是经过本地渲染后的本地视频画面。
随后来到步骤402。
在步骤402中,对方用户使用视频通信方法的第二优选实施例中的方法对视频画面进行再渲染。
随后来到步骤403。
在步骤403中,本地的视频通信装置接收并显示该第二终端再渲染的本地视频画面,实现渲染后的本地视频画面的共享,完成整个视频通信过程。
本优选实施例的视频通信方法在本地设置接收异地客户端发送的渲染后的本地视频画面(现有技术中的本地客户端是不会接收本地视频画面),并在本地视频画面的位置进行播放,实现了渲染后的异地视频画面在视频通信双方的共享,增加了视频聊天的可操作性,丰富了视频聊天的内容。
本发明还涉及一种视频通信装置,请参照图5,图5为本发明的视频通信装置的第一优选实施例的结构示意图。该视频通信装置包括第一视频画面获取模块51、第一人脸位置识别模块52、第一渲染模块53以及第一画面发送模块54。第一视频画面获取模块51用于第一终端获取第一终端的第一视频画面;第一人脸位置识别模块52用于第一终端对第一视频画面中的人脸位置进行识别;第一渲染模块53用于第一终端生成第一渲染图像,并根据第一渲染图像和识别后的人脸位置对第一视频画面进行渲染;第一画面发送模块54用于第一终端发送渲染后的第一视频画面给第二终端进行显示。
第一视频画面获取模块51、第一人脸位置识别模块52、第一渲染模块53以及第一画面发送模块54均位于第一终端中。本优选实施例的视频通信装置使用时,第一视频画面获取模块51获取第一终端的第一视频画面,如获取本地用户的本地视频画面,同时第一人脸位置识别模块52对第一视频画面中的人脸位置进行识别,如读取本地的具有人脸识别数据库的人脸识别程序对本地视频画面(第一视频画面)中的人脸位置进行识别。随后第一渲染模块53使用本地的具有表情识别数据库的表情识别程序对第一人脸位置识别模块52生成的识别后的本地视频画面进行人脸的表情识别,并根据识别结果生成第一渲染图像;然后根据第一渲染图像,使用本地虚拟数据库中的虚拟物品对本地视频画面的相应人脸位置进行表情渲染,这里优选采用增强现实技术实现上述渲染操作。最后第一画面发送模块54将渲染后的本地视频画面发送给异地视频通信装置进行显示,完成整个视频通信过程。
本优选实施例的视频通信装置的具体工作原理与上述的视频通信方法的第一优选实施例中的描述相同或相似,如均通过统计机器学习模型形成人脸识别数据库和表情识别数据库,具体请参见上述视频通信方法的第一优选实施例中的相关描述。
本优选实施例的视频通信装置通过人脸识别、表情识别、机器学习以及增强现实等技术实现了本地客户端上的现实画面和虚拟画面的完美结合,并可将该渲染后的画面发送给任何异地视频通信装置(异地视频通信装置可不安装相应的人脸识别数据库、表情识别数据库以及虚拟物品数据库等识别渲染用数据库),丰富了视频聊天的内容。
请参照图6,图6为本发明的视频通信装置的第二优选实施例的结构示意图。该视频通信装置包括第二视频画面获取模块61、第二人脸位置识别模块62、第二渲染模块63以及第一画面显示模块64。第二视频画面获取模块61用于第一终端获取第二终端的第二视频画面;第二人脸位置识别模块62用于第一终端对第二视频画面中的人脸位置进行识别;第二渲染模块63用于第一终端生成第二渲染图象,并根据第二渲染图象和识别后的人脸位置对第二视频画面进行渲染;第一画面显示模块64用于显示渲染后的第二视频画面。
第二视频画面获取模块61、第二人脸位置识别模块62、第二渲染模块63以及第一画面显示模块64均位于第一终端中。本优选实施例的视频通信装置使用时,第二视频画面获取模块61获取第二终端的第二视频画面,如接收对方用户在异地视频通信装置的异地视频画面。同时第二人脸位置识别模块62对第二视频画面中的人脸位置进行识别,如读取本地的具有人脸识别数据库的人脸识别程序对该异地视频画面中的人脸位置进行识别。随后第二渲染模块63使用本地的具有表情识别数据库的表情识别程序对第二人脸位置识别模块62生成的识别后的异地视频画面进行人脸的表情识别,并根据识别结果生成第二渲染图像;然后根据第二渲染图像,使用本地虚拟数据库中的虚拟物品对异地视频画面的相应的人脸位置进行表情渲染。这里优选采用增强现实技术实现上述渲染操作。最后第一画面显示模块64将渲染后的异地视频画面进行显示,完成整个视频通信过程。
本优选实施例的视频通信装置的具体工作原理与上述的视频通信方法的第二优选实施例中的描述相同或相似,如均通过统计机器学习模型形成人脸识别数据库和表情识别数据库,具体请参见上述视频通信方法的第二优选实施例中的相关描述。
本优选实施例的视频通信装置通过人脸识别、表情识别、机器学习以及增强现实等技术实现了本地客户端上的现实画面和虚拟画面的完美结合,并可将异地视频画面进行渲染后在本地显示,当然这里也可将该渲染后的异地视频画面发送给任何异地视频通信装置(此时异地视频通信装置需要有接收该异地视频画面的设置才能实现渲染后的异地视频画面的共享),丰富了视频聊天的内容。
请参照图7,图7为本发明的视频通信装置的第三优选实施例的结构示意图。本优选实施例的视频通信装置在第一优选实施例的基础上还包括第二画面显示模块71。该第二画面显示模块71用于第一终端接收并显示渲染后的第一视频画面。
本优选实施例的视频通信装置使用时,第一画面发送模块54将没有经过本地渲染的本地视频画面发送至对方用户。对方用户使用上述的视频通信装置的第二优选实施例中的装置对视频画面进行渲染,随后第二画面显示模块71接收该渲染后的本地视频画面,将该渲染后的本地视频画面在本地进行显示,实现渲染后的本地视频画面的共享,完成整个视频通信过程。
本优选实施例的视频通信装置的具体工作原理与上述的视频通信方法的第三优选实施例中的描述相同或相似,具体请参见上述视频通信方法的第三优选实施例中的相关描述。
本优选实施例的视频通信装置在本地设置接收异地客户端发送的渲染后的本地视频画面(现有技术中的本地客户端是不会接收本地视频画面),并在本地视频画面的位置进行播放,实现了渲染后的异地视频画面在视频通信双方的共享,增加了视频聊天的可操作性,丰富了视频聊天的内容。
请参照图8,图8为本发明的视频通信装置的第三优选实施例的结构示意图。本优选实施例的视频通信装置在第一优选实施例的基础上还包括第二画面显示模块81。该第二画面显示模块81用于第一终端接收并显示第二终端渲染后的渲染后的第一视频画面。
本优选实施例的视频通信装置使用时,第一画面发送模块54将经过本地渲染的本地视频画面发送至对方用户。对方用户使用上述的视频通信装置的第二优选实施例中的装置对视频画面进行再渲染,随后第二画面显示模块81接收该再渲染的本地视频画面,将该再渲染的本地视频画面在本地进行显示,实现渲染后的本地视频画面的共享,完成整个视频通信过程。
本优选实施例的视频通信装置的具体工作原理与上述的视频通信方法的第四优选实施例中的描述相同或相似,具体请参见上述视频通信方法的第四优选实施例中的相关描述。
本优选实施例的视频通信装置在本地设置接收异地客户端发送的渲染后的本地视频画面(现有技术中的本地客户端是不会接收本地视频画面),并在本地视频画面的位置进行播放,实现了渲染后的异地视频画面在视频通信双方的共享,增加了视频聊天的可操作性,丰富了视频聊天的内容。
请参照图9,图9为本发明的视频通信方法及装置的具体实施例的工作原理图。
其中图9的通信双方使用的均为本发明的视频通信装置。首先用户A和用户B在其使用的客户端上均下载已经过统计机器学习模型训练的人脸识别数据库和表情识别数据库。当用户B和用户A进行视频通信时,通过用户A或用户B的触发(如手势识别或手动选择等),用户B的客户端N将位于客户端M的用户A的视频画面在客户端N上变为小鸡画面,并基于人脸位置识别技术,通过增强现实技术将该小鸡的动画绑定到用户A的视频画面上,并可实时根据人脸位置以及人脸表情对该小鸡画面进行调整;随后客户端N将经过上述渲染处理的小鸡画面通过网络传送到客户端M上,这样客户端M的用户A和客户端N的用户B均可看到渲染后的视频图像。当然用户A也可对自己和用户B做相同的渲染操作。
本发明的视频通信方法及视频通信装置通过人脸识别、表情识别、机器学习以及增强现实等技术实现了现实画面和虚拟画面的完美结合,丰富了视频聊天的内容。解决了现有的视频通信方法及视频通信装置的视频聊天画面不真实,内容较空洞的技术问题。
综上所述,虽然本发明已以优选实施例揭露如上,但上述优选实施例并非用以限制本发明,本领域的普通技术人员,在不脱离本发明的精神和范围内,均可作各种更动与润饰,因此本发明的保护范围以权利要求界定的范围为准。

Claims (10)

1.一种视频通信方法,其特征在于,包括步骤:
第一终端获取所述第一终端的第一视频画面;
所述第一终端对所述第一视频画面中的人脸位置进行识别;
所述第一终端生成第一渲染图象,并根据所述第一渲染图象和识别后的人脸位置对所述第一视频画面进行渲染;以及
所述第一终端发送渲染后的第一视频画面给第二终端进行显示。
2.根据权利要求1所述的视频通信方法,其特征在于,所述视频通信方法还包括步骤:
所述第一终端获取所述第二终端的第二视频画面;
所述第一终端对所述第二视频画面中的人脸位置进行识别;
所述第一终端生成第二渲染图象,并根据所述第二渲染图象和识别后的人脸位置对所述第二视频画面进行渲染;以及
所述第一终端显示渲染后的第二视频画面。
3.根据权利要求2所述的视频通信方法,其特征在于,所述视频通信方法还包括步骤:
所述第一终端发送所述第一视频画面给所述第二终端;
所述第二终端对所述第一视频画面进行渲染;
所述第一终端接收并显示渲染后的第一视频画面。
4.根据权利要求2所述的视频通信方法,其特征在于,所述视频通信方法还包括步骤:
所述第一终端发送所述渲染后的第一视频画面给所述第二终端;
所述第二终端对所述渲染后的第一视频画面进行渲染;
所述第一终端接收并显示所述第二终端渲染后的所述渲染后的第一视频画面。
5.根据权利要求2-4中任一所述的视频通信方法,其特征在于,所述视频通信方法还包括步骤:
所述第一终端对所述第一和/或第二视频画面中的人脸表情进行识别,并根据所述人脸表情的识别结果生成所述第一和/或第二渲染图象。
6.一种视频通信装置,其特征在于,包括:
第一视频画面获取模块,用于第一终端获取第一终端的第一视频画面;
第一人脸位置识别模块,用于所述第一终端对所述第一视频画面中的人脸位置进行识别;
第一渲染模块,用于所述第一终端生成第一渲染图像,并根据所述第一渲染图像和识别后的人脸位置对所述第一视频画面进行渲染;以及
第一画面发送模块,用于所述第一终端发送渲染后的第一视频画面给第二终端进行显示。
7.根据权利要求6所述的视频通信装置,其特征在于,所述视频通信装置还包括:
第二视频画面获取模块,用于所述第一终端获取所述第二终端的第二视频画面;
第二人脸位置识别模块,用于所述第一终端对所述第二视频画面中的人脸位置进行识别;
第二渲染模块,用于所述第一终端生成第二渲染图象,并根据所述第二渲染图象和识别后的人脸位置对所述第二视频画面进行渲染;以及
第一画面显示模块,用于所述第一终端显示渲染后的第二视频画面。
8.根据权利要求7所述的视频通信装置,其特征在于,所述视频通信装置还包括:
第二画面显示模块,用于所述第一终端接收并显示渲染后的第一视频画面。
9.根据权利要求7所述的视频通信装置,其特征在于,所述视频通信装置还包括:
第二画面显示模块,用于所述第一终端接收并显示所述第二终端渲染后的所述渲染后的第一视频画面。
10.根据权利要求7-9中任一所述的视频通信装置,其特征在于,
所述第一渲染模块对所述第一和/或第二视频画面中的人脸表情进行识别,并根据所述人脸表情的识别结果生成所述第一渲染图象;
所述第二渲染模块对所述第一和/或第二视频画面中的人脸表情进行识别,并根据所述人脸表情的识别结果生成所述第二渲染图象。
CN201310003670.4A 2013-01-06 2013-01-06 视频通信方法及装置 Pending CN103916621A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310003670.4A CN103916621A (zh) 2013-01-06 2013-01-06 视频通信方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310003670.4A CN103916621A (zh) 2013-01-06 2013-01-06 视频通信方法及装置

Publications (1)

Publication Number Publication Date
CN103916621A true CN103916621A (zh) 2014-07-09

Family

ID=51041973

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310003670.4A Pending CN103916621A (zh) 2013-01-06 2013-01-06 视频通信方法及装置

Country Status (1)

Country Link
CN (1) CN103916621A (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105407313A (zh) * 2015-10-28 2016-03-16 掌赢信息科技(上海)有限公司 一种视频通话方法、设备和系统
CN105516638A (zh) * 2015-12-07 2016-04-20 掌赢信息科技(上海)有限公司 一种视频通话方法、装置和系统
CN105611216A (zh) * 2015-12-31 2016-05-25 北京奇艺世纪科技有限公司 一种美肤视频通话方法和设备
CN105847734A (zh) * 2016-03-30 2016-08-10 宁波三博电子科技有限公司 一种基于人脸识别的视频通信方法及系统
CN105916052A (zh) * 2015-12-15 2016-08-31 乐视致新电子科技(天津)有限公司 一种视频画面的绘制方法及装置
CN106295504A (zh) * 2016-07-26 2017-01-04 车广为 人脸识别基础上的增强显示方法
CN106303690A (zh) * 2015-05-27 2017-01-04 腾讯科技(深圳)有限公司 一种视频处理方法及装置
CN106557512A (zh) * 2015-09-29 2017-04-05 腾讯科技(深圳)有限公司 图像分享方法、装置和系统
CN106713811A (zh) * 2015-11-17 2017-05-24 腾讯科技(深圳)有限公司 视频通话方法和装置
CN107705278A (zh) * 2017-09-11 2018-02-16 广东欧珀移动通信有限公司 动态效果的添加方法和终端设备
CN108377356A (zh) * 2018-01-18 2018-08-07 上海掌门科技有限公司 基于虚拟画像的视频通话的方法与设备
CN108551562A (zh) * 2018-04-16 2018-09-18 维沃移动通信有限公司 一种视频通信的方法及移动终端
CN109064551A (zh) * 2018-08-17 2018-12-21 联想(北京)有限公司 电子设备的信息处理方法和装置
CN109218648A (zh) * 2018-09-21 2019-01-15 维沃移动通信有限公司 一种显示控制方法及终端设备
CN109309866A (zh) * 2017-07-27 2019-02-05 腾讯科技(深圳)有限公司 图像处理方法及装置、存储介质
WO2020056694A1 (zh) * 2018-09-20 2020-03-26 华为技术有限公司 增强现实的通信方法及电子设备
CN111556271A (zh) * 2020-05-13 2020-08-18 维沃移动通信有限公司 视频通话方法、视频通话装置和电子设备
CN112270733A (zh) * 2020-09-29 2021-01-26 北京五八信息技术有限公司 Ar表情包的生成方法、装置、电子设备及存储介质
CN112671995A (zh) * 2014-10-31 2021-04-16 微软技术许可有限责任公司 视频通话期间实现的方法、用户终端及可读存储介质
CN112925418A (zh) * 2018-08-02 2021-06-08 创新先进技术有限公司 一种人机交互方法和装置
CN113646733A (zh) * 2019-06-27 2021-11-12 苹果公司 辅助表情

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1127388A (zh) * 1994-07-28 1996-07-24 株式会社半导体能源研究所 信息处理系统
CN101917585A (zh) * 2010-08-13 2010-12-15 宇龙计算机通信科技(深圳)有限公司 调节视频电话向对端发送的视频信息的方法、装置及终端
CN102447873A (zh) * 2010-10-13 2012-05-09 张明 哈哈视频网络视频聊天娱乐辅助系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1127388A (zh) * 1994-07-28 1996-07-24 株式会社半导体能源研究所 信息处理系统
CN101917585A (zh) * 2010-08-13 2010-12-15 宇龙计算机通信科技(深圳)有限公司 调节视频电话向对端发送的视频信息的方法、装置及终端
CN102447873A (zh) * 2010-10-13 2012-05-09 张明 哈哈视频网络视频聊天娱乐辅助系统

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112671995A (zh) * 2014-10-31 2021-04-16 微软技术许可有限责任公司 视频通话期间实现的方法、用户终端及可读存储介质
CN106303690A (zh) * 2015-05-27 2017-01-04 腾讯科技(深圳)有限公司 一种视频处理方法及装置
CN106557512B (zh) * 2015-09-29 2020-10-30 腾讯科技(深圳)有限公司 图像分享方法、装置和系统
CN106557512A (zh) * 2015-09-29 2017-04-05 腾讯科技(深圳)有限公司 图像分享方法、装置和系统
CN105407313A (zh) * 2015-10-28 2016-03-16 掌赢信息科技(上海)有限公司 一种视频通话方法、设备和系统
CN106713811A (zh) * 2015-11-17 2017-05-24 腾讯科技(深圳)有限公司 视频通话方法和装置
CN106713811B (zh) * 2015-11-17 2019-08-13 腾讯科技(深圳)有限公司 视频通话方法和装置
US10218937B2 (en) 2015-11-17 2019-02-26 Tencent Technology (Shenzhen) Company Limited Video calling method and apparatus
CN105516638B (zh) * 2015-12-07 2018-10-16 掌赢信息科技(上海)有限公司 一种视频通话方法、装置和系统
CN105516638A (zh) * 2015-12-07 2016-04-20 掌赢信息科技(上海)有限公司 一种视频通话方法、装置和系统
WO2017101303A1 (zh) * 2015-12-15 2017-06-22 乐视控股(北京)有限公司 一种视频画面的绘制方法及装置
CN105916052A (zh) * 2015-12-15 2016-08-31 乐视致新电子科技(天津)有限公司 一种视频画面的绘制方法及装置
CN105611216B (zh) * 2015-12-31 2018-09-11 北京奇艺世纪科技有限公司 一种美肤视频通话方法和设备
CN105611216A (zh) * 2015-12-31 2016-05-25 北京奇艺世纪科技有限公司 一种美肤视频通话方法和设备
CN105847734A (zh) * 2016-03-30 2016-08-10 宁波三博电子科技有限公司 一种基于人脸识别的视频通信方法及系统
CN106295504A (zh) * 2016-07-26 2017-01-04 车广为 人脸识别基础上的增强显示方法
CN109309866A (zh) * 2017-07-27 2019-02-05 腾讯科技(深圳)有限公司 图像处理方法及装置、存储介质
CN109309866B (zh) * 2017-07-27 2022-03-08 腾讯科技(深圳)有限公司 图像处理方法及装置、存储介质
CN107705278A (zh) * 2017-09-11 2018-02-16 广东欧珀移动通信有限公司 动态效果的添加方法和终端设备
US11196962B2 (en) * 2018-01-18 2021-12-07 Shanghai Zhangmen Science And Technology Co., Ltd. Method and a device for a video call based on a virtual image
JP2021512562A (ja) * 2018-01-18 2021-05-13 上海掌門科技有限公司Shanghai Zhangmen Science And Technology Co., Ltd. 仮想画像に基づくビデオ通話の方法および装置
CN108377356A (zh) * 2018-01-18 2018-08-07 上海掌门科技有限公司 基于虚拟画像的视频通话的方法与设备
WO2019141084A1 (zh) * 2018-01-18 2019-07-25 上海掌门科技有限公司 基于虚拟画像的视频通话的方法与设备
CN108551562A (zh) * 2018-04-16 2018-09-18 维沃移动通信有限公司 一种视频通信的方法及移动终端
CN112925418A (zh) * 2018-08-02 2021-06-08 创新先进技术有限公司 一种人机交互方法和装置
CN109064551A (zh) * 2018-08-17 2018-12-21 联想(北京)有限公司 电子设备的信息处理方法和装置
US11743954B2 (en) 2018-09-20 2023-08-29 Huawei Technologies Co., Ltd. Augmented reality communication method and electronic device
WO2020056694A1 (zh) * 2018-09-20 2020-03-26 华为技术有限公司 增强现实的通信方法及电子设备
CN109218648A (zh) * 2018-09-21 2019-01-15 维沃移动通信有限公司 一种显示控制方法及终端设备
CN113646733A (zh) * 2019-06-27 2021-11-12 苹果公司 辅助表情
CN111556271B (zh) * 2020-05-13 2021-08-20 维沃移动通信有限公司 视频通话方法、视频通话装置和电子设备
CN111556271A (zh) * 2020-05-13 2020-08-18 维沃移动通信有限公司 视频通话方法、视频通话装置和电子设备
CN112270733A (zh) * 2020-09-29 2021-01-26 北京五八信息技术有限公司 Ar表情包的生成方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN103916621A (zh) 视频通信方法及装置
US11790589B1 (en) System and method for creating avatars or animated sequences using human body features extracted from a still image
Balakrishnan et al. Interaction of Spatial Computing In Augmented Reality
Chen et al. An overview of augmented reality technology
KR101907136B1 (ko) 유무선 웹을 통한 아바타 서비스 시스템 및 방법
US20180082486A1 (en) Method and System for Compositing an Augmented Reality Scene
CN105468142A (zh) 基于增强现实技术的互动方法、系统和终端
CN102270275B (zh) 在虚拟环境中选择对象的方法和多媒体终端
CN106355153A (zh) 一种基于增强现实的虚拟对象显示方法、装置以及系统
WO2013120851A1 (en) Method for sharing emotions through the creation of three-dimensional avatars and their interaction through a cloud-based platform
CN107333086A (zh) 一种在虚拟场景中进行视频通信的方法及装置
CN109035415B (zh) 虚拟模型的处理方法、装置、设备和计算机可读存储介质
KR20170002100A (ko) 감성 아바타 이모티콘 기반의 스마트 러닝 학습 제공 방법, 그리고 이를 구현하기 위한 스마트 러닝 학습 단말장치
CN112673400A (zh) 化身动画
CN114332374A (zh) 一种虚拟显示方法、设备以及存储介质
CN110232743A (zh) 一种通过增强现实技术展示物品的方法和装置
CN116152416A (zh) 基于扩展现实的画面渲染方法、装置及存储介质
CN111752391A (zh) 一种虚拟互动方法及计算机可读存储介质
Tao A VR/AR-based display system for arts and crafts museum
CN111915737B (zh) 一种基于增强现实的人与物交互系统
CN117294901A (zh) 具有交互效果的视频通信
Janusz Toward the exploration of virtual reality for sustainable spatial development
CN114638920A (zh) 会客方法、会客装置、计算机设备及存储介质
CN113908553A (zh) 游戏角色表情生成方法、装置、电子设备及存储介质
CN111640179A (zh) 宠物模型的显示方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20140709

RJ01 Rejection of invention patent application after publication