CN101690071A - 在视频会议和其他通信期间控制化身的方法和终端 - Google Patents
在视频会议和其他通信期间控制化身的方法和终端 Download PDFInfo
- Publication number
- CN101690071A CN101690071A CN200780053540.4A CN200780053540A CN101690071A CN 101690071 A CN101690071 A CN 101690071A CN 200780053540 A CN200780053540 A CN 200780053540A CN 101690071 A CN101690071 A CN 101690071A
- Authority
- CN
- China
- Prior art keywords
- incarnation
- communication terminal
- portrait
- command
- people
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 title claims abstract description 219
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000004044 response Effects 0.000 claims abstract description 64
- 230000036651 mood Effects 0.000 claims description 26
- 230000005540 biological transmission Effects 0.000 claims description 15
- 230000000694 effects Effects 0.000 claims description 14
- 230000033228 biological regulation Effects 0.000 claims description 10
- 206010041349 Somnolence Diseases 0.000 claims description 8
- 230000008921 facial expression Effects 0.000 claims description 8
- 230000004048 modification Effects 0.000 claims description 8
- 238000012986 modification Methods 0.000 claims description 8
- 230000014759 maintenance of location Effects 0.000 claims description 4
- 238000003860 storage Methods 0.000 claims description 4
- 206010048909 Boredom Diseases 0.000 claims description 2
- 230000005236 sound signal Effects 0.000 claims 1
- 210000003128 head Anatomy 0.000 description 8
- 230000008859 change Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000001815 facial effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000001413 cellular effect Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 239000011435 rock Substances 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000011191 terminal modification Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1083—In-session procedures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/157—Conference systems defining a virtual conference space and using avatars or agents
Abstract
公开了用于对在通信终端处的化身显示进行控制的方法和相关联的无线通信系统。识别来自视频源的视频流中的人的画像特性。响应于所识别出的所述视频流中的人的画像特性,从多条画像命令中选择接收通信终端已知的画像命令。将所选择的画像命令发送到接收通信终端。接收通信终端然后可以响应于接收到的画像命令来修改显示的化身。
Description
技术领域
本发明涉及电子通信终端,更具体地涉及电子通信终端之间的视频会议。
背景技术
通信技术持续发展,以改进无线通信终端之间的实时全动视频会议。视频会议的全动视频创建和发布使得有必要部署可靠的高带宽网络,并在通信终端中使用高处理带宽和存储容量,以支持实时视频生成、编码、发布、接收和解码功能。因此,视频会议能力会增加通信终端的复杂性和成本,并且可能妨碍其在一些通信终端例如在一些蜂窝电话中的使用。
尽管复杂性和成本增加,但是拥有支持视频会议的通信终端的人数不断增加。然而,已经发现,由于明显不愿意示出他们目前的样貌,所以许多人不愿意使用视频会议。这种不愿意在习惯于使用即时消息传送和基于消息的聊天室的年轻一代间尤其普遍。
发明内容
本发明的各种实施方式致力于提供对通信终端上的化身显示进行控制的方法和相关联的无线通信终端。下面将进一步详细解释,化身是计算机产生的人的二维或三维表示。
根据一些实施方式,一种用于控制在接收通信终端处显示的化身的方法包括:在来自视频源的视频流中识别人的画像特性。响应于在视频流中所识别出的人的画像特性,在接收通信终端已知的多条画像命令中选择画像命令。将所选择的画像命令传送到接收通信终端。接收通信终端随后可以响应于接收到的画像命令来修改所显示的化身。
在一些进一步的实施方式中,在发送通信终端处,在图片和/或视频流中识别人的画像特性。响应于所识别出的画像特性来产生化身。然后,在发送通信终端和接收通信终端之间建立视频会议会话期间,将化身从发送通信终端传送到接收通信终端。响应于在二维图片和/或视频流中所识别出的画像特性,可以将化身产生为人的身体特征的三维表示。
在一些进一步的实施方式中,识别画像特性包括:识别作为人的情绪的指示的面部表情。选择对应于人的情绪的指示的画像命令。然后,修改接收通信终端显示的化身,以提供人的情绪的指示。选择画像命令可以包括:选择指示人的情绪是以下情绪中的至少一种的画像命令:高兴、悲伤、厌烦和困倦。可以通过执行以下操作中的至少一个来修改所显示的化身:在画像命令对应于高兴情绪时修改所显示的化身的嘴部以指示微笑;在画像命令对应于悲伤情绪时修改所显示的化身的嘴部以指示不悦;在画像命令对应于厌烦情绪时修改所显示的化身的嘴部以指示厌倦;以及在画像命令对应于困倦情绪时修改所显示的化身的眼睛以指示闭眼。响应于在接收通信终端上设置的标志,可以修改所显示的化身以提供与画像命令指示的情绪相反指示的情绪。
在一些进一步的实施方式中,识别人的画像特性可以包括:识别语音信号中作为人的情绪的指示的语音特征。然后,可以选择对应于所识别出的语音特征的画像命令。可以响应于语音信号中的讲话音高和/或语速的变化来选择画像命令。
在一些进一步的实施方式中,响应于来自发送通信终端的语音信号中的语音特征,来修改接收通信终端显示的化身。可以响应于语音信号中的讲话音高和/或语速的变化来修改所显示的化身。
在一些进一步的实施方式中,识别人的画像特性可以包括:识别视频流中的人的身体特征反复活动。可以选择作为所识别出的视频流中的反复身体特征活动的指示的画像命令。可以修改接收通信终端显示的化身,以显示化身上对应于该画像命令所指示的反复身体特征活动的特征的反复活动。
在一些进一步的实施方式中,可以响应于用户在接收通信终端上的规定设置,通过夸张所显示的化身的规定特征来执行对所显示的化身的修改。
在一些进一步的实施方式中,可以响应于用户的规定设置和在视频流中识别出的人的画像特性,来选择对在接收终端上显示的化身的规定特征进行夸张的画像命令。
在一些进一步的实施方式中,可以响应于识别到发送通信终端已使接收通信终端处于通信保持状态,修改接收通信终端显示的化身。
在一些进一步的实施方式中,在所述多条画像命令中选择指示发送通信终端将其麦克风静音的画像命令。响应于所接收到的指示发送通信终端将其麦克风静音的画像命令,修改接收通信终端显示的化身。
在一些进一步的实施方式中,在接收通信终端处,使用发送通信终端的电话号码来在多个存储的化身中选择化身。然后,在接收通信终端处显示所选择的化身。响应于所述画像命令,修改所显示的化身。
在一些进一步的实施方式中,使用语音识别来识别在发送通信终端处讲话的人。响应于对人的识别,在多个存储的化身中选择化身。在接收通信终端处显示所选择的化身。响应于所述画像命令,接收通信终端修改所显示的化身。
在一些进一步的实施方式中,响应于在视频流中的至少一帧内所识别出的人的画像特性,来选择供传送的一条画像命令。可以反复响应于在所述视频流中的空间上隔开规定数目个跳帧的各单独帧内所识别出的画像特性,来选择供传送的一条画像命令。在接收通信终端处接收所述一条画像命令,并且响应于所述一条画像命令,在存储于接收通信终端中的多组化身修改操作内识别一组化身修改操作。响应于所识别的一组化身修改操作,修改接收通信终端显示的化身。
在一些其它实施方式中,一种无线通信终端包括:视频源,其用于产生视频流;收发机,其被配置为通过无线空中接口与另一通信终端进行通信;以及图像处理器,其被配置为,在来自所述视频源的视频流中识别人的画像特性;响应于在所述视频流中所识别出的人的画像特性,从多条画像命令中选择接收通信终端已知的画像命令;以及通过所述收发机将所选择的画像命令传送给另一通信终端。
在一些其他实施方式中,一种无线通信终端包括:收发机,其被配置为通过无线空中接口从另一通信终端接收画像命令;显示器;以及图像处理器,其被配置为响应于所接收到的画像命令,对在所述显示器上显示的化身执行修改。
在阅读了附图和详细说明书之后,根据本发明实施方式的其他系统、通信终端和/或方法将对本领域技术人员是或者变得显而易见。所有这些附加的系统、方法和/或计算机程序产品都包括在本说明书内,落入本发明的范围内,并且受所附权利要求的保护。
附图说明
图1示出了根据本发明一些实施方式的对无线通信终端上的化身显示进行控制的通信系统。
图2是示出根据本发明一些实施方式的用于生成并向接收通信终端发送化身和用于生成并向接收方通信终端发送画像命令的操作与方法的流程图。
图3是示出根据本发明一些实施方式的用于接收/选择用于显示的化身、接收画像命令和修改所显示的化身的操作与方法的流程图。
图4是示出根据本发明一些实施方式的用于根据另一通信终端的用户的语音特征来选择化身的操作与方法的流程图。
图5是示出根据本发明一些实施方式的用于根据对发送通信终端的用户的面部表情的识别来选择画像命令的操作与方法的流程图。
图6是示出根据本发明一些实施方式的用于修改所显示的化身的操作与方法的流程图。
具体实施方式
下面将参照附图更全面地描述本发明,在附图中示出了本发明的实施方式。然而,本发明可以以很多替代的形式来实施,并且不应当被解读为限于本文所阐述的实施方式。
因此,尽管本发明容许有各种修改和替代形式,但是在附图中通过举例的方式示出了其特定实施方式,并将详细描述这些实施方式。然而,应当理解,并不意图将本发明限于所公开的特定形式,相反,本发明将涵盖落入所附权利要求限定的本发明的精神和范围内的所有修改例、等同例和替代例。在对附图的整个描述中,类似的数字指代类似的部件。
本文中使用的词语仅用于描述特定实施方式,而不对本发明构成限制。在本文中使用时,除非以其他方式明确指出,否则单数形式“一(an,an)”和“所述”也将包括复数形式。还应当理解,当在该说明书中使用时,词语“包括(includes,comprises,including和/或comprising)”意指存在所陈述的特征、整数、步骤、操作、部件和/或组件,但是并不排除存在或添加一个或更多个其他特征、整数、步骤、操作、部件、组件和/或它们组成的组。此外,当一部件被称为“响应于”或“连接到”另一部件时,它可以直接响应于或连接到该另一部件,或者可以存在中间部件。相反,当一部件被称为“直接响应于”或“直接连接到”另一部件时,不存在中间部件。在这里使用时,词语“和/或”包括一项或更多项关联列举项中的任何或所有组合,并且可以被简写为“/”。
应当理解,尽管词语第一、第二等在这里可被用来描述各种部件,但是这些部件不应当受这些词语限制。这些词语仅用来将一部件与另一部件区分开。例如,第一部件可以被命名为第二部件,类似地,第二部件可以被命名为第一部件,而不会偏离本公开的教导。尽管一些附图在通信路径上包括箭头来显示通信的基本方向,但是应当理解,通信可以发生在与所描绘的箭头相反的方向上。
结合流程图描述了一些实施方式,在这些流程图中每个框表示电路元件、模块或者包括一条或更多条可执行指令的代码的一部分,所述指令用于实现所规定的逻辑功能。还应当注意,在其他实现中,在框中注明的功能可以不按注明的次序发生。例如,取决于所涉及的功能性,被示为连续的两个框可以事实上基本并发地发生,或者所述框有时可以以逆序执行。
本发明的一些实施方式可以产生于这样的实现,即可以使用化身来在通信终端之间的视频会议和其他通信行为期间表示人员,并且这可以鼓励更多使用这种可视通信,可以降低这些通信使用的网络带宽,并且可以降低通信终端的处理带宽和/或存储要求。
图1例示了根据本发明一些实施方式的对第一和第二无线通信终端110和120上的化身的显示进行控制的通信系统。
化身是由通信终端110和120中的电子电路产生的关于人的二维或三维图形表示。如在视频会议中所使用的,在通信终端110和120二者处均可以产生化身,作为分别在通信终端110和120处捕捉到的图片/视频流中示出的人的计算机产生的图形表示,并且在通信终端110和120之间传送化身以在它们上进行显示。化身可以包括来自图片/视频流的人的图像的至少一部分,并且可以通过例如以下操作来产生:使人的图像变形(例如,活动/改变面部特征和/或身体特征),将计算机产生的图形(例如,计算机产生的图形面部特征、图形身体特征、和/或诸如太阳镜和/或珠宝这样的图形附件)添加到人的图像的规定部分,和/或用整个计算机产生的图形肖像(例如,该肖像可以具有动画卡通外貌)来替换人的图像。下面将描述,可以基于索尼公司开发的运动画像(portrait)技术来产生化身。
出于仅举例说明和解释的目的,在本文中就无线通信终端来描述本发明的各种实施方式。然而,应当理解,本发明并不限于这些实施方式,并且可以一般地实施为如本文所描述的那样产生、选择和或控制化身的任何通信终端。
参照图1,示例性的第一和第二通信终端110和120可以各自包括视频源130、图像处理器132、显示器134、通信控制器140、收发机142、存储器150,以及用户输入接口160。第一和第二通信终端110和120可以被配置来通过交换从视频源130产生的视频流来在它们之间进行视频会议,并且所述视频流可以包括操作相应的通信终端110和120的人员的图像。本领域技术人员将意识到,在游戏环境内、在包括多于两个通信终端的视频会议环境内、以及在期望参与者的可视化表示的其他通信环境内,该系统可以类似地工作。
通信终端110和120被配置来通过无线空中接口进行通信。收发机142通常包括协作以发送和接收射频信号的发送机电路和接收机电路,所述射频信号可以通过例如可包括在蜂窝通信系统内的基站收发机144和移动交换中心(MSC)146来被路由。通信终端110和120的收发机142可以附加或可替代地被配置来使用短距离通信协议在其间直接进行通信。相应地,通信控制器140可以被配置来根据一种或更多种蜂窝协议对通信进行编码/解码和控制,所述蜂窝协议可以包括但不限于全球移动通信标准(GSM)、通用分组无线业务(GPRS)、增强型数据速率GSM演进技术(EDGE)、码分多址(CDMA)、宽带CDMA、CDMA2000,和/或通用移动电信系统(UMTS)。通信控制器140可以替代地或附加地根据一种或更多种短距离通信协议对通信进行编码/解码和控制,所述短距离通信协议可以包括但不限于,蓝牙和/或WiFi,例如IEEE 802.11(例如,IEEE 802.11b-g)。
视频源130可以包括例如电荷耦合器件或其他产生视频流并且还可以产生数字静物图片的图像传感器。用户接口160可以包括麦克风、游戏杆、键盘/小键盘、触感显示接口、拨号盘、方向键,和/或定位终端(例如,鼠标、轨迹球、触摸板等)。显示器134可以包括液晶显示器(LCD)、阴极射线管(CRT),和/其他可以可视地显示计算机产生的图形,并且还可以被配置来显示全动视频的其他显示技术。
存储器150可以表示存储器结构,该存储器结构可以包括易失性存储器和/或非易失性存储器,例如,可移除闪存、磁和/或光可重写的非易失性存储器。该存储器可以包括画像命令数据库152、化身数据库154和操作数据库156,操作数据库156包括可以用来修改在显示器134上显示的化身的操作组。
图像处理器132被配置来产生化身、在显示器134上显示化身,以及修改所显示的化身。图像处理器132还被配置来使用画像命令来控制在另一通信终端上显示的化身,所述画像命令是响应于针对来自视频源130的视频流内的人的图像而识别出的画像特性而产生的。下面参照图2-5,来描述可以例如通过图像处理器132执行以产生、选择、传送和修改化身的各种操作和方法。
图2是例示用于产生并向另一通信终端传送化身和用于产生并向另一通信终端传送画像命令的操作和方法200的流程图。这些操作和方法可以至少部分地由图像处理器132来执行。
参照图2,第一通信终端110使用图像处理器132和通信控制器140来与第二通信终端120建立视频会议(框202)。视频会议协议可以例如基于第一和第二通信终端110和120支持的一个或更多个蜂窝视频会议协议。
确定第二通信终端120中是否存储有已有化身(框204)。例如,在建立视频会议期间,第二通信终端120可以基于第一通信终端110的电话号码来确定它是否存储有与该电话号码相关联的已有化身,如果没有,则可以从第一通信终端110请求化身。
当确定第二通信终端120没有对应化身(例如,存储在终端120中的预先存在的化身)时,第一通信终端110产生化身并将该化身传送到第二通信终端120。化身可以通过图像处理器132识别(框206)来自视频源130的图片和/或视频流中的人的画像特性来产生。化身可以响应于所识别出的画像特性,使用例如索尼公司开发的运动画像技术来产生(框208)。例如,图像处理器132可以响应于对人的面部轮廓的识别和/或响应于对面部特征(例如,头发、耳朵、眼睛、鼻子、嘴部以及皮肤表面的相对大小、颜色和位置)的识别,来产生化身。图像处理器132随后可以产生图形表示,如人的二维或三维的全部图形表示和/或人的部分视频部分图形的混合表示。图像处理器132可以例如根据二维图片/视频流产生人的三维图画。
图像处理器132可以通过例如以下操作来产生化身:使人的图像变形(例如,活动/改变面部特征和/或身体特征),将计算机化的图形图像(例如,计算机产生的图形面部特征、身体特征,和/或诸如太阳镜和/或珠宝这样的附件)作为覆盖添加在人的图像的规定部分上,和/或用整个计算机产生的图形肖像替换人的图像。图像处理器132通过通信控制器140和收发机142将化身传送到第二通信终端120(框210)。
在进行视频会议期间,第一通信终端110的图像处理器132被配置来使用第二通信终端120已知的画像命令来控制第二通信终端120在显示器134上显示的化身。为了产生一条或更多条画像命令,图像处理器132识别(框212)来自视频源130的视频流中的人的画像特性。图像处理器132响应于所识别的画像特性,从数据库152中的画像命令中选择画像命令。通过通信控制器140和收发机142将所选择的画像命令传送到第二通信终端120。
图5是例示可以例如通过图像处理器132执行来基于对面部表情的识别选择画像命令的各种操作和方法的流程图。参照图5,在进行视频会议期间,图像处理器132分析来自视频源130的视频流中的视频帧,以识别(框502)面部表情。图像处理器132可以对识别出的面部表情进行分类(框504),例如,将面部表情分类为指示多种规定情绪中的一种或更多种,例如指示人高兴、悲伤、厌烦或困倦。图像处理器132响应于分类,从命令数据库152中选择(框506)画像命令,所述画像命令用于将第二通信终端120显示的化身改变为对应于识别出的面部表情,例如,从指示人高兴改变为指示人悲伤、厌烦或困倦(例如,改变化身的嘴部特征、眼睛特征、头发特征、身体特征活动特性,以可视地指示识别出的人的情绪)。
可替代地或者附加地,图像处理器132可以响应于人的语音特征(例如,语音的音高和/或讲话速度),从命令数据库152中选择(框506)画像命令。因此,图像处理器132可以从人的语音检测各种特性,例如人的情绪,这些特性可以由画像命令来表示,以使得第二通信终端120修改所显示的画像来指示化身上的对应情绪。在示例性实施方式中,图像处理器132在人的音高和/或语速增加至少一个或更多个阈值量(例如,高于其相应的中间值的阈值量)时,可以将人分类为高兴的,在人的音高和/或语速降低至少一个或更多个阈值量时,可以将人分类为厌烦的,而当人的音高和/或语速进一步降低至少一个或更多个阈值量时,可以将人分类为困倦的。如上所述,图像处理器132可以响应于这些分类的变化,使用画像命令来使得第二通信终端120以对应方式修改它显示的化身。
可替代地或附加地,图像处理器132可以响应于人通过接口160(例如,用户选择第一通信终端110上的各种规定按钮)产生的信号,选择(框506)对应画像命令,所述对应画像命令被所述图像处理器132传送给第二通信终端120,以使得第二通信终端120修改它显示的化身(例如,将小键盘按钮与使化身厌倦、微笑等相关联)。
图像处理器132可以识别来自视频源130的视频流中的人的身体特征(例如,头部、嘴部等)的活动(框508)。响应于所识别出的活动,图像处理器132可以从命令数据库152中选择(框510)指示所检测到的活动(例如,指示检测到的人头部的上下晃动、人头部的左右摇动、人嘴部的快速活动等)的画像命令。由此,传送到第二通信终端120的一条画像命令可以指示特定身体特征的反复活动,并且可以使第二通信终端120相应地以动画形式使化身活动以模仿该反复活动,例如上下晃动化身的头部、左右摇动化身的头部、使化身的嘴部快速活动以模仿说话等。
由此,第一通信终端110中的图像处理器132可以响应于所识别的画像特性来选择一条或更多条画像命令,并将一条或更多条画像命令传送到第二通信终端120,以使得第二通信终端120中的图像处理器132修改所显示的化身。第一通信终端110中的图像处理器132可以针对各单独视频帧或者针对多个视频帧来选择一条画像命令。图像处理器132可以例如通过识别在空间上隔开规定数目个跳过视频帧的单独视频流帧内的人的画像特性,来在画像命令的选择之间跳过规定数目的视频帧。
使用一条画像命令来控制第二通信终端120显示的化身,可以大大减少在第一和第二通信终端110和120之间使用的网络通信带宽,和/或可以减少在通信终端110和120中用来在视频会议期间提供实时编码、分发、接收和解码功能的处理带宽。然而,图像处理器132并不限于每帧选择一条画像命令,它可以另选地针对每个视频帧选择多条画像命令,以传送给第二通信终端120。
再次参照图2,通过通信控制器140和收发机142将所选的一条或更多条画像命令传送(框216)到第二通信终端120。确定视频会议是否已经终止(框218),如果没有,则可以重复框212到218的操作。
图3是例示根据本发明一些实施方式的操作和方法的流程图,所述操作和方法用于接收/选择化身、接收化身命令和修改所显示的化身,并且所述操作和方法可以主要由第二通信终端120中的图像处理器132来执行。
参照图3,第二通信终端120使用图像处理器132和通信控制器140来建立与第一通信终端110的视频会议(框302)。视频会议协议可以例如基于第一和第二通信终端110和120支持的一种或更多种蜂窝视频会议协议。
确定第二通信终端120在化身数据库154中是否具有应当在视频会议期间在显示器134上显示来表示操作第一通信终端110的人的化身(框304)。图像处理器132可以通过使用第一通信终端的电话号码来作出该确定,如果存在一个对应化身,则使用该电话号码作为化身数据库154内的指针来选择(框312)该对应化身。
可替代地或附加地,图像处理器132可以识别通过视频会议接收的人的语音特征,并且如果存在对应化身,可以使用这些识别出的语音特征(例如,对音高、速度模式等的语音识别)作为化身数据库154内的指针,来选择(框312)该对应化身。图4是例示可以用来基于对第一通信终端110讲话的人的语音特征来选择化身的操作和方法的流程图。
参照图4,识别对第一通信终端110讲话的人的语音特征(框402)。在视频会议/电话会议期间可以对诸如话音模式这样的特定语音参数进行采样,并将其与相关联的化身一起存储在数据库154内,并且随后可以使用这些语音参数来在随后的视频会议呼叫期间识别语音并选择相关联的化身。例如,确定所识别的语音特征是否对应于在化身数据库154中本地存储的已有化身(框404),如果是,则选择(框406)该化身以在视频会议期间显示。
由此,第二通信终端120可以使用第一通信终端110的电话号码来选择(框312)用于在视频会议期间显示的化身,和/或可以对通过第一通信终端110讲话的人的语音执行语音识别,以选择(框312)用于在视频会议期间显示的化身。
在视频会议期间,第二通信终端120的图像处理器132可以识别正在通过第一通信终端110讲话的人何时发生改变,和/或可以识别多个在讲话的人,可以识别其他讲话者的语音特征,并且如果存在的话,可以使用这些识别出的语音特征来选择(框312)化身数据库154中的另一化身。图像处理器132随后可以在正从第一通信终端110接收人的语音的同时,在显示器134上显示识别出的化身。图像处理器132可以可替代地或附加地显示多于一个化身,每个化身对应于在视频会议期间正从第一通信终端110接收的被识别出不同人的语音。由此,可以在显示器134上显示多个化身,每个化身表示在视频会议期间例如以顺序方式和/或以扬声器电话配置使用第一通信终端110的不同讲话者。
可替代地或附加地,在视频会议期间,正在操作第二通信终端120的人可以使用接口160,来手动从数据库152中的化身内选择一化身以在显示器134上显示。
当识别出没有已有化身,并且正在使用第二通信终端120的人未以其他方式手动选择已有化身时,第二通信终端120可以从第一通信终端110请求(框306)化身。响应于该请求,第二通信终端120可以接收(308)要在视频会议期间显示的化身,并且可以将该化身和相关联的信息(例如,第一通信终端110的电话号码和/或其他识别信息)存储到化身数据库154内。图像处理器132可以附加地/可替代地识别正在使用第一通信终端110的人的语音特征,并且可以将所识别出的与所选化身相关联的语音特征存储在化身数据库154中。由此,第二通信终端120可以将人的语音关联到数据库154中的化身,并且可以将该信息存储在数据库154中,以供在以后的视频会议期间重用。
图像处理器132在显示器134上显示(框316)化身。在进行视频会议期间,通过收发机142和通信控制器140从第一通信终端110接收一条或更多条画像命令。操作数据库156包括被配置为执行不同化身修改的操作组,这些化身修改例如为,将化身上的嘴部从微笑修改为不悦、张开和闭合化身的嘴部、使化身眨眼、用手捂住化身的耳朵、对化身添加/移除计算机产生的太阳镜等。响应于接收到的画像命令,图像处理器132在操作数据库156中选择它用来修改所显示的化身的一组操作。
图像处理器132响应于所选择(框318)的修改操作,来修改(框320)在显示器134上显示的化身。例如,图像处理器132可以响应于来自第一通信终端110的单独画像命令,选择(框318)并执行以下操作:在微笑与不悦之间切换化身的嘴部、张开/闭合化身的嘴部、睁开/闭合化身的一只或两只眼睛、用手捂住化身的耳朵、对化身添加/移除计算机产生的太阳镜等。
图6是例示可以由第二通信终端120的图像处理器132使用以修改显示的化身的操作和方法的流程图。图像处理器132识别(框602)数据库156中对应于接收到的画像命令的操作。接收到的画像命令可以指令图像处理器132执行所显示的化身的规定部分的反复活动(框604),例如,晃动化身的头部(例如,点头表示同意)、摇动化身的头部(例如,摇头表示不同意)、使化身的嘴部活动以模拟讲话/唱歌,和/或使化身的眼睛活动以模拟眨眼。由此,可以使用来自第一通信终端110的一条画像命令,来执行第二通信终端120显示的化身的规定部分的反复活动。
再次参照图3,图像处理器132可以可替代地或附加地响应于从第一通信终端110接收到的语音信号的特性,来修改(框322)在显示器134上显示的化身。例如,图像处理器132可以响应于来自第一通信终端110的语音信号中讲话的音高和/或语速的至少阈值变化,来从数据库156中选择一个或更多个化身改变操作。
在示例性实施方式中,图像处理器132可以修改(框322)所显示的化身,以指示当接收到的音高和/或语速增加至少一个或更多个阈值量(例如,高于其相应中间值的阈值量)时为高兴,可以修改所显示的化身以指示当接收到的音高和/或语速降低至少一个或更多个阈值量时为厌烦,以及可以修改所显示的化身以指示当接收到的音高和/或语速进一步降低至少一个或更多个阈值量时为困倦。
确定(框324)视频会议是否已经终止,如果没有,则可以重复框316至324的操作。
由此,在一些实施方式中,通信设备识别视频流中人的画像的特性。通信设备响应于所识别的特性,选择接收通信设备已知的画像命令,并将所选择的画像命令传送到该接收通信设备,以控制该接收通信设备显示的化身。
在附图和说明书中,已经公开了本发明的示例性实施方式。然而,在基本上不偏离本发明的原理的情况下,可以对这些实施方式进行许多变化和修改。因此,尽管使用了特定术语,但是它们仅用于一般性的说明意义,而非限制的目的,本发明的范围由所附权利要求来限定。
Claims (22)
1、一种用于控制在接收通信终端处显示的化身的方法,该方法包括:
在发送通信终端处,在来自视频源的视频流中识别人的画像特性;
在所述发送通信终端处,响应于在所述视频流中所识别出的所述人的画像特性,从所述接收通信终端已知的多条画像命令中选择画像命令;以及
将所选择的画像命令从所述发送通信终端发送到所述接收通信终端。
2、根据权利要求1所述的方法,其中,从多条画像命令中选择画像命令包括:响应于在所述视频流的至少一帧内所识别出的所述人的画像特性,选择供发送的一条画像命令。
3、根据权利要求2所述的方法,其中,从多条画像命令中选择画像命令包括:反复响应于在所述视频流的在空间上隔开规定数目个跳帧的各单独帧内所识别出的人的画像特性,选择供发送的一条画像命令。
4、根据权利要求2到3中的任一项所述的方法,该方法还包括:
在所述接收通信终端处接收所述一条画像命令;
响应于所述一条画像命令,从所述接收通信终端中存储的多组化身修改操作中识别一组化身修改操作;
响应于所识别出的一组化身修改操作,修改所述接收通信终端显示的化身。
5、根据权利要求1到4中的任一项所述的方法,其中:
识别人的画像特性包括:识别作为人的情绪的指示的面部表情;
从多条画像命令中选择画像命令包括:选择与所识别出的人的情绪的指示对应的画像命令;并且
该方法还包括:
在所述接收通信终端处接收所述画像命令;和
修改所述接收通信终端显示的化身,以提供所述人的情绪的指示。
6、根据权利要求5所述的方法,其中:
从多条画像命令中选择画像命令包括:选择指示所述人的情绪是以下情绪中的至少一种的画像命令:高兴、悲伤、厌烦和困倦;并且
修改所述接收通信终端显示的化身包括:通过执行以下操作中的至少一种来使所显示的化身变化:在所述画像命令对应于高兴情绪时,修改所显示的化身的嘴部以指示微笑;在所述画像命令对应于悲伤情绪时,修改所显示的化身的嘴部以指示不悦;在所述画像命令对应于厌烦情绪时,修改所显示的化身的嘴部以指示厌倦;以及在所述画像命令对应于困倦情绪时,修改所显示的化身的眼睛以指示闭眼。
7、根据权利要求6所述的方法,该方法还包括:
响应于在所述接收通信终端上设置的标志,修改所显示的化身以提供与所述画像命令指示的情绪相反指示的情绪。
8、根据权利要求1到7中的任一项所述的方法,其中:
识别人的画像特性包括:识别语音信号中作为人的情绪的指示的语音特征;并且
从多条画像命令中选择画像命令包括:选择与所识别出的语音特征对应的画像命令。
9、根据权利要求8所述的方法,其中,选择与所识别出的语音特征对应的画像命令包括:响应于所述语音信号中讲话音高和/或语速的变化来选择画像命令。
10、根据权利要求1到9中的任一项所述的方法,该方法还包括:
响应于来自所述发送通信终端的语音信号中的语音特征,来修改所述接收通信终端显示的化身。
11、根据权利要求10所述的方法,其中,修改所述接收通信终端显示的化身包括:响应于所述语音信号中的讲话音高和/或语速的变化来修改所显示的化身。
12、根据权利要求1到11中的任一项所述的方法,其中:
识别人的画像特性包括:识别所述视频流中的所述人的身体特征反复活动;
从多条画像命令中选择画像命令包括:选择作为所述视频流中所识别出的身体特征反复活动的指示的画像命令;并且
该方法还包括:修改所述接收通信终端显示的化身,以显示所述化身上与所述画像命令所指示的身体特征反复活动对应的特征的反复活动。
13、根据权利要求1到12中的任一项所述的方法,该方法还包括:
在所述接收通信终端处接收所述画像命令;和
响应于所述画像命令来修改所述接收通信终端显示的化身,其中,对所述化身的修改是通过响应于用户在所述接收通信终端上的规定设置,夸张所显示的化身的规定特征来执行的。
14、根据权利要求1到13中的任一项所述的方法,其中:
从多条画像命令中选择画像命令包括:选择画像命令,所述画像命令响应于用户的规定设置和在所述视频流中所识别出的所述人的画像特性,来夸张在所述接收通信终端上显示的化身的规定特征。
15、根据权利要求1到14中的任一项所述的方法,该方法还包括:
响应于识别出所述发送通信终端已使所述接收通信终端处于通信保持状态,修改所述接收通信终端显示的化身。
16、根据权利要求1到15中的任一项所述的方法,该方法还包括:
从所述多条画像命令中选择指示所述发送通信终端将其麦克风静音的画像命令,其中,所选择的画像命令被发送给所述接收通信终端;
响应于所接收到的指示所述发送通信终端将其麦克风静音的画像命令,修改所述接收通信终端显示的化身。
17、根据权利要求1到16中的任一项所述的方法,该方法还包括:
在所述发送通信终端处,识别图片和/或视频流中的人的画像特性;
响应于所识别出的画像特性来产生化身;以及
在所述发送通信终端和所述接收通信终端之间建立视频会议会话期间,将所述化身从所述发送通信终端发送到所述接收通信终端。
18、根据权利要求1到17中的任一项所述的方法,其中,响应于所识别出的画像特性来产生化身包括:响应于在二维图片和/或视频流中所识别出的画像特性,产生人的身体特征的三维表示。
19、根据权利要求1到18中的任一项所述的方法,该方法还包括:
在所述接收通信终端处,使用所述发送通信终端的电话号码来从多个存储的化身中选择化身;
在所述接收通信终端处显示所选择的化身;以及
响应于所述画像命令,修改所述接收通信终端显示的化身。
20、根据权利要求1到19中的任一项所述的方法,该方法还包括:
通过对来自在所述发送通信终端处讲话的人的音频信号使用语音识别,来使用语音识别识别该人;
响应于对该人的识别,从多个存储的化身中选择化身;
在所述接收通信终端处显示所选择的化身;以及
响应于所述画像命令,修改所述接收通信终端显示的化身。
21、一种无线通信终端,该无线通信终端包括:
视频源,其用于产生视频流;
收发机,其被配置为通过无线空中接口与另一通信终端进行通信;以及
图像处理器,其被配置为:在来自所述视频源的视频流中识别人的画像特性;响应于在所述视频流中所识别出的人的画像特性,从多条画像命令中选择接收通信终端已知的画像命令;以及通过所述收发机将所选择的画像命令发送给另一通信终端。
22、一种无线通信终端,该无线通信终端包括:
收发机,其被配置为通过无线空中接口从另一通信终端接收画像命令;
显示器;以及
图像处理器,其被配置为响应于所接收到的画像命令,对在所述显示器上显示的化身执行修改。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/823,984 | 2007-06-29 | ||
US11/823,984 US8111281B2 (en) | 2007-06-29 | 2007-06-29 | Methods and terminals that control avatars during videoconferencing and other communications |
PCT/EP2007/064126 WO2009003536A1 (en) | 2007-06-29 | 2007-12-18 | Methods and terminals that control avatars during videoconferencing and other communications |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101690071A true CN101690071A (zh) | 2010-03-31 |
CN101690071B CN101690071B (zh) | 2013-01-09 |
Family
ID=39276260
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200780053540.4A Expired - Fee Related CN101690071B (zh) | 2007-06-29 | 2007-12-18 | 在视频会议和其他通信期间控制化身的方法和终端 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8111281B2 (zh) |
EP (1) | EP2160880A1 (zh) |
CN (1) | CN101690071B (zh) |
WO (1) | WO2009003536A1 (zh) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102075727A (zh) * | 2010-12-30 | 2011-05-25 | 中兴通讯股份有限公司 | 一种可视电话中图像处理方法和装置 |
CN102455898A (zh) * | 2010-10-29 | 2012-05-16 | 张明 | 视频聊天卡通表情辅助娱乐系统 |
CN103297742A (zh) * | 2012-02-27 | 2013-09-11 | 联想(北京)有限公司 | 数据处理方法、微处理器、通信终端及服务器 |
CN103916536A (zh) * | 2013-01-07 | 2014-07-09 | 三星电子株式会社 | 用于移动终端中的用户界面方法和系统 |
CN104170358A (zh) * | 2012-04-09 | 2014-11-26 | 英特尔公司 | 用于化身管理和选择的系统和方法 |
CN104170318A (zh) * | 2012-04-09 | 2014-11-26 | 英特尔公司 | 使用交互化身的通信 |
CN104333730A (zh) * | 2014-11-26 | 2015-02-04 | 北京奇艺世纪科技有限公司 | 一种视频通信方法及装置 |
CN104871528A (zh) * | 2012-08-01 | 2015-08-26 | 谷歌公司 | 在视频会议系统中使用化身 |
WO2016045010A1 (en) * | 2014-09-24 | 2016-03-31 | Intel Corporation | Facial gesture driven animation communication system |
CN105578108A (zh) * | 2014-11-05 | 2016-05-11 | 爱唯秀股份有限公司 | 电子运算设备、视讯通话系统与其运行方法 |
WO2016154800A1 (en) * | 2015-03-27 | 2016-10-06 | Intel Corporation | Avatar facial expression and/or speech driven animations |
CN106204698A (zh) * | 2015-05-06 | 2016-12-07 | 北京蓝犀时空科技有限公司 | 为自由组合创作的虚拟形象生成及使用表情的方法和系统 |
CN106874265A (zh) * | 2015-12-10 | 2017-06-20 | 深圳新创客电子科技有限公司 | 一种与用户情绪匹配的内容输出方法、电子设备及服务器 |
CN107430429A (zh) * | 2015-04-07 | 2017-12-01 | 英特尔公司 | 化身键盘 |
CN107527381A (zh) * | 2017-09-11 | 2017-12-29 | 广东欧珀移动通信有限公司 | 图像处理方法及装置、电子装置和计算机可读存储介质 |
CN110900617A (zh) * | 2018-09-14 | 2020-03-24 | Lg电子株式会社 | 机器人及其操作方法 |
CN111953922A (zh) * | 2019-05-16 | 2020-11-17 | 南宁富桂精密工业有限公司 | 视频会议的人脸辨识方法、服务器及计算机可读存储介质 |
US11295502B2 (en) | 2014-12-23 | 2022-04-05 | Intel Corporation | Augmented facial animation |
US11887231B2 (en) | 2015-12-18 | 2024-01-30 | Tahoe Research, Ltd. | Avatar animation system |
Families Citing this family (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8615479B2 (en) | 2007-12-13 | 2013-12-24 | The Invention Science Fund I, Llc | Methods and systems for indicating behavior in a population cohort |
US20090157625A1 (en) * | 2007-12-13 | 2009-06-18 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for identifying an avatar-linked population cohort |
US9775554B2 (en) | 2007-12-31 | 2017-10-03 | Invention Science Fund I, Llc | Population cohort-linked avatar |
US8832552B2 (en) * | 2008-04-03 | 2014-09-09 | Nokia Corporation | Automated selection of avatar characteristics for groups |
CN103402070B (zh) | 2008-05-19 | 2017-07-07 | 日立麦克赛尔株式会社 | 记录再现装置及方法 |
US9324173B2 (en) * | 2008-07-17 | 2016-04-26 | International Business Machines Corporation | System and method for enabling multiple-state avatars |
US8957914B2 (en) | 2008-07-25 | 2015-02-17 | International Business Machines Corporation | Method for extending a virtual environment through registration |
US10166470B2 (en) | 2008-08-01 | 2019-01-01 | International Business Machines Corporation | Method for providing a virtual world layer |
KR101597286B1 (ko) * | 2009-05-07 | 2016-02-25 | 삼성전자주식회사 | 아바타 영상 메시지를 생성하는 장치 및 방법 |
US8413218B1 (en) * | 2009-07-02 | 2013-04-02 | United Services Automobile Association (Usaa) | Systems and methods for videophone identity cloaking |
JP2011090466A (ja) * | 2009-10-21 | 2011-05-06 | Sony Corp | 情報処理装置及び方法、並びにプログラム |
US8427521B2 (en) * | 2009-10-21 | 2013-04-23 | At&T Intellectual Property I, L.P. | Method and apparatus for providing a collaborative workspace |
US8650248B2 (en) * | 2010-05-25 | 2014-02-11 | At&T Intellectual Property I, L.P. | Methods and systems for selecting and implementing digital personas across applications and services |
US9245177B2 (en) * | 2010-06-02 | 2016-01-26 | Microsoft Technology Licensing, Llc | Limiting avatar gesture display |
US20120069028A1 (en) * | 2010-09-20 | 2012-03-22 | Yahoo! Inc. | Real-time animations of emoticons using facial recognition during a video chat |
CN101951494B (zh) * | 2010-10-14 | 2012-07-25 | 上海紫南信息技术有限公司 | 传统电话与视频会议显示图像融合的方法 |
JP2013009073A (ja) * | 2011-06-23 | 2013-01-10 | Sony Corp | 情報処理装置、情報処理方法、プログラム、及びサーバ |
US8767034B2 (en) * | 2011-12-01 | 2014-07-01 | Tangome, Inc. | Augmenting a video conference |
JP5949030B2 (ja) | 2012-03-26 | 2016-07-06 | カシオ計算機株式会社 | 画像生成装置、画像生成方法及びプログラム |
WO2013178278A1 (en) * | 2012-05-31 | 2013-12-05 | Atg Advanced Swiss Technology Group Ag | Method for supervising a chat connection |
JP5949331B2 (ja) * | 2012-08-30 | 2016-07-06 | カシオ計算機株式会社 | 画像生成装置、画像生成方法及びプログラム |
US10311482B2 (en) * | 2013-11-11 | 2019-06-04 | At&T Intellectual Property I, Lp | Method and apparatus for adjusting a digital assistant persona |
CN104836979A (zh) * | 2014-03-17 | 2015-08-12 | 腾讯科技(北京)有限公司 | 信息交互的方法和装置 |
US9818216B2 (en) * | 2014-04-08 | 2017-11-14 | Technion Research And Development Foundation Limited | Audio-based caricature exaggeration |
US20150370707A1 (en) * | 2014-06-24 | 2015-12-24 | Qualcomm Incorporated | Disunited shared-information and private-information caches |
CN105451090B (zh) * | 2014-08-26 | 2019-03-29 | 联想(北京)有限公司 | 图像处理方法和图像处理装置 |
US10154191B2 (en) * | 2016-05-18 | 2018-12-11 | Microsoft Technology Licensing, Llc | Emotional/cognitive state-triggered recording |
JP6266736B1 (ja) * | 2016-12-07 | 2018-01-24 | 株式会社コロプラ | 仮想空間を介して通信するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 |
US10845956B2 (en) * | 2017-05-31 | 2020-11-24 | Snap Inc. | Methods and systems for voice driven dynamic menus |
KR102125735B1 (ko) * | 2018-03-26 | 2020-06-23 | 주식회사 하이퍼커넥트 | 영상 통화를 제공하는 방법 및 영상 통화 제공 시스템 |
JP7206688B2 (ja) * | 2018-08-16 | 2023-01-18 | 富士フイルムビジネスイノベーション株式会社 | 遠隔会議システムおよび端末装置 |
KR102604937B1 (ko) * | 2018-12-05 | 2023-11-23 | 삼성전자주식회사 | 캐릭터를 포함하는 동영상을 생성하기 위한 전자 장치 및 그에 관한 방법 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6384829B1 (en) * | 1999-11-24 | 2002-05-07 | Fuji Xerox Co., Ltd. | Streamlined architecture for embodied conversational characters with reduced message traffic |
TWI221574B (en) * | 2000-09-13 | 2004-10-01 | Agi Inc | Sentiment sensing method, perception generation method and device thereof and software |
WO2003058518A2 (en) * | 2002-01-07 | 2003-07-17 | Stephen James Crampton | Method and apparatus for an avatar user interface system |
US7003040B2 (en) | 2002-09-24 | 2006-02-21 | Lg Electronics Inc. | System and method for multiplexing media information over a network using reduced communications resources and prior knowledge/experience of a called or calling party |
US7409639B2 (en) | 2003-06-19 | 2008-08-05 | Accenture Global Services Gmbh | Intelligent collaborative media |
EP1509042A1 (en) * | 2003-08-19 | 2005-02-23 | Sony Ericsson Mobile Communications AB | System and method for a mobile phone for classifying a facial expression |
US20050054935A1 (en) * | 2003-09-08 | 2005-03-10 | Rice Robert R. | Hyper-spectral means and method for detection of stress and emotion |
EP1692629B1 (en) * | 2003-12-05 | 2011-06-08 | Koninklijke Philips Electronics N.V. | System & method for integrative analysis of intrinsic and extrinsic audio-visual data |
JP2005202854A (ja) * | 2004-01-19 | 2005-07-28 | Nec Corp | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2005323340A (ja) * | 2004-04-07 | 2005-11-17 | Matsushita Electric Ind Co Ltd | 通信端末及び通信方法 |
-
2007
- 2007-06-29 US US11/823,984 patent/US8111281B2/en active Active
- 2007-12-18 WO PCT/EP2007/064126 patent/WO2009003536A1/en active Application Filing
- 2007-12-18 EP EP07857753A patent/EP2160880A1/en not_active Ceased
- 2007-12-18 CN CN200780053540.4A patent/CN101690071B/zh not_active Expired - Fee Related
Cited By (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102455898A (zh) * | 2010-10-29 | 2012-05-16 | 张明 | 视频聊天卡通表情辅助娱乐系统 |
CN102075727A (zh) * | 2010-12-30 | 2011-05-25 | 中兴通讯股份有限公司 | 一种可视电话中图像处理方法和装置 |
CN103297742A (zh) * | 2012-02-27 | 2013-09-11 | 联想(北京)有限公司 | 数据处理方法、微处理器、通信终端及服务器 |
CN104170358B (zh) * | 2012-04-09 | 2016-05-11 | 英特尔公司 | 用于化身管理和选择的系统和方法 |
US11303850B2 (en) | 2012-04-09 | 2022-04-12 | Intel Corporation | Communication using interactive avatars |
CN104170318A (zh) * | 2012-04-09 | 2014-11-26 | 英特尔公司 | 使用交互化身的通信 |
CN104170318B (zh) * | 2012-04-09 | 2018-06-01 | 英特尔公司 | 使用交互化身的通信 |
CN104170358A (zh) * | 2012-04-09 | 2014-11-26 | 英特尔公司 | 用于化身管理和选择的系统和方法 |
CN107257403A (zh) * | 2012-04-09 | 2017-10-17 | 英特尔公司 | 使用交互化身的通信 |
US9357174B2 (en) | 2012-04-09 | 2016-05-31 | Intel Corporation | System and method for avatar management and selection |
CN104871528B (zh) * | 2012-08-01 | 2018-03-13 | 谷歌有限责任公司 | 在视频会议系统中使用化身 |
CN104871528A (zh) * | 2012-08-01 | 2015-08-26 | 谷歌公司 | 在视频会议系统中使用化身 |
CN103916536A (zh) * | 2013-01-07 | 2014-07-09 | 三星电子株式会社 | 用于移动终端中的用户界面方法和系统 |
CN103916536B (zh) * | 2013-01-07 | 2018-12-18 | 三星电子株式会社 | 用于移动终端中的用户界面方法和系统 |
US9984487B2 (en) | 2014-09-24 | 2018-05-29 | Intel Corporation | Facial gesture driven animation communication system |
WO2016045010A1 (en) * | 2014-09-24 | 2016-03-31 | Intel Corporation | Facial gesture driven animation communication system |
CN105578108A (zh) * | 2014-11-05 | 2016-05-11 | 爱唯秀股份有限公司 | 电子运算设备、视讯通话系统与其运行方法 |
CN104333730B (zh) * | 2014-11-26 | 2019-03-15 | 北京奇艺世纪科技有限公司 | 一种视频通信方法及装置 |
CN104333730A (zh) * | 2014-11-26 | 2015-02-04 | 北京奇艺世纪科技有限公司 | 一种视频通信方法及装置 |
US11295502B2 (en) | 2014-12-23 | 2022-04-05 | Intel Corporation | Augmented facial animation |
CN107431635A (zh) * | 2015-03-27 | 2017-12-01 | 英特尔公司 | 化身面部表情和/或语音驱动的动画化 |
CN107431635B (zh) * | 2015-03-27 | 2021-10-08 | 英特尔公司 | 化身面部表情和/或语音驱动的动画化 |
WO2016154800A1 (en) * | 2015-03-27 | 2016-10-06 | Intel Corporation | Avatar facial expression and/or speech driven animations |
CN107430429A (zh) * | 2015-04-07 | 2017-12-01 | 英特尔公司 | 化身键盘 |
CN106204698A (zh) * | 2015-05-06 | 2016-12-07 | 北京蓝犀时空科技有限公司 | 为自由组合创作的虚拟形象生成及使用表情的方法和系统 |
CN106874265A (zh) * | 2015-12-10 | 2017-06-20 | 深圳新创客电子科技有限公司 | 一种与用户情绪匹配的内容输出方法、电子设备及服务器 |
CN106874265B (zh) * | 2015-12-10 | 2021-11-26 | 深圳新创客电子科技有限公司 | 一种与用户情绪匹配的内容输出方法、电子设备及服务器 |
US11887231B2 (en) | 2015-12-18 | 2024-01-30 | Tahoe Research, Ltd. | Avatar animation system |
CN107527381A (zh) * | 2017-09-11 | 2017-12-29 | 广东欧珀移动通信有限公司 | 图像处理方法及装置、电子装置和计算机可读存储介质 |
CN110900617A (zh) * | 2018-09-14 | 2020-03-24 | Lg电子株式会社 | 机器人及其操作方法 |
CN111953922A (zh) * | 2019-05-16 | 2020-11-17 | 南宁富桂精密工业有限公司 | 视频会议的人脸辨识方法、服务器及计算机可读存储介质 |
CN111953922B (zh) * | 2019-05-16 | 2022-05-27 | 南宁富联富桂精密工业有限公司 | 视频会议的人脸辨识方法、服务器及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN101690071B (zh) | 2013-01-09 |
US20090002479A1 (en) | 2009-01-01 |
WO2009003536A1 (en) | 2009-01-08 |
EP2160880A1 (en) | 2010-03-10 |
US8111281B2 (en) | 2012-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101690071B (zh) | 在视频会议和其他通信期间控制化身的方法和终端 | |
CN100359941C (zh) | 可视电话终端 | |
EP1480425B1 (en) | Portable terminal and program for generating an avatar based on voice analysis | |
US8373799B2 (en) | Visual effects for video calls | |
CN103797761B (zh) | 通信方法、客户端和终端 | |
EP1560406A1 (en) | Method for controlling the behavior of an avatar displayed on a portable communication terminal | |
CN110400251A (zh) | 视频处理方法、装置、终端设备及存储介质 | |
KR100681900B1 (ko) | 화상 통화를 위한 감정표현 애니메이션 서비스 시스템 및방법과 이를 위한 이동 통신 단말 | |
CN103368816A (zh) | 基于虚拟人物形象的即时通讯方法及系统 | |
KR20100062207A (ko) | 화상통화 중 애니메이션 효과 제공 방법 및 장치 | |
TW201445414A (zh) | 通訊過程中的資訊互動方法、用戶端及伺服器 | |
KR20050102079A (ko) | 이동영상통신을 위한 아바타 데이터베이스 | |
WO2008087621A1 (en) | An apparatus and method for animating emotionally driven virtual objects | |
WO2006011295A1 (ja) | 通信装置 | |
CN113014471A (zh) | 会话处理方法,装置、终端和存储介质 | |
JP2023524119A (ja) | 顔イメージ生成方法、装置、電子機器及び可読記憶媒体 | |
KR20110012491A (ko) | 영상데이터 및 아바타를 이용한 메시지 전송 시스템, 관리서버, 단말 및 방법 | |
CN107070784A (zh) | 一种基于WebGL和VR技术的3D即时通讯系统 | |
JP2006352309A (ja) | 電話機 | |
JP4896118B2 (ja) | テレビ電話端末 | |
WO2021229692A1 (ja) | アバター制御プログラム、アバター制御方法および情報処理装置 | |
KR20080100291A (ko) | 통신 네트워크에서 메시지들 및 단순 패턴들을 전달하는 방법 및 장치 | |
CN110291768A (zh) | 信息处理装置、信息处理方法和信息处理系统 | |
KR100736541B1 (ko) | 개인 캐릭터의 온라인 통합 시스템 | |
CN115396390A (zh) | 基于视频聊天的互动方法、系统、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130109 |