CN101436312A - 一种生成视频动画的方法及装置 - Google Patents
一种生成视频动画的方法及装置 Download PDFInfo
- Publication number
- CN101436312A CN101436312A CNA2008101845175A CN200810184517A CN101436312A CN 101436312 A CN101436312 A CN 101436312A CN A2008101845175 A CNA2008101845175 A CN A2008101845175A CN 200810184517 A CN200810184517 A CN 200810184517A CN 101436312 A CN101436312 A CN 101436312A
- Authority
- CN
- China
- Prior art keywords
- play amount
- action
- frame
- src
- reference mark
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000004364 calculation method Methods 0.000 claims abstract description 13
- 210000003128 head Anatomy 0.000 claims description 34
- 230000000875 corresponding effect Effects 0.000 claims description 16
- 206010044074 Torticollis Diseases 0.000 claims description 14
- 210000004709 eyebrow Anatomy 0.000 claims description 14
- 208000018197 inherited torticollis Diseases 0.000 claims description 14
- 230000033001 locomotion Effects 0.000 claims description 13
- 230000001815 facial effect Effects 0.000 claims description 11
- 108700041286 delta Proteins 0.000 claims description 9
- 230000005540 biological transmission Effects 0.000 claims description 4
- 230000014509 gene expression Effects 0.000 description 11
- 210000003205 muscle Anatomy 0.000 description 6
- 230000004397 blinking Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 230000008451 emotion Effects 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 210000001097 facial muscle Anatomy 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
Abstract
本发明实施方式提供了一种生成视频动画的方法及装置，该方法及装置属于动画领域，该方法包括：接收用户发送的命令，并根据所述命令确定所述命令对应的动作，并确定所述动作对应的总帧数和各帧的移动系数；根据所述各帧的移动系数计算出每个控制点在各帧的偏移量，并根据所述各帧的偏移量和总帧数生成视频动画。本发明具体实施方式还提供一种生成视频动画的装置，该方法及装置具有数据计算量小，生成视频动画时间较短，应用范围大的优点。
Description
技术领域
本发明涉及动画领域，尤其涉及一种生成视频动画的方法及装置。
背景技术
动画产业是国家明令扶持的支柱性朝阳文化产业，在动画产业发达的日韩，动画产业的产值甚至超过了汽车产业；并且互联网的多数用户均喜欢展示自我，张扬个性，以引起周围人的关注和重视，在这样的背景下，视频动画以其丰富的表现形式获得越来越多的互联网用户的喜爱。
随着视频动画的发展，视频动画向音频视频结合以及面部引擎及驱动的方向发展，尤其是面部引擎及驱动技术，更是视频动画的核心技术。
为了提供视频动画，现有技术提供了一种视频动画的生成方法，该方法建立了一种基于面部肌肉组织的网格模型，并为此模型建立了一套符号系统，系统通过对肌肉模型的控制来实现表情编码，从而最终生成视频动画。
在实现本发明的过程中，现有技术所提供的技术方案存在如下问题：
由于现有技术的技术方案是通过建立肌肉模型和符号系统来生成视频动画的，但是建立肌肉模型和符号系统的数据计算量均非常的大，所以现有技术的技术方案生成动画的时间较长，应用场景局限性很大。
发明内容
本发明实施方式提供一种生成视频动画的方法及装置，该方法及装置具有数据计算量小，生成视频动画时间较短，应用范围大的优点。
本发明的具体实施方式提供一种生成视频动画的方法，该方法包括：
接收用户发送的命令，并根据所述命令确定所述命令对应的动作，并确定所述动作对应的总帧数和各帧的移动系数；
根据所述各帧的移动系数计算出每个控制点在各帧的偏移量，并根据所述各帧的偏移量和总帧数生成视频动画，所述偏移量包括水平方向偏移量和竖直方向偏移量。
本发明的具体实施方式还提供一种生成视频动画的装置，该装置包括：
接收单元，用于接收用户发送的命令，
设置单元，用于根据所述命令确定所述命令对应的动作，并确定所述动作对应的总帧数和各帧的移动系数；
计算单元，用于根据所述各帧的移动系数计算出每个控制点在各帧的偏移量；
生成单元，用于根据所述各帧的偏移量和总帧数生成视频动画。
由上述所提供的技术方案可以看出，本发明实施例的技术方案根据接收的用户命令确定动作和各动作对应的移动系数后，根据该移动系数计算偏移量，在根据偏移量和总帧数生成动画，由于该方法不需要建立肌肉模型和符号系统来生成视频动画的，并且根据偏移量和总帧数生成动画的计算量较小，所以其具有生成视频动画时间较短，应用范围大的优点。
附图说明
图1为本发明具体实施方式提供的一种生成视频动画的方法的流程图。
图2为本发明一实施例提供的一种生成视频动画的方法的流程图。
图3为本发明具体实施方式提供的一种生成视频动画的装置的结构图
具体实施方式
本发明实施方式提供了一种生成视频动画的方法，该方法如图1所示，包括如下步骤：
步骤11、接收用户发送的命令，并根据该命令确定该命令对应的动作；
该步骤中的命令可以为用户发送的音频命令，当然也可以是用户通过按键发送的实际命令，如输入1表示摇头，2表示点头等，本发明具体实施方式并不局限该命令的具体实施方式，只需该命令能够识别即可。该步骤中用户发送的命令可以为单个动作的命令，也可以为多个动作的组合命令。当为多个动作的组合命令时，该方法可以根据组合动作表现人的情感，进一步丰富了用户的面部表情。
步骤12、确定该动作对应的总帧数以及各帧的移动系数；
该步骤的实现方法可以为下述方法中的任何一种：
方法A、预先设定每个动作所对应的总帧数以及每帧的移动系数，例如，预先设定摇头动作的总帧数为10，各帧的移动系数为0.01*N，当然在实际情况中，也可以将各帧的移动系数设定成不相同，如前5帧每帧的移动系数为0.01*N，后5帧的移动系数为0.05+0.008*(N—5)，上述N均为帧的序号，上述移动系数中的0.01以及0.008等参数用户都可以自行设定，本发明具体实施方式并不局限该参数的具体数值。
方法B、直接由用户设定每个动作的总帧数以及各帧的移动系数。该方式为用户自行设定，所以后续生成的视频动画更能表现出用户的自我及个性。
步骤13、根据各帧的移动系数计算出每个控制点在各帧的偏移量；
该步骤中的偏移量可以包括水平方向(X轴)的偏移量和竖直方向(Y轴)的偏移量。
实现该步骤的方法可以为，这里为了叙述的方便，设置各个动作的移动系数为，眼睛或眉毛的移动系数，m_eyeCoef；头部左右歪头的移动系数，m_angle(单位为弧度)；点头或摆头移动系数，v_angle；嘴巴的水平、垂直移动度系数为：horModelCoef和verModelCoef；
其计算的具体方法为，
眼睛或眉毛在X轴(水平方向)的偏移量为，(A_x—Src_x)*m_eyeCoef；在Y轴(竖直方向)的偏移量为，(A_y—Src_y)*m_eyeCoef；其中A_x、A_y可以为控制点原始坐标向基准线做垂线时，垂线与基准线的交点坐标，其中当为眼睛动作时，基准线为眼角连线，当为眉毛动作时，基准线为面部中轴线；Src_x、Src_y为控制点的原始坐标，该控制点可以为，如面部模型为网格模型，则控制点为网格的交点坐标，该原始坐标为原始图片在网格模型中交点的坐标，该原始图片可以为用户自行输入的图片或预先设定的图片即未进行视频动画生成前的图片。
左右歪头在X轴(水平方向)的偏移量可以为(Src_x—Pivot_x)*cos(m_angle)—(Src_y—Pivot_y)*sin(m_angle)；在Y轴的偏移量可以为(Src_x—Pivot_x)*sin(m_angle)+(Src_y—Pivot_y)*cos(m_angle)；其中Src_x、Src_y为控制点的原始坐标，Pivot_x和Pivot_y为固定点的坐标：该固定点为头部中轴线与头部下外轮廓的交点。
点头或摆头在X轴的偏移量可以为，Src_x+K_i*v_angle*V_x；在Y轴的偏移量可以为Src_y+K_i*v_angle*V_y；其中Src_x、Src_y为控制点的原始坐标，K_i为点头或摆头旋转系数，其计算方法为，K_i＝Delta_1/Dis_1，其中Delta_1为旋转固定角度时(如1度)在Y轴(竖直方向)方向上的移动量，Dis_1为头部的在Y轴方向(竖直方向)的最大长度，当为摆头时，Delta_1为旋转固定角度时(如1度)在X轴方向上的移动量，Dis_1为头部的在X轴方向(水平方向)的最大长度；V_x，V_y为标准向量的坐标，当为点头动作时，其标准向量为从头部最高点到头部最低点的向量，当为摆头动作时，标准向量为从头部最左点到头部最右点的向量。
当为嘴巴动作时，嘴巴在X轴的偏移量可以为，
mouthWidth*cos(m_horAngle)*horizonCoef*horModelCoef+mouthHeight*cos(m_verAngle)*verticeCoef*verModelCoef；
Y轴的偏移量可以为，
mouthWidth*sin(m_horAngle)*horizonCoef*horModelCoef+mouthHeight*sin(m_verAngle)*verticeCoef*verModelCoef；
其中，mouthWidth为左嘴角到右嘴角的距离，mouthHeight为上嘴唇中点的顶点到下嘴唇中间的底点的高度，m_verAngle为头部中轴线和水平X轴的夹角，m_horAngle为嘴角连线和水平X轴的夹角；horizonCoef、verticeCoef分别为嘴巴水平、垂直运动幅度系数，该运动幅度系数也可以由用户自行设定，当然也可以预先进行设定。
步骤14、根据每个控制点在各帧的偏移量以及总帧数生成视频动画。
实现该步骤的方法可以为，
步骤141、根据每个控制点在各帧的偏移量计算出各帧每个控制点的目标坐标；
实现该步骤的方法可以为，控制点的目标坐标的计算方法可以为，基准点坐标+偏移量，根据各个动作，该基准点的坐标分别可以为，当为眼睛、眉毛、点头、摆头或嘴巴动作时，其基准点的坐标即为控制点的原始坐标，当为左右歪头时，其基准点的坐标为，面部中轴线与头部下外轮廓的交点坐标。
步骤142、根据各帧各控制点的目标坐标生成各帧对应的画面，然后根据各帧对应的画面和总帧数生成视频动画。
该步骤中的根据各帧对应的画面和总帧数生成视频动画可以使用普通的视频压缩方法，当然也可以使用其他的现有技术中的方法来生成视频动画，本发明具体实施方式并不局限根据各帧对应的画面和总帧数生成视频动画的具体方式。
上述方法如果接收的用户命令为多个动作的命令，则先将该命令分解成单个动作的命令，然后根据单个动作的命令生成各个单个动作所对应的各帧偏移量，将各个单个动作所对应的各帧偏移量叠加成多个动作所对应的各帧偏移量，然后根据多个动作所对应的各帧偏移量生成多个动作的视频动画。上述方法视频动画的原始图片可以为用户输入的自定义图片，也可以为推荐给用户的图片。
在实际情况中，还可以根据生成的组合动作或单个动作的视频动画来判断表情，如当为点头和眨眼组合动作的视频动画时，表情可以为高兴；当为左右歪头或摆头的视频动画时，表情可以为不高兴；当然用户也可以自行定义组合动作的视频动画或单个动作的视频动画所对应的表情，本发明具体实施方式对视频动画所对应的表情不进行限制。
本发明具体实施方式提供的方法是根据接收的用户命令确定动作和各动作对应的移动系数后，根据该移动系数计算偏移量，在根据偏移量和总帧数生成动画，由于该方法不需要建立肌肉模型和符号系统来生成视频动画的，并且根据偏移量和总帧数生成动画的计算量较小，所以其具有生成视频动画时间较短，应用范围大的优点。又有该方法可以接收多个动作的命令，并根据该命令生成多个动画的组合视频动画，所以该方法可以通过组合单个动画的动画来得到多个动作的组合动画以表达用户的感情。
为了更好地说明本发明的实现方法，现提供一具体实施例来说明本发明实现的具体方法。
一实施例：本实施例提供一种生成视频动画的方法，本实施例实现的技术场景为，本实施例中的视频动画的原始图片为用户自定义的图片，这里假设为图片A，假设用户的命令为，同时进行点头和眨眼动作，其实现的具体步骤如图2所示：包括：
步骤21、接受用户发送的带有点头和眨眼动作的命令，并将点头和眨眼动作的命令分解成，点头命令和眨眼命令。
步骤22、分别确定点头及眨眼动作的总帧数和各帧的移动系数。
该步骤中获取移动系数的具体方法可以参见上述步骤12的相关说明。
步骤23、分别根据点头及眨眼动作的移动系数计算出点头及眨眼动作的偏移量。
该步骤计算偏移量的具体方法可以参见步骤13中的相关描述。
步骤24、根据点头及眨眼动作的偏移量及总帧数分别生成点头视频动画及眨眼视频动画。
步骤25、将生成的点头视频动画及眨眼视频动画组合生成点头和眨眼组合动作视频动画。
可选的，本实施例还可以通过根据生成点头和眨眼组合动作视频动画判断出用户提供的表情为高兴。
本实施例通在接收到用户的点头和眨眼动作的命令后，将组合多动命令分解成单个命令后，分别计算各个动作在各帧中的偏移量，在根据该偏移量及总帧数生成单个动作的视频动画后，将单个动作的视频动画组合成组合动作的视频动画。该方法由于是通过计算偏移量来生成视频动画的，所以其计算量小，生成时间短，引用范围广，且该方法能生成组合动作的视频动画，并通过组合动作来表示用户的情感特征，进一步的丰富了用户的表情。
本发明具体实施方式还提供一种生成视频动画的装置，该装置如图3所示，包括：接收单元31，用于接收用户发送的命令；设置单元32，用于根据该命令确定所述命令对应的动作，并确定该动作对应的总帧数和各帧的移动系数；计算单元33，用于根据该各帧的移动系数计算出每个控制点在各帧的偏移量；生成单元34，用于根据该各帧的偏移量和总帧数生成视频动画。
可选的，上述设置单元32可以包括：用户设定模块，用于为用户提供自行设定所述动作对应的总帧数和各帧的移动系数；
或设定模块，用于预先设定所述动作对应的总帧数和各帧的移动系数。
可选的，如确定所述动作为眼睛或眉毛的动作，计算单元33可以包括：
眼部计算模块，用于计算眼睛或眉毛的动作的偏移量，其偏移量的计算方法可以参见方法实施例中的相关描述。
可选的，如确定所述动作为左右歪头的动作，计算单元33可以包括：
歪头计算模块，用于计算左右歪头的动作的偏移量，其偏移量的计算方法可以参见方法实施例中的相关描述。
可选的，如确定所述动作为点头或摆头动作时，计算单元33可以包括：头部计算模块，用于计算点头或摆头动作的偏移量，其偏移量的计算方法可以参见方法实施例中的相关描述。
可选的，如确定所述动作为嘴巴动作时，计算模块33可以包括：嘴巴计算模块，用于计算嘴巴动作的偏移量，其偏移量的计算方法可以参见方法实施例中的相关描述。
可选的，上述生成单元34可以包括：
坐标计算模块，用于根据该各帧的偏移量计算各帧控制点的目标坐标，具体为，控制点的目标坐标为：
水平方向目标点坐标＝基准点水平方向的坐标+水平方向偏移量；
竖直方向目标点坐标＝基准点竖直方向的坐标+竖直方向偏移量；
该基准点可以为，当为眼睛、眉毛、点头、摆头或嘴巴动作时，所述基准点为控制点，当为左右歪头时，所述基准点为面部中轴线与头部下外轮廓的交点坐标；
视频生成模块，用于根据该各帧控制点的目标坐标及总帧数生成视频动画。
本发明具体实施方式提供的装置中的接收单元31在接收的用户命令后，由设置单元32确定动作和各动作对应的移动系数后，计算单元33根据该移动系数计算偏移量，最后由生成单元34在根据偏移量和总帧数生成视频动画，由于该装置不需要建立肌肉模型和符号系统来生成视频动画的，并且根据偏移量和总帧数生成视频动画的计算量较小，所以其具有生成视频动画时间较短，应用范围大的优点。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机可读取存储介质中，该程序在执行时，包括上述方法步骤，所述的存储介质包括：ROM/RAM、磁盘、光盘等
本发明实施例中所述的方法和装置均可以应用到手机视频动画或娱乐性的网页视频动画。
综上所述，本发明具体实施方式提供的技术方案，具有计算量较小，生成视频动画时间较短，应用范围大的优点。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明实施例揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求的保护范围为准。
Claims (15)
1、一种生成视频动画的方法，其特征在于，所述方法包括：
接收用户发送的命令，并根据所述命令确定所述命令对应的动作，并确定所述动作对应的总帧数和各帧的移动系数；
根据所述各帧的移动系数计算出每个控制点在各帧的偏移量，并根据所述各帧的偏移量和总帧数生成视频动画，所述偏移量包括水平方向偏移量和竖直方向偏移量。
2、根据权利要求1所述的方法，其特征在于，所述确定所述动作对应的总帧数和各帧的移动系数包括：
由用户自行设定所述动作对应的总帧数和各帧的移动系数；
或预先设定所述动作对应的总帧数和各帧的移动系数。
3、根据权利要求1所述的方法，其特征在于，如确定所述动作为眼睛或眉毛的动作，则所述根据所述各帧的移动系数计算出每个控制点在各帧的偏移量具体为：
水平方向偏移量＝(A_x—Src_x)*m_eyeCoef；
竖直方向偏移量＝(A_y—Src_y)*m_eyeCoef；
其中Src_x、Src_y为控制点的原始坐标，所述控制点的原始坐标为未进行视频动画生成前的图片在网格模型中交点的坐标；A_x、A_y为控制点原始坐标向基准线做垂线时，垂线与基准线的交点坐标，其中当为眼睛动作时，基准线为眼角连线，当为眉毛动作时，基准线为面部中轴线，m_eyeCoef为移动系数。
4、根据权利要求1所述的方法，其特征在于，如确定所述动作为左右歪头动作时，所述根据所述各帧的移动系数计算出每个控制点在各帧的偏移量具体为：
水平方向偏移量＝(Src_x—Pivot_x)*cos(m_angle)—(Src_y—Pivot_y)*sin(m_angle)；
竖直方向偏移量＝(Src_x—Pivot_x)*sin(m_angle)+(Src_y—Pivot_y)*cos(m_angle)；
其中Src_x、Src_y为控制点的原始坐标，所述控制点的原始坐标为未进行视频动画生成前的图片在网格模型中交点的坐标；Pivot_x、Pivot_y为面部中轴线与头部下外轮廓的交点坐标，m_angle为移动系数。
5、根据权利要求1所述的方法，其特征在于，如确定所述动作为点头或摆头动作时，所述根据所述各帧的移动系数计算出每个控制点在各帧的偏移量具体为：
水平方向偏移量＝Src_x+K_i*v_angle*V_x；
竖直方向偏移量＝Src_y+K_i*v_angle*V_y；
其中Src_x、Src_y为控制点的原始坐标，所述控制点的原始坐标为未进行视频动画生成前的图片在网格模型中交点的坐标；K_i＝Delta_1/Dis_1；V_x、V_y为标准向量的坐标；
当为点头动作时，该Delta_1为旋转固定角度时在竖直方向上的移动量，Dis_1为头部的在竖直方向的最大长度，标准向量为从头部最高点到头部最低点的向量；当为摆头动作时，Delta_1为旋转固定角度时在水平方向上的移动量，Dis_1为头部的在水平方向的最大长度，标准向量为从头部最左点到头部最右点的向量；v_angle为移动系数。
6、根据权利要求1所述的方法，其特征在于，如确定所述动作为嘴巴动作时，所述根据所述各帧的移动系数计算出每个控制点在各帧的偏移量具体为：
水平方向偏移量＝mouthWidth*cos(m_horAngle)*horizonCoef*horModelCoef+mouthHeight*cos(m_verAngle)*verticeCoef*verModelCoef；
竖直方向偏移量＝mouthWidth*sin(m_horAngle)*horizonCoef*horModelCoef+mouthHeight*sin(m_verAngle)*verticeCoef*verModelCoef；
其中，mouthWidth为左嘴角到右嘴角的距离，mouthHeight为上嘴唇中点的顶点到下嘴唇中间的底点的高度，m_verAngle为头部中轴线和水平方向的夹角，m_horAngle为嘴角连线和水平方向的夹角；horizonCoef、verticeCoef分别为嘴巴水平、垂直运动幅度系数；horModelCoef、verModelCoef分别为嘴巴在水平、竖直方向上的移动系数。
7、根据权利要求3至6之一所述的方法，其特征在于，所述根据所述各帧的偏移量和总帧数生成视频动画具体为，
A、根据所述各帧的偏移量计算各帧控制点的目标坐标，具体为，控制点的目标坐标为：
水平方向目标点坐标＝基准点水平方向的坐标+水平方向偏移量；
竖直方向目标点坐标＝基准点竖直方向的坐标+竖直方向偏移量；
所述基准点为，当为眼睛、眉毛、点头、摆头或嘴巴动作时，所述基准点为控制点，当为左右歪头时，所述基准点为面部中轴线与头部下外轮廓的交点坐标；
B、根据所述各帧控制点的目标坐标及总帧数生成视频动画。
8、根据权利要求1所述的方法，其特征在于，所述用户发送的命令为用户发送的单个动作的命令或多个动作的命令。
9、一种生成视频动画的装置，其特征在于，所述装置包括：
接收单元，用于接收用户发送的命令，
设置单元，用于根据所述命令确定所述命令对应的动作，并确定所述动作对应的总帧数和各帧的移动系数；
计算单元，用于根据所述各帧的移动系数计算出每个控制点在各帧的偏移量；
生成单元，用于根据所述各帧的偏移量和总帧数生成视频动画。
10、根据权利要求9所述的装置，其特征在于，所述设置单元包括：
用户设定模块，用于为用户提供自行设定所述动作对应的总帧数和各帧的移动系数；
或设定模块，用于预先设定所述动作对应的总帧数和各帧的移动系数。
11、根据权利要求9所述的装置，其特征在于，如确定所述动作为眼睛或眉毛的动作，所述计算单元包括：
眼部计算模块，用于计算眼睛或眉毛的动作的偏移量，其计算方法具体为：水平方向偏移量＝(A_x—Src_x)*m_eyeCoef；
竖直方向偏移量＝(A_y—Src_y)*m_eyeCoef；
其中Src_x、Src_y为控制点的原始坐标，所述控制点的原始坐标为未进行视频动画生成前的图片在网格模型中交点的坐标；A_x、A_y为控制点原始坐标向基准线做垂线时，垂线与基准线的交点坐标，其中当为眼睛动作时，基准线为眼角连线，当为眉毛动作时，基准线为面部中轴线，m_eyeCoef为移动系数。
12、根据权利要求9所述的装置，其特征在于，如确定所述动作为左右歪头的动作，所述计算单元包括：
歪头计算模块，用于计算左右歪头的动作的偏移量，其计算方法具体为：水平方向偏移量＝(Src_x—Pivot_x)*cos(m_angle)—(Src_y—Pivot_y)*sin(m_angle)；
竖直方向偏移量＝(Src_x—Pivot_x)*sin(m_angle)+(Src_y—Pivot_y)*cos(m_angle)；
其中Src_x、Src_y为控制点的原始坐标，所述控制点的原始坐标为未进行视频动画生成前的图片在网格模型中交点的坐标；Pivot_x、Pivot_y为面部中轴线与头部下外轮廓的交点坐标，m_angle为移动系数。
13、根据权利要求9所述的装置，其特征在于，如确定所述动作为点头或摆头动作时，所述计算单元包括：头部计算模块，用于计算点头或摆头动作的偏移量，其计算方法具体为：
水平方向偏移量＝Src_x+K_i*v_angle*V_x；
竖直方向偏移量＝Src_y+K_i*v_angle*V_y；
其中Src_x、Src_y为控制点的原始坐标，所述控制点的原始坐标为未进行视频动画生成前的图片在网格模型中交点的坐标；K_i＝Delta_1/Dis_1；V_x、V_y为标准向量的坐标；
当为点头动作时，该Delta_1为旋转固定角度时在竖直方向上的移动量，Dis_1为头部的在竖直方向的最大长度，标准向量为从头部最高点到头部最低点的向量；当为摆头动作时，Delta_1为旋转固定角度时在水平方向上的移动量，Dis_1为头部的在水平方向的最大长度，标准向量为从头部最左点到头部最右点的向量；v_angle为移动系数。
14、根据权利要求9所述的装置，其特征在于，如确定所述动作为嘴巴动作时，所述计算模块具体包括：嘴巴计算模块，用于计算嘴巴动作的偏移量，其计算方法具体为：
水平方向偏移量＝mouthWidth*cos(m_horAngle)*horizonCoef*horModelCoef+mouthHeight*cos(m_verAngle)*verticeCoef*verModelCoef；
竖直方向偏移量＝mouthWidth*sin(m_horAngle)*horizonCoef*horModelCoef+mouthHeight*sin(m_verAngle)*verticeCoef*verModelCoef；
其中，mouthWidth为左嘴角到右嘴角的距离，mouthHeight为上嘴唇中点的顶点到下嘴唇中间的底点的高度，m_verAngle为头部中轴线和水平方向的夹角，m_horAngle为嘴角连线和水平方向的夹角；horizonCoef、verticeCoef分别为嘴巴水平、垂直运动幅度系数；horModelCoef、verModelCoef分别为嘴巴在水平、竖直方向上的移动系数。
15、根据权利要求11至14之一所述的装置，其特征在于，所述生成单元包括：
坐标计算模块，用于根据所述各帧的偏移量计算各帧控制点的目标坐标，具体为，控制点的目标坐标为：
水平方向目标点坐标＝基准点水平方向的坐标+水平方向偏移量；
竖直方向目标点坐标＝基准点竖直方向的坐标+竖直方向偏移量；
所述基准点为，当为眼睛、眉毛、点头、摆头或嘴巴动作时，所述基准点为控制点，当为左右歪头时，所述基准点为面部中轴线与头部下外轮廓的交点坐标；
视频生成模块，用于根据所述各帧控制点的目标坐标及总帧数生成视频动画。
Priority Applications (6)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2008101845175A CN101436312B (zh) | 2008-12-03 | 2008-12-03 | 一种生成视频动画的方法及装置 |
| SG2011039120A SG171453A1 (en) | 2008-12-03 | 2009-11-20 | Method and device for creating video animation |
| RU2011126626/08A RU2487412C2 (ru) | 2008-12-03 | 2009-11-20 | Способ и устройство для создания видеоанимации |
| PCT/CN2009/075062 WO2010063217A1 (zh) | 2008-12-03 | 2009-11-20 | 一种生成视频动画的方法及装置 |
| BRPI0922694-0A BRPI0922694B1 (pt) | 2008-12-03 | 2009-11-20 | Método e aparelho para gerar animação de vídeo |
| US13/152,923 US8441485B2 (en) | 2008-12-03 | 2011-06-03 | Method and apparatus for generating video animation |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2008101845175A CN101436312B (zh) | 2008-12-03 | 2008-12-03 | 一种生成视频动画的方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101436312A true CN101436312A (zh) | 2009-05-20 |
| CN101436312B CN101436312B (zh) | 2011-04-06 |
Family
ID=40710742
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2008101845175A Active CN101436312B (zh) | 2008-12-03 | 2008-12-03 | 一种生成视频动画的方法及装置 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US8441485B2 (zh) |
| CN (1) | CN101436312B (zh) |
| BR (1) | BRPI0922694B1 (zh) |
| RU (1) | RU2487412C2 (zh) |
| SG (1) | SG171453A1 (zh) |
| WO (1) | WO2010063217A1 (zh) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010063217A1 (zh) * | 2008-12-03 | 2010-06-10 | 腾讯科技（深圳）有限公司 | 一种生成视频动画的方法及装置 |
| CN102054287B (zh) * | 2009-11-09 | 2015-05-06 | 腾讯科技（深圳）有限公司 | 面部动画视频生成的方法及装置 |
| CN106250815A (zh) * | 2016-07-05 | 2016-12-21 | 上海引波信息技术有限公司 | 一种基于嘴部特征的快速表情识别方法 |
| WO2017152673A1 (zh) * | 2016-03-10 | 2017-09-14 | 腾讯科技（深圳）有限公司 | 人物面部模型的表情动画生成方法及装置 |
| CN108900904A (zh) * | 2018-07-27 | 2018-11-27 | 北京市商汤科技开发有限公司 | 视频处理方法及装置、电子设备和存储介质 |
| CN113313790A (zh) * | 2021-05-31 | 2021-08-27 | 北京字跳网络技术有限公司 | 视频生成方法、装置、设备及存储介质 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103918010B (zh) * | 2011-11-24 | 2017-06-30 | 诺基亚技术有限公司 | 用于生成与多媒体内容相关联的动画图像的方法、装置和计算机程序产品 |
| KR101642947B1 (ko) | 2015-01-16 | 2016-08-10 | 네이버 주식회사 | 만화 데이터 생성 장치, 방법, 컴퓨터 프로그램 및 만화 데이터 표시 장치 |
| CN109949393B (zh) * | 2019-01-09 | 2023-09-12 | 广州小鹏汽车科技有限公司 | 一种动画效果处理方法、系统及装置 |
Family Cites Families (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4633673A (en) * | 1984-09-14 | 1987-01-06 | Morrison Daniel R | Emergency shutoff for air conditioners |
| US4787212A (en) * | 1987-10-19 | 1988-11-29 | Hessey John C | Air conditioner with automatic shutdown |
| US4937559A (en) * | 1989-08-21 | 1990-06-26 | Meacham Huey W | Air conditioner drain blockage alarm |
| US5028910A (en) * | 1989-12-08 | 1991-07-02 | Meacham Huey W | Drain overflow alarm |
| US4998412A (en) * | 1990-01-22 | 1991-03-12 | Joel Bell | Blockage alert and purge system |
| US5522229A (en) * | 1994-11-03 | 1996-06-04 | Stuchlik, Iii; Charles F. | Blockage detector |
| US6232965B1 (en) * | 1994-11-30 | 2001-05-15 | California Institute Of Technology | Method and apparatus for synthesizing realistic animations of a human speaking using a computer |
| US6414685B1 (en) * | 1997-01-29 | 2002-07-02 | Sharp Kabushiki Kaisha | Method of processing animation by interpolation between key frames with small data quantity |
| US6587884B1 (en) * | 1997-09-10 | 2003-07-01 | Schneider Automation, Inc. | Dual ethernet protocol stack for maximum speed access to a programmable logic controller (PLC) |
| IT1314671B1 (it) * | 1998-10-07 | 2002-12-31 | Cselt Centro Studi Lab Telecom | Procedimento e apparecchiatura per l'animazione di un modellosintetizzato di volto umano pilotata da un segnale audio. |
| US6462742B1 (en) * | 1999-08-05 | 2002-10-08 | Microsoft Corporation | System and method for multi-dimensional motion interpolation using verbs and adverbs |
| US6504546B1 (en) * | 2000-02-08 | 2003-01-07 | At&T Corp. | Method of modeling objects to synthesize three-dimensional, photo-realistic animations |
| EP1249792A3 (en) * | 2001-04-12 | 2006-01-18 | Matsushita Electric Industrial Co., Ltd. | Animation data generation apparatus, animation data generation method, animated video generation apparatus, and animated video generation method |
| US20030201898A1 (en) * | 2002-04-25 | 2003-10-30 | Stuchlik Charles F. | Blockage detector with separate alarm and shut-off functions |
| US6763226B1 (en) * | 2002-07-31 | 2004-07-13 | Computer Science Central, Inc. | Multifunctional world wide walkie talkie, a tri-frequency cellular-satellite wireless instant messenger computer and network for establishing global wireless volp quality of service (qos) communications, unified messaging, and video conferencing via the internet |
| US7027054B1 (en) * | 2002-08-14 | 2006-04-11 | Avaworks, Incorporated | Do-it-yourself photo realistic talking head creation system and method |
| US6919892B1 (en) * | 2002-08-14 | 2005-07-19 | Avaworks, Incorporated | Photo realistic talking head creation system and method |
| CN1710613A (zh) * | 2004-06-16 | 2005-12-21 | 甲尚股份有限公司 | 自动产生动画的系统与方法 |
| CN101069214A (zh) | 2004-10-01 | 2007-11-07 | 索尼电影娱乐公司 | 为计算机图形动画制作跟踪面部肌肉和眼睛运动的系统和方法 |
| US7191606B1 (en) * | 2005-04-29 | 2007-03-20 | Dwyer Kenneth W | Drain trap alarm |
| US7567251B2 (en) * | 2006-01-10 | 2009-07-28 | Sony Corporation | Techniques for creating facial animation using a face mesh |
| JP2009533786A (ja) * | 2006-04-10 | 2009-09-17 | アヴァワークス インコーポレーテッド | 自分でできるフォトリアリスティックなトーキングヘッド作成システム及び方法 |
| EP2011087A4 (en) | 2006-04-24 | 2010-02-24 | Sony Corp | PRESENTATION-FACED FACIAL ANIMATION |
| CN101311966A (zh) * | 2008-06-20 | 2008-11-26 | 浙江大学 | 一种基于运行传播和Isomap分析的三维人脸动画编辑与合成方法 |
| CN101436312B (zh) * | 2008-12-03 | 2011-04-06 | 腾讯科技（深圳）有限公司 | 一种生成视频动画的方法及装置 |
| US8059004B2 (en) * | 2009-01-07 | 2011-11-15 | Eric James | Drain blockage responsive alarm system |
-
2008
- 2008-12-03 CN CN2008101845175A patent/CN101436312B/zh active Active
-
2009
- 2009-11-20 WO PCT/CN2009/075062 patent/WO2010063217A1/zh active Application Filing
- 2009-11-20 BR BRPI0922694-0A patent/BRPI0922694B1/pt active IP Right Grant
- 2009-11-20 RU RU2011126626/08A patent/RU2487412C2/ru active
- 2009-11-20 SG SG2011039120A patent/SG171453A1/en unknown
-
2011
- 2011-06-03 US US13/152,923 patent/US8441485B2/en active Active
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010063217A1 (zh) * | 2008-12-03 | 2010-06-10 | 腾讯科技（深圳）有限公司 | 一种生成视频动画的方法及装置 |
| US8441485B2 (en) | 2008-12-03 | 2013-05-14 | Tencent Technology (Shenzhen) Company Limited | Method and apparatus for generating video animation |
| CN102054287B (zh) * | 2009-11-09 | 2015-05-06 | 腾讯科技（深圳）有限公司 | 面部动画视频生成的方法及装置 |
| WO2017152673A1 (zh) * | 2016-03-10 | 2017-09-14 | 腾讯科技（深圳）有限公司 | 人物面部模型的表情动画生成方法及装置 |
| CN107180446A (zh) * | 2016-03-10 | 2017-09-19 | 腾讯科技（深圳）有限公司 | 人物面部模型的表情动画生成方法及装置 |
| CN107180446B (zh) * | 2016-03-10 | 2020-06-16 | 腾讯科技（深圳）有限公司 | 人物面部模型的表情动画生成方法及装置 |
| CN106250815A (zh) * | 2016-07-05 | 2016-12-21 | 上海引波信息技术有限公司 | 一种基于嘴部特征的快速表情识别方法 |
| CN106250815B (zh) * | 2016-07-05 | 2019-09-20 | 上海引波信息技术有限公司 | 一种基于嘴部特征的快速表情识别方法 |
| CN108900904A (zh) * | 2018-07-27 | 2018-11-27 | 北京市商汤科技开发有限公司 | 视频处理方法及装置、电子设备和存储介质 |
| CN113313790A (zh) * | 2021-05-31 | 2021-08-27 | 北京字跳网络技术有限公司 | 视频生成方法、装置、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101436312B (zh) | 2011-04-06 |
| US20110227932A1 (en) | 2011-09-22 |
| RU2011126626A (ru) | 2013-01-10 |
| RU2487412C2 (ru) | 2013-07-10 |
| SG171453A1 (en) | 2011-07-28 |
| BRPI0922694A2 (pt) | 2021-06-15 |
| US8441485B2 (en) | 2013-05-14 |
| WO2010063217A1 (zh) | 2010-06-10 |
| BRPI0922694B1 (pt) | 2021-11-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101436312B (zh) | 一种生成视频动画的方法及装置 | |
| US20210201552A1 (en) | Systems and methods for real-time complex character animations and interactivity | |
| KR101851356B1 (ko) | 3d 디지털액터에 의한 지능형 사용자 인터페이스 제공방법 | |
| CN111294665B (zh) | 视频的生成方法、装置、电子设备及可读存储介质 | |
| CN109242934A (zh) | 一种动画代码的生成方法及设备 | |
| US20130046522A1 (en) | Physics-inspired up sampling for cloth simulation | |
| CN114170648A (zh) | 视频生成方法、装置、电子设备及存储介质 | |
| CN116115995A (zh) | 图像渲染处理方法、装置及电子设备 | |
| KR20180088876A (ko) | 이미지 처리 방법 및 장치 | |
| CN109865291A (zh) | 一种游戏中的动画处理方法及装置 | |
| Singh | Future of Animated Narrative and the Effects of Ai on Conventional Animation Techniques | |
| CN113256765A (zh) | Ai主播视频的生成方法、装置、电子设备及存储介质 | |
| KR101642198B1 (ko) | 모션 효과 생성 장치 및 이를 위한 컴퓨터로 읽을 수 있는 기록매체 | |
| JP2002092639A (ja) | パーティクルの挙動を表示するアニメーション生成方法および装置 | |
| CN116645450A (zh) | 表情包生成方法及设备 | |
| CN116309966A (zh) | 虚拟对象的变形处理方法、装置、存储介质与电子设备 | |
| Rajendran | Understanding the Desired Approach for Animating Procedurally | |
| CN118138834A (zh) | 一种视频生成方法和相关装置 | |
| CN116563469A (zh) | 一种人物场景建模方法、装置、设备及存储介质 | |
| CN116382484A (zh) | 基于微触感的振动驱动方法及相关设备 | |
| López-Colino et al. | Providing ubiquitous access to synthetic sign language contents over multiple platforms | |
| CN115996302A (zh) | 一种数字拼接墙上条屏信号图像平滑方法、装置及设备 | |
| CN110193194A (zh) | 游戏中的相机抖动模拟方法、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |