CN101710945A - 基于粒子纹理的流体视频合成方法 - Google Patents
基于粒子纹理的流体视频合成方法 Download PDFInfo
- Publication number
- CN101710945A CN101710945A CN200910310619A CN200910310619A CN101710945A CN 101710945 A CN101710945 A CN 101710945A CN 200910310619 A CN200910310619 A CN 200910310619A CN 200910310619 A CN200910310619 A CN 200910310619A CN 101710945 A CN101710945 A CN 101710945A
- Authority
- CN
- China
- Prior art keywords
- texture tile
- frame
- fluid
- video
- texture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明公开一种图像处理技术领域的基于粒子纹理的流体视频合成方法，包括以下步骤：根据输入视频的流体运动部分，画出表征流体运动轨迹和运动趋势的流线；在输入视频的每一帧，沿着流体的流线，在若干个固定位置点选择并存储纹理片，确定流体运动区域的纹理结构；根据每个固定位置点处的纹理片信息，按照纹理片排布规则进行纹理图的排布，并利用重叠区域像素融合方法对重叠区域的纹理片结构进行像素融合处理；对纹理片重叠区域内像素值不连续的图片进行插值和滤波处理，进而将得到的像素连续的图片按时间顺序连接成视频；基于法线信息保留法对得到的视频中的流体运动部分进行编辑。本发明可生成无限长视频，合成的速度快，且合成的效果更丰富。
Description
技术领域
本发明涉及的是一种图像处理技术领域的方法，具体是一种基于粒子纹理的流体视频合成方法。
背景技术
流体主要是指自然界里的水流、瀑布、烟雾等现象，流体视频合成是目前计算机视觉领域中的一个研究热点，在数字游戏，电影特效等领域都有很广阔的应用前景。真实世界中拍摄的流体图像，具有那些合成的图像无法攀比的细腻和美感。近些年来，尽管随着仿真，渲染，图像处理的技术进步，视频合成的水平有所提高，但是合成的视频还是无法做到像自然世界中的景象那样真实。但是自然世界中得到的真实视频毕竟是时间上有限的并且受到了场景物理因素的限制。因此，一方面为了得到任意时间长度的流体视频，另一方面为了使得用户可以方便地按照需要编辑视频，研究者们提出了一些基于视频纹理的研究方法，但是这些方法都是以较高的计算复杂度为代价，并且一般局限于某一种特定类型的流体运动，如烟，水流或者火焰等。
经过对现有技术的文献检索发现，Doretto等人在《International Journal ofComputer Vision(计算机视觉期刊)》(2003年第91-109页)上发表了题为“DynamicTexture(动态纹理)”的文章，该文使用自回归过滤法对视频序列中流体的复杂运动进行建模和编辑。对于特定的处理过程，该方法可成功合成任意长的纹理序列，从而得到任意长度的流体视频。但是该技术只能对整幅图片或者视频进行合成，而不能灵活的根据用户的需要进行合成，合成速度慢且效果欠佳。
发明内容
本发明针对现有技术存在的问题和不足，提出了一种基于粒子纹理的流体视频合成方法。本发明在输入视频片段的基础上进行任意长度的视频帧序列，并可以根据用户的需求对视频中流体的运动进行编辑，计算量小，应用方便，通用性强。
本发明是通过以下技术方案实现的，包括以下步骤：
第一步，根据输入视频中的流体运动部分，画出表征流体运动轨迹和运动趋势的流线。
第二步，在输入视频的每一帧，沿着流体的流线，在若干个固定位置点处选择并存储纹理片，确定流体运动区域的纹理结构。
第三步，根据每个固定位置点处的纹理片信息，按照纹理片排布规则进行纹理图的排布，并利用重叠区域像素融合方法对重叠区域的纹理片结构进行像素融合处理。
所述的纹理片排布规则是：当输入视频有N帧图像时，在第一个固定位置点处，将第一个纹理片放置在第一帧，第二个纹理片放置在第二帧，以此类推，将第N个纹理片放在第N帧；在第二个固定位置点处，将第一个纹理片放在第二帧，第二个纹理片放在第三帧，以此类推，第N-1个纹理片放在第N帧，第N个纹理片放在第一帧；在第三个固定位置点处，将第一个纹理片放在第三帧，第二个纹理片放在第四帧，以此类推，第N-2个纹理片放在第N帧，第N-1个纹理片放在第一帧，第N个纹理片放在第二帧；以此类推，在第N个固定位置点处，第一个纹理片放在N帧，第二个纹理片放在第一帧，以此类推，第N个纹理片放在第N-1帧。
所述的重叠区域像素融合方法是：对于纹理片K和纹理片K+1重叠区域的像素点的合成像素颜色R，由下式确定：
R＝Rk×dk/d+Rk+1×(d-dk)/d
其中，Rk表示纹理片K的像素颜色，Rk+1表示纹理片K+1的像素颜色，dk表示重叠区域像素到纹理片K与重叠区域交线的距离，d表示纹理片K和纹理片K+1重叠区域的宽度。
第四步，对纹理片重叠区域内像素值不连续的图片进行插值和滤波处理，进而将得到的像素连续的图片按时间顺序连接成视频。
第五步，基于法线信息保留法对得到的视频中的流体运动部分进行编辑。
所述的法线信息保留法是：将已知流体运动轨迹的法线方向上的信息经过变化映射到用户画定的轨迹法线上的对应位置，使得两条轨迹的法线信息得到保留。
与现有技术相比，本发明的有益效果是：采用纹理片调整的方式来生成无限长视频，合成的速度更快；且可以输入流线，根据流体纹理特征生成新的视频，合成的效果更丰富。
附图说明
图1为实施例输入的图片；
图2为实施例经第一步处理后的图片；
图3为实施例经第二步处理后的图片；
图4为实施例经第四步处理后的图片；
图5为实施例经第五步处理后的图片。
具体实施方式
下面结合附图对本发明的方法作详细说明：本实施例在以本发明技术方案为前提下进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
实施例
如图1所示，本实施例用于含有烟雾的图片的视频合成，该图片的参数为：帧尺寸：320*240；时间长度：2秒；帧率：30帧/秒；彩色：RGB 3通道，具体步骤如下：
第一步，根据输入视频中的流体运动部分，画出表征流体运动轨迹和运动趋势的流线，如图2中线条所示；
第二步，在输入视频的每一帧，沿着烟雾的流线，在若干个固定位置点处选择并存储纹理片，确定烟雾运动区域的纹理结构，如图3所示，其中：图中的纵向是若干帧的纹理结构，图中的横向是四个固定位置点的纹理结构。
第三步，根据每个固定位置点处的纹理片信息，按照纹理片排布规则进行纹理图的排布，并利用重叠区域像素融合方法对重叠区域的纹理片结构进行像素融合处理。
所述的纹理片排布规则是：当输入视频有N帧图像时，在第一个固定位置点处，将第一个纹理片放置在第一帧，第二个纹理片放置在第二帧，以此类推，将第N个纹理片放在第N帧；在第二个固定位置点处，将第一个纹理片放在第二帧，第二个纹理片放在第三帧，以此类推，第N-1个纹理片放在第N帧，第N个纹理片放在第一帧；在第三个固定位置点处，将第一个纹理片放在第三帧，第二个纹理片放在第四帧，以此类推，第N-2个纹理片放在第N帧，第N-1个纹理片放在第一帧，第N个纹理片放在第二帧；以此类推，在第N个固定位置点处，第一个纹理片放在N帧，第二个纹理片放在第一帧，以此类推，第N个纹理片放在第N-1帧。
所述的重叠区域像素融合方法是：对于纹理片K和纹理片K+1重叠区域的像素点的合成像素颜色R，由下式确定：
R＝Rk×dk/d+Rk+1×(d-dk)/d
其中，Rk表示纹理片K的像素颜色，Rk+1表示纹理片K+1的像素颜色，dk表示重叠区域像素到纹理片K与重叠区域交线的距离，d表示纹理片K和纹理片K+1重叠区域的宽度。
第四步，对纹理片重叠区域内像素值不连续的图片进行线性插值和高斯滤波处理，进而将得到的像素连续的图片按时间顺序连接成视频，如图4所示。
第五步，基于法线信息保留法对得到的视频中的流体运动部分进行编辑，如图5所示。
所述的法线信息保留法是：将已知流体运动轨迹的法线方向上的信息经过变化映射到用户画定的轨迹法线上的对应位置，使得两条轨迹的法线信息得到保留。
本实施例对包含烟雾的视频片段完全能够实施应用，并可按照用户的需要，任意编辑视频，且合成速度快，合成效果好。
Claims (4)
1.一种基于粒子纹理的流体视频合成方法，其特征在于，包括如下步骤：
第一步，根据输入视频中的流体运动部分，画出表征流体运动轨迹和运动趋势的流线；
第二步，在输入视频的每一帧，沿着流体的流线，在若干个固定位置点处选择并存储纹理片，确定流体运动区域的纹理结构；
第三步，根据每个固定位置点处的纹理片信息，按照纹理片排布规则进行纹理图的排布，并利用重叠区域像素融合方法对重叠区域的纹理片结构进行像素融合处理；
第四步，对纹理片重叠区域内像素值不连续的图片进行插值和滤波处理，进而将得到的像素连续的图片按时间顺序连接成视频；
第五步，基于法线信息保留法对得到的视频中的流体运动部分进行编辑。
2.根据权利要求1所述的基于粒子纹理的流体视频合成方法，其特征是，第三步中所述的纹理片排布规则是：当输入视频有N帧图像时，在第一个固定位置点处，将第一个纹理片放置在第一帧，第二个纹理片放置在第二帧，以此类推，将第N个纹理片放在第N帧；在第二个固定位置点处，将第一个纹理片放在第二帧，第二个纹理片放在第三帧，以此类推，第N-1个纹理片放在第N帧，第N个纹理片放在第一帧；在第三个固定位置点处，将第一个纹理片放在第三帧，第二个纹理片放在第四帧，以此类推，第N-2个纹理片放在第N帧，第N-1个纹理片放在第一帧，第N个纹理片放在第二帧；以此类推，在第N个固定位置点处，第一个纹理片放在N帧，第二个纹理片放在第一帧，以此类推，第N个纹理片放在第N-1帧。
3.根据权利要求1所述的基于粒子纹理的流体视频合成方法，其特征是，第三步中所述的重叠区域像素融合方法是：对于纹理片K和纹理片K+1重叠区域的像素点的合成像素颜色R，由下式确定：
R＝Rk×dk/d+Rk+1×(d-dk)/d
其中，Rk表示纹理片K的像素颜色，Rk+1表示纹理片K+1的像素颜色，dk表示重叠区域像素到纹理片K与重叠区域交线的距离，d表示纹理片K和纹理片K+1重叠区域的宽度。
4.根据权利要求1所述的基于粒子纹理的流体视频合成方法，其特征是，第五步中所述的法线信息保留法是：将已知流体运动轨迹的法线方向上的信息经过变化映射到用户画定的轨迹法线上的对应位置，使得两条轨迹的法线信息得到保留。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910310619A CN101710945A (zh) | 2009-11-30 | 2009-11-30 | 基于粒子纹理的流体视频合成方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN200910310619A CN101710945A (zh) | 2009-11-30 | 2009-11-30 | 基于粒子纹理的流体视频合成方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN101710945A true CN101710945A (zh) | 2010-05-19 |
Family
ID=42403704
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200910310619A Pending CN101710945A (zh) | 2009-11-30 | 2009-11-30 | 基于粒子纹理的流体视频合成方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101710945A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104899914A (zh) * | 2015-06-26 | 2015-09-09 | 东北大学 | 基于流线生长法的纹理生成方法 |
| CN109151595A (zh) * | 2018-09-30 | 2019-01-04 | 北京微播视界科技有限公司 | 视频处理方法、装置、终端和介质 |
| CN110120085A (zh) * | 2018-02-07 | 2019-08-13 | 深圳市腾讯计算机系统有限公司 | 一种动态纹理视频生成方法、装置、服务器及存储介质 |
-
2009
- 2009-11-30 CN CN200910310619A patent/CN101710945A/zh active Pending
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104899914A (zh) * | 2015-06-26 | 2015-09-09 | 东北大学 | 基于流线生长法的纹理生成方法 |
| CN104899914B (zh) * | 2015-06-26 | 2017-11-24 | 东北大学 | 基于流线生长法的纹理生成方法 |
| CN110120085A (zh) * | 2018-02-07 | 2019-08-13 | 深圳市腾讯计算机系统有限公司 | 一种动态纹理视频生成方法、装置、服务器及存储介质 |
| CN110120085B (zh) * | 2018-02-07 | 2023-03-31 | 深圳市腾讯计算机系统有限公司 | 一种动态纹理视频生成方法、装置、服务器及存储介质 |
| CN109151595A (zh) * | 2018-09-30 | 2019-01-04 | 北京微播视界科技有限公司 | 视频处理方法、装置、终端和介质 |
| CN109151595B (zh) * | 2018-09-30 | 2019-10-18 | 北京微播视界科技有限公司 | 视频处理方法、装置、终端和介质 |
| US11037600B2 (en) | 2018-09-30 | 2021-06-15 | Beijing Microlive Vision Technology Co., Ltd. | Video processing method and apparatus, terminal and medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102915553B (zh) | 一种3d游戏视频拍摄系统及其方法 | |
| Manovich | Understanding hybrid media | |
| EP1854282B1 (en) | Method and system for spatio-temporal video warping | |
| Joshi et al. | Cliplets: juxtaposing still and dynamic imagery | |
| CN106251390B (zh) | 动画编辑方法和动画编辑装置 | |
| Klein et al. | Stylized video cubes | |
| CN107423445A (zh) | 一种地图数据处理方法、装置及存储介质 | |
| Lino et al. | The director's lens: an intelligent assistant for virtual cinematography | |
| CN101504774A (zh) | 一种基于虚拟现实的动漫设计引擎 | |
| Cantrell et al. | Modeling the environment: techniques and tools for the 3D illustration of dynamic landscapes | |
| Thalmann et al. | Challenges in crowd simulation | |
| CN106846376A (zh) | 一种三维自动相机轨迹的平滑处理方法 | |
| CN101710945A (zh) | 基于粒子纹理的流体视频合成方法 | |
| CN101447090A (zh) | 动画的图片编辑方法 | |
| CN103106038B (zh) | 基于草图手势及弧形摘要时间轴的视频交互方法和系统 | |
| CN102572305B (zh) | 视频图像处理方法及系统 | |
| CN1797473A (zh) | 一种计算机动画编辑方法 | |
| CN110428484A (zh) | 一种基于3d转2d的游戏换装方法 | |
| Wu et al. | Stylistic patterns for generating cinematographic sequences | |
| CN109908576A (zh) | 一种信息模块的呈现方法及装置、电子设备、存储介质 | |
| Hölsgens | Learning to See, or How to Make Sense of the Skillful Things Skateboarders do | |
| Colton et al. | GANlapse Generative Photography. | |
| CN105100641B (zh) | 一种图片转换为输出视频的方法和装置 | |
| Higgins | The moviemaker's workspace: towards a 3D environment for pre-visualization | |
| Mazalek et al. | Tangible viewpoints: Physical navigation through interactive stories |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20100519 |