一种基于样例的动态纹理迁移方法及系统

摘要

本发明公布了一种基于样例的动态纹理迁移方法及系统，将单样本动态纹理迁移任务分解为两个阶段；其中，第一阶段合成具有所需动态纹理的目标视频的起始帧；在第二阶段，将合成图像分解为结构无关的纹理图块，根据纹理图块，利用图像离散化隐空间表示算法VQ‑VAE的Transformers模型来生成长离散序列，并预测相应的后续纹理图块；再采用高斯加权平均合并策略将纹理图块平滑地组合到目标样式化视频的每一帧中，输出自动生成的目标动态特效视频，由此实现动态纹理迁移。本发明将视频样例的动态效果自动转换为目标形状或图像，显著提高动态纹理的设计效率，能够处理仅有一个样例的迁移任务，还可保留精细纹理的细节。