新榜讯 据天眼查知识产权信息,2 月 7 日,阿里巴巴(中国)有限公司所申请的“一种图生视频方法和装置”专利予以公布。该专利摘要表明,此发明实施例先将包含目标对象的源图像输入第一视频生成模型获取素材视频,依此确定帧间变换矩阵序列。接着从源图像中获取目标对象对应的对象掩码图像,将帧间变换矩阵序列作用于对象掩码图像可得多张掩码图像从而构成掩码图像序列,应用于源图像则可得多张目标对象图像从而组成目标对象图像序列。依据源图像、掩码图像序列和目标对象图像序列确定目标输入数据,再将其输入支持局部重绘的第二视频生成模型,从而得到相应的目标视频。通过这两次模型来生成视频,达成了智能化端到端的图生视频,在无需引入预设运动参数的情况下,既能保持目标对象不扩散,又能实现运动轨迹的多样性。