久冉科技

动态

阿里巴巴公布图生视频专利 可实现智能化端到端图生视频

时间:2025-02-07 17:47 阅读:

  天眼查知识产权信息显示,近日,阿里巴巴有限公司申请的“一种图生方法和装置”专利公布。

  摘要显示,本发明实施例将包含目标对象的源图像输入第一生成模型得到素材,根据素材确定帧间变换矩阵序列,然后从源图像中得到目标对象对应的对象掩码图像,将帧间变换矩阵序列应用于对象掩码图像可得到多张掩码图像从而组成掩码图像序列,将帧间变换矩阵序列应用于源图像可得到多张目标对象图像从而组成目标对象图像序列,根据源图像、掩码图像序列和目标对象图像序列确定目标输入数据,将目标输入数据输入支持局部重绘的第二生成模型,得到对应的目标。通过两次模型生成,实现了智能化端到端的图生,无需引入预设运动参数即可在保持目标对象不扩散的同时,实现运动轨迹多样性。