Replicate是一个云端平台,可以帮助用户轻松运行各种开源机器学习模型,无需了解机器学习的详细原理和操作细节。
用户可以使用Replicate提供的Python库或直接调用API来运行由机器学习社区分享的数千个模型,这些模型涵盖了图像和视频生成、编辑、超分辨率、恢复以及文本到图像等领域。
在这上面,已经有许多基于Replicate构建的有趣项目,这些项目都是开源的,比如谷歌研究团队开发的Frame Interpolation。
所谓Frame Interpolation,也就是“构造不存在的帧”,通俗点叫作帧插值。
指的是根据前后帧,来预测并生成中间的帧,这种技术可以生成中间帧,以平滑视频中的运动和消除闪烁现象,从而提高视频的流畅性和连续性。
而谷歌团队开发的这个视频AI插帧工具,就可以在线完成这一过程,用户只需上传两帧图片,即可AI生成一个连贯的视频。
在页面上根据提示分别上传第一帧图片和第二帧图片。可以通过上传本地文件或者现场拍摄的方式录入。
控制调用帧插值器的次数。如果设置为 1,则输出将是 t=0.5 时的子帧;当设置为 > 1 时,输出将是具有 (2^times_to_interpolate + 1) 帧、fps 为 30 的插值视频。(最小值:1 ;最大值:8 )
稍等片刻,就可以看到一个流畅的短视频生成了。