Runway 视频生成工具 Gen-2 实操篇,运动笔刷功能使用教程
在数字创意的时代,视频生成技术正日益成为创作者们的新宠。如今,一款名为Gen-2的视频生成平台引起了广泛关注。通过访问app.runwayml.com/ai-tools/gen-2并注册账号,用户即可轻松开启视频生成之旅。这个平台不仅提供了便捷的操作界面,还为用户带来了前所未有的创作体验。
并且过去了这么久,Gen-2功能也强大了不少,有了运动笔刷、可以自动识别区域,画面质量也提升了,还支持4秒扩展等。
1. 首先,访问网站app.runwayml.com/ai-tools/gen-2并注册账号,随后点击首页的“Start Generating”按钮开始你的视频生成之旅。
2. 登录后,平台会给新注册的用户免费105 seconds的免费视频生成时间,一般一次生成的视频有4秒长,也就是说可以免费体验26次。如果不够用的话,除了购买会员之外,你也可以临时换个邮箱注册,就又可以使用105秒了。
3. 我们看到Gen-2的生成页面如下,各个分区和功能按钮功能说明也附上了:
4. 点击参数调节,一般都把interpolate打勾上,可以让生成的视频更丝滑。后面两个提升视频分辨率和去除水印都是要付费会员才可以使用。
5. 在风格选择方面,Gen-2预置了34种风格,包括摄影风、3D卡通风、35mm长焦镜头风格等,每一种风格都有清晰的图示,方便你直观地选择。
6. 接下来是摄像机视角设置,你可以看到,水平平移、垂直平移、水平转动、垂直转动、上下滚动、放大缩小都是可以的。
7. General Motion这个功能可以设置运动幅度大小,值越大动作越大,默认是5,最大值是10。
文生视频使用
我们先试这些功能,看看文字输入的效果。比如我输入以下提示语:A elephant is walking in the forest.得到如下效果:
仔细看,这只大象后腿居然出现了三支,鼻子生成得也不太真实。
我们再优化个新的版本:A vibrant coral reef teeming with life under the crystal-clear blue ocean,withcolorful fish swimming among the coral,rays of sunlight filtering through the water,and a gentle current moving the sea plants。意思是:一个充满生机的珊瑚礁,在晶莹剔透的蓝色海洋下,五颜六色的鱼儿在珊瑚间游动,阳光的光芒透过水面,温和的洋流摇曳着海底植物。
分辨率选择:16:9;风格选择Cinematic,即摄影风;摄像头视角先不设。
得到效果如下:
可以看到海中的珊瑚和小鱼儿多且丰富,进步了不少,不过最左边的鱼倒着游,有些不符合物理学规律。
图生视频使用
接下来给大家演示下图生视频的使用方法,同时结合Gen-2创新的一个功能:Motion Brush运动笔刷。这个功能,可以控制你上传的图片中某个具体的物体或区域,控制所选部分的在xyz三轴上的运动方向。
我们首先在图片上传区中把图片上传好,再打开Motion Brush,可以看到,最多能指定5个Brush,每个单独可配置。Gen-2最新版本已增加了Auto-dectet area,即可自动检测物体的边缘,自动帮我们涂好区域,相比于之前的版本只能手动用刷子涂抹的方式方便了太多,我猜测是应用了类似Meta开源的Segment Anything技术。
然后Directional motion可以设置水平方向Horizontal,垂直方向Vertical,ProximityZ轴方向(同时会影响景深),Ambient周围噪声,我理解这个应该是运动物体是否稳定,还是具备一定的波动性。
如下是效果:
如果我们把Ambient这个值设置为最大,效果对比看下,可以发现水面的波动明显加剧了:
我们再试个图片,比如下面这个图片,我们通过Auto-detect area功能,快速选中直升机,设置飞行的方向。
得到效果如下:
Gen-2平台以其强大的功能和灵活的选项,为视频创作者们提供了一个全新的创作空间。无论是文字描述还是图片上传,都能通过Gen-2生成出高质量的视频内容。