Runway 视频生成工具 Gen-2 实操篇,运动笔刷功能使用教程

AI教程 2024-04-11

在数字创意的时代,视频生成技术正日益成为创作者们的新宠。如今,一款名为Gen-2的视频生成平台引起了广泛关注。通过访问app.runwayml.com/ai-tools/gen-2并注册账号,用户即可轻松开启视频生成之旅。这个平台不仅提供了便捷的操作界面,还为用户带来了前所未有的创作体验。

并且过去了这么久,Gen-2功能也强大了不少,有了运动笔刷、可以自动识别区域,画面质量也提升了,还支持4秒扩展等。

1.  首先,访问网站app.runwayml.com/ai-tools/gen-2并注册账号,随后点击首页的“Start Generating”按钮开始你的视频生成之旅。

image.png

2.  登录后,平台会给新注册的用户免费105 seconds的免费视频生成时间,一般一次生成的视频有4秒长,也就是说可以免费体验26次。如果不够用的话,除了购买会员之外,你也可以临时换个邮箱注册,就又可以使用105秒了。

3.  我们看到Gen-2的生成页面如下,各个分区和功能按钮功能说明也附上了:

image.png

4.  点击参数调节,一般都把interpolate打勾上,可以让生成的视频更丝滑。后面两个提升视频分辨率和去除水印都是要付费会员才可以使用。

image.png

5.  在风格选择方面,Gen-2预置了34种风格,包括摄影风、3D卡通风、35mm长焦镜头风格等,每一种风格都有清晰的图示,方便你直观地选择。

image.png

6.  接下来是摄像机视角设置,你可以看到,水平平移、垂直平移、水平转动、垂直转动、上下滚动、放大缩小都是可以的。

image.png

7.  General Motion这个功能可以设置运动幅度大小,值越大动作越大,默认是5,最大值是10。

文生视频使用

我们先试这些功能,看看文字输入的效果。比如我输入以下提示语:A elephant is walking in the forest.得到如下效果:

仔细看,这只大象后腿居然出现了三支,鼻子生成得也不太真实。

image.png

我们再优化个新的版本:A vibrant coral reef teeming with life under the crystal-clear blue ocean,withcolorful fish swimming among the coral,rays of sunlight filtering through the water,and a gentle current moving the sea plants。意思是:一个充满生机的珊瑚礁,在晶莹剔透的蓝色海洋下,五颜六色的鱼儿在珊瑚间游动,阳光的光芒透过水面,温和的洋流摇曳着海底植物。

分辨率选择:16:9;风格选择Cinematic,即摄影风;摄像头视角先不设。

image.png

得到效果如下:

image.png

可以看到海中的珊瑚和小鱼儿多且丰富,进步了不少,不过最左边的鱼倒着游,有些不符合物理学规律。

图生视频使用

接下来给大家演示下图生视频的使用方法,同时结合Gen-2创新的一个功能:Motion Brush运动笔刷。这个功能,可以控制你上传的图片中某个具体的物体或区域,控制所选部分的在xyz三轴上的运动方向。

image.png

我们首先在图片上传区中把图片上传好,再打开Motion Brush,可以看到,最多能指定5个Brush,每个单独可配置。Gen-2最新版本已增加了Auto-dectet area,即可自动检测物体的边缘,自动帮我们涂好区域,相比于之前的版本只能手动用刷子涂抹的方式方便了太多,我猜测是应用了类似Meta开源的Segment Anything技术。 

然后Directional motion可以设置水平方向Horizontal,垂直方向Vertical,ProximityZ轴方向(同时会影响景深),Ambient周围噪声,我理解这个应该是运动物体是否稳定,还是具备一定的波动性。

image.png

如下是效果:

image.png

如果我们把Ambient这个值设置为最大,效果对比看下,可以发现水面的波动明显加剧了:

image.png

我们再试个图片,比如下面这个图片,我们通过Auto-detect area功能,快速选中直升机,设置飞行的方向。

image.png

得到效果如下:

image.png

Gen-2平台以其强大的功能和灵活的选项,为视频创作者们提供了一个全新的创作空间。无论是文字描述还是图片上传,都能通过Gen-2生成出高质量的视频内容。

@版权声明:部分内容从网络收集整理,如有侵权,请联系删除!

相关文章