张元英跳舞动画神器曝光!学会了DomoAI 你也能变成“大明星”
张元英跳舞动画的幕后功臣曝光了!
DomoAI 是一款能把真人视频一键转为动漫的AI神器,DomoAI 最厉害的就是它的视频转绘功能,可以把真人视频转为效果稳定的风格化视频,像最近很火的张元英跳舞动画就是它的杰作。接下来,我将为大家详细介绍一下它的功能和用法。
一、DmomoAI简介
官网地址:https://domoai.app/
DomoAI 的服务目前托管 Discord 上的,可以将真人视频转化为动漫、3D、像素、彩色插画、中国水墨画等多种风格。
点击官网Join our Discord便可进入到它的服务器频道,界面如下:
新用户有 100 个免费积分可以使用,可以转换大概 7 个 3 秒的视频。
二、使用介绍
使用DomoAI进行视频转绘非常简单。首先,用户需要将DomoAI机器人邀请至自己的Discord服务器,以便在私人频道内进行操作。接下来,用户只需在输入框内输入相应的指令并上传视频,然后按照提示进行风格选择和设置,最后点击开始按钮等待视频生成即可。生成的视频结果将自动返回给用户,用户还可以根据需要对结果进行下载、重新生成或删除等操作。
三、DomoAI操作命令详解
1. /video指令用法
① 在输入框文本框内输入 /video 然后上传一个视频,然后在 Prompt 框内输入对画面的详细描述,这有助于视频的精准转换,然后按 Enter 将视频发送出去(非会员只能上传100MB以内文件,会员可以上传 500MB以内的视频文件)。
② 发送成功后, DomoAI 机器人会自动返回一个消息,其中包含多个选项。我们需要在其中设置视频转换的风格,目前下拉列表里一共有 20 种风格可选,名称前面带数字 2 图标的就是最新的模型;以及选择新视频是更贴近原视频还是更贴近提示词;还可以设置新视频时长。设置好之后,点击 Start 然后等待视频生成即可。
③ 视频生成后会自动返回结果,点击视频右上角的下载小按钮可以将其保存到本地;如果对结果不满意可以点击 Re-generate 重新生成,或者点击 Delete 删除生成结果。我上传的是最近的热播剧《繁花》里李李的一小段动态视频,尝试的 2 种不同的风格,效果都非常不错。
2. /move指令用法
DomoAI 最近还上线了新的角色动态功能,只需上传一张人物图像和一个动作视频,DomoAI 就能让图像中的人物做出同样的动作,并且转换效果非常的稳定。角色动态功能通过 / move 命令来实现。输入后,上传一个动作视频以及一张角色图像,按 Enter 发送出去;再选择一个需要的风格,点击 Start 开始生成即可,处理过程大概需要 5 分钟
从结果来看,DomoAI 的效果比 Viggle 还要好,还支持对图像角色进行风格化,因此结果会更多样,大家可以看下效果对比:
四、DomoAI其他功能详解
DomoAI除了可以将真人视频转绘外,还有其他很多有意思的功能
1、背景替换
使用 /video 进行风格转换时,如果在提示词末尾空一格,加上新的后缀参数 --key [color] ,就能将视频的背景替换成你需要的纯色背景。比如 “a man in suit, gray hair. --key blue”,表示在人物转换为指定风格的同时,去除原视频的背景,并将其替换为纯蓝色背景。这背景可选颜色如下,不填写颜色的话将默认生成绿色:
white, black, red, yellow, orange, cyan, green, blue, gray, grey, pink, brown, purple, magenta, navy, beige.
2、文本生成图像/垫图
Domo AI 的文生图使用的是 Stable Diffusion 生态内的开源模型,目前有写实、动漫、欧美插画、暗黑等 18 种模型可以使用,在生成图像之前我们可以去官方社区 support 板块的 model-archive 频道内查看所有的风格。
熟悉各种模型之后,我们就可以返回个人生成频道,在文本框内输入 /gen 命令,然后输入文本提示词,并继续点击「more」 处的 model 选项, 选择需要的风格模型。此外还可以手动在提示词后添加参数,用于设置画面的尺寸,目前有三种固定画幅可选:
"--port" : Portrait,横幅 720x1280
"--land" : Landscape,横幅 1280x720
"--sq" : Square,正方形 720x720
DomoAI 会一次性生成 4 张图像,图像下方有对应的按钮可以将图像放大或生成相似变体,中间的蓝色圆圈表示重新生成,红色 X 表示删除此生成任务。
3、图生图
DomoAI 还可以将动漫图像转为写实图像,直接在文本框输入/real 命令,然后上传出图像按 enter 发送即可。
看下生成效果
4、图生视频
DomoAI 也支持将图像转为动态视频,具体操作方式如下:
在文本框内输入 /animate 命令,然后上传图像;
继续点击「more」 另外两个选项,第一个选项 intensity 可以设置画面的动态强度,有低、中、高三个档位;第二个选项 motion_prompt 用于描述画面中需要的动态,比如 “A girl, smile,blink eyes, flowing hair.”
完成后按 enter 发送出去,等待生成即可。如果对结果不满意,可以选择调整动态强度,或者再次重新生成。
生成效果:
五、DomoAI支持视频风格
DomoAI 在今年 2 月份的时候推出了新的 2.0 模型,让视频转换效果更加流畅稳定,即使有大幅度的动作主体也不会轻易出现变形,复杂的背景也能同步进行风格化,整体的还原效果堪比一段动画电影,非常惊艳。并且现在的视频转绘速度也比之前提升了 50% 。
之前的一系列风格模型也进行了升级,包括:像素风(Pixel 2.0)、剪纸风(Paper Art 2.0)、日式动漫(Japanese Anime2.1)、精致动漫(Detail Anime 2.0)、扁平彩色(Flat Color 2.0)、中式水墨(Chinese Ink Painting 2.0)、3D 卡通(3D Cartoon 2.0),一共7 种。新模型在转绘细节上更精致,色彩也更丰富明亮。
总之,DomoAI是一款功能强大、操作简便的AI视频处理神器,无论是对于专业视频制作者还是普通用户来说,都是一款值得尝试的工具。它不仅能够将真人视频转化为风格化的动漫、3D等效果,还提供了背景替换和文本生成图像等实用功能,让用户在视频处理方面拥有更多的创意和可能性。