跳转到内容

第6期:Video Battle AI 视频挑战-新生

这是野神殿 |🌈通往AGI之路|新世相 |MAI乐园|离谱村共同发起的生成式AI视频挑战赛第6

提交时间:5 月 12 日,18:00前上传在

https://waytoagi.feishu.cn/share/base/form/shrcntsC4ZuE2viO4y0iyfjrUhm

评选出炉

参考视频

活动介绍

💡

生成式AI 视频挑战赛每周举行一次,参赛者根据固定的主题和镜头,用 AI 自由创作不长于 8秒的视频。前五期,有几千名创作者提交了令人激动的作品。

野菩萨小红书说明:https://www.xiaohongshu.com/explore/66375035000000001e0310bc

本次大赛出题人

华东师范大学 · 上海人工智能金融学院(SAIFS) 创院院长 邵怡蕾教授

参与方式

视频工具建议:

PixVerse,Dreamina ,Runway,Pika,LiblibAI,SVD,Deforum,Deforumation、AnimateDiff

要求:和构图偏差不超过25%

时间规则:

提交时间:5 月 12 日, 12:00 - 18:00, 不在规定时间提交的不予采纳。

数量限制:每人不限视频数量。请仔细思考选择。

格式限制:参赛文件16:9,不长于8秒,无音乐,30FPS,不含剪辑。

作业方式:不限

考量点:优质的创意,精美的执行。

不建议出现:鲜血,武器、鬼怪骷髅、知名人物、18X等不符合国家政策的内容,可能导致参赛失败。

不在时间内提交的自动失去参赛资格。

评审由专业评审决定,提交当周发布结果。

须知:参与该挑战视作同意将作品的使用权授予本号用于社群运营、展览、展示等用途。

主办方拥有最终解释权。

奖励

🏆冠军奖励:4980课程一份+精美礼品一份

🏆亚军奖励:3980课程一份+精美礼品一份

🏆季军奖励:1980课程一份+精美礼品一份

🏆入围奖励:598野神殿门票一张

参考图

参与方式:

在下面的投稿链接中上传你的作品

作品展示:

教程

视频工具建议:AJ:AI视频软件汇总

方法0【Dreamina深度图出图+出视频

使用Dreamina图片生成功能 https://dreamina.jianying.com/ai-tool/image/generate

上传深度图,选择适应画布比例

填写描述

方法1 【MJ出图+AI视频软件】

💡

方法作者:迦/ 小龙问路

使用Midjourney垫图➕描述出图,再去视频工具中转成视频

下载[素材]项里的深度图,打开MJ官网上传深度图

Midjourney官网:https://www.midjourney.com/

局部重绘有点难度⬇️,放弃

最终方式:分开画:先画个被关着的红衣服女孩,再画个二战德国士兵的背影,再合成。p在一起再丢给MJ

各种垫图局部重绘也能无中生有

方法2【Dall E3出图+AI视频软件】 本期作品有点控制不住

使用Dall E直接描述出图,再去视频工具中转成视频

方法3【SD出图+AI视频软件】

在SD的controlnet中上传原图,选择深度。 文生图就可以生成图片。再把生成好的图放在AI视频工具中进行视频生成

dreamina:https://dreamina.jianying.com/ai-tool/video/generate

成片:

方法4【SD出图+出视频】

本方法作者:来来

联系方式:laiweb3(添加请注明AI视频)

公众号/视频号/小红书/B站:来来说AI

个人标签:20年设计师,10年大学设计老师,电商设计公司创始人10年,AI图书作者《一本书读懂AI绘画》《一本书读懂AIGC提示词2》

下载SD的分支版本CONTROLNET大佬开发的Forge

此版本特点是支持图生视频,图生SD,而且对低端显卡支持良好,这里是一个压缩包,直接下载,解压到英文文件夹即可。 https://github.com/lllyasviel/stable-diffusion-webui-forge/releases/download/latest/webui_forge_cu121_torch21.7z

解压后,优先运行update.bat进行升级, 然后再运行 run.bat

接着就打开了和SD基本一模一样的界面

核心区别在于FORGE增加了2个王炸功能,SVD【图生视频】和Z123【图生3D】,而且这个也是CONTROL作者研发的,CN的很多新功能都直接内置。

下载SVD图生视频模型

👍

最新模型在前面,建议除开第一个模型都下载。

https://huggingface.co/stabilityai/sv3d/

【Stable Video 3D (SV3D) 模型,最新模型,生成图片3D旋转视频,暂时没测试是否能支持】

https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1/

【SVD 1.1 XT版,支持生成1024x576分辨率每秒14帧视频,优化了文件大小,提高生成效率】

https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt

【SVD 1.0 XT版,支持生成1024x576分辨率生成每秒25帧视频】

https://huggingface.co/stabilityai/stable-video-diffusion-img2vid

【SVD1.0版,支持生成生成1024x576分辨率每秒14帧视频】

放置SVD图生视频模型

下载好的SVD图生视频模型是放置在这个文件夹下

使用CONTROL插件获得深度图+文生图生成图片

Controlnet中上传原图选择深度,预处理器可选择不同算法,右侧深度模型记得选择深度模型,获得需要的深度图。结合大模型和提示词,利用文生图就可以生成图片。

SVD选项卡直接生成视频

上传制作好的图片,选择SVD图生视频大模型,设置参数,生成视频。

方法5【云端Comfyui出图+AI视频软件】

本方法作者:来来

  1. 打开链接的工作流:https://www.esheep.com/app/5977,点击查看工作流,会出现登录或注册界面正常注册即可。如果已经登录会自动出现下面的界面。

如果已经登录会自动出现下面的界面。

  1. 步骤1:红色框选择生成图片的大模型,绿色框添加提示词,蓝色框填写反向提示词
  1. 步骤2:红色框设置大小确保是16:9的比例,绿色框修改参数,参数不理解的话保持默认即可。
  1. 步骤3:红色框上传深度图
  1. 步骤4:点击立即生成,最下面就会出现图片,在生成历史中下载图片即可。

方法6【Adobe firefly出图+AI视频工具】

🎁

本方法作者:小歪

1.使用Adobe firefly的参考结构功能出图

上传参考图,填写创意提示词、选择16:9的图片比例,点击生成即可直接出图

工具网址:https://firefly.adobe.com/

工具参考结构功能详细使用教程:小歪:Adobe firefly新出的参考结构功能

2.图片去水印

选中图片,点击图片右上角的下载按钮,即可下载图片,下载的图片左下角带有logo水印,可使用ps去除,或者用工具:https://clipdrop.co/cleanup

3.AI视频工具出视频

这里简单演示stablevideo(每天有免费额度),更多视频工具见文档:小歪:AI视频软件集合

4.生成图和视频成品

生成图:

视频成品:

交流群