第6期:Video Battle AI 视频挑战-新生
这是野神殿 |🌈通往AGI之路|新世相 |MAI乐园|离谱村共同发起的生成式AI视频挑战赛第6期
提交时间:5 月 12 日,18:00前上传在
https://waytoagi.feishu.cn/share/base/form/shrcntsC4ZuE2viO4y0iyfjrUhm
评选出炉
参考视频
活动介绍
生成式AI 视频挑战赛每周举行一次,参赛者根据固定的主题和镜头,用 AI 自由创作不长于 8秒的视频。前五期,有几千名创作者提交了令人激动的作品。
野菩萨小红书说明:https://www.xiaohongshu.com/explore/66375035000000001e0310bc
本次大赛出题人
华东师范大学 · 上海人工智能金融学院(SAIFS) 创院院长 邵怡蕾教授
参与方式
视频工具建议:
PixVerse,Dreamina ,Runway,Pika,LiblibAI,SVD,Deforum,Deforumation、AnimateDiff
要求:和构图偏差不超过25%
时间规则:
提交时间:5 月 12 日, 12:00 - 18:00, 不在规定时间提交的不予采纳。
数量限制:每人不限视频数量。请仔细思考选择。
格式限制:参赛文件16:9,不长于8秒,无音乐,30FPS,不含剪辑。
作业方式:不限
考量点:优质的创意,精美的执行。
不建议出现:鲜血,武器、鬼怪骷髅、知名人物、18X等不符合国家政策的内容,可能导致参赛失败。
不在时间内提交的自动失去参赛资格。
评审由专业评审决定,提交当周发布结果。
须知:参与该挑战视作同意将作品的使用权授予本号用于社群运营、展览、展示等用途。
主办方拥有最终解释权。
奖励
🏆冠军奖励:4980课程一份+精美礼品一份
🏆亚军奖励:3980课程一份+精美礼品一份
🏆季军奖励:1980课程一份+精美礼品一份
🏆入围奖励:598野神殿门票一张
参考图
参与方式:
在下面的投稿链接中上传你的作品
作品展示:
教程
视频工具建议:AJ:AI视频软件汇总
方法0【Dreamina深度图出图+出视频】
使用Dreamina图片生成功能 https://dreamina.jianying.com/ai-tool/image/generate
上传深度图,选择适应画布比例
填写描述
方法1 【MJ出图+AI视频软件】
方法作者:迦/ 小龙问路
使用Midjourney垫图➕描述出图,再去视频工具中转成视频
下载[素材]项里的深度图,打开MJ官网上传深度图
Midjourney官网:https://www.midjourney.com/
局部重绘有点难度⬇️,放弃
最终方式:分开画:先画个被关着的红衣服女孩,再画个二战德国士兵的背影,再合成。p在一起再丢给MJ
各种垫图局部重绘也能无中生有
方法2【Dall E3出图+AI视频软件】 本期作品有点控制不住
使用Dall E直接描述出图,再去视频工具中转成视频
方法3【SD出图+AI视频软件】
在SD的controlnet中上传原图,选择深度。 文生图就可以生成图片。再把生成好的图放在AI视频工具中进行视频生成
dreamina:https://dreamina.jianying.com/ai-tool/video/generate
成片:
方法4【SD出图+出视频】
本方法作者:来来
联系方式:laiweb3(添加请注明AI视频)
公众号/视频号/小红书/B站:来来说AI
个人标签:20年设计师,10年大学设计老师,电商设计公司创始人10年,AI图书作者《一本书读懂AI绘画》《一本书读懂AIGC提示词2》
下载SD的分支版本CONTROLNET大佬开发的Forge
此版本特点是支持图生视频,图生SD,而且对低端显卡支持良好,这里是一个压缩包,直接下载,解压到英文文件夹即可。 https://github.com/lllyasviel/stable-diffusion-webui-forge/releases/download/latest/webui_forge_cu121_torch21.7z
解压后,优先运行update.bat
进行升级, 然后再运行 run.bat
接着就打开了和SD基本一模一样的界面
核心区别在于FORGE增加了2个王炸功能,SVD【图生视频】和Z123【图生3D】,而且这个也是CONTROL作者研发的,CN的很多新功能都直接内置。
下载SVD图生视频模型
最新模型在前面,建议除开第一个模型都下载。
https://huggingface.co/stabilityai/sv3d/
【Stable Video 3D (SV3D) 模型,最新模型,生成图片3D旋转视频,暂时没测试是否能支持】
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1/
【SVD 1.1 XT版,支持生成1024x576分辨率每秒14帧视频,优化了文件大小,提高生成效率】
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt
【SVD 1.0 XT版,支持生成1024x576分辨率生成每秒25帧视频】
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid
【SVD1.0版,支持生成生成1024x576分辨率每秒14帧视频】
放置SVD图生视频模型
下载好的SVD图生视频模型是放置在这个文件夹下
使用CONTROL插件获得深度图+文生图生成图片
Controlnet中上传原图选择深度,预处理器可选择不同算法,右侧深度模型记得选择深度模型,获得需要的深度图。结合大模型和提示词,利用文生图就可以生成图片。
SVD选项卡直接生成视频
上传制作好的图片,选择SVD图生视频大模型,设置参数,生成视频。
方法5【云端Comfyui出图+AI视频软件】
本方法作者:来来
- 打开链接的工作流:https://www.esheep.com/app/5977,点击查看工作流,会出现登录或注册界面正常注册即可。如果已经登录会自动出现下面的界面。
如果已经登录会自动出现下面的界面。
- 步骤1:红色框选择生成图片的大模型,绿色框添加提示词,蓝色框填写反向提示词
- 步骤2:红色框设置大小确保是16:9的比例,绿色框修改参数,参数不理解的话保持默认即可。
- 步骤3:红色框上传深度图
- 步骤4:点击立即生成,最下面就会出现图片,在生成历史中下载图片即可。
方法6【Adobe firefly出图+AI视频工具】
本方法作者:小歪
1.使用Adobe firefly的参考结构功能出图
上传参考图,填写创意提示词、选择16:9的图片比例,点击生成即可直接出图
工具网址:https://firefly.adobe.com/
工具参考结构功能详细使用教程:小歪:Adobe firefly新出的参考结构功能
2.图片去水印
选中图片,点击图片右上角的下载按钮,即可下载图片,下载的图片左下角带有logo水印,可使用ps去除,或者用工具:https://clipdrop.co/cleanup
3.AI视频工具出视频
这里简单演示stablevideo(每天有免费额度),更多视频工具见文档:小歪:AI视频软件集合
4.生成图和视频成品
生成图:
视频成品: