第11期:Video Battle AI 视频挑战-Little Boxes盒子
这是野神殿 |🌈通往AGI之路|麦乐园|离谱村|新世相共同发起的生成式AI视频挑战赛第11期
提交时间:6月 17 日,18:00前上传在
提交地址:https://waytoagi.feishu.cn/share/base/form/shrcnRyKVgdvK2QkqeM76veaLib
评选结果
参考视频
野菩萨小红书说明:https://www.xiaohongshu.com/user/profile/5513fe8ed39ea24fec6cf63b/
活动介绍
各位伙伴们晚上好,本周WaytoAGI和野神殿打算推一波#VB工作流拆解 的小红书话题活动。主要目的是集中做一轮AI视频相关内容,同时为第11期VB活动做推广。
选题参考:
1.AI视频领域国内外近期热点话题事件,技术类、产品类均可;
2.AI视频创作背后的技术工作流拆解(可运用WaytoAGI知识库内容进行二创转化,但需注明原作者);
3.参加过VB的创作者们,讲讲自己在VB过程中遇到的难点,以及最后是怎样解决、如何运用AI技术把创意落地的。
话题要求:
1.小红书内容文案需附【欢迎参加 @野菩萨 @通往AGI之路 联合举办的第11期VideoBattle AI视频挑战】字样,具体位置不限;
2.需带三个标签(三个都要哦) #VB工作流拆解 #野神殿 #通往AGI之路(或者#waytoagi) 。
满足上述要求的内容,从明天起,我们会集中做3-5天的话题曝光。
本次大赛主题:盒子
本次大赛出题人-新世相
过去的盒子让人趋同
AI的盒子让你与众不同
创意支持:
@新世相
参考图,见视频或见小红书群
视频工具建议:
PixVerse,Dreamina ,Runway,Pika,LiblibAI,SVD,Deforum,Deforumation、AnimateDiff
要求:和构图偏差不超过25%
参与方式:
提交时间:6 月 17 日, 18:00之前, 不在规定时间提交的不予采纳。
数量限制:每人限3件视频。请仔细思考选择。
格式限制:参赛文件16:9,不长于8秒,无音乐,30FPS,不含剪辑。
作业方式:不限
考量点:优质的创意,精美的执行。
不建议出现:鲜血,武器、鬼怪骷髅、知名人物、18X等不符合国家政策的内容,可能导致参赛失败。
不在时间内提交的自动失去参赛资格。
评审由专业评审决定,提交当周发布结果。
须知:参与该挑战视作同意将作品的使用权授予本号用于社群运营、展览、展示等用途。
主办方拥有最终解释权。
奖励
金奖:奖金 1500
银奖 :奖金 1000
铜奖 :奖金 500
入围,野神殿门票一张
参考图
|
|
参与方式:
在下面的投稿链接中上传你的作品
提交链接
作品展示:
教程
视频工具建议:AJ:AI视频软件汇总
方法0: guahunyo老师做了个工作流
comfy工作流
方法0【Dreamina深度图出图+出视频】
使用Dreamina图片生成功能 https://dreamina.jianying.com/ai-tool/image/generate
上传深度图,选择适应画布比例
填写描述
方法1 【MJ出图+AI视频软件】
方法作者:迦/ 小龙问路
使用Midjourney垫图➕描述出图,再去视频工具中转成视频
下载[素材]项里的深度图,打开MJ官网上传深度图
Midjourney官网:https://www.midjourney.com/
局部重绘有点难度⬇️,放弃
最终方式:分开画:先画个被关着的红衣服女孩,再画个二战德国士兵的背影,再合成。p在一起再丢给MJ
各种垫图局部重绘也能无中生有
方法2【Dall E3出图+AI视频软件】 本期作品有点控制不住
使用Dall E直接描述出图,再去视频工具中转成视频
方法3【SD出图+AI视频软件】
在SD的controlnet中上传原图,选择深度。 文生图就可以生成图片。再把生成好的图放在AI视频工具中进行视频生成
dreamina:https://dreamina.jianying.com/ai-tool/video/generate
成片:
方法4【SD出图+出视频】
本方法作者:来来
联系方式:laiweb3(添加请注明AI视频)
公众号/视频号/小红书/B站:来来说AI
个人标签:20年设计师,10年大学设计老师,电商设计公司创始人10年,AI图书作者《一本书读懂AI绘画》《一本书读懂AIGC提示词2》
下载SD的分支版本CONTROLNET大佬开发的Forge
此版本特点是支持图生视频,图生SD,而且对低端显卡支持良好,这里是一个压缩包,直接下载,解压到英文文件夹即可。 https://github.com/lllyasviel/stable-diffusion-webui-forge/releases/download/latest/webui_forge_cu121_torch21.7z
解压后,优先运行update.bat
进行升级, 然后再运行 run.bat
接着就打开了和SD基本一模一样的界面
核心区别在于FORGE增加了2个王炸功能,SVD【图生视频】和Z123【图生3D】,而且这个也是CONTROL作者研发的,CN的很多新功能都直接内置。
下载SVD图生视频模型
最新模型在前面,建议除开第一个模型都下载。
https://huggingface.co/stabilityai/sv3d/
【Stable Video 3D (SV3D) 模型,最新模型,生成图片3D旋转视频,暂时没测试是否能支持】
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1/
【SVD 1.1 XT版,支持生成1024x576分辨率每秒14帧视频,优化了文件大小,提高生成效率】
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt
【SVD 1.0 XT版,支持生成1024x576分辨率生成每秒25帧视频】
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid
【SVD1.0版,支持生成生成1024x576分辨率每秒14帧视频】
放置SVD图生视频模型
下载好的SVD图生视频模型是放置在这个文件夹下
使用CONTROL插件获得深度图+文生图生成图片
Controlnet中上传原图选择深度,预处理器可选择不同算法,右侧深度模型记得选择深度模型,获得需要的深度图。结合大模型和提示词,利用文生图就可以生成图片。
SVD选项卡直接生成视频
上传制作好的图片,选择SVD图生视频大模型,设置参数,生成视频。
方法5【云端Comfyui出图+AI视频软件】
comfy工作流
- 打开链接的工作流:https://www.esheep.com/app/5977,点击查看工作流,会出现登录或注册界面正常注册即可。如果已经登录会自动出现下面的界面。
如果已经登录会自动出现下面的界面。
- 步骤1:红色框选择生成图片的大模型,绿色框添加提示词,蓝色框填写反向提示词
- 步骤2:红色框设置大小确保是16:9的比例,绿色框修改参数,参数不理解的话保持默认即可。
- 步骤3:红色框上传深度图
- 步骤4:点击立即生成,最下面就会出现图片,在生成历史中下载图片即可。
方法6【Adobe firefly出图+AI视频工具】
本方法作者:小歪
1.使用Adobe firefly的参考结构功能出图
上传参考图,填写创意提示词、选择16:9的图片比例,点击生成即可直接出图
工具网址:https://firefly.adobe.com/
工具参考结构功能详细使用教程:小歪:Adobe firefly新出的参考结构功能
2.图片去水印
选中图片,点击图片右上角的下载按钮,即可下载图片,下载的图片左下角带有logo水印,可使用ps去除,或者用工具:https://clipdrop.co/cleanup
3.AI视频工具出视频
这里简单演示stablevideo(每天有免费额度),更多视频工具见文档:小歪:AI视频软件集合
4.生成图和视频成品
生成图:
视频成品:
交流群
如果群满了可以加三思微信拉你进群
备注“视频挑战赛”,
安排大家进群,分享作品交流心得