跳转到内容

第11期:Video Battle AI 视频挑战-Little Boxes盒子

这是野神殿 |🌈通往AGI之路|麦乐园|离谱村|新世相共同发起的生成式AI视频挑战赛第11期

提交时间:6月 17 日,18:00前上传在

提交地址:https://waytoagi.feishu.cn/share/base/form/shrcnRyKVgdvK2QkqeM76veaLib

评选结果

参考视频

野菩萨小红书说明:https://www.xiaohongshu.com/user/profile/5513fe8ed39ea24fec6cf63b/

活动介绍

💡

各位伙伴们晚上好,本周WaytoAGI和野神殿打算推一波#VB工作流拆解 的小红书话题活动。主要目的是集中做一轮AI视频相关内容,同时为第11期VB活动做推广。

选题参考:

1.AI视频领域国内外近期热点话题事件,技术类、产品类均可;

2.AI视频创作背后的技术工作流拆解(可运用WaytoAGI知识库内容进行二创转化,但需注明原作者);

3.参加过VB的创作者们,讲讲自己在VB过程中遇到的难点,以及最后是怎样解决、如何运用AI技术把创意落地的。

话题要求:

1.小红书内容文案需附【欢迎参加 @野菩萨 @通往AGI之路 联合举办的第11期VideoBattle AI视频挑战】字样,具体位置不限;

2.需带三个标签(三个都要哦) #VB工作流拆解 #野神殿 #通往AGI之路(或者#waytoagi) 。

满足上述要求的内容,从明天起,我们会集中做3-5天的话题曝光。

本次大赛主题:盒子

本次大赛出题人-新世相

过去的盒子让人趋同

AI的盒子让你与众不同

创意支持:

@新世相

参考图,见视频或见小红书群

视频工具建议:

PixVerse,Dreamina ,Runway,Pika,LiblibAI,SVD,Deforum,Deforumation、AnimateDiff

要求:和构图偏差不超过25%

参与方式:

提交时间:6 月 17 日, 18:00之前, 不在规定时间提交的不予采纳。

数量限制:每人限3件视频。请仔细思考选择。

格式限制:参赛文件16:9,不长于8秒,无音乐,30FPS,不含剪辑。

作业方式:不限

考量点:优质的创意,精美的执行。

不建议出现:鲜血,武器、鬼怪骷髅、知名人物、18X等不符合国家政策的内容,可能导致参赛失败。

不在时间内提交的自动失去参赛资格。

评审由专业评审决定,提交当周发布结果。

须知:参与该挑战视作同意将作品的使用权授予本号用于社群运营、展览、展示等用途。

主办方拥有最终解释权。

奖励

金奖:奖金 1500

银奖 :奖金 1000

铜奖 :奖金 500

入围,野神殿门票一张

参考图

参与方式:

在下面的投稿链接中上传你的作品

提交链接

作品展示:

教程

视频工具建议:AJ:AI视频软件汇总

方法0: guahunyo老师做了个工作流

comfy工作流

方法0【Dreamina深度图出图+出视频

使用Dreamina图片生成功能 https://dreamina.jianying.com/ai-tool/image/generate

上传深度图,选择适应画布比例

填写描述

方法1 【MJ出图+AI视频软件】

💡

方法作者:迦/ 小龙问路

使用Midjourney垫图➕描述出图,再去视频工具中转成视频

下载[素材]项里的深度图,打开MJ官网上传深度图

Midjourney官网:https://www.midjourney.com/

局部重绘有点难度⬇️,放弃

最终方式:分开画:先画个被关着的红衣服女孩,再画个二战德国士兵的背影,再合成。p在一起再丢给MJ

各种垫图局部重绘也能无中生有

方法2【Dall E3出图+AI视频软件】 本期作品有点控制不住

使用Dall E直接描述出图,再去视频工具中转成视频

方法3【SD出图+AI视频软件】

在SD的controlnet中上传原图,选择深度。 文生图就可以生成图片。再把生成好的图放在AI视频工具中进行视频生成

dreamina:https://dreamina.jianying.com/ai-tool/video/generate

成片:

方法4【SD出图+出视频】

本方法作者:来来

联系方式:laiweb3(添加请注明AI视频)

公众号/视频号/小红书/B站:来来说AI

个人标签:20年设计师,10年大学设计老师,电商设计公司创始人10年,AI图书作者《一本书读懂AI绘画》《一本书读懂AIGC提示词2》

下载SD的分支版本CONTROLNET大佬开发的Forge

此版本特点是支持图生视频,图生SD,而且对低端显卡支持良好,这里是一个压缩包,直接下载,解压到英文文件夹即可。 https://github.com/lllyasviel/stable-diffusion-webui-forge/releases/download/latest/webui_forge_cu121_torch21.7z

解压后,优先运行update.bat进行升级, 然后再运行 run.bat

接着就打开了和SD基本一模一样的界面

核心区别在于FORGE增加了2个王炸功能,SVD【图生视频】和Z123【图生3D】,而且这个也是CONTROL作者研发的,CN的很多新功能都直接内置。

下载SVD图生视频模型

👍

最新模型在前面,建议除开第一个模型都下载。

https://huggingface.co/stabilityai/sv3d/

【Stable Video 3D (SV3D) 模型,最新模型,生成图片3D旋转视频,暂时没测试是否能支持】

https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1/

【SVD 1.1 XT版,支持生成1024x576分辨率每秒14帧视频,优化了文件大小,提高生成效率】

https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt

【SVD 1.0 XT版,支持生成1024x576分辨率生成每秒25帧视频】

https://huggingface.co/stabilityai/stable-video-diffusion-img2vid

【SVD1.0版,支持生成生成1024x576分辨率每秒14帧视频】

放置SVD图生视频模型

下载好的SVD图生视频模型是放置在这个文件夹下

使用CONTROL插件获得深度图+文生图生成图片

Controlnet中上传原图选择深度,预处理器可选择不同算法,右侧深度模型记得选择深度模型,获得需要的深度图。结合大模型和提示词,利用文生图就可以生成图片。

SVD选项卡直接生成视频

上传制作好的图片,选择SVD图生视频大模型,设置参数,生成视频。

方法5【云端Comfyui出图+AI视频软件】

comfy工作流

  1. 打开链接的工作流:https://www.esheep.com/app/5977,点击查看工作流,会出现登录或注册界面正常注册即可。如果已经登录会自动出现下面的界面。

如果已经登录会自动出现下面的界面。

  1. 步骤1:红色框选择生成图片的大模型,绿色框添加提示词,蓝色框填写反向提示词
  1. 步骤2:红色框设置大小确保是16:9的比例,绿色框修改参数,参数不理解的话保持默认即可。
  1. 步骤3:红色框上传深度图
  1. 步骤4:点击立即生成,最下面就会出现图片,在生成历史中下载图片即可。

方法6【Adobe firefly出图+AI视频工具】

🎁

本方法作者:小歪

1.使用Adobe firefly的参考结构功能出图

上传参考图,填写创意提示词、选择16:9的图片比例,点击生成即可直接出图

工具网址:https://firefly.adobe.com/

工具参考结构功能详细使用教程:小歪:Adobe firefly新出的参考结构功能

2.图片去水印

选中图片,点击图片右上角的下载按钮,即可下载图片,下载的图片左下角带有logo水印,可使用ps去除,或者用工具:https://clipdrop.co/cleanup

3.AI视频工具出视频

这里简单演示stablevideo(每天有免费额度),更多视频工具见文档:小歪:AI视频软件集合

4.生成图和视频成品

生成图:

视频成品:

交流群

如果群满了可以加三思微信拉你进群

备注“视频挑战赛”

安排大家进群,分享作品交流心得