工具教程:LTX Studio
作者:小歪 |微信号:yy1336281219
欢迎加入🌈WaytoAGI【AI视频学社】一起测试和共建 ,加小歪微信,拉你进群
工具简介
LTX Studio 是由 Lightricks 推出的生成式 AI 电影制作平台。它是一款旨在简化视频创作流程的工具,使每个人都能轻松讲述故事。
LTX Studio 主要用于视频制作领域,特别是电影制作、短视频创作、广告制作等。用户可以通过输入文本来生成超过 25 秒的微电影视频,并对视频的各个方面进行精准控制。
在这个平台上,用户可以实现场景、分镜、音效、旁白、一致性人物等一站式工作流。为不同领域的视频制作者提供了极大的便利,使得视频创作变得更加高效和有趣。
注册登录
工具地址:https://ltx.studio/
目前在内测阶段,在官网提交内测申请即可,等待邮件通知,通过审核以后,进入官网输入邮件里提供的邀请码即可登录使用。
使用教程
目前所有的指令只支持使用英文。
第一步 电影主题设定
登录成功以后进入主页,在输入框输入你想创作的电影主题
官方提示词参考范例
In a maze-like city, a thief seeks a legendary artifact, faces deceit, unearths hidden truths, and finds freedom from his dark past.
A group of adventurers enters a fog-shrouded island, confronts illusions, discovers a hidden utopia, and faces a choice between reality and paradise.
In a future where dreams are monetized, a young architect finds a frequency to free consciousness. With rebels, they fight the corporation to reclaim dreams and change reality.
Two lovers from warring alien races struggle for unity, facing interstellar conflict, overcoming prejudices, and fighting for peace.
During the 1960s Space Age, amateur astronomers accidentally discover evidence of an undiscovered planet within our solar system, leading to a reevaluation of astronomical theories.
Guests at a ski resort experience unexpected romance and friendship.
A detective with supernatural abilities investigates eerie murders, discovers a ghostly connection, battles with a vengeful spirit, and resolves his own haunted past.
官方提示词的特点总结:
- 简洁性:每个提示词都非常简洁,通常由一个主要句子构成,并包含关键的情节元素。这种简洁性使得提示词易于理解和记忆,同时为进一步的创作留下了足够的空间。
- 明确的设置:每个提示词都清晰地设定了一个背景或环境,如“迷宫般的城市”、“雾中的岛屿”和“梦想被货币化的未来”。这种明确的设置为故事提供了一个具体的视觉和情感背景。
- 主角与目标:每个提示词都明确指出了主角和他们的追求。例如,“一个小偷寻求传说中的宝物”、“一群冒险家”和“一个年轻的建筑师”。这有助于确定故事的主要角色和他们的动机。
- 冲突与转折:提示词中包含了故事的主要冲突或转折点,如“面对欺骗”、“对抗幻觉”和“与公司斗争”。这些元素为故事增添了紧张感,并推动情节发展。
- 主题与信息:每个提示词都隐含了一个或多个主题或信息,如“自由”、“现实与天堂的选择”和“改变现实”。这些主题为故事提供了深度,并引导观众进行更深层次的思考。
- 结果与结局:虽然提示词没有详细描述故事的结局,但它们暗示了一个可能的结果或目标,如“发现隐藏的真相”、“面对选择”和“改变现实”。这为创作者提供了一个方向,同时也为观众留下了期待。
在创作你自己的电影主题提示词时,你可以考虑遵循这些结构和形式特点:
- 确定一个引人入胜的背景或环境:选择一个独特且能激发兴趣的设置,为故事奠定基础。
- 定义主角和他们的追求:创建一个有深度的主角,并明确他们的目标或动机。
- 引入冲突和挑战:确定故事中的主要障碍或问题,为情节增添紧张感。
- 融入主题和深层信息:思考您希望传达的核心信息或探讨的主题。
- 暗示可能的结果或结局:提供一个开放的结局或目标,激发观众的好奇心和参与感。
写完主题以后可以进入高级设置界面进行进一步细化
目前支持的风格(Visual aesthetic)有这些:Base、3d Model、Analog Film、Anime、Cinematic、Comic Book、Craft Clay、Digital Art、Enhance、Fantasy Art、Isometric、Line Art、Lowpoly、Neonpunk、Origami、Photographic、Pixel Art、Texture、Advertising、Automotive、Corporate、Fashion Editorial、Food Photography、Gourmet Food、Luxury、Real Estate、Retail、Abstract、Abstract Expressionism、Art Deco、Art Nouveau、Constructivist、Cubist、Expressionist、Graffiti、Hyperrealism、Impressionist、Pointillism、Pop Art、Psychedelic、Renaissance、Steampunk、Surrealist、Typography、Watercolor、Biomechanical、Cyberpunk、Cybernetic、Cybernetic Robot、Cyberpunk Cityscape、Futuristic、Retro Cyberpunk、Retro Futurism、Sci Fi、Vaporwave、Platformer Game、Futuristic Game、Combat Game、Open World Game、Adventure Game、Block Game、Monster Game、Arcade Game、Classic Game、Fantasy Game、Strategy Game、Fighting Game、Fantasy Adventure、Architectural、Disco、Dreamscape、Dystopian、Fairy Tale、Gothic、Grunge、Horror、Kawaii、Lovecraftian、Macabre、Manga、Metropolis、Minimalist、Monochrome、Nautical、Space、Stained Glass、Techwear Fashion、Tribal、Zentangle、Collage、Flat Papercut、Kirigami、Paper Mache、Paper Quilling、Papercut Collage、Papercut Shadow Box、Stacked Papercut、Thick Layered Papercut、Alien、Film Noir、Glamour、Hdr、Long Exposure、Neon Noir、Silhouette、Tilt Shift
第二步 故事面板编辑
在第一步里设置好主题以后进入故事面板会默认带有一定数量的场景和分镜。
PROMPT 提示词设置
分镜的画面初始状态是图片形式,在PROMPT区域可以修改分镜提示词。
这里需要注意的是,如果在分镜里要引入某个角色,需要@角色名字,这样才能保证角色的一致性,例如:@Alex David Reed preparing the spacecraft controls for launch, focused and determined.
分镜提示词写完以后,如果对分镜画面图片不满意可以通过PROMPT区域右上角的刷新按钮抽卡,刷到你满意的画面为止。
画面图片确定以后点击画面下方的“Regenerate video”(生成视频)按钮,即可把画面图片变成动态视频,默认出2s的视频,如果希望时长更多可以点击“ Shot editor”(进入镜头编辑)按钮,分镜高级设置页面,目前支持2s/3s/4s/5s这几种。
分镜提示词编辑到生成分镜视频操作演示:
SHOT TYPE 景别设置
目前支持如下几种:Close-up、Extreme Close-up、Medium-Shot、Wide-shot、From below、From above、Bird's eye view、Establishing shot。
Close-up 特写:就是非常近的拍摄,通常用来强调角色的情绪或细节。
Extreme Close-up 极特写:更近的拍摄,可以突出某一个物体的细节,比如眼睛或者嘴巴。
Medium-Shot 中景:拍摄范围适中,可以看到人物的全身,但不是非常近。
Wide-shot 全景:拍摄范围广泛,可以看到整个场景或者背景。
From below 从下往上:从下往上拍摄,通常用来强调人物的威严或者力量感。
From above 从上往下:从上往下拍摄,可以展示人物的弱小或者无助感。
Bird's eye view 鸟瞰视角:就是从高处往下拍摄,可以展示整个场景或者地点。
Establishing shot 开场镜头:通常是一个广阔的场景,用来介绍整个故事的背景或者环境。
MOTION SCALE 运动幅度设置
默认是Scene类型,主体运动,相机运动很小。除了在分镜面板拖拽滚动条调整幅度以外,可以进入镜头编辑页面进阶调整运动幅度。
镜头编辑页面的运动幅度设置分为如下几类
Scene:Subject motion with only little camera motion.(当主体在移动时,相机只有轻微的移动)
Natural:Balanced mixture of subject motion and camera motion.(主体运动和摄像机运动之间平衡的混合)
Extreme:Stronger camera motion for more dynamic scenes.(摄像机动作更强烈,场景更有活力)
上述三个模式默认帧数是16帧需要修改帧数则需要点击ADvanced下方可以选择对应的帧数
Custom:Explicit control over camera motion.(对相机运动的明确控制)
Custom 自定义控制类型里可以设置为这几项:Static、Orbit、Dolly in、Dolly out、Track left、Track right、Track down、Track up、Pan left、Pan right、Tilt up、Tilt down
这里需要说一点,目前Custom这模式还无法向runway那样可以同时控制多个相机参数实现组合
但是!这里面特别说一下。Orbit (轨道)是可以自行编辑画面运动轨迹(类似于https://www.leiapix.com/的效果),具体操作如下:
可以通过鼠标的拖动,滑轮的放大操控当前画面的位置,全部设置完毕后点击 Preview motion可以查看运动情况
SFX 音效设置
音效设置目前支持一个词,对句子的支持不太好
第三步 分镜高级设置
在故事面板的分镜编辑区点击“ Shot editor”(进入镜头编辑)按钮,即可进入分镜高级设置页面
Frame 画面设置:
Motion 设置:
这个部分在第二步的MOTION SCALE 运动幅度设置的板块已经介绍过了。
Sound 设置:
这个部分在第二步的SFX 音效设置的板块已经介绍过了。
第四步 预览与导出
点击页面右上角的“Preview & Export”按钮进入预览页面,在预览页面点“render”按钮即可进入生成视频的排队序列,一直挂着页面等待生成即可。
提交以后可以通过“Preview & Export”按钮右边的箭头按钮查看生成进度,如果显示failed,则再次打开预览页面重新点击“render”按钮排队。
生成效果
使用官方提供的随机主题提示词,以及该提示词默认生成的场景、分镜、音乐,没使用其他工具编辑剪辑的情况下出的原片
其他功能
换脸
官方演示视频:
常见问题
1.音效不识别
经过我测试,一般句子识别率很低,最好是词语,有些词语无法识别,或者出来的声音不是你想要的,可以用近似的音效,比如我在最后一个分镜里使用火箭(rocket)、爆炸(explosion)都不理想,就用了bomb这个词,出来的音效正好能跟那个画面卡上点。
另外,目前的版本音效应该不是用ai生成的,可能是一个词匹配数据库里的一个音效,因此同一个词每次出现的同一个音效。
2.音效在预览的时候很大,最后生成出来不明显
该工具暂时没有调整音效、音乐以及旁白的音量功能,所以在预览音效的时候听起来声音合适,最后合成出来以后,会被背景音乐盖掉一些,可能后续会出音量功能。
3.对人物的角度提示词识别不精准
如图1所示,我写的人物要背对镜头,但是始终识别不出来,总是人物正面,于是我采用了取巧的方式,如图2所示,不限定角色、同时写他在看着远处的某个东西,就出来背对着镜头的画面了。
4.目前整体视频的分辨率较低
目前工具生成的视频分辨率基本在480P到720P所以有些画面看起来比较糊,目前工具里没有看到可以放大图片和提升视频画质的选项,后续应该会开发画质高清这种选项。除外目前工具还是比较封闭不支持用户自己上传一些内容,比如自己上传图片和动态视频,但是估计后续会开放等到那个时候这个工具真的就王炸了!