解锁视频创作新可能LTX2.3-22B_IC-LoRA-CrossView-Prompt核心功能全面解析【免费下载链接】LTX2.3-22B_IC-LoRA-CrossView-Prompt项目地址: https://ai.gitcode.com/hf_mirrors/Cseti/LTX2.3-22B_IC-LoRA-CrossView-PromptLTX2.3-22B_IC-LoRA-CrossView-Prompt是一款基于LTX-Video 2.322B模型的In-Context LoRAIC-LoRA适配器它就像一台虚拟第二摄像机只需提供参考视频和简短的摄像机角度提示就能从请求的新视角重新渲染相同场景同时保持主体和内容不变改变摄像机的位置。核心功能虚拟摄像机视角转换 这款IC-LoRA适配器的核心能力在于实现视频场景的多视角重新渲染。它通过固定的摄像机角度词汇表让用户能够精确控制虚拟摄像机的位置变化包括方位角围绕主体旋转、仰角摄像机高度和距离与主体的距离三个维度。支持的摄像机角度参数维度允许的描述词方位角same angle·slightly to the left·slightly to the right·to the left·to the right·far to the left·far to the right仰角lower·same height·higher距离closer·same distance·further所有63种有效的组合都列在captions_all_63.txt中。使用这些精确的短语非常重要——模型专门学习了这个词汇表因此同义词如45度向左、稍微向左的可靠性较低。快速上手ComfyUI使用指南 该LoRA仅在ComfyUI中进行了测试适用于视频到视频IC-LoRA工作流。以下是基本使用步骤准备工作克隆仓库git clone https://gitcode.com/hf_mirrors/Cseti/LTX2.3-22B_IC-LoRA-CrossView-Prompt加载LoRA文件LTX2.3-22B_IC-LoRA-CrossView-Prompt_v0.9_13700.safetensors使用步骤提供参考视频——你想要从新角度重新拍摄的场景。提供摄像机角度提示见下面的提示词格式。不需要起始图像。提示词格式每个提示必须以触发词crossview.开头后跟以下模板crossview. new camera angle: {azimuth}, {elevation}, {distance}.示例提示词crossview. new camera angle: to the right, lower, closer.crossview. new camera angle: to the left, higher, further.crossview. new camera angle: same angle, same height, closer.实用技巧提升效果的秘诀 角度大小和链式转换模型在小的单步角度变化上工作最可靠。对于较大的视角偏移链式多个小步骤——将生成的视图作为新的参考反馈并应用另一个小角度。完整提示词列表训练此模型所用的每个提示都在captions_all_63.txt中——使用这些确切的短语可以获得最佳效果。蒸馏模型使用建议LoRA是在完整非蒸馏LTX-2.3上训练的。在蒸馏的少步工作流上其效果较弱——尝试LoRA强度为1.2–1.5和/或在第一个非蒸馏步骤中运行它。训练细节技术参数一览 参数值基础模型LTX-Video 2.3 (22B)训练框架ltx-trainer (Lightricks)训练策略IC-LoRA (灵活的参考条件)发布的检查点第13,700步12k线性 1.7k热启动继续LoRA rank / alpha16 / 16目标模块attn1, attn2to_k/q/v/out——仅注意力层优化器AdamW — 2e-4线性衰减主要1e-4常数继续时间步采样均匀sigma[0.4, 1.0]混合精度bf16批大小1启用梯度检查点条件reference p1.0 first_frame p0.2训练数据集294对分辨率768x768x81 15fps局限性了解模型边界 ⚠️视角范围训练摄像机跨越正面区域最大±60°方位角——从后面看超出范围。蒸馏模型在蒸馏的少步模型上效果较弱见提示部分。许可证信息 此LoRA根据Apache License 2.0共享。它完全在SynCamVideo数据集上训练该数据集本身采用Apache-2.0许可因此训练数据对此适配器没有额外限制可以在相同的宽松条款下发布。请注意使用此LoRA需要LTX-Video 2.3基础模型该模型受其自身许可的约束——请单独查看Lightricks的基础权重条款。示例输出展示虽然项目中没有提供图片文件但你可以通过查看assets目录下的示例视频来了解模型的效果例如assets/example_warrior_right-lower-closer.mp4assets/example_underwater_right-lower-further.mp4assets/example_car_right-lower-closer.mp4每个视频都显示了参考视频顶部和生成的新摄像机视图底部。通过这些示例你可以直观地了解LTX2.3-22B_IC-LoRA-CrossView-Prompt如何改变视频的拍摄角度为视频创作带来新的可能性。【免费下载链接】LTX2.3-22B_IC-LoRA-CrossView-Prompt项目地址: https://ai.gitcode.com/hf_mirrors/Cseti/LTX2.3-22B_IC-LoRA-CrossView-Prompt创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考