【免费下载链接】LTX-2.5-22b-IC-LoRA-Refine-Details
LTX-2.5-22b-IC-LoRA-Refine-Details是一款基于 LTX-2.5-22B 视频模型的 In-Context LoRA(IC-LoRA):它把一段发软、压缩或已被放大的视频作为参考,在同一帧上重建出原生高画质般的纹理、边缘与颗粒。搭配Tiled Fusion(逐步分块潜空间融合)采样策略,它能单趟完成 1080p 直通 4K 放大,成品没有肉眼可见的分块接缝——这就是标题里"零接缝"的来源。
📌 本文核心关键词:LTX-2.5-22b-IC-LoRA-Refine-Details、Tiled Fusion、1080p 上采样 4K、视频细节重建、IC-LoRA、潜空间融合
🎬 这个模型能做什么?
一句话:把"看起来糊"的视频,重绘成"原生高画质"的视频,而不是单纯放大像素。
| 项目 | 说明 |
|---|---|
| 输入 | 任意分辨率视频(1080p 网络片、压缩视频、AI 生成视频) |
| 输出 | 4K(3840×2176)等输出画布,每个像素都是新生成的 |
| 原理 | 单趟推理 + 逐去噪步分块潜空间融合,全程无接缝、无逐块闪烁 |
| 进阶 | 先 4K、再 lanczos 到 8K(可选第二趟),逐层逼近 8K |
核心文件与文档:
- 模型权重:ltx-2.5-22b-ic-lora-refine-details-1.0.safetensors(最终 checkpoint,训练 step 3000,约 1.3GB,运行于 LTX-2.5 蒸馏 transformer)
- 任务配置:configuration.json(
framework: pytorch,task: video-to-video) - 完整官方说明:README.md
🧩 Tiled Fusion 原理:为什么分块还能"零接缝"?
模型只在 **1024×576 的分块(tile)**上训练过。画布比 tile 大时(比如 4K),如果简单地把画面切成几块分别生成,块与块之间几乎必然出现接缝和闪烁。Tiled Fusion 用三个设计解决了这个问题:
- 一张画布、一个噪声场:整帧是同一个 latent,所有分块共享同一份噪声,而不是各切各的。
- 每个去噪步内裁剪重叠窗口:每一步都裁出互相重叠 50% 的 1024×576 窗口,每个窗口以它自己那份参考画面裁剪作为条件独立去噪。
- 步内高斯加权融合:窗口结果用高斯权重(blend variance 0.05)合并回同一个 latent。因为融合发生在步循环内部,各窗口在每一步都保持耦合,最终"没有接缝、也没有逐块闪烁"。
简单类比:不是"各自画一格再拼拼图",而是"一群人每画一笔前都互相看一眼整幅画"。
📐 为什么必须分块?训练窗口决定一切
训练数据来自 4K 素材的成对数据:目标是 4K 真实缩放到 1024×576 的图(绝不使用放大后的目标),参考是同一块被故意劣化成"发软放大源"的画面。模型因此只学会一件事:当高频细节缺失或被抹平时,如何在时间上保持一致地把它重建出来。它不改变构图、曝光和色彩。
由此推出两条实操铁律:
- 4K 是甜点位:4K 输出时,tile 内的内容尺度恰好与训练时一致。
- 8K 不能一步到位:8K 下同一 tile 只覆盖 13% 的画面,相当于训练尺度的 2 倍特写,模型会开始"编造"纹理(水果排布会乱、招牌文字会变)。正确姿势:refine 到 4K → lanczos 到 8K → 可选的第二趟轻处理。
⚠️即使是 FullHD 输出也要走分块流程:1920×1088 画布正好是 3×3 个训练 tile 的网格;若整帧单趟不过 tile,LoRA 会脱离训练桶,效果反而变差。
🛠️ ComfyUI 中最快的 Tiled Fusion 上采样步骤
只需 5 步即可跑通 1080p → 4K:
- 将 LoRA 权重复制到 ComfyUI 的
models/loras目录。 - 打开 ComfyUI-LTXVideo 仓库中的工作流
LTX-2.5_V2V_TiledFusion_Upscale.json。它会自动加载 LTX-2.5 蒸馏 transformer、Gemma-4 12B 文本编码器、LTX-2.5 视频 VAE 和本 LoRA(权重 1.0),并运行LTXVTiledFusionSampler(tile 1024×576)。 - 把视频拖到
LoadVideo,设置output_size(FullHD / 4K / 8K),写好画面风格提示词,运行。 - 工作流会先用 lanczos 把视频放大到输出尺寸再作为 guide喂给模型——模型从没见过原始小图。长视频由 97 帧滑窗(
use_streaming默认开启)自动处理。 - 若自建节点图,顺序为:lanczos 缩放(画布为 32 的倍数)→
LTXAddVideoICLoRAGuide(latent_downscale_factor1)→LTXVTiledFusionSampler(tile 1024×576、overlap 0.5、blend 0.05、cfg1.0,8 步蒸馏 sigmas)→VAEDecodeTiled解码(1024px、重叠 128、时间 256)。
硬性约束:输出画布两边都必须是32 的倍数,帧数满足8n+1(49、97、121、241…)。1920×1080 源素材请直接 refine 到 3840×2176,或先裁到 1920×1056。
⚡ Tiled Fusion 关键参数速查表
| 参数 | 推荐值 | 备注 |
|---|---|---|
| LoRA 强度 | 1.0 | 固定 |
| 推理步数 | 8 步(蒸馏 sigmas,euler) | 1.0, 0.99375, …, 0.421875, 0.0 |
| Guidance / cfg | 1.0 | 蒸馏模型不需要大引导 |
| Tile 尺寸 | 1024×576(竖版 576×1024) | 与训练桶一致,效果最佳 |
| overlap | 0.5 | 不可低于 0.5,否则周期性细纹理会相位断裂 |
| blend variance | 0.05 | 高斯融合权重 |
| grid cycle | 1 | — |
| 帧数 | 8n+1,窗口 97 帧 | 长视频用流式滑窗 |
| 解码 | VAEDecodeTiled | 1024 / 重叠 128 / 时间 256 |
提示词建议(描述"渲染风格"而非"画面主体",因为每个 tile 都会收到完整提示词,提到主体可能被"画"进不包含它的 tile 中):
- 正向:
sharp photographic detail, crisp natural texture, fine surface detail, clean edges, natural film grain, high resolution footage - 负向:
blurry, soft, plastic, smeared detail, oversharpened halos, warped faces
💡 若某主体(商品、文字、logo、人脸)在劣化后变得模糊不清,可在-1token 位置附加参考图:把主体的原生分辨率裁剪放在灰色背景图上,用第二个LTXAddVideoICLoRAGuide(frame_idx为 -1、强度 1.0)挂在视频 guide 之后。参考图是逐 tile 生效的:把裁剪放在输出画布上主体所在位置,覆盖该主体的 tile 就能"看到"真图。
🎞️ 真实效果:1080p → 4K → 8K 演示视频
官方示例是一段 1920×1088 生成视频,用本 LoRA + Tiled Fusion 连续 refine 两次:先到 3840×2176,再到 7680×4352——每一像素均为生成,第二趟加入的细节是 1080p 源里从未有过的。仓库内 4 支演示视频:
- examples/refine_forest_stream_crop.mp4:森林溪流 1:1 裁剪对比(左 lanczos 放大,右 8K 结果,800×800 结果像素)
- examples/refine_neon_alley_crop.mp4:霓虹巷道夜景 1:1 裁剪对比
- examples/refine_forest_stream_wipe.mp4:森林溪流全画幅擦除式对比
- examples/refine_neon_alley_wipe.mp4:霓虹巷道全画幅擦除式对比
❗ 避坑清单:这些情况下 Tiled Fusion 不是万能的
- 放大不能超过源素材的信息量:深景深、均匀光、密集纹理最多测到普通 lanczos 放大 3 倍的细节;浅景深虚化区仅 1.0 倍。请在 1:1 下看对焦区域评判。
- 存档/老电视片源:模型会把中频段的编码损伤当噪点抹掉并略微去饱和——请先跑 Restoration IC-LoRA,再 refine。
- 原始 Cinema raw 素材:成品会略软于 lanczos 放大(模型去掉了它无法重建的颗粒),不适合此工具。
- 随机纹理(烟花、海浪泡沫、风中树叶)可能过锐——与其降 LoRA 强度(代价是别处细节流失),不如换更描述性的提示词。
- 文字/招牌:重度劣化后可能变成"字形噪声",用 -1 token 参考图或对该 tile 单独跑一趟带文字的提示词;极小字体两种方式都救不回。
- 尾帧丢细节:LTX 生成的最后 1~2 帧会损失约 10% 细节,滑窗模式下重叠会遮住它;单窗口跑则给视频补 8 帧再裁掉。
- 导出别冤枉效果:ComfyUI
SaveVideo的 mp4(4K 约 8 Mbps)会低估画质,建议存 latent 重新解码,或从 PNG 序列编码。
📚 小结与资源
- 它是什么:LTX-2.5-22B 上的细节重建 IC-LoRA,video-to-video,专注"重建高频细节",不碰构图与色彩。
- 它怎么做:1024×576 训练桶 + 每步 50% 重叠窗口 + 高斯步内融合 = 零接缝零闪烁。
- 最佳用法:1080p 源 → 单趟 4K(RTX PRO 6000 上 121 帧约 22 分钟);8K 走"4K → lanczos → 可选二趟"阶梯。
- 授权:LTX-2.x Community License(
ltx-2.x-community-license),完整条款见 README.md 中的 License 一节。
| 资源 | 路径 |
|---|---|
| 模型权重 | ltx-2.5-22b-ic-lora-refine-details-1.0.safetensors |
| 项目说明文档 | README.md |
| 任务配置 | configuration.json |
| 演示视频 | examples/ 目录(4 支对比视频) |
【免费下载链接】LTX-2.5-22b-IC-LoRA-Refine-Details
相关推荐
4K不是终点:LTX-2.5-22b-IC-LoRA-Refine-Details阶梯式8K超分与适用边界完整指南
4K不是终点:LTX 2.5 22b IC LoRA Refine Details阶梯式8K超分与适用边界完整指南 LTX 2.5 22b IC LoRA Re
它是怎么练成的?LTX-2.5-22b-IC-LoRA-Refine-Details训练数据集与IC-LoRA微调深度剖析
它是怎么练成的?LTX 2.5 22b IC LoRA Refine Details训练数据集与IC LoRA微调深度剖析 LTX 2.5 22b IC LoR
IC-LoRA是什么?以LTX-2.5-22b-IC-LoRA-Refine-Details为例,搞懂视频到视频微调的核心概念
IC LoRA是什么?以LTX 2.5 22b IC LoRA Refine Details为例,搞懂视频到视频微调的核心概念 IC LoRA(In Conte
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考