Document the BF16 Final checkpoint
Browse files
README.md
CHANGED
|
@@ -1,31 +1,31 @@
|
|
| 1 |
-
---
|
| 2 |
-
license: apache-2.0
|
| 3 |
-
language:
|
| 4 |
-
- en
|
| 5 |
-
- zh
|
| 6 |
-
library_name: comfyui
|
| 7 |
-
pipeline_tag: text-to-image
|
| 8 |
base_model:
|
| 9 |
- sensenova/SenseNova-U1.5-8B-MoT
|
| 10 |
- sensenova/SenseNova-U1.5-8B-MoT-SFT
|
| 11 |
-
tags:
|
| 12 |
-
- comfyui
|
| 13 |
-
- safetensors
|
| 14 |
-
- sensenova
|
| 15 |
-
- image-generation
|
| 16 |
-
- image-editing
|
| 17 |
-
- multi-reference-image-editing
|
| 18 |
-
inference: false
|
| 19 |
-
---
|
| 20 |
-
|
| 21 |
-
# SenseNova-U1.5-8B-MoT Final / SFT ComfyUI 单文件版
|
| 22 |
-
|
| 23 |
这里提供 SenseNova U1.5 的 [Final](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT) 和 [SFT](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT-SFT) **ComfyUI 单文件权重版**,配合 [SenseNova U1.5 ComfyUI 节点](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8) 使用。
|
| 24 |
-
|
| 25 |
-
本仓库是社区转换版本,并非 SenseNova 官方仓库。权重没有经过训练、微调或量化,只把官方固定版本的分片权重重新打包为一个 `safetensors` 文件,方便 ComfyUI 用户下载和管理。
|
| 26 |
-
|
| 27 |
-
## 支持什么
|
| 28 |
-
|
| 29 |
- 文生图
|
| 30 |
- 单张参考图编辑
|
| 31 |
- 1~10 张多参考图编辑
|
|
@@ -37,68 +37,63 @@ inference: false
|
|
| 37 |
- CFG Norm、CFG 生效区间和结构化编辑提示词
|
| 38 |
- ComfyUI 显存卸载和低显存加载
|
| 39 |
- 批量生成时按分支复用文本/参考图 prefix KV cache,每张结果仍使用独立随机噪声
|
| 40 |
-
|
| 41 |
-
> 这不是普通 SD/SDXL checkpoint,也不是 Diffusers 目录。请使用配套的 ComfyUI 节点加载。
|
| 42 |
-
|
| 43 |
-
## 快速开始
|
| 44 |
-
|
| 45 |
-
### 1. 安装节点
|
| 46 |
-
|
| 47 |
-
在 ComfyUI-Manager 中搜索:
|
| 48 |
-
|
| 49 |
-
```text
|
| 50 |
-
SenseNova U1.5 (T8)
|
| 51 |
-
```
|
| 52 |
-
|
| 53 |
-
也可以使用 Comfy CLI:
|
| 54 |
-
|
| 55 |
-
```bash
|
| 56 |
-
comfy node install sensenova-u15-t8
|
| 57 |
-
```
|
| 58 |
-
|
| 59 |
-
或手动安装最新版:
|
| 60 |
-
|
| 61 |
-
```bash
|
| 62 |
-
cd ComfyUI/custom_nodes
|
| 63 |
-
git clone https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8.git
|
| 64 |
-
```
|
| 65 |
-
|
| 66 |
节点地址:
|
| 67 |
|
| 68 |
- [GitHub](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8)
|
| 69 |
- [Comfy Registry](https://registry.comfy.org/nodes/sensenova-u15-t8)
|
| 70 |
|
| 71 |
-
建议使用配套节点 `1.3.
|
| 72 |
-
|
| 73 |
-
### 2. 下载模型
|
| 74 |
-
|
| 75 |
-
按需要下载
|
| 76 |
-
|
| 77 |
-
``
|
| 78 |
-
SenseNova-U1.5-8B-MoT-T8.safetensors
|
| 79 |
-
SenseNova-U1.5-8B-MoT-SFT-T8.safetensors
|
| 80 |
-
```
|
| 81 |
-
|
| 82 |
-
放到:
|
| 83 |
-
|
| 84 |
-
```text
|
| 85 |
-
ComfyUI/models/diffusion_models/
|
| 86 |
-
```
|
| 87 |
-
|
| 88 |
-
使用 Hugging Face CLI 下载:
|
| 89 |
-
|
| 90 |
-
```bash
|
| 91 |
-
hf download t8star/SenseNova-U1.5-Comfy \
|
| 92 |
-
SenseNova-U1.5-8B-MoT-T8.safetensors \
|
| 93 |
-
--local-dir ComfyUI/models/diffusion_models
|
| 94 |
-
```
|
| 95 |
|
| 96 |
-
|
| 97 |
|
| 98 |
```text
|
| 99 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 100 |
```
|
| 101 |
|
|
|
|
|
|
|
| 102 |
需要 8 步快速文生图时,再下载:
|
| 103 |
|
| 104 |
```text
|
|
@@ -117,11 +112,12 @@ hf download t8star/SenseNova-U1.5-Comfy \
|
|
| 117 |
--local-dir ComfyUI/models/loras
|
| 118 |
```
|
| 119 |
|
| 120 |
-
|
| 121 |
|
| 122 |
| 文件/组合 | 配套节点支持 | 说明 |
|
| 123 |
|---|---:|---|
|
| 124 |
-
| U1.5 Final,50 步生成/编辑 | ✅ | 当前
|
|
|
|
| 125 |
| U1.5 Final + `-ComfyUI` 8-step LoRA | ✅ | 仅用于 8 步文生图 |
|
| 126 |
| U1.5 SFT,50 步生成/编辑 | ✅ | 独立底模,不叠加 8-step LoRA |
|
| 127 |
| U1.5 Preview | ❌ | 旧预览权重 |
|
|
@@ -129,12 +125,12 @@ Final 和 SFT 都是 SenseNova U1.5,两者都支持 50 步生成/编辑。8-st
|
|
| 129 |
|
| 130 |
### 出现 `checkpoint key mismatch` 怎么办
|
| 131 |
|
| 132 |
-
先更新配套节点到 `1.3.
|
| 133 |
|
| 134 |
如果更新后仍报错,请检查 `ComfyUI/custom_nodes/` 下是否存在两份同名节点,并对照下方文件大小和 SHA256。新版报错会显示实际 `model=` 和 `loader=` 路径,可用来确认 ComfyUI 到底加载了哪一份文件。
|
| 135 |
|
| 136 |
### 3. 下载工作流
|
| 137 |
-
|
| 138 |
下面工作流可以直接下载并拖进 ComfyUI:
|
| 139 |
|
| 140 |
- [文生图工作流](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/t2i_workflow.json)
|
|
@@ -144,23 +140,35 @@ Final 和 SFT 都是 SenseNova U1.5,两者都支持 50 步生成/编辑。8-st
|
|
| 144 |
- [稳定多参考编辑工作流(人物换装案例)](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/multi_reference_edit_workflow.json)
|
| 145 |
- [SFT 文生图工作流](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/sft_t2i_workflow.json)
|
| 146 |
- [SFT 图像编辑工作流](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/sft_edit_workflow.json)
|
| 147 |
-
|
| 148 |
-

|
| 149 |
-
|
| 150 |
-
## 推荐参数
|
| 151 |
-
|
| 152 |
-
第一次使用建议保持:
|
| 153 |
-
|
| 154 |
-
```text
|
| 155 |
-
steps: 50
|
| 156 |
-
CFG: 4
|
| 157 |
-
img_cfg: 1
|
| 158 |
-
shift: 3
|
| 159 |
-
sampler: euler
|
| 160 |
-
scheduler: normal
|
| 161 |
denoise: 1
|
| 162 |
```
|
| 163 |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 164 |
8-step LoRA 使用:
|
| 165 |
|
| 166 |
```text
|
|
@@ -181,19 +189,19 @@ SenseNova Loader (Final / SFT,选择 Final) → SenseNova U1.5 8-Step LoRA →
|
|
| 181 |
```
|
| 182 |
|
| 183 |
官方 8-step LoRA 主要用于快速文生图;图像编辑建议继续使用不加 LoRA 的 50 步工作流。
|
| 184 |
-
|
| 185 |
-
普通文生图和 `img_cfg=1` 的编辑可以使用 `KSampler`。
|
| 186 |
-
|
| 187 |
-
当 `img_cfg` 不是 1 时,请使用 `SenseNova Edit Guider` 和 ComfyUI 自带的 `SamplerCustomAdvanced`。`SenseNova Sampling Options` 输出的同一个 `MODEL` 必须同时连接到 `Edit Guider` 和 `BasicScheduler`。
|
| 188 |
-
|
| 189 |
多参考图会按照官方规则标记为 `Image-1`、`Image-2` 等。提示词示例:
|
| 190 |
-
|
| 191 |
-
```text
|
| 192 |
Use Image-1 as the illustration style and Image-2 as the food subject.
|
| 193 |
```
|
| 194 |
|
| 195 |
普通的 `SenseNova Reference Image` 节点提供 `Image-1` 和可选的 `Image-2`;需要 3~10 张图时使用 `SenseNova Reference Images (1-10)`。图像职责按顺序写进提示词即可。人物换装时,`Image-1` 放人物主图,`Image-2` 放服装图。
|
| 196 |
-
|
| 197 |
## 实际结果
|
| 198 |
|
| 199 |
### U1.5 SFT:2048×2048、50 步中文文字密集文生图
|
|
@@ -207,31 +215,44 @@ Use Image-1 as the illustration style and Image-2 as the food subject.
|
|
| 207 |
参数:2048×2048、8 步、CFG 1、shift 3、LoRA strength 1、Euler/normal、seed 42。标题、副标题、材料、步骤和温度提示均为模型直接生成,没有后期修字。
|
| 208 |
|
| 209 |

|
| 210 |
-
|
| 211 |
-
### 2048×2048 文生图
|
| 212 |
-
|
| 213 |
-
参数:2048×2048、50 步、CFG 4、shift 3、Euler/normal、seed 42。
|
| 214 |
-
|
| 215 |
-

|
| 216 |
-
|
| 217 |
-
### 2048×2048 双参考图编辑
|
| 218 |
-
|
| 219 |
-
参数:2048×2048、50 步、CFG 4、img_cfg 1、shift 3、Euler/normal、seed 42。第一张图提供手账版式和文字密度,第二张图提供炸鸡主体。大标题、材料和主要步骤可读,局部小字仍有错字和重叠,本图没有后期修字。
|
| 220 |
-
|
| 221 |
-

|
| 222 |
-
|
| 223 |
-
## 文件信息
|
| 224 |
-
|
| 225 |
-
|
| 226 |
-
|
| 227 |
-
|
|
| 228 |
-
|
|
| 229 |
-
|
|
| 230 |
-
|
|
| 231 |
-
|
|
| 232 |
-
|
|
| 233 |
-
|
| 234 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 235 |
|
| 236 |
### SFT 单文件
|
| 237 |
|
|
@@ -256,25 +277,26 @@ Use Image-1 as the illustration style and Image-2 as the food subject.
|
|
| 256 |
| 官方源版本 | `e909f4636d119d65fe4cba8770c19daff2ac102e` |
|
| 257 |
|
| 258 |
这个版本只给官方 LoRA 键名添加 ComfyUI 需要的 `diffusion_model.` 前缀,882 个张量的数据逐字节不变。
|
| 259 |
-
|
| 260 |
-
## 模型说明
|
| 261 |
-
|
| 262 |
-
SenseNova-U1.5 是统一的多模态 Transformer。图像生成部分直接在 RGB 像素 patch 空间中进行 flow matching,不使用传统的 VAE latent。因此:
|
| 263 |
-
|
| 264 |
-
- 模型文件比常见 diffusion checkpoint 大很多;
|
| 265 |
-
- 不能用普通 Checkpoint Loader、UNet Loader 或 Diffusers Loader 直接加载;
|
| 266 |
-
- 请使用配套节点提供的 pixel-space latent、调度和采样配置。
|
| 267 |
-
|
| 268 |
## 实测环境
|
| 269 |
|
| 270 |
-
- ComfyUI
|
| 271 |
-
-
|
|
|
|
| 272 |
- NVIDIA CUDA + BF16
|
| 273 |
-
- RTX 5090 Laptop 24 GB
|
| 274 |
-
- 64 GB 系统内存
|
| 275 |
-
|
| 276 |
-
2048×2048、50 步文生图和
|
| 277 |
-
|
| 278 |
## 当前限制
|
| 279 |
|
| 280 |
- 目前只正式验证 NVIDIA CUDA + BF16
|
|
@@ -283,23 +305,23 @@ SenseNova-U1.5 是统一的多模态 Transformer。图像生成部分直接在 R
|
|
| 283 |
- 单个参考图节点最多接 10 张图;批量结果数量可设为 1~16
|
| 284 |
- 复杂主体替换、多区域或多约束编辑可能出现内容漂移
|
| 285 |
- FP16、ROCm、MPS、DirectML、XPU、NPU 尚未验证
|
| 286 |
-
- 不支持 Hugging Face Inference Providers 直接调用
|
| 287 |
-
|
| 288 |
-
## 来源与许可
|
| 289 |
-
|
| 290 |
- 基础模型:[sensenova/SenseNova-U1.5-8B-MoT](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT)
|
| 291 |
- SFT 模型:[sensenova/SenseNova-U1.5-8B-MoT-SFT](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT-SFT)
|
| 292 |
- 官方 LoRA:[sensenova/SenseNova-U1.5-8B-MoT-LoRAs](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT-LoRAs)
|
| 293 |
-
- 官方代码:[OpenSenseNova/SenseNova-U1](https://github.com/OpenSenseNova/SenseNova-U1)
|
| 294 |
-
- 论文:[SenseNova-U1.5](https://arxiv.org/abs/2605.12500)
|
| 295 |
-
- ComfyUI 节点:[T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8)
|
| 296 |
-
|
| 297 |
-
模型与官方参考实现使用 Apache License 2.0。本仓库仅提供权重重打包,不改变原模型许可。使用模型时请同时遵守适用法律、原始模型许可和平台规则。
|
| 298 |
-
|
| 299 |
-
## 相关链接
|
| 300 |
-
|
| 301 |
-
- [T8star Hugging Face](https://huggingface.co/t8star)
|
| 302 |
-
- [B站](https://space.bilibili.com/385085361)
|
| 303 |
-
- [YouTube](https://www.youtube.com/@T8star-Aix/)
|
| 304 |
-
- [ComfyUI 整合包](https://pan.quark.cn/s/264edb7e36bd)
|
| 305 |
- [模型网盘](https://pan.quark.cn/s/6b756fdae32d)
|
|
|
|
| 1 |
+
---
|
| 2 |
+
license: apache-2.0
|
| 3 |
+
language:
|
| 4 |
+
- en
|
| 5 |
+
- zh
|
| 6 |
+
library_name: comfyui
|
| 7 |
+
pipeline_tag: text-to-image
|
| 8 |
base_model:
|
| 9 |
- sensenova/SenseNova-U1.5-8B-MoT
|
| 10 |
- sensenova/SenseNova-U1.5-8B-MoT-SFT
|
| 11 |
+
tags:
|
| 12 |
+
- comfyui
|
| 13 |
+
- safetensors
|
| 14 |
+
- sensenova
|
| 15 |
+
- image-generation
|
| 16 |
+
- image-editing
|
| 17 |
+
- multi-reference-image-editing
|
| 18 |
+
inference: false
|
| 19 |
+
---
|
| 20 |
+
|
| 21 |
+
# SenseNova-U1.5-8B-MoT BF16 / Legacy Final / SFT ComfyUI 单文件版
|
| 22 |
+
|
| 23 |
这里提供 SenseNova U1.5 的 [Final](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT) 和 [SFT](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT-SFT) **ComfyUI 单文件权重版**,配合 [SenseNova U1.5 ComfyUI 节点](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8) 使用。
|
| 24 |
+
|
| 25 |
+
本仓库是社区转换版本,并非 SenseNova 官方仓库。权重没有经过训练、微调或量化,只把官方固定版本的分片权重重新打包为一个 `safetensors` 文件,方便 ComfyUI 用户下载和管理。
|
| 26 |
+
|
| 27 |
+
## 支持什么
|
| 28 |
+
|
| 29 |
- 文生图
|
| 30 |
- 单张参考图编辑
|
| 31 |
- 1~10 张多参考图编辑
|
|
|
|
| 37 |
- CFG Norm、CFG 生效区间和结构化编辑提示词
|
| 38 |
- ComfyUI 显存卸载和低显存加载
|
| 39 |
- 批量生成时按分支复用文本/参考图 prefix KV cache,每张结果仍使用独立随机噪声
|
| 40 |
+
|
| 41 |
+
> 这不是普通 SD/SDXL checkpoint,也不是 Diffusers 目录。请使用配套的 ComfyUI 节点加载。
|
| 42 |
+
|
| 43 |
+
## 快速开始
|
| 44 |
+
|
| 45 |
+
### 1. 安装节点
|
| 46 |
+
|
| 47 |
+
在 ComfyUI-Manager 中搜索:
|
| 48 |
+
|
| 49 |
+
```text
|
| 50 |
+
SenseNova U1.5 (T8)
|
| 51 |
+
```
|
| 52 |
+
|
| 53 |
+
也可以使用 Comfy CLI:
|
| 54 |
+
|
| 55 |
+
```bash
|
| 56 |
+
comfy node install sensenova-u15-t8
|
| 57 |
+
```
|
| 58 |
+
|
| 59 |
+
或手动安装最新版:
|
| 60 |
+
|
| 61 |
+
```bash
|
| 62 |
+
cd ComfyUI/custom_nodes
|
| 63 |
+
git clone https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8.git
|
| 64 |
+
```
|
| 65 |
+
|
| 66 |
节点地址:
|
| 67 |
|
| 68 |
- [GitHub](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8)
|
| 69 |
- [Comfy Registry](https://registry.comfy.org/nodes/sensenova-u15-t8)
|
| 70 |
|
| 71 |
+
建议使用配套节点 `1.3.5` 或更高版本。`1.3.5` 支持官方全 BF16 Final、新旧 Final 双版本严格校验、官方分辨率预设,以及 ComfyUI v0.34.0 / Python 3.10~3.14 CI。
|
| 72 |
+
|
| 73 |
+
### 2. 下载模型
|
| 74 |
+
|
| 75 |
+
按需要下载底模:
|
| 76 |
+
|
| 77 |
+
- `SenseNova-U1.5-8B-MoT-BF16-T8.safetensors`:新版全 BF16 Final,约 35 GB,推荐
|
| 78 |
+
- `SenseNova-U1.5-8B-MoT-T8.safetensors`:旧版混合精度 Final,约 50 GB,继续兼容
|
| 79 |
+
- `SenseNova-U1.5-8B-MoT-SFT-T8.safetensors`:SFT,约 35 GB
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 80 |
|
| 81 |
+
放到:
|
| 82 |
|
| 83 |
```text
|
| 84 |
+
ComfyUI/models/diffusion_models/
|
| 85 |
+
```
|
| 86 |
+
|
| 87 |
+
使用 Hugging Face CLI 下载:
|
| 88 |
+
|
| 89 |
+
```bash
|
| 90 |
+
hf download t8star/SenseNova-U1.5-Comfy \
|
| 91 |
+
SenseNova-U1.5-8B-MoT-BF16-T8.safetensors \
|
| 92 |
+
--local-dir ComfyUI/models/diffusion_models
|
| 93 |
```
|
| 94 |
|
| 95 |
+
下载 SFT 时把文件名改为 `SenseNova-U1.5-8B-MoT-SFT-T8.safetensors`。已有旧版 Final 的用户无需重新下载,节点 1.3.5 继续支持 `SenseNova-U1.5-8B-MoT-T8.safetensors`。
|
| 96 |
+
|
| 97 |
需要 8 步快速文生图时,再下载:
|
| 98 |
|
| 99 |
```text
|
|
|
|
| 112 |
--local-dir ComfyUI/models/loras
|
| 113 |
```
|
| 114 |
|
| 115 |
+
新版 BF16 Final 是官方对同一 Final 模型进行的全 BF16 转换与重新分片;旧版混合精度 Final 仍��支持。两个 Final 都支持 50 步生成/编辑和官方 8-step LoRA。SFT 是独立训练阶段,只使用 50 步,不叠加 LoRA。Preview 不受支持。
|
| 116 |
|
| 117 |
| 文件/组合 | 配套节点支持 | 说明 |
|
| 118 |
|---|---:|---|
|
| 119 |
+
| U1.5 Final BF16,50 步生成/编辑 | ✅ | 当前推荐模型,约 35 GB |
|
| 120 |
+
| U1.5 Final 旧版混合精度,50 步生成/编辑 | ✅ | 兼容已有下载,约 50 GB |
|
| 121 |
| U1.5 Final + `-ComfyUI` 8-step LoRA | ✅ | 仅用于 8 步文生图 |
|
| 122 |
| U1.5 SFT,50 步生成/编辑 | ✅ | 独立底模,不叠加 8-step LoRA |
|
| 123 |
| U1.5 Preview | ❌ | 旧预览权重 |
|
|
|
|
| 125 |
|
| 126 |
### 出现 `checkpoint key mismatch` 怎么办
|
| 127 |
|
| 128 |
+
先更新配套节点到 `1.3.5` 或更高版本,然后彻底关闭并重启 ComfyUI。不要修改 loader、关闭动态加载或删除报错键来绕过校验;错误权重加载方式可能造成画面模糊、偏色或不遵循提示词。
|
| 129 |
|
| 130 |
如果更新后仍报错,请检查 `ComfyUI/custom_nodes/` 下是否存在两份同名节点,并对照下方文件大小和 SHA256。新版报错会显示实际 `model=` 和 `loader=` 路径,可用来确认 ComfyUI 到底加载了哪一份文件。
|
| 131 |
|
| 132 |
### 3. 下载工作流
|
| 133 |
+
|
| 134 |
下面工作流可以直接下载并拖进 ComfyUI:
|
| 135 |
|
| 136 |
- [文生图工作流](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/t2i_workflow.json)
|
|
|
|
| 140 |
- [稳定多参考编辑工作流(人物换装案例)](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/multi_reference_edit_workflow.json)
|
| 141 |
- [SFT 文生图工作流](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/sft_t2i_workflow.json)
|
| 142 |
- [SFT 图像编辑工作流](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8/raw/main/examples/sft_edit_workflow.json)
|
| 143 |
+
|
| 144 |
+

|
| 145 |
+
|
| 146 |
+
## 推荐参数
|
| 147 |
+
|
| 148 |
+
第一次使用建议保持:
|
| 149 |
+
|
| 150 |
+
```text
|
| 151 |
+
steps: 50
|
| 152 |
+
CFG: 4
|
| 153 |
+
img_cfg: 1
|
| 154 |
+
shift: 3
|
| 155 |
+
sampler: euler
|
| 156 |
+
scheduler: normal
|
| 157 |
denoise: 1
|
| 158 |
```
|
| 159 |
|
| 160 |
+
官方建议的分辨率预设:
|
| 161 |
+
|
| 162 |
+
| 比例 | 分辨率 |
|
| 163 |
+
|---|---:|
|
| 164 |
+
| 1:1 | 2048 × 2048 |
|
| 165 |
+
| 16:9 | 2720 × 1536 |
|
| 166 |
+
| 9:16 | 1536 × 2720 |
|
| 167 |
+
| 2:3 | 1664 × 2496 |
|
| 168 |
+
| 3:2 | 2496 × 1664 |
|
| 169 |
+
|
| 170 |
+
选择 `Custom` 时继续使用节点上的 width / height。
|
| 171 |
+
|
| 172 |
8-step LoRA 使用:
|
| 173 |
|
| 174 |
```text
|
|
|
|
| 189 |
```
|
| 190 |
|
| 191 |
官方 8-step LoRA 主要用于快速文生图;图像编辑建议继续使用不加 LoRA 的 50 步工作流。
|
| 192 |
+
|
| 193 |
+
普通文生图和 `img_cfg=1` 的编辑可以使用 `KSampler`。
|
| 194 |
+
|
| 195 |
+
当 `img_cfg` 不是 1 时,请使用 `SenseNova Edit Guider` 和 ComfyUI 自带的 `SamplerCustomAdvanced`。`SenseNova Sampling Options` 输出的同一个 `MODEL` 必须同时连接到 `Edit Guider` 和 `BasicScheduler`。
|
| 196 |
+
|
| 197 |
多参考图会按照官方规则标记为 `Image-1`、`Image-2` 等。提示词示例:
|
| 198 |
+
|
| 199 |
+
```text
|
| 200 |
Use Image-1 as the illustration style and Image-2 as the food subject.
|
| 201 |
```
|
| 202 |
|
| 203 |
普通的 `SenseNova Reference Image` 节点提供 `Image-1` 和可选的 `Image-2`;需要 3~10 张图时使用 `SenseNova Reference Images (1-10)`。图像职责按顺序写进提示词即可。人物换装时,`Image-1` 放人物主图,`Image-2` 放服装图。
|
| 204 |
+
|
| 205 |
## 实际结果
|
| 206 |
|
| 207 |
### U1.5 SFT:2048×2048、50 步中文文字密集文生图
|
|
|
|
| 215 |
参数:2048×2048、8 步、CFG 1、shift 3、LoRA strength 1、Euler/normal、seed 42。标题、副标题、材料、步骤和温度提示均为模型直接生成,没有后期修字。
|
| 216 |
|
| 217 |

|
| 218 |
+
|
| 219 |
+
### 2048×2048 文生图
|
| 220 |
+
|
| 221 |
+
参数:2048×2048、50 步、CFG 4、shift 3、Euler/normal、seed 42。
|
| 222 |
+
|
| 223 |
+

|
| 224 |
+
|
| 225 |
+
### 2048×2048 双参考图编辑
|
| 226 |
+
|
| 227 |
+
参数:2048×2048、50 步、CFG 4、img_cfg 1、shift 3、Euler/normal、seed 42。第一张图提供手账版式和文字密度,第二张图提供炸鸡主体。大标题、材料和主要步骤可读,局部小字仍有错字和重叠,本图没有后期修字。
|
| 228 |
+
|
| 229 |
+

|
| 230 |
+
|
| 231 |
+
## 文件信息
|
| 232 |
+
|
| 233 |
+
### Final BF16 单文件(推荐)
|
| 234 |
+
|
| 235 |
+
| 项目 | 内容 |
|
| 236 |
+
|---|---|
|
| 237 |
+
| 文件名 | `SenseNova-U1.5-8B-MoT-BF16-T8.safetensors` |
|
| 238 |
+
| 文件大小 | `35,065,860,328` bytes(约 32.66 GiB) |
|
| 239 |
+
| SHA256 | `a32b117f40ad4575c6709b3ad6efb1c6b743ef1c1c3d75360f14090b997f1d29` |
|
| 240 |
+
| tensor 数量 | `1116` |
|
| 241 |
+
| 存储 dtype | 全部 BF16 |
|
| 242 |
+
| 官方源版本 | `19bc874ef6ffc97fda9837b40fc1d1301806158a` |
|
| 243 |
+
|
| 244 |
+
### Final 旧版混合精度单文件(继续兼容)
|
| 245 |
+
|
| 246 |
+
| 项目 | 内容 |
|
| 247 |
+
|---|---|
|
| 248 |
+
| 文件名 | `SenseNova-U1.5-8B-MoT-T8.safetensors` |
|
| 249 |
+
| 文件大小 | `50,222,155,152` bytes(约 46.78 GiB) |
|
| 250 |
+
| SHA256 | `2e5c4451969a8af9d7bcbf9d00a0fe463b15ed44149d8d79f31409e671587615` |
|
| 251 |
+
| tensor 数量 | `1116` |
|
| 252 |
+
| 存储 dtype | BF16 / F32 混合,保持官方权重格式 |
|
| 253 |
+
| 官方源版本 | `1f6ec60423d29939dde4202fd82ae340b144e280` |
|
| 254 |
+
|
| 255 |
+
三份底模转换都保留了对应官方 revision 的 tensor 名称、shape、存储 dtype 和原始数据。节点会按新版 Final、旧版 Final、SFT 三个 profile 检查 metadata、文件大小、全部 tensor 名称、shape 和 dtype;损坏或版本不匹配会直接报错。
|
| 256 |
|
| 257 |
### SFT 单文件
|
| 258 |
|
|
|
|
| 277 |
| 官方源版本 | `e909f4636d119d65fe4cba8770c19daff2ac102e` |
|
| 278 |
|
| 279 |
这个版本只给官方 LoRA 键名添加 ComfyUI 需要的 `diffusion_model.` 前缀,882 个张量的数据逐字节不变。
|
| 280 |
+
|
| 281 |
+
## 模型说明
|
| 282 |
+
|
| 283 |
+
SenseNova-U1.5 是统一的多模态 Transformer。图像生成部分直接在 RGB 像素 patch 空间中进行 flow matching,不使用传统的 VAE latent。因此:
|
| 284 |
+
|
| 285 |
+
- 模型文件比常见 diffusion checkpoint 大很多;
|
| 286 |
+
- 不能用普通 Checkpoint Loader、UNet Loader 或 Diffusers Loader 直接加载;
|
| 287 |
+
- 请使用配套节点提供的 pixel-space latent、调度和采样配置。
|
| 288 |
+
|
| 289 |
## 实测环境
|
| 290 |
|
| 291 |
+
- 本地实测 ComfyUI 0.33.x
|
| 292 |
+
- CI:最低支持的 ComfyUI 0.31,以及当前稳定版 ComfyUI v0.34.0
|
| 293 |
+
- Python 3.10、3.12、3.13、3.14
|
| 294 |
- NVIDIA CUDA + BF16
|
| 295 |
+
- RTX 5090 Laptop 24 GB
|
| 296 |
+
- 64 GB 系统内存
|
| 297 |
+
|
| 298 |
+
2048×2048、50 步文生图和���像编辑已在 24 GB 显存下完成。模型加载和卸载会占用较多系统内存,建议准备 64 GB RAM 和足够的虚拟内存。
|
| 299 |
+
|
| 300 |
## 当前限制
|
| 301 |
|
| 302 |
- 目前只正式验证 NVIDIA CUDA + BF16
|
|
|
|
| 305 |
- 单个参考图节点最多接 10 张图;批量结果数量可设为 1~16
|
| 306 |
- 复杂主体替换、多区域或多约束编辑可能出现内容漂移
|
| 307 |
- FP16、ROCm、MPS、DirectML、XPU、NPU 尚未验证
|
| 308 |
+
- 不支持 Hugging Face Inference Providers 直接调用
|
| 309 |
+
|
| 310 |
+
## 来源与许可
|
| 311 |
+
|
| 312 |
- 基础模型:[sensenova/SenseNova-U1.5-8B-MoT](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT)
|
| 313 |
- SFT 模型:[sensenova/SenseNova-U1.5-8B-MoT-SFT](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT-SFT)
|
| 314 |
- 官方 LoRA:[sensenova/SenseNova-U1.5-8B-MoT-LoRAs](https://huggingface.co/sensenova/SenseNova-U1.5-8B-MoT-LoRAs)
|
| 315 |
+
- 官方代码:[OpenSenseNova/SenseNova-U1](https://github.com/OpenSenseNova/SenseNova-U1)
|
| 316 |
+
- 论文:[SenseNova-U1.5](https://arxiv.org/abs/2605.12500)
|
| 317 |
+
- ComfyUI 节点:[T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8](https://github.com/T8mars/Comfyui-SenseNova-U1.5-Wrapper-T8)
|
| 318 |
+
|
| 319 |
+
模型与官方参考实现使用 Apache License 2.0。本仓库仅提供权重重打包,不改变原模型许可。使用模型时请同时遵守适用法律、原始模型许可和平台规则。
|
| 320 |
+
|
| 321 |
+
## 相关链接
|
| 322 |
+
|
| 323 |
+
- [T8star Hugging Face](https://huggingface.co/t8star)
|
| 324 |
+
- [B站](https://space.bilibili.com/385085361)
|
| 325 |
+
- [YouTube](https://www.youtube.com/@T8star-Aix/)
|
| 326 |
+
- [ComfyUI 整合包](https://pan.quark.cn/s/264edb7e36bd)
|
| 327 |
- [模型网盘](https://pan.quark.cn/s/6b756fdae32d)
|