仅 0.39B 参数,DreamLite 让手机也能跑 AI 生图和修图

梦之光 (DreamLite) —— 字节视觉团队出品,首个统一端侧扩散模型,0.39B 超轻量参数,同时搞定文生图 + 图文编辑,零云依赖,完全跑在手机上


可以在端侧运行的生图模型

过去一年,Midjourney、Stable Diffusion、DALL-E 把 AI 生图玩出了花。但这些模型少则数 B,多则几十 B 参数,必须跑在高端 GPU 服务器上——

  • ❌ 隐私泄露风险(你的照片要上传到云端)

  • ❌ 延迟高(等服务器响应,动辄好几秒甚至更久)

  • ❌ 没法离线用(没网 = 没法生成)

现在,DreamLite 把这些问题全解决了。


🎯 DreamLite 是什么

DreamLite 是 ByteVisionLab(字节视觉团队) 发布的轻量级统一扩散模型,仅 0.39B 参数,一个模型同时支持:

  • 🖼️ 文生图(Text-to-Image):输入一段文字描述,生成对应图片

  • ✏️ 图文编辑(Text-guided Editing):给一张图 + 编辑指令,在原图基础上精准修改

核心特点:

|
特点

|

说明

|
| — | — |
|

参数规模

| 0.39B

(比 SDXL 轻了 ~50 倍)

|
|

推理步数

|

4 步(mobile 版)/ 28 步(base 版)

|
|

推理速度

|

小米 14 生成 1024×1024 图像 < 1 秒

|
|

部署方式

| 完全端侧

,无需云端

|
|

支持设备

|

iPhone 17 Pro、小米 14 等主流机型

|


🏗️ 技术亮点:怎么做到的

1. 统一架构:一个模型做两件事

DreamLite 基于剪枝版 Mobile U-Net 主干网络,通过 In-Context Spatial Concatenation(上下文空间拼接) 在潜空间融合多模态条件。

关键思路很巧妙:

  • 生成任务:输入 (target | blank) → 右边空白的潜空间向量告诉模型”我要生成”

  • 编辑任务:输入 (target | source) → 右边源图的潜空间向量告诉模型”我在此基础上修改”

这样同一个 U-Net,用不同的输入配置,自动适配生成或编辑两种任务。

2. 任务渐进式联合预训练

DreamLite 的训练分三步走:

  1. T2I 阶段:先训练文生图能力

  2. Editing 阶段:再训练图像编辑能力

  3. Joint 阶段:联合优化,让两个任务互相促进

之后经过高质量 SFT(监督微调)和强化学习,进一步提升效果。

3. 步数蒸馏:28 步 → 4 步

扩散模型天然需要多步去噪,DreamLite 采用渐进式步数蒸馏,将去噪步数从 28 步压缩到仅 4 步,推理速度大幅提升。


📊 性能表现

我们直接测试生图能力。

提示词:

一只橘猫坐在复古打字机上,打字机放在铺着蕾丝桌布的红木书桌,窗外是 rainy 的伦敦街景,暖黄色台灯照明,景深效果,摄影风格

图

对比豆包seeddream4.5:

图

对比千问

图

感觉DreamLite已经很不错了,毕竟只有0.39B。


💡 能用在哪

1. 人像 & 风格迁移

拍一张照片,一键转油画风/动漫风/赛博朋克风……完全本地处理,隐私安全。

2. 背景替换

电商卖家不用再苦练 PS,输入”换成纯白背景”或”换成户外风景”,5 秒出图。

3. 产品换色/物体替换

给产品图换个颜色、加个装饰,电商主图快速生成。

4. 隐私敏感场景

医疗、法律等行业图片处理,数据不离本地,合规无忧。


🚀 怎么用

本地部署(GitHub 开源):

# 克隆仓库 git clone https://github.com/ByteVisionLab/DreamLite.git cd DreamLite # 创建 conda 环境 conda create -n dreamlite python=3.10 -y conda activate dreamlite # 安装依赖 pip install -r requirements.txt # 文生图(mobile 版,4步超快) python infer_mobile.py --prompt "A portrait of a young woman with flowers." # 图文编辑(mobile 版,4步) python infer_mobile.py --prompt "Change the background to a dense forest." --image_path ./inputs/source.png

在线体验(HuggingFace Demo):

👉 https://huggingface.co/spaces/carlofkl/DreamLite[1]


🔮 总结

DreamLite 的出现,证明了端侧 AI 的可能性边界还在快速拓展——从 0.39B 参数里挤出 SOTA 级别的生图和编辑能力,这在两年前是不可想象的。

更值得关注的是统一架构这个思路:一个模型做多件事,比训多个专用小模型更优雅,也更接近真正的”多模态理解”。

可以预见,随着手机芯片 NPU 能力的持续提升,未来在手机上跑越来越强的 AI 模型会成为常态。DreamLite 只是开始。


相关链接:


你对端侧 AI 生图有什么期待?欢迎留言交流~

引用链接

[1]https://huggingface.co/spaces/carlofkl/DreamLite

[2]https://carlofkl.github.io/dreamlite/

[3]https://github.com/ByteVisionLab/DreamLite

[4]https://arxiv.org/abs/2603.28713

[5]https://huggingface.co/spaces/carlofkl/DreamLite


仅 0.39B 参数,DreamLite 让手机也能跑 AI 生图和修图
https://maoyu92.github.io/2026/05/05/07 AI笔记/AI写作与发布/a192_仅 0.39B 参数,DreamLite 让手机也能跑 AI 生图和修图/
作者
陈文茂
发布于
2026年5月5日
许可协议