MobileDiffusion-手机端最快文生图

MobileDiffusion是什么？

MobileDiffusion是一种专为移动设备设计的高效潜在扩散模型，可在0.5秒内生成高质量512×512图像。它主要对核心组件UNet进行了大量试验及优化，包括将计算昂贵的卷积精简和注意力运算放在了较低的层上，以及针对MobileDevices的操作优化，诸如激活函数等。其次针对扩散模型需要多步采样的问题，MobileDiffusion探索并实践了像ProgressiveDistillation和UFOGen的一步推理技术

MobileDiffusion 是基于当下开源社区里最火的 SD 1.5 UNet 进行优化的。在每次的优化操作后，会同时衡量相对于原始 UNet 模型的性能的损失，测量指标包括 FID 和 CLIP 两个常用 metric。