跳到正文
Hugging Face Blog·· 2023-06-15精选AI 评分62

用 Core ML 在 iPhone、iPad 和 Mac 上加速 Stable Diffusion

Faster Stable Diffusion with Core ML on iPhone, iPad, and Mac

AI 导读

Hugging Face 介绍了借助 Core ML 新优化在 Apple 设备上加速 Stable Diffusion 的方法,核心是 6-bit palettization 量化,把权重从 16 位浮点压缩到每参数 6 bit,并在推理时逐层解压以降低内存占用。

推荐理由

原文给出 6-bit palettization 的量化转换流程与已上传的四个 Stable Diffusion 模型,读者可据此在 Apple 设备上自行部署。

来源:Hugging Face Blog · huggingface.co