Hugging Face Blog·· 2023-08-08精选AI 评分62
Hugging Face 发布 Swift Transformers,可在 Apple 设备本地运行 LLM
Releasing Swift Transformers: Run On-Device LLMs in Apple Devices
AI 导读
Hugging Face 发布 swift-transformers Swift 包及配套工具,让开发者在 Apple 设备上用 Core ML 本地运行 Llama 2、Falcon 等模型。
推荐理由
Hugging Face 放出在 Apple 设备本地跑 Llama 2 的 Swift 工具链,读者可据此了解端侧 LLM 的转换与优化路径。
来源:Hugging Face Blog · huggingface.co