unsloth unslothai
Local UI to run and train LLMs and diffusion models, including Qwen3.8, Kimi K3, MiniMax-H3, Gemma 4, DeepSeek-V4, FLUX and more.
- 主要语言
- Python
- Stars
- 71,084
- Forks
- 6,407
标签
- 桌面应用
- 推理优化
- 本地部署
- 深度学习
- RAG
- 多模态
- 库/SDK
摘要
Unsloth 提供桌面应用、Web 界面与核心库三种形态,让用户在本地运行、微调(支持 LoRA、QLoRA、RL、GRPO、DPO 等)和部署 LLM 与扩散模型,训练速度提升约 2 倍、显存占用降低 70%。支持 GGUF/FP8 等格式导出、OpenAI 兼容 API、RAG 与本地搜索,并可与 Claude Code、Codex 等 Agent 及 MCP 集成。适用于个人开发者与团队在本地或私有环境完成模型的训练、推理与部署。
README
<h1 align="center" style="margin:0;"> <a href="https://unsloth.ai/docs"><picture> <source media="(prefers-color-scheme: dark)" srcset="https://raw.githubusercontent.com/unslothai/unsloth/main/images/unsloth%20logo%20white%20text.png"> <source media="(prefers-color-scheme: light)" srcset="https://ra…