ollama

• 174K GitHub stars,MIT 许可证,Go + C++ 混合架构 • 一行命令运行 100+ 开源模型(Llama3、Gemma4、DeepSeek、Qwen、Mistral、MiniMax 等) • 支持 CUDA(NVIDIA)、Metal(Apple Silicon)、ROCm(AMD)、Vulkan 多后端 GPU 加速 • REST API + OpenAI 兼容端点,开箱即用的 Python/JavaScript SDK • Modelfile 声明式配置,零门槛自定义模型行为 • 持续更新的 thinking model、工具调用、结构化输出等 Agent 能力 • Docker 一键部署,支持 Kubernetes Helm Chart • Claude Code、OpenCode 等编程助手直接集成 • 活跃社区:30+ Web UI、50+ 集成工具、10+ 语言 SDK

Stars181k
Forks17.8k
主语言Go
分类模型部署与推理
作者ollama
License

加载项目详情…