
Ollama 是一个专为在本地机器上便捷部署和运行大型语言模型(LLM)而设计的开源工具。它通过简单的命令行界面,让用户能够轻松地在本地环境中运行各种开源大模型。
Modelfile 文件定义模型配置,支持自定义模型参数数据安全:所有模型和数据都在本地运行,无需上传到云端,确保数据隐私。
简单易用:通过 ollama run <model> 等简单命令即可运行模型,无需复杂配置。
资源优化:支持模型量化,可以在有限的硬件资源上运行大模型。
社区支持:拥有活跃的开源社区,持续更新和维护,支持多种主流开源模型。
跨平台:支持 macOS、Linux 和 Windows 系统,满足不同用户需求。