Files
nexus/wiki/sources/Ollama-DeepSeek-OpenWebUI离线部署大模型.md

1.9 KiB
Raw Blame History

title, type, tags, date
title type tags date
Ollama+DeepSeek+OpenWebUI离线部署大模型 source
Ollama
DeepSeek
OpenWebUI
本地部署
2025-03-14

Source File

Summary

  • 核心主题Ollama + DeepSeek + OpenWebUI的完整本地大模型部署方案
  • 问题域:本地私有化部署大模型,确保数据隐私和离线使用
  • 方法/机制Docker Compose编排Ollama提供推理服务OpenWebUI提供图形界面集成代理访问
  • 结论/价值Mac Studio M2 Max可流畅运行32B及以下模型离线部署成本可控

Key Claims

  • Ollama安装支持macOS/Windows/Linux提供离线安装方案下载tgz+install.sh
  • 硬件要求1.5B需4GB RAM7B需16GB RAM32B需64GB RAM70B需128GB RAM
  • DeepSeek-R1各版本大小1.5B=1.1GB7B=4.7GB14B=9GB32B=20GB70B=43GB671B=404GB
  • 模型下载加速间隔重启下载脚本、从夸克网盘下载、HF国内镜像(hf-mirror.com)
  • OpenWebUI部署Docker Compose含RAG知识库、图像生成、联网搜索功能
  • Ollama API访问允许局域网需设置OLLAMA_HOST=0.0.0.0通过nginx增加API KEY保护

Key Concepts

Key Entities

  • Ollama:开源本地大模型运行框架
  • DeepSeek国产开源大模型DeepSeek-R1
  • OpenWebui开源Web界面工具集成Ollama API
  • Docker:容器化部署平台

Connections

Contradictions

  • 无冲突