1. 项目概述
作为一名长期从事AI应用开发的工程师,我经常需要快速验证各种大模型的效果。但直接使用云端API不仅成本高,还存在数据隐私问题。最近发现Ollama这个工具可以轻松在本地运行大模型,配合Streamlit快速搭建交互界面,非常适合个人开发者和小团队使用。本文将详细介绍如何在Windows环境下完成Ollama的安装配置、轻量模型部署,以及使用Streamlit构建简易网页应用的全过程。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. Ollama安装与配置
2.1 环境准备与安装
Ollama是一个开源的本地大模型运行框架,支持Windows、Mac和Linux系统。它的最大优势是简化了模型部署流程,开发者无需关心复杂的依赖和环境配置。
安装步骤详解:
- 访问官网下载页面(注意:务必从官方渠道获取安装包)
- 下载Windows版本的OllamaSetup.exe(当前最新版本为0.1.29)
- 双击安装包运行,建议修改默认安装路径为D:\Software\Ollama这样的非系统盘位置
- 安装完成后,Ollama会自动注册系统服务并在后台运行
重要提示:安装路径中不要包含中文或空格字符,这是许多Windows软件安装的通用原则,可以避免后续可能出现的路径解析问题。
2.2 安装验证与问题排查
安装完成后,我们需要验证Ollama是否正确安装:
bash复制ollama --version
如果看到版本号输出(如ollama version 0.1.29),说明安装成功。如果提示"ollama不是内部或外部命令",可能是环境变量未生效,尝试以下解决方案:
- 重启计算机(最简单有效的方法)
- 手动添加安装目录到系统PATH环境变量
- 检查Ollama服务是否正常运行(任务管理器→服务→查找Ollama)
2.3 模型拉取与运行
2.3.1 模型选择建议
对于本地开发环境,特别是配置不高的PC,建议选择参数量在1B以下的轻量级模型。以下是几个推荐模型及其特点:
| 模型名称 | 参数量 | 显存占用 | 语言支持 | 适合场景 |
|---|---|---|---|---|
| qwen2:0.5b | 0.5B |
