Windows 本地部署 DeepSeek 蒸馏版本

DeepSeek 官网

DeepSeek 作为一款国运级别的AI大模型,其优势在于平衡了成本和性能,让中小公司,甚至个人能够落地本地私有化部署AI大模型。

本地部署的 DeepSeek 蒸馏版本,肯定不能和满血版的对比,本地部署的优势在于数据的安全性,和模型的可控。

在特定的场景下,本地部署的 DeepSeek 也足以胜任工作。

一、Ollama 介绍

Ollama 官网

Ollama 介绍只有一句话: Get up and running with large language models。

获得和运行大语言模型。

Ollama 屏蔽了运行大语言模型的复杂性,主要安装 Ollama 就能够简单快速的运行大语言模型。

Ollama 支持的大语言模型,包括但不仅限于:llamadeepseekqwen2.5

更多大语言模型,可在 Ollama 官网获取。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值