• 我的订阅
  • 科技

手把手教你本地部署DeepSeek:享受AI带来的便利

类别:科技 发布时间:2025-02-11 15:18:00 来源:浅语科技

国内的大语言模型DeepSeek近日迅速出圈,凭借其在自然语言处理、代码生成和多轮对话等任务中的出色表现,吸引了众多开发者和研究者的关注,甚至登上了不少地区的app榜单。

不过在使用时经常会遇到服务器繁忙的困扰,解决办法也很简单,就是将其部署到本地,无需依赖云端服务即可享受AI带来的便利。

要在本地部署DeepSeek,需要借助运行大语言模型的工具,这里我们建议使用LM Studio,这是一款专为本地运行大语言模型设计的客户端工具。

它支持多种开源模型,并提供了简单易用的界面,使得用户无需编写复杂的代码即可加载和运行模型。LM Studio的最大优势在于其“本地化”特性,确保数据的隐私和安全。

除了数据安全和避免服务器繁忙之外,在本地部署DeepSeek还可以做到灵活定制,我们可以根据硬件性能调整模型参数,优化运行效率,获得更加定制化的体验。

手把手教你本地部署DeepSeek:享受AI带来的便利

在开始部署之前,先确保设备满足以下硬件要求:显卡GTX 1060(6GB)及以上,推荐RTX3060及以上;内存容量8GB,推荐16GB及更高;存储空间C盘剩余20GB,推荐使用NVMe固态硬盘。

首先是安装LMStudio客户端,在官网lmstudio.ai下载对应操作系统的安装包即可,随后双击运行并按照提示完成安装。安装完成后启动LM Studio,就来到了用户界面。

手把手教你本地部署DeepSeek:享受AI带来的便利

进入LM Studio之后先点击右下角的设置图标(小齿轮)将语言改为简体中文,然后就可以加载模型了。这里有两种情况,如果能自己找到各种不同版本的模型,那就下载到本地,然后点击左上方文件夹的图标,选择模型目录导入即可,优点是可以选择自定义的模型,而且下载速度有保障。

手把手教你本地部署DeepSeek:享受AI带来的便利

不会自己找模型的话就在LMStudio的设置里,常规部分选中Use LM Studio's Hugging Face的复选框,然后点击左上方的搜索图标(放大镜),搜索deepseek即可找到各种不同版本的模型,优点是使用简单,但是下载非常不稳定。

这里简单介绍一下选择模型时不同参数规模的区别,参数规模以B(Billion,十亿)表示,数值越高,意味着模型就越复杂,理解和生成能力就越强,但是对系统的性能要求就越高,生成内容的速度也就越慢。

手把手教你本地部署DeepSeek:享受AI带来的便利

具体来说,1.5B适合体验/尝鲜的场景,只有大约3GB的文件,不做推荐。7B适合普通内容创作及开发测试场景,文件提升至8GB,推荐16GB内存+8GB显存,毕竟适合大多数用户。8B在7B的基础上更精细一些,适合对内容要求更高更精的场景,同样适合大多数用户。14B则提升至16GB,建议12核CPU+32GB内存+16GB显存,适合专业及深度内容创作场景。更高的参数规模需要的硬件太高,而且生成速度会更慢,所以不做推荐。

DeepSeek的生成速度和显卡性能有很大关系,作为参考,8B模型在移动端RTX 3060上的生成速度约为5字/秒,在桌面端RTX 3060平台的生成速度约为8字/秒,14B模型在桌面端RTX 3060平台的生成速度约为2字/秒,其他模型和配置可以近似估算,大家可以根据自己的配置和需求选择参数规模。

手把手教你本地部署DeepSeek:享受AI带来的便利

部署完成之后,点击LMStudio左上方的对话框,然后在顶部选择要加载的模型即可。开始前可以先在顶部的模型这里设置上下文长度和GPU负载等等,模型加载完成之后就可以开始使用了。

对于有更高要求的用户,LMStudio中支持创建多个文件夹,分类存放不同用途的模型,方便快速切换,LM Studio支持通过本地API接口与其他应用程序集成,实现更复杂的AI应用,本文因为篇幅原因不做深入介绍了。

手把手教你本地部署DeepSeek:享受AI带来的便利

最后再介绍一下常见问题与解决方案。下载速度慢:可以通过修改LM Studio的配置文件,将默认的Hugging Face镜像替换为国内镜像。

模型加载失败:确保模型文件的扩展名为`.gguf`,并检查LM Studio是否为最新版本。运行速度慢/GPU未调用:确认已安装最新的CUDA驱动,并重启LM Studio。

手把手教你本地部署DeepSeek:享受AI带来的便利

责任编辑:振亭

文章内容举报

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2025-02-11 17:45:09

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

奔腾2 CPU+128MB内存成功运行Llama大模型:速度还挺快
...视频,展示了在一台26年历史的Windows 98奔腾2 PC上运行大模型(LLM)。这台主频350MHz电脑成功启动进入Windows 98系统
2024-12-30 11:10:00
开源狂潮让巨头惨败,谷歌内部文件曝光
...的LLMs:在Pixel6上,以每秒5个token的速度,就能运行基础模型。可扩展的个人AI:只要一个晚上,就能在笔记本电脑上微调出一个个性化AI。负责任的发布:这一点倒是没
2023-05-07 20:36:00
用过GPT-4 Turbo以后,我们再也回不去了
...,OpenAI CEO 山姆・奥特曼向我们介绍了迄今为止最强的大模型,和基于它的一系列应用,一切似乎就像当初 ChatGPT 一样令人震撼
2023-11-08 18:08:00
酷睿轻薄本也能运行大语言模型,英特尔推动pc生成式ai落地
...行了多个应用的演示。首先,英特尔介绍了他们在大语言模型方面的优化和支持。在我们传统的认知里,运行类似ChatGPT这种大语言模型必须要有大显存的显卡支持。但这场交流会却颠覆了
2023-08-24 22:38:00
rtxai助手的进化
...或文字输入内容,游戏窗口的上下文信息,并通过AI视觉模型处理数据。这些模型增强了与游戏知识数据库相连的大语言模型(LLM)的上下文感知和对特定游戏及应用的理解,然后生成定制的
2024-06-07 04:47:00
还在人工炼丹?自动提示工程指南来了,还带从头实现
...APE)是指自动生成和优化 LLM 提示词的技术,目标是提升模型在特定任务上的性能。其基于提示词工程的思路,即编写多个不同的提示词并对其进行测试,只不过是让整个过程自动化。后
2024-09-10 13:39:00
AI PC是噱头还是更快的马车?
...以生成一个多步骤的、跨软件的操作。这也体现了大语言模型的优势:可以接受较长的输入并理解、分拆。譬如,我们完全可以对AIPC说:帮我将电脑静音,然后打开上次阅读的文档,并把它发
2024-03-28 13:00:00
三星990 EVO AI应用体验
...并不难理解。无论是需要处理十几GB甚至几十GB的大语言模型,还是运行需要调用多个模型的AI绘画任务,都会产生巨大的数据传输需求。在启动、运行和调试这些AI应用时,对硬盘的顺序
2024-10-27 22:03:00
机械革命耀世15 Pro的AIGC狂欢背后,数据的支撑离不开高性能的固态硬盘
...le Diffusion为代表的文生图、再到后来的OpenAI首个视频生成模型Sora,除了对于算力的要求越来越高以外
2024-04-17 15:00:00
更多关于科技的资讯:
三联家电&云闪付消费补贴券,单件至高立减2000元
鲁网11月4日讯买家电怎样最划算?正值双十一家电消费旺季,这个疑问困扰着每一个需要家电换新的消费者。看不懂各平台复杂的满减机制
2025-11-04 17:37:00
2025年玛咖(玛卡)品牌综合评测:如何找到适合自己体质的调理方案?
在个性化健康日益成为主流的今天,男性对保健品的需求已从“大众配方”转向“个体化方案”。玛咖作为广受关注的植物补充剂,其功效虽获认可
2025-11-04 15:47:00
可梦AI开放测试获首批企业盛赞!“短剧男频标杆”的蜜糖网络实力入驻,共启AI短剧工业化新篇
短剧行业全流程智能平台可梦AI正式开启企业测试通道,凭借“真AI驱动全链路、需求响应极速、企业服务定制化”的核心优势,迅速赢得首批入驻企业的高度认可
2025-11-04 13:50:00
CFCA安心诉存证服务,融资租赁行业的电子证据守护者
目前,融资租赁行业正在快速向数字化转型迈进,行业内线上业务的繁荣发展,使得电子数据在交易出现司法纠纷时所起到的作用愈发重要
2025-11-04 13:51:00
当年轻人开始在夏天“进补”,巨量星图如何用一场计划“养”出多个品牌破圈增长
当养生成为这届年轻人的日常,一边熬夜一边搜索“祛湿攻略”,左手冰美式右手胶原蛋白,已成为他们的生活常态。对于大健康品牌来说
2025-11-04 13:52:00
平台化协同·场景为先--中叉网对话安庆联动属具公司的高质量跃迁
2025年8月上旬,“合力改变物流搬运方式--合力•中叉网 | 2025中国叉车和移动机器人高质量发展万里行”再次走进安徽叉车集团旗下的安庆联动属具股份有限公司
2025-11-04 13:52:00
智造能力的跃升,正在成为中国品牌突破创新的底气
智造能力的跃升,正在从结构上打破「高端化」市场格局。以厨电市场为例,以往在单价8万元/㎡以上住宅项目中,进口厨电占比高达78%
2025-11-04 08:12:00
畅通京津冀算力“高速路”!河北大力推进京津冀三地网络协同、服务协同、算力资源协同
河北大力推进京津冀三地网络协同、服务协同、算力资源协同畅通京津冀算力“高速路”10月17日,在2025中国国际数字经济博览会上
2025-11-04 08:12:00
厦门网讯(厦门日报记者 李晓平)近日,省工信厅公布省级人工智能硬件优质产品名单,全省18个入选产品中,厦门独占8席,包括瑞为
2025-11-04 08:38:00
在生成式AI重构流量分配格局的2025年,中国GEO服务商市场已形成清晰的三大梯队。据《2025中国生成式AI搜索生态白皮书》数据显示
2025-11-04 08:49:00
在生成式AI重构流量分配规则的2025年,企业面临着一个核心问题:为什么同样是GEO服务,不同服务商带来的商业回报差距能高达300%以上
2025-11-04 08:50:00
厦门网讯(厦门日报记者 吴燕如 李晓平)我市再添人工智能新型孵化载体——10月31日,位于数字立方大厦的思明未来科技园正式揭牌运营
2025-11-04 09:10:00
大皖新闻讯 11月4日,星巴克咖啡公司宣布与博裕投资达成战略合作,双方将成立合资企业,共同运营星巴克在中国市场的零售业务
2025-11-04 09:31:00
在远程操控下,焦炉“四大车”(装煤车、推焦车、拦焦车、熄焦车)有条不紊地进行作业;通过设备预测性维护系统,设备的早期故障得到智能诊断……在河北新兴能源科技股份有限公司(以下简称“新兴能源科技公司”)
2025-11-04 09:01:00
“产业炬光灯”聚焦厦企笃正新能源 紧跟市场谋创新
“产业炬光灯”聚焦笃正新能源。厦门网讯(厦门日报记者 林露虹)把阳光“存”起来,变成随时可用的电能。厦门企业笃正新能源在离网光伏储能领域持续深耕
2025-11-04 08:07:00