• 我的订阅
  • 科技

手把手教你本地部署DeepSeek:享受AI带来的便利

类别:科技 发布时间:2025-02-11 15:18:00 来源:浅语科技

国内的大语言模型DeepSeek近日迅速出圈,凭借其在自然语言处理、代码生成和多轮对话等任务中的出色表现,吸引了众多开发者和研究者的关注,甚至登上了不少地区的app榜单。

不过在使用时经常会遇到服务器繁忙的困扰,解决办法也很简单,就是将其部署到本地,无需依赖云端服务即可享受AI带来的便利。

要在本地部署DeepSeek,需要借助运行大语言模型的工具,这里我们建议使用LM Studio,这是一款专为本地运行大语言模型设计的客户端工具。

它支持多种开源模型,并提供了简单易用的界面,使得用户无需编写复杂的代码即可加载和运行模型。LM Studio的最大优势在于其“本地化”特性,确保数据的隐私和安全。

除了数据安全和避免服务器繁忙之外,在本地部署DeepSeek还可以做到灵活定制,我们可以根据硬件性能调整模型参数,优化运行效率,获得更加定制化的体验。

手把手教你本地部署DeepSeek:享受AI带来的便利

在开始部署之前,先确保设备满足以下硬件要求:显卡GTX 1060(6GB)及以上,推荐RTX3060及以上;内存容量8GB,推荐16GB及更高;存储空间C盘剩余20GB,推荐使用NVMe固态硬盘。

首先是安装LMStudio客户端,在官网lmstudio.ai下载对应操作系统的安装包即可,随后双击运行并按照提示完成安装。安装完成后启动LM Studio,就来到了用户界面。

手把手教你本地部署DeepSeek:享受AI带来的便利

进入LM Studio之后先点击右下角的设置图标(小齿轮)将语言改为简体中文,然后就可以加载模型了。这里有两种情况,如果能自己找到各种不同版本的模型,那就下载到本地,然后点击左上方文件夹的图标,选择模型目录导入即可,优点是可以选择自定义的模型,而且下载速度有保障。

手把手教你本地部署DeepSeek:享受AI带来的便利

不会自己找模型的话就在LMStudio的设置里,常规部分选中Use LM Studio's Hugging Face的复选框,然后点击左上方的搜索图标(放大镜),搜索deepseek即可找到各种不同版本的模型,优点是使用简单,但是下载非常不稳定。

这里简单介绍一下选择模型时不同参数规模的区别,参数规模以B(Billion,十亿)表示,数值越高,意味着模型就越复杂,理解和生成能力就越强,但是对系统的性能要求就越高,生成内容的速度也就越慢。

手把手教你本地部署DeepSeek:享受AI带来的便利

具体来说,1.5B适合体验/尝鲜的场景,只有大约3GB的文件,不做推荐。7B适合普通内容创作及开发测试场景,文件提升至8GB,推荐16GB内存+8GB显存,毕竟适合大多数用户。8B在7B的基础上更精细一些,适合对内容要求更高更精的场景,同样适合大多数用户。14B则提升至16GB,建议12核CPU+32GB内存+16GB显存,适合专业及深度内容创作场景。更高的参数规模需要的硬件太高,而且生成速度会更慢,所以不做推荐。

DeepSeek的生成速度和显卡性能有很大关系,作为参考,8B模型在移动端RTX 3060上的生成速度约为5字/秒,在桌面端RTX 3060平台的生成速度约为8字/秒,14B模型在桌面端RTX 3060平台的生成速度约为2字/秒,其他模型和配置可以近似估算,大家可以根据自己的配置和需求选择参数规模。

手把手教你本地部署DeepSeek:享受AI带来的便利

部署完成之后,点击LMStudio左上方的对话框,然后在顶部选择要加载的模型即可。开始前可以先在顶部的模型这里设置上下文长度和GPU负载等等,模型加载完成之后就可以开始使用了。

对于有更高要求的用户,LMStudio中支持创建多个文件夹,分类存放不同用途的模型,方便快速切换,LM Studio支持通过本地API接口与其他应用程序集成,实现更复杂的AI应用,本文因为篇幅原因不做深入介绍了。

手把手教你本地部署DeepSeek:享受AI带来的便利

最后再介绍一下常见问题与解决方案。下载速度慢:可以通过修改LM Studio的配置文件,将默认的Hugging Face镜像替换为国内镜像。

模型加载失败:确保模型文件的扩展名为`.gguf`,并检查LM Studio是否为最新版本。运行速度慢/GPU未调用:确认已安装最新的CUDA驱动,并重启LM Studio。

手把手教你本地部署DeepSeek:享受AI带来的便利

责任编辑:振亭

文章内容举报

以上内容为资讯信息快照,由td.fyun.cc爬虫进行采集并收录,本站未对信息做任何修改,信息内容不代表本站立场。

快照生成时间:2025-02-11 17:45:09

本站信息快照查询为非营利公共服务,如有侵权请联系我们进行删除。

信息原文地址:

奔腾2 CPU+128MB内存成功运行Llama大模型:速度还挺快
...视频,展示了在一台26年历史的Windows 98奔腾2 PC上运行大模型(LLM)。这台主频350MHz电脑成功启动进入Windows 98系统
2024-12-30 11:10:00
开源狂潮让巨头惨败,谷歌内部文件曝光
...的LLMs:在Pixel6上,以每秒5个token的速度,就能运行基础模型。可扩展的个人AI:只要一个晚上,就能在笔记本电脑上微调出一个个性化AI。负责任的发布:这一点倒是没
2023-05-07 20:36:00
用过GPT-4 Turbo以后,我们再也回不去了
...,OpenAI CEO 山姆・奥特曼向我们介绍了迄今为止最强的大模型,和基于它的一系列应用,一切似乎就像当初 ChatGPT 一样令人震撼
2023-11-08 18:08:00
酷睿轻薄本也能运行大语言模型,英特尔推动pc生成式ai落地
...行了多个应用的演示。首先,英特尔介绍了他们在大语言模型方面的优化和支持。在我们传统的认知里,运行类似ChatGPT这种大语言模型必须要有大显存的显卡支持。但这场交流会却颠覆了
2023-08-24 22:38:00
rtxai助手的进化
...或文字输入内容,游戏窗口的上下文信息,并通过AI视觉模型处理数据。这些模型增强了与游戏知识数据库相连的大语言模型(LLM)的上下文感知和对特定游戏及应用的理解,然后生成定制的
2024-06-07 04:47:00
还在人工炼丹?自动提示工程指南来了,还带从头实现
...APE)是指自动生成和优化 LLM 提示词的技术,目标是提升模型在特定任务上的性能。其基于提示词工程的思路,即编写多个不同的提示词并对其进行测试,只不过是让整个过程自动化。后
2024-09-10 13:39:00
AI PC是噱头还是更快的马车?
...以生成一个多步骤的、跨软件的操作。这也体现了大语言模型的优势:可以接受较长的输入并理解、分拆。譬如,我们完全可以对AIPC说:帮我将电脑静音,然后打开上次阅读的文档,并把它发
2024-03-28 13:00:00
三星990 EVO AI应用体验
...并不难理解。无论是需要处理十几GB甚至几十GB的大语言模型,还是运行需要调用多个模型的AI绘画任务,都会产生巨大的数据传输需求。在启动、运行和调试这些AI应用时,对硬盘的顺序
2024-10-27 22:03:00
机械革命耀世15 Pro的AIGC狂欢背后,数据的支撑离不开高性能的固态硬盘
...le Diffusion为代表的文生图、再到后来的OpenAI首个视频生成模型Sora,除了对于算力的要求越来越高以外
2024-04-17 15:00:00
更多关于科技的资讯:
厦门网讯 (厦门日报记者 林露虹)来自厦门的光通信电芯片“单项冠军”登陆科创板。昨日,厦门优迅芯片股份有限公司在上交所科创板上市
2025-12-20 08:51:00
摘要:随着企业业务复杂度的提升与项目制运营的普及,多项目并行管理成为企业提升效率与竞争力的重要模式。然而,项目间的资源冲突
2025-12-20 05:18:00
摘要:在健康中国战略引领下,推进特殊人群运动康复指导课程教学改革已成为新时代体育教育与健康服务体系建设的重要任务。本文探讨如何以数智技术深度赋能传统教学模式
2025-12-20 05:18:00
蔡云霞摘要:企业人力资源管理创新发展是激活人力价值、适配组织转型的核心举措。本文聚焦传统管理中的理念滞后、流程固化等痛点
2025-12-20 05:18:00
12月18日,太原北方重工集团生产车间内机器轰鸣,电光闪烁。国内首台φ820mm特大型无缝钢管矫直机已完成安装,正式交付用户并进入试车阶段
2025-12-20 06:54:00
一家科技研发企业 为什么要做城市安全科普宣传?
今年秋季开学季,杭州叙简科技股份有限公司董事长金国庆在瓶窑中学主讲“开学第一课”,当他为近600名学生讲完“AI赋能城市安全”的讲座后
2025-12-20 07:22:00
昨日,由陕西省商务厅指导、西安市商务局主办的“美美共融”2025西安城市消费品牌合作周在西安浐灞凯悦酒店举行。中国连锁经营协会
2025-12-20 07:49:00
定了!明年4月28日,杭州恒隆广场商场亮相
12月18日,恒隆集团及恒隆地产对外发布消息,集团现任行政总裁兼执行董事卢韦柏,将于2026年8月31日前荣休。同时,在这份对外声明里
2025-12-20 07:52:00
摘要:人工智能技术正广泛应用于企业财务管理的各个方面,目前对于该领域的探讨多集中于提升效率、降低成本与优化决策,而对技术渗透所产生的深层风险并未引起企业重视
2025-12-20 05:18:00
一缕发丝织就“头上帝国”丨链接世界的河南力量
编者按:从中原大地到全球市场,一批来自河南的新服务新供给品牌企业正加速“出海”,以优质产品为全球消费者提供更多选择。12月12日起
2025-12-19 14:36:00
在国家持续推进税收现代化、优化营商环境的大背景下,企业合规经营与诚信纳税已成为衡量其可持续发展能力的重要标尺。新疆瑞源乳业有限公司作为巴州地区乳制品行业的领军企业
2025-12-19 14:47:00
浙江新昌:一家县属国企的低空经济腾飞记
在2025年公路交通行业数据要素应用创新大赛中,“基于异构低空飞行器协同的智慧巡检与低空运营解决方案”项目,荣获全国三等奖
2025-12-19 14:47:00
在数字化转型与精益管理深度融合的当下,电子商城作为企业物资采购、资源配置的核心载体,其运营效率与服务质量直接影响企业整体运营成本与发展活力
2025-12-19 14:47:00
浙江飞流科技创新模式成就“飞”速度
12月1日,河南省辉县市,河南共城智通低空经济有限公司正式开业,今年8月,该公司以“品牌加盟”形式获得浙江飞流科技有限公司(以下简称“飞流科技”)在河南省新乡市的品牌授权
2025-12-19 14:47:00
全省唯一入选,就在常州高新区新桥街道!
近日,工信部发布《再制造机电产品典型应用案例》公示名单,常州市新北区新桥街道企业常州越新传动系统有限公司(以下简称“越新传动”)的“再制造风电增速齿轮箱及其应用——以华奥新能源
2025-12-19 14:48:00