阡陌居

 找回密码
 立即注册
搜索
热搜: 新人报到
查看: 191|回复: 2

[科技、报告] 《DeepSeek 私有化部署和一体机》作者:北京大学 AI肖睿团队【PDF】

[复制链接]

用户组:举人

重建论坛勋章

      UID
251
      积分
1147
      回帖
32
      主题
104
      发书数
103
      威望
976
      铜币
6964
      贡献
0
      阅读权限
50
      注册时间
2025-3-1
      在线时间
136 小时
      最后登录
2025-12-17
发表于 2025-3-19 09:56 | 显示全部楼层 |阅读模式




作品简介:
1. 本次讲座为DeepSeek原理和应用系列研讨的讲座之一,让大家可以决策是否需要自己部署DeepSeek系列模型,并了解自己本地化部署DeepSeek的基本方法,同时了解更专业的企业级部署方法,有助于选择DeepSeek一体机型号,并能理解DeepSeek云服务的工作机制和原理,用好DeepSeek云服务的API调用方法。2. 本讲座的内容分为四个主要部分:① 首先,除了DeepSeek满血版之外,还有各种各样的蒸馏版和量化版,以及DeepSeek的不同专业模型。我们将介绍人工智能大模型的基本概念,以及DeepSeek各个模型的特点与适用场景,对比不同规模模型的性能表现,帮助大家选择最适合自己需求的版本。② 其次,对于普通用户在自己的电脑上部署和体验DeepSeek(蒸馏版)的情况,我们会评估和建议硬件要求,演示如何通过Ollama命令行高效部署DeepSeek模型,解决下载过程中可能遇到的常见问题。为了提升在自己的电脑上安装DeepSeek模型后,大家与DeepSeek模型的交互体验,我们还将介绍Open WebUI和Chatbox等前端展示工具的配置与使用方法。③ 然后,对于专业级的企业部署DeepSeek,或把DeepSeek(蒸馏版和满血版)部署在专业的昂贵的推理机上,本讲座将探讨基于Transformers快速验证和vLLM的高性能部署方案,并提供真实企业基于vLLM的部署DeepSeek-70b的相关数据和经验。④ 最后,作为补充内容,针对计算资源受限的场景,我们专门设计了"低成本部署"环节,详细讲解Unsloth R1动态量化部署的三种实现路径:基于llama.cpp、KTransformers以及Ollama框架动态量化部署。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×

评分

参与人数 1威望 +2 铜币 +5 收起 理由
飞乌与渔 + 2 + 5 看了看,内容很不错,多加点

查看全部评分

[发帖际遇]: test233 给溺水的MM做人工呼吸,奖励 2 铜币. 幸运榜 / 衰神榜
回复

使用道具 举报

用户组:儒士

      UID
6539
      积分
435
      回帖
294
      主题
1
      发书数
0
      威望
287
      铜币
2766
      贡献
0
      阅读权限
30
      注册时间
2025-3-4
      在线时间
110 小时
      最后登录
2025-12-16
发表于 2025-3-22 14:47 | 显示全部楼层
这个是PPT转换的吧,这种要同步看视频才有用的说
[发帖际遇]: txfantong 体验乞丐生活,获得 3 铜币. 幸运榜 / 衰神榜
回复

使用道具 举报

用户组:管理员

爱心会员勋章重建论坛爱心会员勋章重建论坛勋章管理员勋章

      UID
5
      积分
160339
      回帖
23762
      主题
17538
      发书数
17523
      威望
119766
      铜币
429181
      贡献
2400
      阅读权限
200
      注册时间
2025-2-27
      在线时间
1714 小时
      最后登录
2025-12-16
发表于 2025-6-15 07:45 | 显示全部楼层
现在越来越多的企业和政府部署了DS
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|阡陌居

GMT+8, 2025-12-17 01:46 , Processed in 0.097663 second(s), 32 queries .

Powered by Discuz! X3.5

© 2001-2025 Discuz! Team.

快速回复 返回顶部 返回列表