当前位置:首页 > 文章列表 > 科技周边 > 人工智能 > WorkBuddy 接入 DeepSeek-V3 模型的详细配置步骤

WorkBuddy 接入 DeepSeek-V3 模型的详细配置步骤

2026-05-03 14:24:50 0浏览 收藏

学习知识要善于思考,思考,再思考!今天golang学习网小编就给大家带来《WorkBuddy 接入 DeepSeek-V3 模型的详细配置步骤》,以下内容主要包含等知识点,如果你正在学习或准备学习科技周边,就都不要错过本文啦~让我们一起来看看吧,能帮助到你就更好了!

需完成模型服务部署、API参数配置与提示词适配三重环节:一、用vLLM本地部署DeepSeek-V3并监听8000端口;二、在WorkBuddy添加自定义模型,Base URL为http://127.0.0.1:8000/v1,模型ID为deepseek-v3;三、将系统提示词替换为DeepSeek-V3专用轻量模板。

WorkBuddy 接入 DeepSeek-V3 模型的详细配置步骤

如果您希望在WorkBuddy中使用DeepSeek-V3模型进行高质量代码生成或复杂推理任务,则需完成模型服务部署、API参数配置与提示词适配三重环节。以下是实现该目标的详细配置步骤:

一、部署DeepSeek-V3本地推理服务

DeepSeek-V3不以内置方式集成于WorkBuddy,必须先在本地启动兼容OpenAI格式的HTTP推理接口,使WorkBuddy可通过标准v1/chat/completions路径调用。该服务是后续所有配置生效的前提。

1、创建Python虚拟环境并安装依赖:
conda create -n deepseek-v3 python=3.10 && conda activate deepseek-v3
pip install torch==2.1.0 transformers==4.36.0 accelerate==0.26.0 vLLM==0.4.2

2、从Hugging Face下载模型权重(需提前注册账号并申请deepseek-ai/deepseek-v3访问权限):
git lfs install
git clone https://huggingface.co/deepseek-ai/deepseek-v3

3、使用vLLM启动服务,监听本地8000端口:
vllm serve --model deepseek-ai/deepseek-v3 --dtype bfloat16 --tensor-parallel-size 1 --port 8000 --host 127.0.0.1

4、验证服务连通性:
curl -X POST http://127.0.0.1:8000/v1/chat/completions -H "Content-Type: application/json" -d '{"model":"deepseek-v3","messages":[{"role":"user","content":"Hello"}]}'

二、在WorkBuddy中添加自定义DeepSeek-V3模型

WorkBuddy通过“AI模型→添加自定义模型”入口注入外部LLM,要求严格遵循OpenAI兼容协议;若Base URL或模型ID不匹配,将返回404 Not Found500 Internal Server Error

1、打开WorkBuddy客户端,点击右上角头像进入【设置】,选择【AI模型】选项卡。

2、点击右下角【+ 添加模型】按钮,在弹出表单中填写以下内容:
模型名称:DeepSeek-V3
API基础地址:http://127.0.0.1:8000/v1
API密钥:留空(vLLM默认未启用鉴权)

3、在“模型ID”字段中输入与vLLM启动时--model参数完全一致的标识:deepseek-v3

4、点击【保存】后,观察状态栏是否显示“模型校验中”,数秒后若出现绿色对勾即表示接入成功。

三、替换系统提示词模板以适配DeepSeek-V3对话结构

DeepSeek-V3对system角色指令高度敏感,若沿用WorkBuddy默认模板(含多轮历史摘要与格式约束),会导致响应截断、拒绝生成或输出非预期JSON结构。必须手动覆盖为DeepSeek训练时所采用的轻量级system schema。

1、在刚添加的DeepSeek-V3模型配置项右侧,点击【高级设置】展开区域。

2、将“系统提示词模板”字段中原有内容全部清空,替换为以下纯文本:
You are a highly capable AI assistant based on DeepSeek-V3. You excel at code generation, logical reasoning, and multi-step problem solving. Respond concisely and accurately in English unless explicitly instructed otherwise.

3、关闭高级设置面板,再次点击【保存】以使新模板生效。

四、启用多模型热切换并设为会话默认

仅完成模型添加并不自动启用其参与推理;必须开启全局热切换开关,并在当前会话或偏好设置中明确指定DeepSeek-V3为活跃模型,否则系统仍将调用默认混元模型。

1、返回【设置】→【AI模型管理】,确保「启用多模型热切换」滑动开关已置为开启状态(呈蓝色)。

2、在模型列表中找到DeepSeek-V3条目,点击右侧【设为默认】按钮。

3、若需在特定会话中临时使用该模型:在主界面任意对话框右侧点击当前模型图标,从下拉菜单中选择DeepSeek-V3,随后发送消息即可触发调用。

五、验证模型响应与错误排查要点

配置完成后需执行最小化测试,确认端到端链路无阻断;常见失败点集中于网络可达性、模型ID一致性及HTTP header兼容性,而非WorkBuddy客户端本身。

1、在WorkBuddy主界面新建对话,输入指令:“输出Python代码,实现快速排序算法。”

2、观察响应是否包含完整可执行代码块,且无乱码、截断或报错信息。

3、如遇响应延迟超15秒,检查vLLM进程是否仍在运行,以及终端是否输出CUDA out of memory警告;此时需在vLLM启动命令中加入--gpu-memory-utilization 0.85参数限制显存占用。

4、如返回“Model not found”,请核对WorkBuddy中填写的模型ID是否与curl测试时-d参数中model字段值完全一致,包括大小写与连字符。

今天带大家了解了的相关知识,希望对你有所帮助;关于科技周边的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~

如何用AI快速生成各种风格头像 AI一键制作个性化头像教程【免费】如何用AI快速生成各种风格头像 AI一键制作个性化头像教程【免费】
上一篇
如何用AI快速生成各种风格头像 AI一键制作个性化头像教程【免费】
如何利用宝塔面板隐藏服务器真实IP_配合Cloudflare设置
下一篇
如何利用宝塔面板隐藏服务器真实IP_配合Cloudflare设置
查看更多
最新文章
资料下载
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ChatExcel酷表:告别Excel难题,北大团队AI助手助您轻松处理数据
    ChatExcel酷表
    ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
    4449次使用
  • Any绘本:开源免费AI绘本创作工具深度解析
    Any绘本
    探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
    4802次使用
  • 可赞AI:AI驱动办公可视化智能工具,一键高效生成文档图表脑图
    可赞AI
    可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
    4683次使用
  • 星月写作:AI网文创作神器,助力爆款小说速成
    星月写作
    星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
    6471次使用
  • MagicLight.ai:叙事驱动AI动画视频创作平台 | 高效生成专业级故事动画
    MagicLight
    MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
    5054次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码