设置
  • 日夜间
    随系统
    浅色
    深色
  • 主题色

京东云全面上线 DeepSeek-R1 / V3 模型,支持公有云在线部署、专混私有化实例部署

2025/2/5 10:47:39 来源:IT之家 作者:清源 责编:清源

IT之家 2 月 5 日消息,京东云昨日宣布,京东云已正式上线 DeepSeek-R1 和 DeepSeek-V3 模型,支持公有云在线部署、专混私有化实例部署两种模式,供用户按需部署,快速调用。

IT之家附两种部署方式:

公有云在线部署

开发者和企业可以在京东云官网,进入言犀 AI 开发计算平台的“AI 资产市场”中,选用该模型进行一键部署。

言犀 AI 开发计算平台已经支持 DeepSeek-V3、DeepSeek-R1 以及所有蒸馏小参数模型(DeepSeek-R1-Distill)的一键部署,具体步骤如下:

1、选择基础模型在“AI 资产市场 / 模型”中,提供 DeepSeek 开源的多个版本,如 DeepSeek-R1-Distill-Qwen-1.5B,点击进入卡片页可了解模型结构和预训练数据等关键信息,并查看模型文件结构。

图片

2、准备资源节点 在部署时,LLM 模型因为模型较大,资源性能要求较高,需要独占计算卡进行部署,建议提前准备好专属资源节点。功能路径:专属资源组-创建资源组-创建节点。节点规格:部署 DeepSeek-R1-Distill,推荐使用 cap.p.n3a30.4xlarge;部署 DeepSeek-V3,推荐使用 cap.hc.p5h20.46xlarge

图片

3、模型部署使用将模型部署到相应的服务资源上提供推理调用服务,在部署时平台将自动适配预置推理框架,实现一键部署,仅需指定使用的专属资源组和对应的节点规格。部署完成后,状态将会变为运行中,运行中的模型可被调用,提供推理服务。功能路径:专属资源组-创建资源组-创建节点在线服务-部署;在线服务-服务列表 | 服务名称-在线调试

图片

私有化算力实例部署

专混私有化算力实例部署模式,已经同步上线京东云 vGPU AI 算力平台,为金融、企业、政府等客户提供数据不出域的私有化模型推理服务。

以 DeepSeek R1 版本为例,具体的使用步骤如下:1、进入算力管理页面,点击租用新实例按钮

图片

2、选择资源规格以及对应带有 deepseek 模型的镜像

图片

3、资源创建成功后通过 Jupyterlab 进入实例,启动 Ollama 即可与之对话

图片

图片

京东云言犀 AI 开发计算平台还支持私有化部署及 API 快速集成,通过自研高性能资源管理与弹性调度系统,可提供大模型的全生命周期服务及部署,涵盖模型开发、推理及多场景应用扩展。

针对资源紧缺的场景,京东云支持通过蒸馏技术训练企业自己的大模型,减少模型部署所需资源的同时具备较好的性能。使用京东云 vGPU AI 算力平台,可以将多个蒸馏过的企业自有模型部署在同一张卡上,有效提升资源利用率 70%。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

相关文章

软媒旗下网站: IT之家 最会买 - 返利返现优惠券 iPhone之家 Win7之家 Win10之家 Win11之家

软媒旗下软件: 软媒手机APP应用 魔方 最会买 要知