京东云率先接入MiniMax M3模型 推理性能与效率显著提升

MiniMax M3大模型正式发布,京东云JoyBuilder模型开发平台同步完成接入并向用户开放服务。此次升级重点在于推理性能优化,平台结合自研推理框架,并引入PD分离部署、KV Cache缓存及投机采样等技术,实现多项底层能力协同提升。新模型在实际运行中显著提高推理吞吐量与响应效率,可为开发者提供更流畅的调用体验,并有助于加速大模型在各类业务场景中的落地应用。

上一篇:

下一篇:

发表回复

登录后才能评论