觉
AI觉醒星球
Awakening is here
Knowledge File / AI小生意项目库
2026-10-21 1 浏览 免费阅读

Deepseek 开源支撑其最快、最便宜 AI 模型的推理引擎

Deepseek 以 Apache 2.0 许可证开源内部推理框架 DeepInfer,该框架基于 vLLM 并做了计算内核与分布式优化,是 V4.1-Flash 模型高并发快速出词的服务底座;同时发布 deepseek-recipe 复刻官方 API 的 token 处理,让自托管行为与官方一致。开源在进一步压低自托管成本的同时,也给 OpenAI、Anthropic 等西方厂商带来价格压力。

SOURCE / AI小生意项目库 MIN / 9 ACCESS / 免费阅读 POST / 2026-10-21 02:56:15

原贴

查看原文
作者:Matthias Bastian 来源站点:the-decoder.com 原贴时间:

原文

Deepseek has open-sourced DeepInfer, its internal inference framework, under the Apache License 2.0. Inference is how a trained AI model handles requests and generates responses. DeepInfer is the serving software that lets Deepseek's V4.1-Flash model produce answers quickly at scale. The framework builds on vLLM with optimized compute kernels, distributed processing across multiple chips, and faster text generation techniques. Code for future Deepseek models will also ship as open source. Deepseek is also releasing deepseek-recipe , which replicates the token processing of the official Deepseek API so self-hosted setups behave the same way. Deepseek's models are already dirt cheap . DeepInfer fills the last gap for running them even more cheaply. The goal is "to help the community lower compute costs, reduce energy use, and make AI more affordable," the company said on X . But the release also adds pricing pressure on Western providers like OpenAI and Anthropic. Given the AI race between China and the US, the move could be politically motivated too. If Western AI companies miss their growth targets, that's a risk for the US economy and beyond. Ad Ad Subscribe to THE DECODER for ad-free reading, a weekly AI newsletter, our exclusive "AI Radar" frontier report six times a year, full archive access, and access to our comment section.

中文翻译

Deepseek 已将其内部推理框架 DeepInfer 以 Apache 2.0 许可证开源。

推理是训练好的 AI 模型处理请求并生成回答的方式。

DeepInfer 是让 Deepseek 的 V4.1-Flash 模型能够在大规模下快速产出回答的服务软件。

该框架基于 vLLM 构建,包含优化的计算内核、跨多芯片的分布式处理,以及更快的文本生成技术。

未来 Deepseek 模型的代码也将以开源形式发布。

Deepseek 还发布了 deepseek-recipe,它复刻了官方 Deepseek API 的 token 处理方式,使自托管环境的行为保持一致。

Deepseek 的模型已经非常便宜。

DeepInfer 补上了让它们运行得更便宜的最后一环。

该公司在 X 上表示,目标是“帮助社区降低算力成本、减少能耗,让 AI 更可负担”。

但这次发布也给 OpenAI 和 Anthropic 等西方提供商带来了价格压力。

考虑到中美之间的 AI 竞赛,这一举动也可能带有政治动机。

如果西方 AI 公司未能达到增长目标,这对美国经济乃至更广范围都是一种风险。

核心信息

Deepseek 以 Apache 2.0 许可证开源内部推理框架 DeepInfer,该框架基于 vLLM 并做了计算内核与分布式优化,是 V4.1-Flash 模型高并发快速出词的服务底座;同时发布 deepseek-recipe 复刻官方 API 的 token 处理,让自托管行为与官方一致。开源在进一步压低自托管成本的同时,也给 OpenAI、Anthropic 等西方厂商带来价格压力。

  • Deepseek 以 Apache 2.0 许可证开源内部推理框架 DeepInfer,该框架基于 vLLM 并做了计算内核与分布式优化,是 V4.1-Flash 模型高并发快速出词的服务底座;同时发布 deepseek-recipe 复刻官方 API 的 token 处理,让自托管行为与官方一致。开源在进一步压低自托管成本的同时,也给 OpenAI、Anthropic 等西方厂商带来价格压力。
  • 原贴提到:Deepseek has open-sourced DeepInfer, its internal inference framework, u
  • 来源:the-decoder.com

详细解读

这是什么信号

Deepseek 把自家推理框架 DeepInfer 以 Apache 2.0 开源,同时放出 deepseek-recipe 来复刻官方 API 的 token 处理。表面看是一次常规的工程开源,实质上开放的是“模型如何被高效服务”这一段——过去厂商靠它拉开成本差距,现在这段被交给了社区。

更值得注意的配套信息是:未来 Deepseek 模型的代码也将以开源形式发布。这说明开源不再只是发布权重,而是把训练之后的整条运行链一起释放。

为什么重要

推理框架决定了同样一张卡能跑多少并发、吐多少 token、耗多少电。DeepInfer 基于 vLLM 做了计算内核优化、多芯片分布式和更快的文本生成,这意味着成本曲线不是靠降价补贴压下去的,而是靠工程效率压下去的。前者不可持续,后者可以被别人复制——这才是真正的价格压力来源。

deepseek-recipe 的价值容易被低估:自托管与官方 API 行为不一致,是很多团队放弃私有化部署的实际原因。把这个差异抹平,等于把“自托管”从折腾变成可选项。

对谁有价值

  • 有算力预算压力、需要私有化部署的工程团队:直接省下推理层的调优工作。
  • 做 AI 应用层定价的创业者:底层推理成本下降会传导到你的毛利结构。
  • 关注中美 AI 竞争格局的人:开源是争夺生态位的手段,不只是技术行为。
  • 云厂商与 MaaS 服务商:需要重新评估自己推理层的溢价理由。

可以怎么行动

  1. 先在一个非核心业务上跑对照:用 DeepInfer + deepseek-recipe 复现你现在调用官方 API 的效果,重点看延迟分布和单位 token 成本,而不是只看峰值吞吐。
  2. 把“推理层可替换”写进架构假设里,避免业务代码绑死某一家 SDK。
  3. 如果成本敏感,评估自托管与 API 的盈亏平衡点,把运维人力、闲置率算进去,别只算 GPU 单价。
  4. 观察后续模型代码开源的节奏,这决定了你能不能做深度定制而非仅做部署。

风险与限制

第一,原文没有给出具体性能数字、硬件门槛和支持的模型范围,实际收益需要自己压测验证,不要拿宣传口径做容量规划。第二,Apache 2.0 解决的是许可证问题,不解决合规、数据出境和模型许可问题。第三,开源推理栈的维护成本会转移给使用方,版本跟进、算子适配、故障排查都是隐性支出。第四,原文提到的“可能带有政治动机”以及“西方公司未达增长目标会带来经济风险”属于评论性判断,不是事实陈述,引用时需要区分。第五,价格压力是趋势判断,不等于短期内所有厂商都会跟进降价。

信息差价值

这条内容的真正价值,不只是“有人发布了一个新功能”,而是它揭示了 the-decoder.com 背后的产品方向、工作流变化或竞争信号。对 OPC 来说,这种信息可以转化成持续追踪的栏目选题。

如果把《Deepseek 开源支撑其最快、最便宜 AI 模型的推理引擎》放到你的内容系统里,它最大的价值在于帮助读者更快看懂“为什么值得关注”,而不是只看到一条碎片化动态。

参考来源

AI SUMMARY

这篇文章回答了什么

Deepseek 开源支撑其最快、最便宜 AI 模型的推理引擎主要讲什么?

Deepseek 以 Apache 2.0 许可证开源内部推理框架 DeepInfer,该框架基于 vLLM 并做了计算内核与分布式优化,是 V4.1-Flash 模型高并发快速出词的服务底座;同时发布 deepseek-recipe 复刻官方 API 的 token 处理,让自托管行为与官方一致。开源在进一步压低自托管成本的同时,也给 OpenAI、An…

这篇文章最值得关注的要点是什么?

Deepseek 以 Apache 2.0 许可证开源内部推理框架 DeepInfer,该框架基于 vLLM 并做了计算内核与分布式优化,是 V4.1-Flash 模型高并发快速出词的服务底座;同时发布 deepseek-recipe 复…;原贴提到:Deepseek has open-sourced DeepInfer, its internal inference framework, u;来源:the-decoder.com

这篇文章和哪些AI专题相关?

它适合放在AI副业、AI工具专题里阅读。 关联原因:这篇内容命中「项目、小生意、变现」等主题信号。;这篇内容命中「模型」等主题信号。

阅读这篇文章建议先理解哪些关键词?

建议先理解AI工具、工具、自动化、模型、Cursor这些关键词,再结合正文判断工具、机会或风险是否值得进入自己的工作流。

上一篇 ElevenLabs 发布两款面向实时 AI 对话的语音到语音模型 下一篇 Mistral AI 发布 Voxtral 3:一套可实时听、思考、说话的全栈语音智能体
北竹游乐场 免费玩小游戏 免费玩