S
SkillNav

IBM 等向 CNCF 捐赠 Kubernetes LLM 推理框架

深度The New Stack2026年3月24日4 分钟阅读
IBM 等向 CNCF 捐赠 Kubernetes LLM 推理框架
IBM、红帽和谷歌将开源框架 llm-d 捐赠给 CNCF，这是一个基于 Kubernetes 的分布式推理框架，旨在让大语言模型推理成为云原生的一等公民。
本文编译自 IBM, Red Hat, and Google just donated a Kubernetes blueprint for LLM inference to the CNCF，版权归原作者所有。

觉得有用？分享给更多人

获取每周 AI 工具精选

工具推荐、实战教程和生态洞察，每周更新。

关注 @skillnav_dev →阅读周刊

相关文章

决策模型扎堆发布，OpenAI 的 Decisions API 开放公测

OpenAI 的 Decisions API 进入公测并加入图像输入，能在文本或图像上输出谓词、选项、分数三类结构化结果，模型跑在 GPT-6 Luna 上，按每百万输入 token 0.10 美元计费。Perplexity、Cloudflare、Amazon 也在本月发布了各自的开放权重决策模型，可下载自部署。OpenAI 坚持托管 API 的做法，可能成为开发者选型的关键差异。

深度The New Stack·10月7日·4 分钟

Claude Haiku 5.5 发布：价格对齐 GPT-6 Luna，订阅送 API 额度

Haiku 5.5 定价 $0.10/$0.50 每百万 token（10 万 token 内），超过后涨价 5 倍；但新分词器让相同提示词多消耗约 1.25 倍 token，存在隐性涨价。Anthropic 同时将 Sonnet 5.5 的缓存读取价格减半，并为 Max 和 Team 订阅用户提供每月 API 额度。

深度Simon Willison·10月7日·4 分钟

评论