OpenAI部署GPT-5.6优化自身推理性能,端到端服务成本降低20%

来源:IT之家 时间:2026-07-30 14:22:15


(资料图)

IT之家 7 月 30 日消息,OpenAI 公司昨日(7 月 29 日)发布博文,宣布通过 GPT-5.6 Sol 模型,来优化 GPT-5.6 系列模型本身 AI 推理链路,端到端服务成本最多降低 20%。

OpenAI 于 7 月 9 日推出其最强 AI 模型 GPT-5.6 系列,在后续的架构优化过程中,官方团队利用 GPT-5.6 Sol 模型来优化自身运行效率,降低计算成本、提高 GPU 利用效率。

OpenAI 公司称,系统会按地域、可用容量和加速器类型分配请求;集群内部还会参考负载、上下文长度、缓存可用性等因素分发任务。GPT‑5.6 Sol 通过 Codex 分析生产流量、识别负载失衡来源、测试路由策略并调整启发式规则。

在模型前向传播环节,GPT‑5.6 Sol 识别可预计算、可避免或可并行的工作,并通过 Codex 自主改写和优化生产环境中的 GPU 内核。IT之家附上相关截图如下:

团队让 GPT-5.6 Sol 模型学习 Triton 和 Gluon 两种编程语言,让模型据此优化推理引擎内核,使生产环境 GPU 内核带来的端到端服务成本最多降低 20%。

OpenAI 还使用开源工具 FpSan(浮点数清理器)验证 GPT‑5.6 Sol 编写内核的正确性。

OpenAI 还让 GPT-5.6 Sol 优化推测性解码(speculative decoding)。这项推理加速技术由较小的草稿模型预测下一个 token,再由主模型验证或修正预测结果。OpenAI 在 2026 年 7 月 29 日的公开帖文中称,改进后 token 生成效率提升超过 15%。

X 关闭

OpenAI部署GPT-5.6优化自身推理性能,端到端服务成本降低20%

OpenAI部署GPT-5 6优化自身推理性能,端到端服务成本降低20%,推理,gpt,

2026-07-30

广州仟广味食品有限公司成立 注册资本1万人民币

天眼查App显示,近日,广州仟广味食品有限公司成立,法定代表人为田瑞

2026-07-30

快资讯丨历史包袱厘清,ST际华立足主业向“新”而行

7月29日晚间,ST际华(601718)发布关于收到中国证监会《行政处罚决定

2026-07-30

每日快讯!贵阳首个“咖啡+沉浸式戏剧”跨界活动启动,免费开放至8月2日

7月28日,贵阳首届艺厂咖啡戏剧节在多彩贵州城1958文创园拉开帷幕。本

2026-07-30

最新资讯:湖人追库明加不顺 备选库兹马

湖人追库明加不顺备选库兹马,哈迪,老鹰,雄鹿队,湖人球员,凯尔·库兹马,

2026-07-30

南城县老张古建木材销售部(个体工商户)成立 注册资本5万人民币|今日关注

天眼查App显示,近日,南城县老张古建木材销售部(个体工商户)成立,

2026-07-30

7月29日红利ETF工银基金份额增加900万份,重仓股宁德时代、美的集团、格力电器

证券之星消息,7月29日,红利ETF工银基金(159905)最新份额为11 71亿

2026-07-30

前沿资讯!新股消息 | 欣旺达(300207.SZ)港股IPO招股书失效

欣旺达电子股份有限公司(简称:欣旺达,300207 SZ)于2026年1月30日所递

2026-07-30

微头条丨7月29日科创综指ETF华夏基金份额增加2000万份,重仓股寒武纪、海光信息、中微公司

证券之星消息,7月29日,科创综指ETF华夏基金(589000)最新份额为10 0

2026-07-30

小法:尼科-帕斯将在8月17日归队,预计不会踢对利物浦的比赛-焦点

小法:尼科-帕斯将在8月17日归队,预计不会踢对利物浦的比赛,利物浦,阿

2026-07-30

Copyright ©   2015-2023 今日科技网版权所有  备案号:沪ICP备2023005074号-40   联系邮箱:5 85 59 73 @qq.com