问:本周大模型价格又降了,是不是厂商在纯烧钱?
不完全是。烧钱确实有,但更关键的是底层成本结构变了。近期多个头部厂商将API输入价格压到每百万tokens不到一元,表面看像“自杀式”定价,实则背后依赖的是AI词元服务器的高密度部署。传统通用服务器跑推理,GPU利用率常卡在30%以下;而新一代词元服务器通过定制网卡和高速互联,把单机吞吐拉高数倍。单位token的算力成本下降,才是降价的直接底气。
问:IDC行业在这轮价格战里扮演什么角色?
IDC不再是单纯“卖机柜”。大模型推理对带宽和网络软件极度敏感——每次对话都要跨节点同步KV Cache,如果网络抖动1毫秒,用户体验就会明显卡顿。近期华东、华南多个智算中心开始部署RDMA over Ethernet和可编程网卡,把东西向流量时延压到微秒级。同时,网络软件定义带宽切片,让推理任务和训练任务共享物理链路但不互相抢带宽。IDC从“包租公”变成“算力调度商”,按token量计费的模式正在试点。
问:商业化进展到底如何?价格战能持续吗?
本周某云厂商披露,其大模型API日调用量突破万亿tokens,其中60%来自企业客户而非个人试用。这说明商业化在加速,但利润极薄。价格战不会无限打下去——当每百万tokens价格逼近电费加带宽的边际成本时,厂商必须靠规模效应和网络软件优化挤出利润。预计未来三个月,竞争焦点会从“每token单价”转向“每瓦特token吞吐”和“端到端延迟”。对于IDC和服务器供应商,谁能帮客户把带宽成本再降30%,谁就能拿到下一轮订单。
总结:价格战是表象,AI词元服务器、IDC带宽和网络软件才是决定谁能活下来的底牌。别只看价格数字,要看每token背后的物理效率。


0 留言