Skip to content
AI

为什么我在 AI 工作流上线之前无法预知其成本?

85

机会

2025 年,尽管每 token 价格下降了约 1,000 倍,企业 AI 推理支出仍增长了 3.2 倍,驱动因素包括代理循环、上下文窗口膨胀和常驻监控代理。一个每次调用费用为 $0.06、每分钟重试 1,000 次的失控代理,单日即可产生 $86,400 的支出。现有的云 FinOps 工具对此无能为力,因为推理成本取决于语义输入长度、工具调用放大效应和循环深度,而这些在规划阶段均无法预知。目前没有针对 LLM 工作流的标准预生产成本估算工具,CFO 也无法将 AI 推理费用建模为可预测的预算项。

为什么重要

如果在上线前没有可信赖的成本模型,每一款 AI 产品都将是预算彩票,而非真正的商业产品。

我如何评估机会

机会评分是我的个人判断,而非量化指标:痛苦程度、发生频率,以及当前解决方案的匮乏程度。分数越高,意味着我认为越值得去构建。

严重性8/10

出现时造成的痛苦程度。

频率9/10

人们实际遇到它的频率。

空白空间8/10

当前针对它的优质工具有多匮乏。

更多值得解决的问题