token 账本与预算工程 · token budget
很多人看到 API 账单大,第一反应是"少用点"。但同一段对话,三种计价方式价格能差 10 倍:
token 数你很难压(任务决定),单价是厂商定的,唯一能控的是计价系数:缓存命中能打到 0.1 折,批量通道能打 5 折,直接调用是 1 倍。同一个任务,选对计价方式,账单直接砍到 1/10。
主流编程 API 给三种计价通道,适用场景不同:
下面这个计算器把三种计价并排:输入你的任务,看三种方式各花多少、能省多少。
缓存不是"自动生效",它要求前缀逐字相同。所以上下文要按"可缓存 → 不可缓存"排序:
把变动内容放前面、固定内容放后面,缓存全失效;反过来,缓存命中率从 0% 拉到 80%+,账单直接砍到 1/5。这是零成本降本——只改顺序,不改用量。