Skip to content

降低 D1 写入:用量更新不重写索引、额度历史去重、汇总增量重算 - #293

Merged
Moshuiwang merged 1 commit into
mainfrom
claude/cf-write-budget
Nov 7, 2026
Merged

Moshuiwang merged 1 commit into
mainfrom
claude/cf-write-budget

Conversation

@Moshuiwang

Copy link
Copy Markdown
Owner

为什么

2026-11-07 回源(等级 7):D1 写入日常 3.6~4.2 万行/天(Free 上限 10 万,36%~42%),是唯一偏紧的资源;读取 15~23%、请求 1%、存储 6%。7 天逐 SQL 明细显示 D1 把每个被 SET 触及的索引都计入写入行数。

改动与实测(本地 D1 meta.rows_written,与线上同口径)

场景 优化前 优化后
一条用量 token 变化 10 行 4 行
额度读数不变的一次上报(历史) 4 行 0 行(每小时保底 1 条供校准)
单日 rollup 重算,10 小时改 1 小时 55 行 2 行
单日 rollup 重算,无变化 15 行 0 行

预计日写入从约 4 万行降到约 1.5~1.8 万行。

验证(等级 3)

  • write-cost.test.ts 新增 8 条:写入预算 + 结果与全量一致 + 明细删除/身份变化时清掉陈旧格子 + 分批常量一致。
  • 变异:SET 加回冲突键列、历史去重关闭保底/永远不记、upsert 去掉变化条件、两处陈旧删除去掉身份匹配,均变红。
  • Worker 421;Python 815(test_signed_release 本机缺 cryptography,uv run --with cryptography 补跑 OK)。

部署后

回源复测 D1 每日写入(scripts/check_cf_usage.py + 逐 SQL 明细)。

另:本机额度采集间隔已由 5 分钟改为 30 分钟(运维配置,不在本 PR)。

🤖 Generated with Claude Code

线上 7 天明细显示 D1 写入是 Cloudflare Free 唯一偏紧的资源(日常 36%~42%)。D1 把每个
被 SET 触及的索引都计入写入行数,三处写法因此成倍放大:

- usage_hourly_facts upsert:不再 SET 冲突键列(冲突时必然相等)。token 变化的一次更新 10 → 4 行。
- limit_window_history:只在读数变化或距上一条满 1 小时时记录(保留校准采样)。不变时 4 → 0 行。
- 单日 rollup 重算:由整天 DELETE+INSERT 改为「删无明细支撑的格子 + 只更新变化的格子」,
  日的起止时刻单独、仅在不同时更新。10 小时改 1 小时:55 → 2 行;无变化:15 → 0 行。

新增 write-cost.test.ts 以本地 D1 meta.rows_written(与线上同口径、含索引)钉住预算,
并覆盖身份变化/明细删除时清掉陈旧格子;变异验证全部变红。

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
@Moshuiwang
Moshuiwang merged commit 0163376 into main Nov 7, 2026
5 checks passed
@Moshuiwang
Moshuiwang deleted the claude/cf-write-budget branch November 7, 2026 14:58
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants