ISSUE-0216 主线程被 53MB 快照霸占¶
症状(Tony 实测 v0.16.37,87,563 行商家库)¶
- 点「清空全部」→ 确认框停在「正在统计要清空的条数…(已等待 133 秒)」
- 商家列表 30-60 秒才刷新出来,出来后显示「第 1-20 条 / 共 50080 条」(左侧总数 87,563)
- 创建任务卡半天
- 顶部数据条出得很慢
🔴 实测数据(主控在 Tony 那台机器的扩展页里直接跑的原生 IndexedDB 探针)¶
探针绕开 jsstore,直接用原生 indexedDB API,所以量到的是「IDB 本身 + 回调排队」。
① 数据库本身毫秒级¶
⇒ 用户等的 133 秒里,132.5 秒不是数据库在算。
② 慢的不是行数,是「是不是第一个发出的」¶
同一组查询,只换执行顺序:
| 轮次 | 先跑 | 耗时 | 后跑 | 耗时 |
|---|---|---|---|---|
| 第一轮 | status=2(77 行) |
45,056 ms | status=0(50,000 行) |
739 ms |
| 第二轮 | status=0(50,000 行) |
40,116 ms | status=2(77 行) |
4 ms |
77 行花 45 秒,5 万行花 0.7 秒。 行数不解释任何事情 ——
第一个请求的 onsuccess 回调在等主线程腾出手,等了 40 余秒;主线程一空,后续请求 4 毫秒就完。
③ 连续采样:主线程是间歇性可用的¶
每 2 秒发一次全表 count(),记录每次耗时(毫秒):
t=0 ms → 33,163 ms
t=35,163 ms → 90 ms ← 漏出一个窗口
t=37,255 ms → 58,732 ms
t=97,987 ms → 60,469 ms
t=160,456 ms → 86 ms ← 又一个窗口
t=162,543 ms → 58,148 ms
t=222,691 ms → 60,240 ms
⇒ 不是「一直慢」,是约 60 秒一个周期:主线程被占住 58-60 秒, 中间漏出一个 90 毫秒的缝。7 次采样里只有 2 次撞进那道缝。
🔴 60 秒 vs 30 秒这个比值是关键:处理一轮快照要约 60 秒,
而 pollingInterval 是 30 秒 —— 它在上一轮还没处理完时就重新拉一次。
队列因此永远不空,用户的任何操作都排在后面。
这不是「大库下慢一点」,是正反馈:数据越多,一轮越久,重叠越深。
④ 那一轮重活有多大¶
同一次探针顺手量到的:单个 scrape_status 窗口 getAll(status, 50000) 的返回值
🔴 订正:不是一个轮询,是三个在抢同一条队列¶
本文初稿把根因写窄了,只点名 fetchRowsSnapshot 的 30 秒轮询。
执行方(briefs/fixQueueStarvation.txt)的 P_CHECK ③ 推翻了那个解释:
ahooks 的
pollingInterval是请求完成后再等 N 毫秒,不是从请求开始固定周期重叠触发。
⇒ 若只有那一个轮询,形态应是「忙 60 秒 + 闲 30 秒」,采样该撞到大量快速响应; 而实测占用率接近 100%。说明还有别的在占。
grep -rn "pollingInterval" src/ 枚举出 35 处。数据页上同时活跃、
且走同一条 jsstore 串行队列的是这三个:
| 位置 | 间隔 | 拉什么 | 单次代价 |
|---|---|---|---|
src/sections/data/data-view.tsx:406 |
30 s | fetchRowsSnapshot 三个 50k 窗 |
53.4 MB(实测) |
src/sections/data/data-view.tsx:556 |
5 s | countAllData() 全表 count(商家 Tab 徽标) |
479 ms(实测) |
src/sections/layout/main-layout.tsx:117 |
5 s | getDataCounts()(侧栏 4 个子菜单计数,含两次 5 万行采样) |
1.1 s 起(见 0212-clear-dialog-waited-for-a-sampling-aggregate) |
光后两个:1.58 秒 / 每 5 秒 ≈ 32% 常驻占用。 再叠上 60 秒的快照处理 —— 期间这两个各积压 12 次,快照一完就有约 19 秒积压要还, 然后下一轮快照又启动。这才是占用率接近 100% 的机制。
(main-layout.tsx:105 的 3 秒 taskListItem.getValue() 与 data-view.tsx:423 的
5 秒 pageLogItem.getValue() 走 storage 不走 jsstore,不在此列。)
🔴 教训(第二层):我拿到实测数据之后仍然只解释了一个轮询, 因为那是我先入为主盯着的那个。量对了不等于看全了 —— 数据说「占用率 100%」,而我的单轮询模型只能解释 66%, 这个差额本该当场让我去枚举,是执行方的 P_CHECK 把它逼出来的。
根因链(每一环都有上面的实测支撑)¶
src/sections/data/data-view.tsx 商家列表的 useRequest
pollingInterval: 30 * 1000
↓ 每 30 秒
src/utils/fetch-rows-snapshot.ts Promise.all 三个 selectByQuery(limit 50000)
↓
53.4 MB 进内存 → structuredClone → React state → 87k 行 filter/sort/paginate → DataGrid
↓
主线程连续数十秒不可用
↓
任何别的回调(清空的 countAllData、创建任务写库、任务计数)排队 33-58 秒
🔴 主控走过的三条弯路(写下来是因为每一条都花了一个版本)¶
| 猜测 | 版本 | 怎么被推翻的 |
|---|---|---|
| ①「是数据量大,87k 本来就慢」 | — | Tony 指出 v0.16.29 同样 87k 能秒开第一页、翻到 1170 页 |
②「是 base.ts 的 Proxy」 |
v0.16.33→36 | 拆掉 Proxy(v0.16.36)症状依旧 ⇒ 它从头到尾不是根因,见 0217-i-shipped-a-proxy-my-executor-told-me-was-unproven |
| ③「是统计链的索引游标」 | v0.16.32→37 | 回滚统计链(v0.16.37)症状依旧 |
| ④「冷启动 vs 热缓存」 | — | 本文的③号采样推翻:同一个已加载的页面里,主线程是间歇性可用的,不是「冷完就热」 |
四次都是猜,没有一次是量出来的。 第五次(本文)是量出来的,前后只花了十几分钟
——indexedDB 探针在扩展页里直接跑,Control_Chrome 执行 JS 即可。
⇒ 教训:能在用户机器上跑探针的时候,不要在源码里推理。
判据(修这个 issue 的刀必须钉住,缺一条不许放行)¶
前四条是 0215-quick-mode-loaded-the-whole-db 写死的(主控在 v0.16.34 改这块时砸坏过三处, 判据只覆盖了「首屏不拉全表」,没有一条断言依赖方还能用):
- 大库下顶部数据条仍有数据(
merchantStats链路不动) - 大库下官网/邮箱/手机三个派生列表仍能出数(它们全部从
rows派生) - 大库下商家列表首屏能出数 —— 不是「不转圈但空白」
- 小库下轮询间隔仍是 30 秒(不牺牲实时性)
- (本 issue 的目的) 大库下,在一轮快照正在跑时入队的一次
countAllData(), 等待时间有明确上界的断言。不许只改调度然后声称「应该快了」。
每条都要有破坏构造。
修法与验收(已随 v0.16.38 落地;2026-09-23 收口翻 fixed,见 3a17019)¶
三处轮询改用同一个 createAdaptivePollScheduler / useAdaptivePollingRequest:
- 下次间隔统一为
max(原基线, 上轮完整墙钟 × 3)。完整墙钟包含请求在 jsstore FIFO 中的等待时间,拥塞越重,下一轮退让越久。 fetchRowsSnapshot保留 30 秒基线;countAllData与getDataCounts保留 5 秒基线。小库请求低于 1 秒时,三个原间隔不变。- 同一轮请求未完成时不会再启动轮询副本;手动刷新与
maps-data-updated事件在运行中只合并成一次紧随刷新。 - 三窗查询、
getDataCounts/merchantStats的计算内容、jsstore connection 均未改。
行为判据覆盖顶部非零计数、官网/邮箱/手机三张非空派生列表、50,001 行商家第一页 20 行、小库三处原间隔,以及 60 秒快照中入队一次 count 的 61 秒完成上界。定向验证为 6 files / 49 tests:
pnpm exec vitest run tests/phone-list-columns.test.ts tests/data-polling-adaptive.test.ts tests/data-polling-surfaces.test.tsx tests/data-polling-wiring.test.ts tests/fetch-rows-snapshot.test.ts tests/merchant-stats-truncated.test.ts --pool=threads --poolOptions.threads.minThreads=1 --poolOptions.threads.maxThreads=2
五组破坏构造分别把顶部 total 归零、官网派生置空、client 首屏置空、删除基线下限、删除耗时退让;每组均得到 1 条失败,还原后复绿。全量验证为 166 files / 2647 tests,命令:
pnpm exec vitest run --pool=threads --poolOptions.threads.minThreads=1 --poolOptions.threads.maxThreads=2
部署版本:N/A,本任务明确禁止 commit / build / push,issue 保持 in-progress 直到主控发布。
复现探针(留档,下次直接贴进扩展页 Console)¶
(async () => {
const db = await new Promise((res, rej) => {
const q = indexedDB.open('laifaxin');
q.onsuccess = () => res(q.result); q.onerror = () => rej(q.error);
});
const t0 = performance.now();
for (let i = 0; i < 45; i++) {
const t = performance.now();
await new Promise((res, rej) => {
const r = db.transaction('MapTaskData','readonly').objectStore('MapTaskData').count();
r.onsuccess = () => res(r.result); r.onerror = () => rej(r.error);
});
console.log(Math.round(t - t0), Math.round(performance.now() - t));
await new Promise(r => setTimeout(r, 2000));
}
})();
第二列若出现数万毫秒,就是主线程被占住了 —— 而 count() 本身只要几百毫秒。