跳转至

ISSUE-0216 主线程被 53MB 快照霸占

症状(Tony 实测 v0.16.37,87,563 行商家库)

  1. 点「清空全部」→ 确认框停在「正在统计要清空的条数…(已等待 133 秒)」
  2. 商家列表 30-60 秒才刷新出来,出来后显示「第 1-20 条 / 共 50080 条」(左侧总数 87,563)
  3. 创建任务卡半天
  4. 顶部数据条出得很慢

🔴 实测数据(主控在 Tony 那台机器的扩展页里直接跑的原生 IndexedDB 探针)

探针绕开 jsstore,直接用原生 indexedDB API,所以量到的是「IDB 本身 + 回调排队」。

① 数据库本身毫秒级

indexedDB.open('laifaxin') → objectStore('MapTaskData').count()
  → 87,563 行,479 ms

⇒ 用户等的 133 秒里,132.5 秒不是数据库在算。

② 慢的不是行数,是「是不是第一个发出的」

同一组查询,只换执行顺序:

轮次 先跑 耗时 后跑 耗时
第一轮 status=2(77 行) 45,056 ms status=0(50,000 行) 739 ms
第二轮 status=0(50,000 行) 40,116 ms status=2(77 行) 4 ms

77 行花 45 秒,5 万行花 0.7 秒。 行数不解释任何事情 —— 第一个请求的 onsuccess 回调在等主线程腾出手,等了 40 余秒;主线程一空,后续请求 4 毫秒就完。

③ 连续采样:主线程是间歇性可用的

每 2 秒发一次全表 count(),记录每次耗时(毫秒):

t=0 ms        → 33,163 ms
t=35,163 ms   →      90 ms   ← 漏出一个窗口
t=37,255 ms   → 58,732 ms
t=97,987 ms   → 60,469 ms
t=160,456 ms  →      86 ms   ← 又一个窗口
t=162,543 ms  → 58,148 ms
t=222,691 ms  → 60,240 ms

⇒ 不是「一直慢」,是约 60 秒一个周期:主线程被占住 58-60 秒, 中间漏出一个 90 毫秒的缝。7 次采样里只有 2 次撞进那道缝。

🔴 60 秒 vs 30 秒这个比值是关键:处理一轮快照要约 60 秒, 而 pollingInterval 是 30 秒 —— 它在上一轮还没处理完时就重新拉一次。 队列因此永远不空,用户的任何操作都排在后面。 这不是「大库下慢一点」,是正反馈:数据越多,一轮越久,重叠越深。

④ 那一轮重活有多大

同一次探针顺手量到的:单个 scrape_status 窗口 getAll(status, 50000) 的返回值

50,000 行 → JSON.stringify(...).length = 53,379,299 字节(53.4 MB),1,068 字节/行

🔴 订正:不是一个轮询,是三个在抢同一条队列

本文初稿把根因写窄了,只点名 fetchRowsSnapshot 的 30 秒轮询。 执行方(briefs/fixQueueStarvation.txt)的 P_CHECK ③ 推翻了那个解释:

ahooks 的 pollingInterval 是请求完成后再等 N 毫秒,不是从请求开始固定周期重叠触发。

⇒ 若只有那一个轮询,形态应是「忙 60 秒 + 闲 30 秒」,采样该撞到大量快速响应; 而实测占用率接近 100%。说明还有别的在占。

grep -rn "pollingInterval" src/ 枚举出 35 处。数据页上同时活跃、 且走同一条 jsstore 串行队列的是这三个:

位置 间隔 拉什么 单次代价
src/sections/data/data-view.tsx:406 30 s fetchRowsSnapshot 三个 50k 窗 53.4 MB(实测)
src/sections/data/data-view.tsx:556 5 s countAllData() 全表 count(商家 Tab 徽标) 479 ms(实测)
src/sections/layout/main-layout.tsx:117 5 s getDataCounts()(侧栏 4 个子菜单计数,含两次 5 万行采样) 1.1 s 起(见 0212-clear-dialog-waited-for-a-sampling-aggregate)

光后两个:1.58 秒 / 每 5 秒 ≈ 32% 常驻占用。 再叠上 60 秒的快照处理 —— 期间这两个各积压 12 次,快照一完就有约 19 秒积压要还, 然后下一轮快照又启动。这才是占用率接近 100% 的机制。

(main-layout.tsx:105 的 3 秒 taskListItem.getValue() 与 data-view.tsx:423 的 5 秒 pageLogItem.getValue() 走 storage 不走 jsstore,不在此列。)

🔴 教训(第二层):我拿到实测数据之后仍然只解释了一个轮询, 因为那是我先入为主盯着的那个。量对了不等于看全了 —— 数据说「占用率 100%」,而我的单轮询模型只能解释 66%, 这个差额本该当场让我去枚举,是执行方的 P_CHECK 把它逼出来的。

根因链(每一环都有上面的实测支撑)

src/sections/data/data-view.tsx  商家列表的 useRequest
   pollingInterval: 30 * 1000
        ↓ 每 30 秒
src/utils/fetch-rows-snapshot.ts  Promise.all 三个 selectByQuery(limit 50000)
        ↓
   53.4 MB 进内存 → structuredClone → React state → 87k 行 filter/sort/paginate → DataGrid
        ↓
   主线程连续数十秒不可用
        ↓
   任何别的回调(清空的 countAllData、创建任务写库、任务计数)排队 33-58 秒

🔴 主控走过的三条弯路(写下来是因为每一条都花了一个版本)

猜测 版本 怎么被推翻的
①「是数据量大,87k 本来就慢」 — Tony 指出 v0.16.29 同样 87k 能秒开第一页、翻到 1170 页
②「是 base.ts 的 Proxy」 v0.16.33→36 拆掉 Proxy(v0.16.36)症状依旧 ⇒ 它从头到尾不是根因,见 0217-i-shipped-a-proxy-my-executor-told-me-was-unproven
③「是统计链的索引游标」 v0.16.32→37 回滚统计链(v0.16.37)症状依旧
④「冷启动 vs 热缓存」 — 本文的③号采样推翻:同一个已加载的页面里,主线程是间歇性可用的,不是「冷完就热」

四次都是猜,没有一次是量出来的。 第五次(本文)是量出来的,前后只花了十几分钟 ——indexedDB 探针在扩展页里直接跑,Control_Chrome 执行 JS 即可。

⇒ 教训:能在用户机器上跑探针的时候,不要在源码里推理。

判据(修这个 issue 的刀必须钉住,缺一条不许放行)

前四条是 0215-quick-mode-loaded-the-whole-db 写死的(主控在 v0.16.34 改这块时砸坏过三处, 判据只覆盖了「首屏不拉全表」,没有一条断言依赖方还能用):

  1. 大库下顶部数据条仍有数据(merchantStats 链路不动)
  2. 大库下官网/邮箱/手机三个派生列表仍能出数(它们全部从 rows 派生)
  3. 大库下商家列表首屏能出数 —— 不是「不转圈但空白」
  4. 小库下轮询间隔仍是 30 秒(不牺牲实时性)
  5. (本 issue 的目的) 大库下,在一轮快照正在跑时入队的一次 countAllData(), 等待时间有明确上界的断言。不许只改调度然后声称「应该快了」。

每条都要有破坏构造。

修法与验收(已随 v0.16.38 落地;2026-09-23 收口翻 fixed,见 3a17019)

三处轮询改用同一个 createAdaptivePollScheduler / useAdaptivePollingRequest:

  • 下次间隔统一为 max(原基线, 上轮完整墙钟 × 3)。完整墙钟包含请求在 jsstore FIFO 中的等待时间,拥塞越重,下一轮退让越久。
  • fetchRowsSnapshot 保留 30 秒基线;countAllData 与 getDataCounts 保留 5 秒基线。小库请求低于 1 秒时,三个原间隔不变。
  • 同一轮请求未完成时不会再启动轮询副本;手动刷新与 maps-data-updated 事件在运行中只合并成一次紧随刷新。
  • 三窗查询、getDataCounts / merchantStats 的计算内容、jsstore connection 均未改。

行为判据覆盖顶部非零计数、官网/邮箱/手机三张非空派生列表、50,001 行商家第一页 20 行、小库三处原间隔,以及 60 秒快照中入队一次 count 的 61 秒完成上界。定向验证为 6 files / 49 tests: pnpm exec vitest run tests/phone-list-columns.test.ts tests/data-polling-adaptive.test.ts tests/data-polling-surfaces.test.tsx tests/data-polling-wiring.test.ts tests/fetch-rows-snapshot.test.ts tests/merchant-stats-truncated.test.ts --pool=threads --poolOptions.threads.minThreads=1 --poolOptions.threads.maxThreads=2

五组破坏构造分别把顶部 total 归零、官网派生置空、client 首屏置空、删除基线下限、删除耗时退让;每组均得到 1 条失败,还原后复绿。全量验证为 166 files / 2647 tests,命令: pnpm exec vitest run --pool=threads --poolOptions.threads.minThreads=1 --poolOptions.threads.maxThreads=2 部署版本:N/A,本任务明确禁止 commit / build / push,issue 保持 in-progress 直到主控发布。

复现探针(留档,下次直接贴进扩展页 Console)

(async () => {
  const db = await new Promise((res, rej) => {
    const q = indexedDB.open('laifaxin');
    q.onsuccess = () => res(q.result); q.onerror = () => rej(q.error);
  });
  const t0 = performance.now();
  for (let i = 0; i < 45; i++) {
    const t = performance.now();
    await new Promise((res, rej) => {
      const r = db.transaction('MapTaskData','readonly').objectStore('MapTaskData').count();
      r.onsuccess = () => res(r.result); r.onerror = () => rej(r.error);
    });
    console.log(Math.round(t - t0), Math.round(performance.now() - t));
    await new Promise(r => setTimeout(r, 2000));
  }
})();

第二列若出现数万毫秒,就是主线程被占住了 —— 而 count() 本身只要几百毫秒。