跳转至

[ISSUE-0189] 两个缺陷叠在一起

Tony 实测(29,594 个组合的任务):

tab 为什么不能切换 另外为什么不按这里的顺序去采集呢

缺陷一:详情页从没读过组合表

v0.16.2 修「四十万条卡死」时,我写的是: 「有组合表数据 ⇒ 查表分页;没有 ⇒ 降级」。

实际只实现了降级那一半。 grep combo-db src/sections/task/task-detail-dialog.tsx 零命中。

⇒ 29,594 个组合的新任务(表里明明有 29,594 行)照样走降级路径, 撞上 LEGACY_FILTER_LIMIT = 20000 ⇒ 筛选和搜索被禁用。

🔴 而降级路径的规模闸本身是对的 —— 它要防的是「没有索引时全量展开」。 有表的时候根本没有这个问题:筛选是数据库的 where,分页是 limit/skip。

缺陷二(真 bug):降级路径的匹配是裸拼接

pmap.get(`${c.category}, ${c.location}, ${c.countryName}`)
  • c.location 来自 locationEntries,是 URL 形式:Adak,+AK
  • progress.keyword 来自 #searchboxinput,是搜索框形式:doctor, Adak, AK

⇒ 所有城市级组合永远对不上,只有不含 ,+ 的州级碰巧能对上。

截图实证完全吻合:

doctor · AK ✅ 已采集 9
doctor · Adak,+AK 及其后所有城市级 ⏳ 待采集
顶部「已采集」 11(真实数,来自 progress.length)

⇒ 用户看到的是「只采了第一条就跳着走了」,而真相是10 条标不出来。

🔴 而正确的归一实现当时就在仓库里 —— combo-backfill.ts 的 expectedKeyword / normKeyword(v0.16.4 写的,做了 cleanLocationSegment + ,+ → , 的转换)。详情页没用它。

同一个仓库里有两份做同一件事的代码,只有一份是对的 —— 这比没有那份对的更坏, 因为它让人以为「这个问题已经解决了」。

修法

  1. 表优先:comboStatsOfTask / combosPage —— 结构化字段,不需要任何字符串匹配
  2. huge 只约束降级路径(!fromTable && ...)
  3. 降级路径复用 expectedKeyword / normKeyword,两边都归一

顺带:「净增 0」不是没搜到

Tony 同一批实测:

两个相同任务 为什么前边有数据 后边没数据 直接调用缓存 不应该也是有数据吗

是去重。 同样的关键词+地区搜回同样的商家,而「完全重复的商家」默认过滤 (advParms: ['deleteRepeat'])⇒ 新增为 0。

这个数字叫「净增」,但光靠名字说不清楚 —— 详情页现在会直说: 「已经搜了 4 个组合,但净增 0 —— 多半是这些商家之前已经采过了」。