跳转至

[ISSUE-0187] 判据看起来在测,其实没测

v0.16.0 / v0.16.1 两刀里,变异验证一共抓出三条我自己写的假判据。 三条的形态各不相同,值得分开记 —— 它们是三种不同的自欺方式。

形态一:必要条件冒充充分条件

// 想测「转义顺序不能反」,写的是:
expect(comboKeyOf('a\\', 'b', 'US')).not.toBe(comboKeyOf('a', '\\b', 'US'));

把顺序改反 ⇒ 13 条判据全绿。

因为「两个不同输入的 key 不相等」对正确实现和错误实现都成立 —— 它是必要条件,不是充分的。

🔴 修法:暴力搜 10³ 组输入,找到错误实现真正会碰撞的那一对 (("", "\", "|") 与 ("", "|\", ""),共 73 处碰撞),判据踩在它上面。

要抓住某个具体错误,判据必须踩在那个错误真正会出错的输入上。

形态二:只测了一条分支

buildTaskCombos 有两条互斥路径(多国 locationEntries / 单国 locations)。 「组合保留原始 location」我只测了单国路径 ⇒ 把多国路径改坏,48 条全绿。

同一天同一个函数上还犯了第二次:CASES 矩阵里「多国」全用 searchCountry: 'name'、 「iso2」全是单国 ⇒ 矩阵缺了「多国 + iso2」那一格 ⇒ 把多国路径的 searchCountry 判断写死,也全绿。

有 N 条互斥分支就要测 N 条。测一条等于只测了 1/N,而判据数量看不出这件事。

🔴 形态三:测试值选在被测函数的恒等点上(最隐蔽)

补形态二时我加了这条:

location: 'Nagoya,+Aichi Ken'
expect(buildTaskCombos(multi, SETTINGS)[0].location).toBe('Nagoya,+Aichi Ken');

变异(改成存 cleanLocationSegment(...) 的值)照样全绿。

因为 cleanLocationSegment 只去掉前后的 [,+\s], 而 'Nagoya,+Aichi Ken' 前后本来就没有 —— 对它来说 clean 是恒等函数。

⇒ 判据写对了、分支覆盖到了、变异也确实改了代码,但输入选在了两种实现输出相同的那个点上。

改成 ',+Nagoya,+Aichi Ken,+' 才抓住。

判据必须踩在被测函数真正会动手的输入上,否则它只是看起来在测。

为什么这三条都是变异验证抓的

它们全部通过了「写完跑一遍,绿了」这道检查 —— 因为判据本来就是绿的。 只有把代码改坏之后再跑,才看得出「它绿得没有道理」。

⇒ 本仓「每条判据必做变异验证」这条规矩,这一天兑现了三次。