值守: 狂气读数进报告 + 堵住测试往报告目录写假记录
一、狂气读数写进 JSON(原先只在 convert.log 文本里) 报告加 lunacy_before / lunacy_after / lunacy_checked 三个字段。 值守看的是报告, 而"前后读数是否一致"恰恰是最该一眼看到的一项。 modules_status.py 据此多了一栏: 一致显示 "N 前后一致", 没比对上明写 "未比对", 告警显示 "⚠️ A -> B"; 开头统计也加了"未比对 N 轮"。 二、⛔ 测试在往真实报告目录里写假记录(实测已产生 7 条) EnkephalinGateTest 调 cm.main() 时没指 --report-dir, 于是往 ~/lc_mcp/modules/convert_*.json 里写了一批 elapsed_s=0、内容为 "读不到体力读数"的记录。值守翻报告时会以为真出过这些事。 日志那边上次用 QuietLogMixin 堵住了, 报告这边漏了 —— 同一类问题的另一面。 修法: main() 调用一律带 --report-dir 指向临时目录; 再加一条 AST 检查 (NoRealReportPollutionTest), 以后谁再漏就红。 已清掉那 7 条假记录, 验证: 跑完测试报告数 6 -> 6 不变。 三、实跑汇总立刻见效: 现有 6 份报告全部显示"未比对" —— 因为它们都是 "LUNACY 被 OCR 读成 UNACY"那个 bug 修好之前跑的, 等于没校过。这正是 这一栏存在的意义: 把"看起来校过了"和"真的校过了"分开。 全套 282/282 通过。
This commit is contained in:
@@ -59,5 +59,45 @@ class SummarizeTest(unittest.TestCase):
|
|||||||
self.assertEqual(ms.fmt_secs(None), '-')
|
self.assertEqual(ms.fmt_secs(None), '-')
|
||||||
|
|
||||||
|
|
||||||
|
class LunacyColumnTest(unittest.TestCase):
|
||||||
|
"""狂气读数要进报告, 并在汇总里单列一栏。
|
||||||
|
|
||||||
|
JSON 里原先只有一句 result 文本, 狂气读数只留在 convert.log 里 —— 值守看的是
|
||||||
|
报告, 而"前后读数是否一致"恰恰是最该一眼看到的一项。
|
||||||
|
"""
|
||||||
|
|
||||||
|
def test_checked_run_shows_agreement(self):
|
||||||
|
r = ms.summarize([{'started': 'x', 'ok': True, 'result': 'r', 'elapsed_s': 10,
|
||||||
|
'lunacy_before': 9699, 'lunacy_after': 9699,
|
||||||
|
'lunacy_checked': True}])[0]
|
||||||
|
self.assertTrue(r['lunacy_checked'])
|
||||||
|
self.assertIn('9699', ms.lunacy_cell(r))
|
||||||
|
|
||||||
|
def test_unchecked_run_says_so(self):
|
||||||
|
r = ms.summarize([{'started': 'x', 'ok': True, 'result': 'r', 'elapsed_s': 10,
|
||||||
|
'lunacy_before': None, 'lunacy_after': 9699,
|
||||||
|
'lunacy_checked': False}])[0]
|
||||||
|
self.assertFalse(r['lunacy_checked'])
|
||||||
|
# 不能装作校过了
|
||||||
|
self.assertEqual(ms.lunacy_cell(r), '未比对')
|
||||||
|
|
||||||
|
def test_alarm_is_visible_in_the_cell(self):
|
||||||
|
r = ms.summarize([{'started': 'x', 'ok': False,
|
||||||
|
'result': '⚠️ 狂气读数发生变化 9699 -> 6300, 立即停止并人工核查',
|
||||||
|
'elapsed_s': 10, 'lunacy_before': 9699, 'lunacy_after': 6300,
|
||||||
|
'lunacy_checked': True}])[0]
|
||||||
|
self.assertTrue(r['lunacy_alarm'])
|
||||||
|
self.assertIn('⚠️', ms.lunacy_cell(r))
|
||||||
|
|
||||||
|
def test_old_reports_without_the_field_are_inferred(self):
|
||||||
|
# 老报告没有 lunacy_checked, 要按读数推
|
||||||
|
r = ms.summarize([{'started': 'x', 'ok': True, 'result': 'r', 'elapsed_s': 10,
|
||||||
|
'lunacy_before': 6636, 'lunacy_after': 6636}])[0]
|
||||||
|
self.assertTrue(r['lunacy_checked'])
|
||||||
|
r2 = ms.summarize([{'started': 'y', 'ok': True, 'result': 'r',
|
||||||
|
'elapsed_s': 10}])[0]
|
||||||
|
self.assertFalse(r2['lunacy_checked'])
|
||||||
|
|
||||||
|
|
||||||
if __name__ == '__main__':
|
if __name__ == '__main__':
|
||||||
unittest.main()
|
unittest.main()
|
||||||
|
|||||||
Reference in New Issue
Block a user