⛔ 修掉 18:03 那轮的失败: OCR 合并行导致认不出免费页签, 整轮拒绝合成
现象: 18:03 计划任务跑了 123s, LastResult=1, 报告写
"合成未成功: 确认不在 Modules(免费合成)页签, 为安全起见不合成" —— 体力有 54 点,
一个模块都没换到。安全方向是对的(判不出就没点确认), 但等于白跑一轮。
复现: 手动启动游戏、打开面板、dump 全部 OCR 元素, 看到了根因:
y=331 'Enkephalin Module Owned 31' @(681,331) w=351 h=38 <- 框高 38 宽 351, 异常
y=462 '1 Enkephalin recovered inD2:50'
(找不到 54/126 那个体力条)
原来是找"兑换区显示体力条 x/126"来判断页签, 而 OCR 把相邻几行**合并进一个元素**,
把 x/126 一起吞了。对照正常那几次 dump, 体力条本来在 y=508 单独成行。
改法: 认面板自己的问句 "Would you like to assemble Enkephalin Modules?" ——
只在免费页签出现, 实测单独成行不会被合并。体力条那条留作备用信号, 两条任一成立即可。
判不出来仍然拒绝(宁可漏一轮, 也不在不知道哪个页签上点确认)。
验证:
* 用 18:03 那轮**真实的 OCR 元素**当夹具, 新判据认出来了
* 真机端到端跑一轮: 体力 55 -> 模组 31 -> 33 (+2), 狂气前后一致, 游戏正常关闭
(正是我为 18:03 预期的 31->33, 那 2 个模块补回来了)
* 新增 OnModulesTabTest 7 个用例; 故意把新判据关掉会报"这批元素曾让判定失败"
* 日志/报告交叉核对: 9 轮 / 9 份全部吻合
教训: 判据要选"语义明确且不易被 OCR 破坏"的文本。数字+斜杠这种片段最容易被
行合并吃掉, 而一整句问话不会。全套 324/324 通过。
This commit is contained in:
@@ -584,6 +584,94 @@ class CliRoutingTest(QuietLogMixin, unittest.TestCase):
|
||||
self.assertEqual(code, 0)
|
||||
|
||||
|
||||
class OnModulesTabTest(QuietLogMixin, unittest.TestCase):
|
||||
"""确认停在免费合成页签 —— 判错的代价是整轮拒绝合成。
|
||||
|
||||
⛔ 2026-10-16 18:03 真出过事: 原来只看"兑换区显示体力条 x/126", 而 OCR 会把相邻
|
||||
几行合并成一个元素(那次 "Enkephalin Module Owned 31" 的框高 38、宽 351, 把下面
|
||||
的 x/126 一起吞了), 判定失败 -> 拒绝合成 -> 那轮一个模块没换到。
|
||||
|
||||
下面的元素是那次面板上**真实的 OCR 输出**, 不是我编的。
|
||||
"""
|
||||
|
||||
# 18:03 那轮真实 dump(体力条被合并吞掉, 但问句完整成行)
|
||||
REAL_FAILED_DUMP = [
|
||||
{'text': 'Modules', 'x': 589, 'y': 269, 'w': 85, 'h': 27},
|
||||
{'text': 'Use Lunacy', 'x': 749, 'y': 269, 'w': 101, 'h': 25},
|
||||
{'text': 'Use Boxes', 'x': 921, 'y': 271, 'w': 100, 'h': 24},
|
||||
{'text': 'Enkephalin Module Owned 31', 'x': 681, 'y': 331, 'w': 351, 'h': 38},
|
||||
{'text': '1 Enkephalin recovered inD2:50', 'x': 658, 'y': 462, 'w': 278, 'h': 26},
|
||||
{'text': 'Would you like to assemble Enkephalin Modules?',
|
||||
'x': 564, 'y': 598, 'w': 472, 'h': 27},
|
||||
{'text': 'X Cancel', 'x': 593, 'y': 652, 'w': 118, 'h': 31},
|
||||
{'text': 'Confirm', 'x': 926, 'y': 653, 'w': 92, 'h': 30},
|
||||
]
|
||||
|
||||
def _items(self, items):
|
||||
return mock.patch.object(cm, 'items', lambda: items)
|
||||
|
||||
def test_recognises_the_frame_that_used_to_fail(self):
|
||||
with self._items(self.REAL_FAILED_DUMP):
|
||||
self.assertTrue(cm.on_modules_tab(),
|
||||
'这批元素曾让判定失败, 现在必须认得出来')
|
||||
|
||||
def test_question_phrase_alone_is_enough(self):
|
||||
with self._items([{'text': 'Would you like to assemble Enkephalin Modules?',
|
||||
'x': 564, 'y': 598, 'w': 472, 'h': 27}]):
|
||||
self.assertTrue(cm.on_modules_tab())
|
||||
|
||||
def test_question_phrase_survives_ocr_space_noise(self):
|
||||
# OCR 常在词间丢空格/加空格
|
||||
with self._items([{'text': 'WouldyouliketoassembleEnkephalinModules?',
|
||||
'x': 564, 'y': 598, 'w': 472, 'h': 27}]):
|
||||
self.assertTrue(cm.on_modules_tab())
|
||||
|
||||
def test_gauge_is_still_a_valid_fallback(self):
|
||||
with self._items([{'text': '132/26112/126', 'x': 709, 'y': 508,
|
||||
'w': 200, 'h': 30}]):
|
||||
self.assertTrue(cm.on_modules_tab())
|
||||
|
||||
def test_unknown_screen_is_refused(self):
|
||||
"""两条信号都没有时必须拒绝 —— 宁可漏一轮, 也不在不知道哪个页签上点确认。"""
|
||||
with self._items([{'text': 'Window', 'x': 994, 'y': 809},
|
||||
{'text': 'Inventory', 'x': 759, 'y': 834}]):
|
||||
self.assertFalse(cm.on_modules_tab())
|
||||
|
||||
def test_tab_labels_alone_are_not_enough(self):
|
||||
"""只有三个页签名(面板刚开、还没点页签)时不能算数。
|
||||
|
||||
页签名一直显示, 分不出当前选中哪个, 所以不能当依据。
|
||||
"""
|
||||
with self._items([{'text': 'Modules', 'x': 589, 'y': 269},
|
||||
{'text': 'Use Lunacy', 'x': 749, 'y': 269},
|
||||
{'text': 'Use Boxes', 'x': 921, 'y': 271}]):
|
||||
self.assertFalse(cm.on_modules_tab())
|
||||
|
||||
def test_refusal_prevents_clicking_confirm(self):
|
||||
"""面板开着但认不出页签时, 绝不点确认。
|
||||
|
||||
夹具要含面板标记(Charge Enkephalin), 否则走的是"打不开面板"那条更早的路径,
|
||||
测不到这里真正想守的东西。
|
||||
"""
|
||||
clicked = []
|
||||
panel_but_no_tab_info = [
|
||||
{'text': 'Charge Enkephalin', 'x': 700, 'y': 180, 'w': 200, 'h': 30},
|
||||
{'text': 'Modules', 'x': 589, 'y': 269, 'w': 85, 'h': 27},
|
||||
{'text': 'Use Lunacy', 'x': 749, 'y': 269, 'w': 101, 'h': 25},
|
||||
{'text': 'Confirm', 'x': 926, 'y': 653, 'w': 92, 'h': 30},
|
||||
]
|
||||
with self._items(panel_but_no_tab_info), \
|
||||
mock.patch.object(cm, 'click', lambda *a: clicked.append(a)), \
|
||||
mock.patch.object(cm, 'read_owned', lambda: 31), \
|
||||
mock.patch.object(cm.time, 'sleep', lambda s: None):
|
||||
ok, info, got = cm._convert_attempt()
|
||||
self.assertFalse(ok)
|
||||
self.assertEqual(got, 0)
|
||||
self.assertIn('页签', info, '应该报"认不出页签", 实际: %s' % info)
|
||||
self.assertFalse(any(cm.BTN_CONFIRM == tuple(a) for a in clicked),
|
||||
'判不出页签还点了确认: %s' % clicked)
|
||||
|
||||
|
||||
class SafeClickTargetsTest(QuietLogMixin, unittest.TestCase):
|
||||
"""脚本能点到的地方必须逐个安全 —— 用户的两条硬约束就靠这几个坐标。
|
||||
|
||||
|
||||
Reference in New Issue
Block a user