SemVerBench: LLM знает правило, но проваливается на его редком варианте

GPT-5.1 заваливает все 26 проверок редкого пограничного случая правила — а тот же самый принцип в обычной форме решает без единой ошибки. SemVerBench показывает: модель знает правило, но не достаёт его из памяти в непривычной формулировке — как человек, забывший применить выученное правило в незнакомой ситуации. Метод проверки версий пакетов, дат в договорах и любых диапазонных условий позволяет находить такие слепые пятна и лечить их одной вставкой. Фишка — вставь точный текст правила прямо в промпт, и задача превращается из «вспомни» в «прочитай»: точность взлетает почти до максимума.