🔒 Патч прошел. А откат?

На связи CyberINS.

ИИ закрыл баг — но что сломал рядом? У Trail of Bits есть пара плагинов: patching-bugs готовит исправления, regression-hunt ищет регрессии — поломки ранее работавшего и поддерживаемого поведения.

Мне здесь нравится проверка с откатом: один и тот же тест должен поймать баг в исходном коде, пройти с патчем и снова упасть после полного отката. Так меньше шансов принять изменение окружения за удачное исправление.

Но без индульгенций: в оценке на 21 известной регрессии regression-hunt дал на 25% меньше ложных находок, чем Codex с запросом на проверку регрессий. При этом часть известных регрессий осталась неподтвержденной.

Мой вывод: если ты принимаешь патч, не путай «регрессия не подтверждена» с «регрессии нет».

⏺ Разбор, на который опираюсь

#AppSec #AI // ❓ cyber in network security // max.ru/cyberins