Как пишет технический директор CodeROI Анна Медоуз в колонке Forbes, после внедрения ИИ-инструментов команды выпускают больше кода, а число pull request растет. При этом ревьюеров больше не становится. В итоге они чаще проверяют изменения поверхностно, ориентируясь на успешное прохождение автоматических проверок.
Медоуз приводит результаты исследования с участием примерно 800 разработчиков. Инженеры, использовавшие ИИ-ассистента, допустили на 41% больше ошибок, хотя значимого роста пропускной способности не наблюдалось. Сгенерированный код может выглядеть убедительно, соответствовать принятым шаблонам и казаться завершенным, но при этом скрывать ошибки в бизнес-логике.
По мнению автора, верификация должна стать самостоятельной инженерной дисциплиной. Первые этапы проверки стоит поручить детерминированным механизмам: системам типов, контрактным тестам и тестам на основе свойств, статическому анализу, проверкам политик. Медоуз также советует сначала закреплять требования в тестах. Изменения с высоким риском, например затрагивающие биллинг, следует направлять на углубленное ревью, а изменения с низким риском проводить через автоматизированные барьеры.
Ключевые факты
Исследование примерно 800 разработчиков выявило на 41% больше ошибок у инженеров с ИИ-ассистентом без значимого роста пропускной способности.
Для автоматической верификации предложены системы типов, контрактные и основанные на свойствах тесты, статический анализ и проверки политик.
Изменения в логике биллинга автор рекомендует направлять на углубленное ревью.
Тесты предлагается фиксировать до генерации кода, чтобы использовать их как спецификацию требований.
Вопросы и ответы
- Как изменить процесс разработки до генерации кода?
Сначала фиксировать требования в тестах, чтобы они служили спецификацией, а затем проверять код системами типов, контрактными и основанными на свойствах тестами, статическим анализом и проверками политик.
- Какие изменения нельзя оставлять только автоматическим проверкам?
Изменения с высоким риском, например в логике биллинга, следует направлять на углубленное ревью. Низкорисковые изменения можно пропускать через автоматизированные барьеры.
- Дает ли ИИ-ассистент измеримый прирост производительности?
В исследовании примерно 800 разработчиков значимого роста пропускной способности не обнаружили, зато инженеры с ИИ-ассистентом допустили на 41% больше ошибок.
Контекст по теме
- Veracode: ИИ проходит лишь 56% проверок безопасности при генерации кода29 июля 2026 г.
- InfoWorld: разработчикам с AI всё ещё нужны инструменты для проверки кода, тестирования и инфраструктуры30 июня 2026 г.
- Почему AI‑инструменты не делают разработчиков «в 10 раз быстрее»28 июня 2026 г.
- Анализ 112 000 коммитов: исследование о качестве кода, написанного ИИ19 июня 2026 г.