Рев'ю кількома екземплярами й проходами

Головне

1. 1Самоперевірка працює погано: у тій самій сесії модель пам'ятає міркування, з якими писала код, тож схильна підтверджувати власні рішення, а не ставити їх під сумнів.
2. 2Другий, незалежний екземпляр, який бачить лише артефакти (diff, специфікацію, результати тестів), а не розмову генератора, знаходить тонші проблеми, ніж «review your work carefully» чи extended thinking у тій самій сесії.
3. 3Велике рев'ю багатьох файлів розбийте на локальні проходи по кожному файлу (кожен отримує всю увагу) і окремий інтеграційний прохід по зв'язках між файлами (інтерфейси, потоки даних, контракти). Один гігантський прохід розпорошує увагу, і зауваження починають суперечити одне одному.
4. 4Додайте прохід перевірки, у якому кожне зауваження містить доказ і власну оцінку впевненості моделі. За нею й маршрутизуйте: впевнені зауваження йдуть одразу в PR, сумнівні — у чергу на ручну перевірку. Пороги калібруйте на розмічених результатах.
5. 5Якщо запустити той самий промпт рев'юера N разів, здебільшого повторяться ті самі сліпі зони. А якщо лишати тільки зауваження, з якими згодна більшість запусків, загубиться справжній баг, який знайшов лише один запуск.