Atlassian: Code Reviewer с историей PR — принятых замечаний на 10 п.п. больше

Rovo Dev Code Reviewer — ИИ-ревьюер Atlassian, который находит в пул-реквестах проблемы с ошибками в коде, дизайном, читаемостью, сопровождаемостью и тестами. Команда продукта хотела приблизить его к институциональной памяти опытного ревьюера: учитывать прошлые обсуждения ревью, договорённости команды и закономерности конкретной кодовой базы. Такое знание хранится в прошлых PR и комментариях к ним. Задача состояла в том, чтобы дать модели этот контекст и измерить, меняется ли доля комментариев, которые авторы PR действительно применяют.

Через Atlassian Teamwork Graph Collection Code Reviewer при обработке PR получает связанную Jira-задачу и ищет семантически похожие прошлые задачи из того же репозитория (порог сходства 0,75). Модель получает два вида контекста: дифф похожего прошлого PR как образец правильных решений в этой кодовой базе и комментарии ревью из того PR как отражение приоритетов команды. Поиск по другим репозиториям Atlassian проверила отдельным экспериментом: охват вырос на 11,3%, но значимого улучшения качества не было, и команда оставила только поиск в том же репозитории.

Сначала Atlassian провела офлайн-оценку на внутреннем наборе из 3 492 задач, из которых 2 620 были связаны с корректными Jira-задачами; сочетание диффов и комментариев дало лучший результат по всем четырём метрикам. Затем последовал внутренний онлайн-эксперимент на одном сайте: из примерно 3 000 запусков контекст получили 34, и доля принятых комментариев в них выросла с 45,9% до 59,3%. Контролируемый эксперимент на клиентских PR шёл с 5 по 12 марта 2026 года на модели claude-sonnet-4-5 и охватил 15 616 запусков; доля комментариев, по которым авторы внесли правки, выросла с 31,92% до 41,90%. Все клиенты заранее согласились на использование Code Reviewer.