Московская биржа: ИИ создал 109 автотестов торгового протокола, экономия 7–8 недель

TWIME — низкоуровневый транзакционный протокол Московской биржи для фондового и валютного рынков на базе стандарта FIX Simple Binary Encoding. Через него в реальном времени обрабатываются заявки, сделки и маркет-данные; биржа называет его критически важной системой, где ошибки недопустимы. Отдел RAPID, который разрабатывает высокопроизводительные торговые системы и протоколы, поставил задачу расширить существующее тестовое покрытие за минимальную стоимость: научиться вылавливать краевые сценарии — ошибки проверки данных, нарушения протокола, аномальные ситуации — и ускорить вывод новых релизов в продакшн.

Языковая модель получала контекст из PDF-спецификации TWIME, XML-схему сообщений SBE и эталонный рабочий тест. На основе эталона модель написала генератор автотестов — Python-скрипт, который превращает YAML-описание сценария в готовый pytest-файл; сами YAML-сценарии тоже генерировала модель. Ошибки модели (несуществующие классы, неверные имена полей, текстовые значения вместо числовых) исправлял детерминированный валидатор на основе реальной схемы из кодовой базы. Основной рабочей моделью была Qwen Coder 3 на 30 млрд параметров, альтернативной — Devstral на 32 млрд параметров.

Работа прошла в три шага. На первом модель сгенерировала 307 тестов в 9 категориях, после исправлений работали 39. На втором шаге добавили валидацию и реальные данные, привлекли бизнес-аналитиков и получили 54 рабочих теста, включая 26 сценариев валидации заявок. На третьем шаге модель создала многопользовательские интеграционные тесты; итог — 55 тестов, все запускаются, а время отладки сократилось примерно с 30 до 5 минут на тест. Всего получено 109 рабочих тестов за неделю. Тесты интегрированы в CI/CD и запускаются автоматически при изменениях кода протокола или его схем. Публикация вышла в блоге компании на Хабре 14 октября 2025 года.