Купер: ML-матчинг офферов снизил стоимость создания карточки товара в 10 раз

Купер получает товары от ритейлеров в виде офферов — сырых записей из складских систем продавцов, которые нужно сопоставить с существующими товарами каталога и превратить в стандартизованную карточку на витрине. Без автоматизации контент-менеджеры часами ищут атрибуты — бренд, модель, спецификации — в интернете или копируют их из аналогов; при большом потоке офферов очередь копится, и на создание карточки уходят недели. До внедрения ML матчинг держался на штрихкодах: метод точен примерно на 98%, но покрывает лишь 14% офферов, поскольку ритейлеры привязывают штрихкоды не ко всем товарам и у одинаковых товаров они бывают разными.

Система автоматического матчинга подбирает для каждого оффера наиболее вероятные товары каталога. Первая версия Matching 1.0 использовала эмбеддинги FastText, реранкер на CatBoost и классификатор пар оффер-продукт с индексом в Faiss. В Matching 2.0 FastText заменили трансформером LaBSE-en-ru. Matching 3.0 работает на модели LaBSE-ru-turbo: она учитывает название, бренд, количество в упаковке и очищенное поле extra с атрибутами и описаниями от ритейлера. В версию вернули реранкер на LaBSE-ru-turbo, обученный на мягких метках от языковой модели Vikhr-Nemo-12B; CatBoost оставлен резервом на случай сбоев. Отдельный пайплайн раз в неделю пересобирает индекс Faiss с новыми товарами.

Оффер из системы интеграции ритейлеров попадает в Kafka; пайплайн в Airflow каждые 30 минут сопоставляет новые офферы с каталогом. Контент-менеджер видит оффер и список из 10 кандидатов и отмечает совпадение — на это уходит 2–3 минуты; при совпадении оффер привязывается к товару и появляется на витрине, иначе уходит на автосоздание. Система обрабатывает в среднем 30–100 тыс. офферов в день, в пиках — до полутора миллионов. Matching 3.0 поднял hit@5 на 10% и охват на 15%, а время прогона пайплайна сократилось с 30 до 15 минут. По данным компании, автоматический матчинг снизил стоимость создания карточки в 10 раз; срок появления товара на витрине сократился с недели до одного дня.