Grupo Éxito: ИИ распознаёт около 137 видов фруктов и овощей на самокассе

У фруктов и овощей нет штрихкодов, которые упрощали бы их регистрацию на кассах самообслуживания, а у одного яблока может быть несколько кодов в зависимости от сорта. В прежней схеме автооплаты, которую Grupo Éxito опробовала в лаборатории Carulla SmartMarket, покупатель выбирал нужный фрукт или овощ из списка на экране и иногда звал сотрудника, чтобы опознать товар. Компания поставила цель: дать клиентам самостоятельно и быстро регистрировать и оплачивать такие покупки на кассах самообслуживания, без контакта с персоналом — в условиях пандемии это подавалось как вопрос биобезопасности.

Fruver Scan — технология автоматического распознавания изображений, которую команда Google Cloud в Колумбии разработала вместе с Grupo Éxito. Покупатель кладёт товар на сканер, а модель, обученная методами машинного обучения, определяет, какой это фрукт или овощ. На момент запуска система распознавала около 137 видов. Подготовка модели включала выбор алгоритма, сбор около 160 фотографий на каждый код товара, разметку и классификацию снимков, сборку набора данных, проверку качества фотографий и обучение: не менее 200 часов в режиме классификации и 20 часов в режиме детекции.

Технологию запустили 26–27 ноября 2020 года в обновлённом магазине Carulla FreshMarket 140 в Боготе; Carulla — премиальная сеть Grupo Éxito. Компания называет себя первым супермаркетом Латинской Америки с этой технологией Google Cloud. Fruver Scan внедрён в магазине вместе с другими новшествами, среди которых автооплата по распознаванию лица Smile ID и робот-ассистент. По ожиданиям компании, система ускорит регистрацию фруктов и овощей и сэкономит сотрудникам время на опознании товаров; измеренных результатов в публикации нет.