В Fozzy Group тестируют искусственный интеллект, ускоряющий покупки

Процесс от сканирования до выставления счета занимает четыре  секунды —  почти в 10 раз быстрее, чем работа классической кассы.

Архитектура экосистемы искусственного интеллекта на этом этапе развития состоит из свертываемой нейросети и системы сенсоров.

В физическом выражении — это «портал» с тремя камерами, весами, световыми индикаторами, экраном, сканером и платежным терминалом.

С технологией компьютерного зрения Kissa AI распознает блюда и формирует чек для гостя.

Весь путь гостя с Kissa AI выглядит следующим образом:

1. Во время первого взаимодействия гости проходят онбординг: на экране появляется анимация, демонстрирующая функционал. Вскоре будет добавлен сонар, который поможет определять положение в пространстве и движения гостей, чтобы подстраивать онбординг под их поведение.
2. Гости ставят поднос с едой и напитками в «портал» нейронной сети. Цветные световые индикаторы вместе с интерактивным экраном дают подсказки о ходе процесса: режим ожидания и готовности, распознавание, оплата. Вскоре будет добавлена ​​возможность голосового общения с гостями.
3. На этапе обучения Kissa AI обслуживает только участников программы лояльности «Власний рахунок», чтобы была возможность компенсировать ошибки. Это происходит автоматически, если в мобильном приложении «Сильпо» подключен Masterpass.

«При разработке мы исследовали поведение и движение гостей, поэтому искусственный интеллект максимально учитывает эргономику и человеческие факторы, — рассказывает Андрей Янбухтин, руководитель Центра инноваций и AI «Лаборатории Зи».

Первый этап развития искусственного интеллекта начался в июне 2020 года, когда нейросеть начала учиться на синтетических данных. С июля 2021-го нейросеть стала самообучающейся уже на живых данных, то есть используя изображения блюд всех гостей с корректировками от дата-менеджера.