У Fozzy Group тестують штучний інтелект, що пришвидшує покупки

Процес від сканування до виставлення рахунку займає чотири секунди, що майже у 10 разів швидше, ніж робота класичної каси.

Архітектура екосистеми штучного інтелекту на цьому етапі розвитку складається зі згорткової нейромережі та системи сенсорів.

У фізичному вимірі — це «портал» з трьома камерами, вагами, світловими індикаторами, екраном, сканером і платіжним терміналом.

За технологією комп’ютерного зору Kissa AI розпізнає страви та формує чек для гостя.

Увесь шлях гостя з Kissa AI виглядає таким чином:

1. Під час першої взаємодії гості проходять онбординг: на екрані з’являється анімація, яка демонструє функціонал. Невдовзі буде додано сонар, який допоможе визначити положення у просторі та рухи гостей, щоб підлаштовувати онбординг під їхню поведінку.
2. Гості ставлять тацю з їжею і напоями у «портал» нейронної мережі. Кольорові світлові індикатори разом з інтерактивним екраном дають підказки про перебіг процесу: режим очікування і готовності, розпізнавання, оплата. Невдовзі буде додана можливість голосового спілкування з гостями.
3. На етапі навчання Kissa AI обслуговує тільки учасників «Власного рахунку», щоб була можливість компенсувати помилки у розпізнаванні страв.
4. Оплата відбувається автоматично, якщо у мобільному додатку «Сільпо» підключений Masterpass TM. Або ж потрібно сплатити безконтактно через платіжний термінал поруч.

«Під час розробки ми досліджували поведінку і рухи гостей, тому штучний інтелект максимально враховує ергономіку і людські фактори, — розповідає Андрій Янбухтін, керівник Центру інновацій і  AI «Лабораторії Зі».

Перший етап розвитку штучного інтелекту почався у червні 2020 року, коли нейромережа почала навчатися на синтетичних даних. З липня 2021-го нейромережа самонавчається вже на живих даних, тобто використовуючи зображення страв усіх гостей «Кантін» з коригуваннями від дата-менеджера.