Распознавание блюд по фото: касса самообслуживания в столовой

В столовых, корпоративных кафе и на фуд-кортах с линией раздачи главное узкое место — касса. Гости с подносами выстраиваются в очередь, а кассир вручную пробивает каждое блюдо. Системы распознавания еды позволяют камере определить, что лежит на подносе, и выставить счёт за несколько секунд, а гость оплачивает картой или по QR-коду.

Как это работает

Над зоной оплаты установлена камера, иногда две под разными углами. Гость ставит поднос, система находит на изображении тарелки и определяет блюда. Затем сопоставляет их с меню дня и ценами, выводит чек на экран, гость подтверждает и оплачивает. Если система не уверена в блюде, она просит гостя выбрать из вариантов или зовёт сотрудника.

Обучение на вашем меню

Готовой модели, которая знает все блюда всех столовых, нет. Систему обучают на ваших блюдах: несколько десятков или сотен снимков каждого в вашей посуде, при вашем освещении. Хорошо, когда у каждого блюда стабильный вид и своя посуда. Супы в одинаковых тарелках — сложный случай: лагман, шурпа и мастава могут выглядеть похоже сверху, особенно если гость перемешал.

Где подходит

• Корпоративные столовые с большим потоком в обеденный перерыв
• Столовые в вузах и бизнес-центрах
• Фуд-корты с самообслуживанием на линии
• Кафе с фиксированным ассортиментом, который меняется по понятному графику

Для ресторана с обслуживанием официантами задача не стоит: заказ уже фиксируется в кассовой системе.

Как повысить точность

1. Стандартизируйте посуду: определённые блюда — в определённой посуде
2. Следите за подачей: одинаковая порция, похожая выкладка
3. Сделайте ровное освещение без бликов над зоной оплаты
4. Определите места для хлеба, напитков и соусов, которые сложно распознать, — их можно продавать отдельной кнопкой
5. Дообучайте систему при появлении новых блюд до их выхода в меню

Меню и цены

Система связывается с кассовой программой и учётом: меню дня, цены, комплексные обеды, скидки для сотрудников компании. Продажи записываются по позициям, и остатки на кухне списываются автоматически. Это даёт точную статистику, какие блюда берут и в какое время.

Оплата и чеки

Оплата картой, по QR-коду платёжных сервисов, корпоративным пропуском с последующим удержанием из зарплаты. Фискальный чек формируется кассовой системой — уточните требования законодательства к вашему формату торговли. Скорость оплаты должна быть сопоставима с распознаванием, иначе очередь просто переместится.

Ошибки и контроль

Гость должен видеть чек до оплаты и иметь возможность исправить блюдо. Сотрудник рядом нужен как минимум на старте, чтобы помогать и собирать случаи ошибок. Эти случаи становятся данными для дообучения.

Полезно вести журнал исправлений: какие блюда чаще путаются и в какое время. Если ошибки концентрируются на двух-трёх позициях, проще изменить посуду или подачу, чем бесконечно дообучать модель. Если ошибки растут в конце смены, возможно, меняется выкладка, когда повара торопятся.

Что ещё даёт система

Статистика спроса по блюдам и часам, данные для планирования производства и сокращения остатков к концу смены, информация о средней стоимости подноса. Некоторые системы оценивают и пищевую ценность для корпоративных программ здорового питания, но такие оценки приблизительны.

Перед запуском

Оцените поток гостей в пиковые часы, разнообразие меню и готовность кухни соблюдать стандарты подачи. Без последнего условия точность будет нестабильной. Разумно запускать систему параллельно с обычной кассой на одной линии и переводить на неё весь поток, когда доля исправлений станет приемлемой для ваших гостей.