Пустую полку камера видит, планограмму — с трудом. С чего начать видеоаналитику в магазине
Антон Савельев из Visor Group предлагает начать с 20–30 ходовых позиций. Камере проще заметить пустое место, чем отличить похожие упаковки и сверить выкладку с планограммой. Если полку закрывает покупатель, это «не видно», а не «пусто». Камера также не знает, есть ли товар в подсобке. На пилоте стоит считать пропуски и ложные тревоги, а главное — проверять, стала ли полка пустовать меньше. На производстве модель сначала верно посчитала 0 из 26 коробок, после дообучения на записях линии — 52 из 56 на потоке. Это результат производственного пилота, а не магазина.
Пустую полку камера видит, планограмму — с трудом. С какой задачи начинать видеоаналитику в магазине
Автор: Антон Савельев, ведущий специалист по компьютерному зрению, Visor Group
Владелец магазина обычно приходит с одной просьбой: «хочу, чтобы камера следила за полками». За этой фразой прячутся две разные задачи. Первая — заметить, что на полке пусто. Вторая — проверить, что товар стоит так, как нарисовано в планограмме. По трудности они отличаются примерно как «заметить, что в комнате погас свет» и «прочитать книгу в полутьме». Если не разделить их на старте, проект почти наверняка разочарует.
Сразу оговорюсь: собственного проекта в рознице с цифрами, которые я мог бы показать, у нас пока нет. Ниже — требования к съёмке, которые одинаковы для любой полки, и два урока из наших производственных пилотов. Переношу я оттуда не цифры, а механику: как ведёт себя модель на незнакомой упаковке и что происходит с людьми, когда тревога часто ложная. Свет, проходимость и ассортимент в магазине другие, и точность там придётся мерить заново.
Пустое место: дешёвая и надёжная часть
Дыра в ряду товара — признак, который система ловит устойчиво. Ей не нужно знать, какой там должен стоять йогурт. Достаточно увидеть, что вместо фронта упаковки видна задняя стенка или пустой полочный профиль.
Условия при этом жёсткие, и их лучше выполнить сразу:
— камера смотрит на секцию фронтально и закреплена намертво. Сдвинули на пару градусов при уборке — сравнение «было/стало» ломается;
— обзорная камера под потолком не годится: из угла зала полка видна под острым углом, и пустой ряд за передним прячется;
— ширина одного фейсинга (а это часто 7–10 см) в кадре должна занимать хотя бы 20–30 пикселей. Это мой ориентир, а не норма, но меньше — и узкая дыра теряется в шуме.
Самая частая жалоба на пилотах видеоаналитики — «система врёт, полка полная». Обычно перед полкой просто стоял покупатель или тележка. Поэтому у каждого участка полки в кадре должно быть три состояния, а не два: «товар есть», «пусто» и «не видно». Перекрытый человеком участок — это «не видно», и на голосование он не идёт. Решение о пустом месте я бы принимал по серии кадров: например, 10 снимков за 5 минут, и сигнал уходит, только если участок был виден хотя бы на шести и на всех них пуст. Цифры подбираются под проходимость зала.
Ещё одна граница, о которой стоит договориться заранее: камера видит переднюю часть полки, а не остатки магазина. Она не знает, есть ли товар в подсобке.
Как сигнал превращается в продажу
Деньги здесь даёт не точность распознавания, а скорость реакции. Рабочая цепочка выглядит так. Сигнал «пусто: молочка, секция 4, третья полка» приходит на терминал сотрудника зала. Он идёт на склад. Есть товар — выставляет и закрывает событие, система по следующей серии кадров подтверждает, что полка заполнена. Товара нет — отмечает «нет на остатке», и это уже вопрос к заказу, а не к выкладке. В отчёте за день видно, сколько минут каждая ходовая позиция простояла пустой и сколько из этих случаев было из-за остатков.
Отчёт «полка по молочке простояла пустой 40 минут в вечерний пик» понятен без пояснений. Начинать стоит с 20–30 ходовых позиций, а не со всего зала.
Планограмма: где начинаются сложности
Проверка раскладки требует от системы различать упаковки. А похожих упаковок в рознице море: три вкуса одного сока отличаются полоской цвета шириной в палец.
Здесь пригодится наш пилот на производстве. Задача была — по видео проверять, сколько пачек лежит в коробке. Модель, обученную на чужих фотографиях, мы запустили на записях заказчика, и первая проверка дала 0 верно посчитанных коробок из 26. Ноль. Пачки на этой линии укладывали по-своему, и чужие примеры не помогли. После дообучения на записях самой линии на 28 новых коробках получилось 28 из 28, а на потоке из 56 коробок — 52 верных.
Для магазина вывод такой: качество проверки планограммы надо мерить на своих полках, а не верить общей цифре. Новый товар или новогодний дизайн упаковки — повод перепроверить результат. Понадобится ли при этом новая разметка, зависит от решения, но проверка нужна всегда. Если поставщик обещает проверять планограмму «из коробки» по всему ассортименту, я бы попросил показать результат на ваших записях, причём на тех, которые он до этого не видел.
Холодильники и ценники
Отдельный разговор — холодильные витрины. Если в зале тепло и влажно, а дверь открывают часто, стекло может запотевать, и на нём отражаются лампы зала. Насколько это мешает в конкретной витрине, видно только на записях. Я бы закладывал на холодильники отдельный этап пилота и не обещал там тех же результатов, что на сухих полках.
С ценниками две задачи. Есть ли ценник на месте — проверяется сравнительно просто. Стоит ли он под своим товаром — та же сложность, что и с планограммой: системе нужно связать ценник с конкретной позицией. А прочитать мелкую цифру за глянцевой плёнкой с пары метров — задача уже для близкого ракурса.
Как не потерять доверие персонала
На пилоте контроля гигиены на пищевом производстве мы проверили сверх задания ещё и спецодежду. Из 46 сигналов верными оказались 21. Этот признак в работу не включили. Я уверен, что решение было правильным: если тревога ложная через раз, смена перестаёт смотреть на экран, и вместе с плохим признаком перестают работать хорошие.
В магазине работает то же правило. Пусть система сначала шлёт сигналы только о пустых ходовых позициях, где ложных мало. Проверку планограммы лучше добавлять позже и отдельной строкой в отчёте, когда по ней накопится статистика на ваших записях.
Порядок, который я считаю разумным:
1. выбрать 20–30 позиций, пустая полка по которым стоит вам денег;
2. поставить на эти секции фронтальные камеры, отдельные от охранных;
3. две-три недели собирать записи и вручную отмечать, когда полка реально была пустой. Это и будет эталон;
4. сравнить сигналы системы с этим эталоном отдельно по пропускам и по ложным тревогам;
5. и только потом браться за планограмму и холодильники.
Подробнее о задачах видеоаналитики для магазинов — в разделе о рознице
Если на третьем шаге окажется, что сотрудники и так замечают пустые полки за пять минут, — проект не нужен, и это тоже результат.
