vvmedyanik

vvmedyanik

Технический директор компании BPA bpa.tech Занимаюсь разработкой ИТ и ИИ решений
Пикабушник
106 рейтинг 4 подписчика 8 подписок 3 поста 0 в горячем

ИИ против воров и пустых полок: как умные магазины перестраивают розницу

За последние годы многие компании и даже целые отрасли перевели свои процессы в цифру. Ритейл, как одна из наиболее перспективных сфер, обладает огромным потенциалом для внедрения современных технологий. Традиционные методы контроля и анализа постепенно уступают место решениям на базе искусственного интеллекта. Как именно ИИ меняет ритейл, какие задачи он уже решает и какие перспективы открывает?

Рынок ИИ в ритейле

Согласно данным Mordor Intelligence, в 2024 году мировой объем рынка технологий искусственного интеллекта в ритейле достиг порядка $9,65 млрд, к 2029 году он возрастет до $38,92 млрд.

В России интерес к ИИ также растёт. По данным СберИндекса, объёмы розничной торговли увеличились на 15% за год, несмотря на рост издержек по всей цепочке поставок. Это создаёт спрос на инструменты, которые помогают повысить управляемость и снизить потери. ИИ всё чаще становится таким помощником.

Архитектура ИИ-систем в магазинах

Искусственный интеллект в ритейле применяется для оптимизации различных процессов, от улучшения взаимодействия с клиентами до повышения эффективности бизнес-операций и управленческих решений.

Системы мониторинга в ритейле строятся на базе данных, полученных с объекта. Одним из основных источников информации — это камеры видеонаблюдения. С их помощью технологии компьютерного зрения позволяют решать широкий круг задач: от контроля сотрудников и анализа очередей до мониторинга целевой аудитории и построения тепловых карт маршрутов покупателей.

Например, тепловые карты позволяют визуализировать поведение клиентов — где они чаще останавливаются, какие зоны обходят стороной, где проводят больше времени. Это помогает понять востребованность товарных полок и эффективность планировки торгового пространства.

Пример тепловой карты магазина: чёрные прямоугольники — стеллажи и прилавки, красно-жёлтое облако между ними — тепловая карта перемещений сотрудников. Зоны с наибольшим количеством перемещений подсвечены красным, менее активные — жёлтым и зелёным.

Пример тепловой карты магазина: чёрные прямоугольники — стеллажи и прилавки, красно-жёлтое облако между ними — тепловая карта перемещений сотрудников. Зоны с наибольшим количеством перемещений подсвечены красным, менее активные — жёлтым и зелёным.

Контроль работы сотрудников

Искусственный интеллект помогает отслеживать эффективность и производительность персонала. Системы компьютерного зрения фиксируют, насколько качественно сотрудники выполняют свои обязанности, например, правильно ли они выкладывают товары и своевременно ли обслуживают клиентов. Это позволяет выявлять области для улучшения и повышать общий уровень клиентоориентированности.

ИИ способен различать сотрудников и клиентов с помощью обучения на униформу или использования специальных меток. После определения типа человека (сотрудник или покупатель) система отслеживает действия. При определении работника магазина ИИ-решение может классифицировать, например, такие действия, как: выкладка товара, помощь покупателям, установка ценников, нахождение в определённой зоне без активности. Это позволяет собирать объективную статистику по качеству и интенсивности работы персонала.

Для повышения точности в систему могут дополнительно встраиваться модули анализа движения для увеличения количества классов различаемых действий.

Один из кейсов применения такой технологии — распознавание разницы между активной работой сотрудника и использованием телефона в личных целях.

Интеграция с кассовыми и аудиосистемами

В дополнение к данным ИИ использует другие источники информации:

• данные с чеков и кассовых аппаратов позволяют определить, какие товары наиболее востребованы и из чего состоит структура покупательской корзины;

• аудиоданные применяются для оценки работы кассиров, в частности — соблюдение регламентов и скриптов продаж (например, предлагаются ли карты лояльности, упоминаются ли акции);

• RFID-метки, прикреплённые к дорогостоящим товарам, отслеживают их перемещение и предотвращают фрод (кражи);

Однако в этом направлении компании действуют осторожно: видео– и аудиомониторинг требует строгого соблюдения законодательства и этики.

Противодействие мошенничеству и контроль на кассах

Системы компьютерного зрения и машинного обучения анализируют видеопотоки с камер наблюдения, распознавая необычные действия посетителей и сотрудников.

Такие алгоритмы могут фиксировать:

• попытки спрятать товар, не оплатив его;

• подозрительное поведение, например, длительное нахождение в одной зоне без явной цели;

• резкие движения, которые могут свидетельствовать о краже;

• манипуляции с упаковками или антикражными метками.

При обнаружении аномальных действий система отправляет сигнал сотрудникам службы безопасности, позволяя им быстро реагировать. В некоторых случаях ИИ интегрируется с POS-терминалами, анализируя соответствие чека и фактически вынесенных товаров.

Такие технологии уже активно используются в крупных торговых сетях, помогая снижать потери и обеспечивать безопасность магазинов.

Особое внимание уделяется зонам самообслуживания, где часто происходят попытки краж. Камеры с широким углом обзора устанавливаются так, чтобы отслеживать действия рук покупателя — пробивает ли он товар, корректно ли перемещает его на весы и кладёт ли в пакет тот самый продукт, который пробил. Это позволяет выявлять распространённые нарушения, связанные с подменой товаров или обходом весового контроля.

Контроль качества товара с помощью компьютерного зрения

Помимо мониторинга персонала ИИ-агенты расширяют аналитические сценарии на оценку качества и соответствия товара. На приёмке и выкладке используются нейросетевые модели, способные:

• считать и проверять ценники — детектировать наличие, правильность привязки и актуальность ценников к позиции.

• классифицировать состояние продукции — отличать спелые и вялые фрукты, выявлять брак или повреждения упаковки.

• контролировать полноту выкладки — сравнивать фактическое размещение товара с эталонной выкладкой и своевременно сигнализировать о недостаче.

Пример распознавания недостающих ценников компьютерным зрением

Пример распознавания недостающих ценников компьютерным зрением

Приватность и соответствие законодательству

В России с недавних пор действует жёсткий регламент на работу с биометрическими данными: сбор и хранение отпечатков пальцев, распознавание лиц или голос возможны только при прямом согласии сотрудников и обязательной регистрации в уполномоченных органах. В ответ на это большинство компаний в ритейле переходит на другие способы идентификации. Например, мы разработали систему небиометрической идентификации через невидимые маркеры. Подобные решения позволяют контролировать рабочие процессы и передвижения персонала, не нарушая законодательства и защищая права сотрудников.

Как ИИ-технологии работают в ритейле: процесс сбора и анализа данных

Процесс сбора и анализа данных включает три основных этапа:

1. Сбор данных. На этом этапе определяется пул источников: уже установленные или дополнительные камеры (общего вида и широкоугольные для зон самообслуживания, точечные над кассами), направленные микрофоны для контроля регламентов общения с посетителями, данные с POS-терминалов и учётных систем (1С и др.). Все источники данных, используемые для обучения модели ИИ, должны соответствовать ряду важных требований. Во-первых, обеспечивать одномоментность — то есть фиксировать события с точными и согласованными временными метками, что необходимо для корректного анализа последовательностей и временных взаимосвязей. Во-вторых, поддерживать постоянное обновление — данные должны поступать в реальном или близком к реальному времени, особенно если модель планируется применять в динамичных бизнес-процессах. И, наконец, источники должны отличаться высокой надёжностью: быть доступны круглосуточно, обеспечивать стабильную передачу и хранение данных без потерь и сбоев, что критично для качества ИИ-системы.

2. Анализ информации. На втором этапе платформа объединяет поступающие видеозаписи, звук и данные продаж, чтобы автоматически выделить в них ключевые события и аномалии. Система «видит» и классифицирует действия сотрудников и одновременно «слушает» зал, отмечая важные фразы даже в условиях повышенного уровня шума. Параллельно проверяется, совпадают ли данные с касс и складского учёта с тем, что показывают камеры: есть ли расхождения в продажах или остатках. Если выявляются подозрительные или нерабочие моменты, например отсутствие ценников — платформа автоматически формирует уведомление и структурированный отчёт. В результате магазин получает готовую картину работы по ключевым показателям без ручного просмотра часов видео и таблиц.

3. Обработка и отчетность. Агрегированные выводы по всем источникам данных сохраняются в системе и визуализируются в дашборде. Менеджмент получает оперативную сводку по ключевым метрикам и имеет возможность посмотреть данные как в реальном времени, так и за выбранный период.

Эффекты от внедрения и влияние на бизнес-процессы

Основной эффект от внедрения ИИ в ритейле — это повышение прозрачности процессов. Бизнес получает доступ к объективной информации о том, как работает персонал, какие зоны магазина наиболее загружены, и где возможны потери. Особенно это важно для оценки KPI, ротации персонала и принятия решений по премированию.

Системы также позволяют уточнять профиль покупателей, определять пол и возраст аудитории, анализировать поведенческие паттерны. Это помогает не только в планировке торгового пространства, но и в персонализации маркетинга.

По данным опроса, проведенного Nvidia, ритейлеры отмечают ряд значительных преимуществ от внедрения нейросетей в свою работу. Среди главных эффектов — снижение операционных расходов: у 28% компаний они сократились на 5–15%, а у 23% — более чем на 15%. Кроме того, 28% опрошенных зафиксировали рост выручки в пределах 5–15%, а 15% сообщили об увеличении доходов свыше 15%.

Что сложно автоматизировать, и куда движется рынок

Несмотря на успехи, остаются задачи, которые ИИ пока решает неидеально. Например, определение факта кражи требует комплексного анализа — только видео недостаточно. Необходимо сопоставление данных с кассы, движения покупателя и товарного учёта. Также ИИ не всегда может корректно интерпретировать сложное социальное поведение, особенно в нестандартных ситуациях. Система может фиксировать, что товар взят с полки, но не пробит. Однако покупатель мог просто временно отложить его или не дойти до кассы.

Тем не менее рынок развивается. В ближайшие годы можно ожидать появления решений, способных не только фиксировать события, но и предсказывать их: например, автоматическое прогнозирование пиков нагрузки, адаптация выкладки под спрос, автономное управление персоналом в реальном времени.
Больше про ИИ пишу здесь

ИИ в ритейле — это уже не эксперимент, а рабочий инструмент. Его внедрение требует системного подхода, но при правильной реализации он даёт бизнесу ощутимые результаты. Современные решения позволяют ритейлерам контролировать процессы, сокращать потери и повышать эффективность без прямого давления на персонал. ИИ становится не надзором, а помощником — и это главное изменение, которое он приносит в индустрию.

Показать полностью 3

Что лежит на столе технаря

Что лежит на столе технаря

Иногда смотришь на стол и думаешь — а что тут вообще происходит.
Вот разложил по картинке, подписал, чтобы самому было понятно.

На фото:
— рабочий ноут и второй для экспериментов
— флиппер (куда ж без него)
— куча проводов, которую уже никто не распутает
— малинка, модем, платы, СКУД — всё в работе
— принтер, мышка, маркер, книги
— схемы на доске, которые рисовал для проектов

На первый взгляд — бардак, а если присмотреться — рабочий порядок.

Больше о рабочей жизни пишу тут

А что у вас лежит на рабочем столе? Делитесь в комментариях.

Показать полностью 1
5

Как мы удивили Мишустина и Собянина искусственным интеллектом

Привет, я Вадим Медяник, занимаюсь ИТ-проектами, преимущественно с компьютерным зрением и ML. В этом посте хочу рассказать, как в офис, где я работаю, приезжал Михаил Мишустин — и как я принимал непосредственное участие в подготовке.

Михаил Мишустин и Сергей Собянин в нашем офисе

Михаил Мишустин и Сергей Собянин в нашем офисе

Итак ― офис находится в кластере «Ломоносов» ИНТЦ МГУ. За неделю до визита нас предупредили: в понедельник (это было 19 мая, как видите я все никак не мог собраться сесть написать этот пост) приедет председатель правительства Михаил Мишустин и мэр Москвы Сергей Собянин с делегацией: надо показать что-то живое и рабочее. Не прототип на слайде, а реальную систему, которую можно "потрогать" и посмотреть в деле.

Что лучше показать? Решений много, есть и более масштабные, и интересные, есть менее, а бОльшая часть вообще под NDA. Решили показывать наш новый R&D―проект по небиометрической идентификации, который ранее нигде не обнародовали.

Почему именно её? Показалось, что в контексте визита будет уместно рассказать о новой технике идентификации, которую мы сейчас тестируем внутри компании. В основе лежит специальный маркерный состав — краска, которую мы разработали и синтезировали. Она наносится на одежду, технику или любые другие объекты и остаётся невидимой для глаза, но фиксируется камерой. Это позволяет системе идентифицировать объект в кадре — при этом не прибегая к распознаванию лиц или сбору персональных данных.

Как мы удивили Мишустина и Собянина искусственным интеллектом

Вдаваться в технические подробности здесь не буду — планирую сделать отдельную статью, где подробно разберу архитектуру, технологии и сценарии. В этом посте хочу поделиться именно опытом подготовки, эмоциями и инсайтами, которые мы с командой для себя вынесли. Думаю, это будет полезно тем, кто тоже когда-нибудь окажется в ситуации подготовки стенда к визиту на высоком уровне.

Начался аврал подготовки: собрать стенд, настроить поток, продумать, как грамотно подать продукт. Было важно — не просто сделать красивую картинку, а показать живую работу модели, вывод результата, интерфейс, нормальную обвязку. Всё это — в условиях жёстких требований по безопасности и времени на развертку. Собирали стенд частично прямо на месте. Была отдельная работа по части безопасности: несколько встреч с СБ, отдельные согласования по оборудованию и размещению.

В день визита атмосфера была, мягко говоря, волнительной для команды. Делегация, много прессы, камеры. В какой-то момент просто поняли: всё, нас снимают. Через пару часов — уже в новостях, вечером начали приходить сообщения: «Смотри, ты на телеке». Было волнительно, но в хорошем смысле. Ощущение — как на защите проекта, только перед совсем другой аудиторией.

Как мы удивили Мишустина и Собянина искусственным интеллектом

Что вынесли из этой подготовки:

1. Технология — не главное. Главное — как ее применять.

Мы акцентировали внимание на идентификации сотрудников и обсудили с Михаилом Мишустиным вопросы этики: мол, идентификация, чипизация, оценка действий без согласия — с этим нужно быть осторожным. Даже пошутили про «шпионские технологии» и вопросы слежки за людьми. На самом деле система у нас изначально была спроектирована именно с учётом этих ограничений: без распознавания лиц, без персональных данных. В нашем рассказе мы сделали акцент на технической стороне и были приятно удивлены, что Сергей Собянин предложил нам идеи по применению нашей технологии в процессах сборки оборудования, техники, дронов и других конструкторских задач. Мы рады, что наша технология имеет поле для развития и применения в прикладных задачах.

2. Рабочий стенд лучше красивой презентации.

Особенно если он показывает не эффект, а суть. Когда можно увидеть реальную работу модели, а не зацикленный ролик или макет — это производит совсем другое впечатление. Тем более, если всё работает стабильно. Мы показывали прямо на потоке, с живой камерой, и это чувствуется. Да, это рискованнее. Но если уверены в системе — лучше показывать честно.

3. Делегирование — критично.

Если ты сам участвуешь и в разработке, и в демонстрации, и в сборке стенда, и в коммуникации с организаторами — легко перегореть. Очень помогает, когда есть распределённые роли: кто отвечает за оборудование, кто — за вывод, кто — за бэкап-план, кто — за общение с прессой. В нашем случае многое делалось вручную, и в следующий раз я бы чётче развёл роли внутри команды.

А пока — надеюсь, наш опыт будет кому-то полезен. Подготовка была непростой, но очень опыт получили точно не типовой.

Больше о жизни разработчиков из стартапа пишем в Telegram-канале

Показать полностью 2
Отличная работа, все прочитано!

Темы

Политика

Теги

Популярные авторы

Сообщества

18+

Теги

Популярные авторы

Сообщества

Игры

Теги

Популярные авторы

Сообщества

Юмор

Теги

Популярные авторы

Сообщества

Отношения

Теги

Популярные авторы

Сообщества

Здоровье

Теги

Популярные авторы

Сообщества

Путешествия

Теги

Популярные авторы

Сообщества

Спорт

Теги

Популярные авторы

Сообщества

Хобби

Теги

Популярные авторы

Сообщества

Сервис

Теги

Популярные авторы

Сообщества

Природа

Теги

Популярные авторы

Сообщества

Бизнес

Теги

Популярные авторы

Сообщества

Транспорт

Теги

Популярные авторы

Сообщества

Общение

Теги

Популярные авторы

Сообщества

Юриспруденция

Теги

Популярные авторы

Сообщества

Наука

Теги

Популярные авторы

Сообщества

IT

Теги

Популярные авторы

Сообщества

Животные

Теги

Популярные авторы

Сообщества

Кино и сериалы

Теги

Популярные авторы

Сообщества

Экономика

Теги

Популярные авторы

Сообщества

Кулинария

Теги

Популярные авторы

Сообщества

История

Теги

Популярные авторы

Сообщества

Недвижимость и ремонт

Теги

Популярные авторы

Сообщества