GlowByte: когда цену конкурента допустимо взять из прошлой недели
Пропуском в данных о ценах конкурентов считается отсутствие информации о цене товара в определенный момент времени в определенной точке конкурента. Причины бывают разными: от технических ошибок до временного отсутствия товара.
В цикле экспертных материалов о подготовке цен конкурентов бизнес-архитектор GlowByte Алексей Чванов последовательно разбирает этапы методики. В этом материале он рассказывает, как в методике GlowByte определять пропуски, как далеко назад можно заглядывать при их восстановлении и как выбор способа сбора связан с частотой мониторинга.
В цикле экспертных материалов о подготовке цен конкурентов бизнес-архитектор GlowByte Алексей Чванов последовательно разбирает этапы методики. В этом материале он рассказывает, как в методике GlowByte определять пропуски, как далеко назад можно заглядывать при их восстановлении и как выбор способа сбора связан с частотой мониторинга.
Во втором материале цикла, «GlowByte: почему волну мониторинга цен нельзя отдавать по частям», речь шла о том, как находить выбросы в мониторинге. В методике подготовки цен конкурентов, которую мы развиваем в GlowByte, восстановление пропусков идет отдельным этапом. Первый шаг этого этапа — детекция пропусков. Затем к найденным пропускам применяются методы восстановления.
Откуда берутся пропуски
Пропуски возникают по разным причинам: из-за технических ошибок, временного отсутствия товара, ошибок в мониторинге или намеренного сокрытия данных. Кроме того, пропуск остается там, где мы сами удалили выброс.
Как определить, что цены нет
Мы используем два критерия. Первый — временной пропуск: цена в точке конкурента присутствовала в предыдущем мониторинге и отсутствует в текущем. Критерий применим, если предыдущий мониторинг был не более чем n дней назад. Второй — аномалия: в текущем мониторинге были выявлены выбросы, и данные были удалены.
Взять из прошлого, но с лимитом глубины
Восстановление пропуска часто сводится к трансляции цены конкурента из предыдущего мониторинга. Для каждого мониторинга определена максимальная глубина поиска.
Пример настройки такой. Товары, определяющие ценовое восприятие (KVI), мониторятся каждую неделю, глубина поиска одна неделя. Группа EPP мониторится два раза в неделю, глубина две недели. Свежая продукция (фреш) мониторится каждую неделю, глубина одна неделя. Из полученных исторических данных задается агрегат, который используется для восстановления. Мы в GlowByte используем медиану по n точкам в разрезе «товар, конкурент, город».
Пример настройки такой. Товары, определяющие ценовое восприятие (KVI), мониторятся каждую неделю, глубина поиска одна неделя. Группа EPP мониторится два раза в неделю, глубина две недели. Свежая продукция (фреш) мониторится каждую неделю, глубина одна неделя. Из полученных исторических данных задается агрегат, который используется для восстановления. Мы в GlowByte используем медиану по n точкам в разрезе «товар, конкурент, город».
Восстановление по географии
Есть и второй способ: восстановить цену конкурента на товар в точке, А по цене этого же конкурента на этот же товар в точке В. Применять его нужно с осторожностью, потому что многие сети дифференцируют ценообразование по кластерам магазинов внутри населенного пункта.
Можно заранее исследовать ценовые кластеры конкурентов, но это потребует значительных ресурсов, к тому же со временем кластеры могут поменяться. Поэтому на практике восстановление по географии применяется не очень широко.
Прозрачность восстановленных цен
Восстановленные цены конкурентов сохраняются в итоговую витрину данных. При этом сохраняется признак восстановления и дата, с которой оно произошло. Это нужно для прозрачности и поиска возможных ошибок.
Пример из проекта, где шаг не потребовался
В каждой компании по определенным причинам можно отказаться от части шагов. Так было у одного из клиентов GlowByte. В ходе проекта мы обнаружили, что шаги по восстановлению пропусков практически никогда не требуются. Подрядчик, поставляющий мониторинги, фактически выполнял этот шаг на своей стороне.
Источники данных
Мониторинг собственными силами предполагает большой штат специалистов. Они часто меняются, поэтому при определенных масштабах нужна платформа для постоянного привлечения новых людей. Этот метод обеспечивает достаточно точные данные о цене в конкретном магазине конкурента, но имеет высокую стоимость, независимо от того, осуществляется ли он своими силами или с помощью подрядчика. Скорость сбора невысока.
Парсинг сайтов и мобильных приложений конкурентов позволяет быстро собирать данные, и стоимость мониторинга намного ниже, чем при фотомониторинге с помощью мониторщиков. Для этого нужна команда технических специалистов, которые постоянно поддерживают парсеры в актуальном состоянии. Следует учитывать, что у некоторых конкурентов цены в онлайн-канале могут не совпадать с ценами в офлайне. Статистика партнеров GlowByte, компании PromoData, показывает, что таких сетей немного. Даже в таком случае часто получается уловить зависимость между ценообразованием в онлайне и офлайне.
Парсинг сайтов и мобильных приложений конкурентов позволяет быстро собирать данные, и стоимость мониторинга намного ниже, чем при фотомониторинге с помощью мониторщиков. Для этого нужна команда технических специалистов, которые постоянно поддерживают парсеры в актуальном состоянии. Следует учитывать, что у некоторых конкурентов цены в онлайн-канале могут не совпадать с ценами в офлайне. Статистика партнеров GlowByte, компании PromoData, показывает, что таких сетей немного. Даже в таком случае часто получается уловить зависимость между ценообразованием в онлайне и офлайне.
Для поддержки парсеров нужны технические специалисты, но на рынке сейчас достаточно квалифицированных кадров и команд, готовых взять эту задачу на себя. Поэтому вопрос поиска исполнителей для парсинга решается проще, чем может показаться, и не должен быть основным сдерживающим фактором при выборе метода.
Подрядчики с мониторингами на основе парсинга бывают двух видов. Одни делают мониторинг на заказ, и он, как правило, дорогой. Другие ведут непрерывный мониторинг всех участников рынка и продают результаты по подписке, поэтому стоят намного дешевле. Качество и скорость работы обоих видов подрядчиков сопоставимы.
Как часто собирать
Для корзин, формирующих ценовой имидж (front basket), сбор обычно устанавливается один-два раза в неделю. Для остальных корзин (back basket) частота зависит от типичной частоты пересмотра закупочных цен в категории и от важности самой категории.
Пример правил такой. Товары KVI собираются еженедельно. Генераторы трафика собираются в соответствии со средней частотой изменения закупочных цен, не чаще раза в неделю и не реже раза в квартал. Основа покупки и импульс собираются не чаще раза в месяц и не реже раза в полгода. Дополнительный ассортимент собирается раз в год. Для сезонных категорий частота определяется ролью, назначенной на период сезона и на период несезона.
На основе этих правил формируется годовой график мониторинга по неделям. Он составляется так, чтобы количество данных в неделю было примерно одинаковым, и нагрузка на участников процесса ценообразования распределялась равномерно. В графике учитываются и даты пересмотра категорий, в первую очередь для сезонных.
Пример правил такой. Товары KVI собираются еженедельно. Генераторы трафика собираются в соответствии со средней частотой изменения закупочных цен, не чаще раза в неделю и не реже раза в квартал. Основа покупки и импульс собираются не чаще раза в месяц и не реже раза в полгода. Дополнительный ассортимент собирается раз в год. Для сезонных категорий частота определяется ролью, назначенной на период сезона и на период несезона.
На основе этих правил формируется годовой график мониторинга по неделям. Он составляется так, чтобы количество данных в неделю было примерно одинаковым, и нагрузка на участников процесса ценообразования распределялась равномерно. В графике учитываются и даты пересмотра категорий, в первую очередь для сезонных.
Что проверить до старта
1.Задайте максимальную глубину поиска для каждого типа мониторинга.
2.Выберите агрегат для восстановления. Мы используем медиану по n точкам.
3.Решите, нужно ли вам восстановление по географии, и если да, исследуйте ценовые кластеры конкурентов.
4.Сохраняйте признак восстановления и его дату рядом с ценой.
5.Составьте годовой график мониторинга по неделям с равномерной нагрузкой.
2.Выберите агрегат для восстановления. Мы используем медиану по n точкам.
3.Решите, нужно ли вам восстановление по географии, и если да, исследуйте ценовые кластеры конкурентов.
4.Сохраняйте признак восстановления и его дату рядом с ценой.
5.Составьте годовой график мониторинга по неделям с равномерной нагрузкой.
Продолжение серии
Дальше в серии речь пойдет о трансляции цен. Расскажу, как перенести известные цены конкурента на товары, по которым мониторинг цены не дал: внутри горизонтальных и вертикальных линеек и на бренд в категории.