ProMakeup Opt
оптовый магазин косметики для бьюти-индустрии, каталог почти 4 тыс. позиций
- Задача
- Выяснить, почему в индекс попадает заметно меньше товаров, чем в каталоге.
- Решение
- Обход всех адресов карты сайта, которые отдает сервер, сверка их между собой и реальным каталогом.
- Результат
- Каноническая карта сайта содержит 4 167 адресов – 3 947 товаров, 166 брендов, 47 категорий и 6 информационных страниц. Параллельно по стандартному адресу живет старая карта: 7782 записи, из них только 2755 уникальных (2454 адреса повторены по три раза) и около 2706 товарных. То есть краулер, идущий по стандартному адресу, видит одновременно дублированный и неполный каталог. Отдельно: ни одного адреса второй языковой версии в карте нет, хотя двуязычие реализовано. Измерение 31.07.2026, два последовательных прогона дали одинаковый результат.