Структура сайтов конкурентов

Помощь по сервису

Стоимость анализа: До 100 страниц = 1 лимит; до 1000 страниц = 10 лимитов; до 5000 страниц = 20 лимитов; до 10000 страниц = 30 лимитов..
Минимум: 1 конкурент.
Максимум: 5 конкурентов.

Внимание! Время выполнения задачи зависит от количества обрабатываемых страниц и от очереди задач и может достигать нескольких часов. Но результат обязательно придёт вам на почту!

При сборе структуры сайта возможны следующие ограничения:

  • Отсутствие sitemap: Если на сайте нет файла sitemap.xml или он не указан в robots.txt, анализатор не сможет определить структуру сайта.
  • Недоступный или повреждённый sitemap: Если sitemap возвращает ошибку (404, 500) или имеет неверный формат XML/TXT, анализатор пропустит сайт.
  • Фильтрация файлов по расширениям: Из sitemap исключаются URL-адреса, ведущие на изображения (.jpg, .png), документы (.pdf, .docx), видео (.mp4) и другие файлы, не содержащие HTML-контент.
  • Фильтрация по путям: Страницы, находящиеся в служебных разделах (например, /wp-content/, /static/, /uploads/, /css/, /js/), не попадают в результат.
  • Максимальное количество страниц: Анализатор ограничивает количество обрабатываемых URL согласно параметру Максимальное количество страниц для анализа (по умолчанию — 100). При превышении лимита оставшиеся страницы пропускаются.
  • Ограничение размера HTML: Загружается только первые 64 КБ кода страницы. Если важные элементы находятся в конце документа, они могут быть не считаны.
  • JavaScript-зависимый контент: Анализатор работает на уровне HTML-кода. Если контент загружается динамически через JavaScript (SPA, React, Vue), часть структуры сайта может отсутствовать.
  • Недоступные или защищённые страницы: Страницы, требующие авторизации, закрытые по robots.txt или возвращающие ошибки (403, 404, 500), не попадают в анализ.
  • Ошибки соединения или таймауты: Если сервер сайта отвечает слишком медленно, страница может быть пропущена после нескольких неудачных попыток загрузки.
  • Повторяющиеся или циклические sitemap: Если sitemap содержит ссылки на другие sitemap-файлы, которые зацикливаются, анализ останавливается на глубине 3 уровней, чтобы избежать бесконечной рекурсии.

Рекомендуем: перед запуском полного анализа сначала протестируйте обработку до 100 страниц — это поможет убедиться, что сайт парсится корректно и без ошибок.

Вы не авторизованы. Пожалуйста, войдите в систему, чтобы продолжить.