Термин · SEO-специалист
Crawler
Робот или инструмент, который обходит страницы сайта по ссылкам.
Что означает
SEO-краулеры помогают находить технические ошибки: статусы, метатеги, canonical, глубину, дубли и внутренние ссылки.
Пример применения
Screaming Frog, Sitebulb, JetOctopus.
Синонимы и варианты
Частые вопросы
Что такое Crawler?
Робот или инструмент, который обходит страницы сайта по ссылкам.
Где применяется Crawler?
SEO-краулеры помогают находить технические ошибки: статусы, метатеги, canonical, глубину, дубли и внутренние ссылки.
Как выглядит пример Crawler?
Screaming Frog, Sitebulb, JetOctopus.
Связанные термины
Где встречается
В проверке доступности страницы поисковому роботу и согласованности статуса, запретов, canonical, внутренних ссылок и sitemap.
Ошибки понимания
Обход, индексирование и показ в выдаче — разные этапы. Ни присутствие в карте, ни ответ 200, ни снятие запрета сами по себе не гарантируют включение страницы в индекс.
Редакция Ariol · Версия 2 · Обновлено
Независимая экспертная проверка не заявлена.
Что обновлено
- — Обновлено: Где встречается, Ошибки понимания.
Материал предназначен для обучения. Адаптируйте рекомендации к внутренним регламентам компании и условиям проекта.
Предложить исправление через контакты Ariol