HostHub
Термин глоссария

Индексация сайта

Определение

Определение: индексация сайта — обработка страниц поисковой системой и добавление информации о них в поисковый индекс. Само посещение страницы роботом еще не означает ее включения в индекс.

3 мин чтения

Индексация сайта: как страницы попадают в поиск

Определение: индексация сайта — обработка страниц поисковой системой и добавление информации о них в поисковый индекс. Само посещение страницы роботом еще не означает ее включения в индекс.

Почему опубликованная страница может отсутствовать в поиске

Индексация сайта позволяет поисковой системе учитывать его страницы при подборе ответов на запросы пользователей. После публикации, материал становится доступен по прямой ссылке, но его появление в поиске требует отдельной обработки.

Поисковый индекс — база данных, в которой хранятся сведения об обнаруженных материалах. Когда человек вводит запрос, система обращается к этой базе и выбирает результаты, соответствующие его задаче. Поэтому доступность страницы в браузере и ее присутствие в поиске — разные состояния.

Как поисковая система обрабатывает материалы

Сначала система обнаруживает адрес страницы, например по ссылке с другого материала. Затем поисковый робот — программа для автоматического обхода сайтов — запрашивает ее содержимое.

На следующем этапе, система анализирует текст и другие доступные элементы, определяет тему и оценивает, следует ли включать материал в индекс. Обнаружение адреса, посещение страницы и сохранение сведений о ней происходят отдельно. Успешное прохождение одного этапа не гарантирует следующий.

Позиция в результатах поиска определяется уже при подборе ответа на конкретный запрос. Даже включенная в индекс страница может находиться далеко от первых результатов.

Что помогает обнаружить страницы

Важные материалы следует связывать понятными переходами: из меню, тематических разделов и других публикаций. Например, новую инструкцию по настройке почты можно разместить в разделе помощи и добавить ссылку на нее со страницы соответствующей услуги.

Дополнительный способ сообщить о материалах — файл sitemap.xml, то есть карта сайта для поисковых систем. Он содержит адреса страниц и может включать сведения об их обновлении. Такая карта помогает обнаруживать содержимое, но сама по себе не гарантирует его добавление в индекс.

Какие настройки требуют внимания

Файл robots.txt содержит правила обхода сайта для роботов. Через него можно ограничить доступ к отдельным адресам. При этом запрет обхода и запрет включения в поиск выполняют разные задачи.

Для запрета индексации используют специальное указание noindex, которое означает «не индексировать». Чтобы обработать это указание, робот должен получить доступ к странице. Одновременная блокировка обхода может помешать ему увидеть запрет.

Причиной отсутствия материала в поиске также могут стать ошибки загрузки, повторение содержимого другой страницы или перенаправление на иной адрес. Поэтому проверять следует конкретную страницу и причину ее исключения, а не только общее количество опубликованных материалов.

С чего начать проверку

Для диагностики используют кабинет владельца сайта в поисковой системе. В нем можно посмотреть состояние отдельных адресов и обнаруженные проблемы. Начать стоит с главной страницы, основных услуг и важных публикаций. Управление видимостью сайта начинается с доступных страниц, понятных связей между ними и корректных технических настроек. После устранения обнаруженной причины следует проверить результат повторной обработки: сама правка еще не означает, что поисковая система уже учла изменения.

Другие термины

Продолжайте разбираться — соседние термины глоссария.

Весь глоссарий

Остались вопросы по терминам?

В базе знаний собраны инструкции, документы и ответы на частые вопросы.

Открыть базу знаний

Обсудить задачу

Расскажите, что нужно сделать, — ответим и предложим решение.

  • Ответим в рабочее время
  • Подскажем подходящую услугу
  • Без обязательств: сначала обсудим задачу

Аналитика сейчас не подключена. Выбор можно изменить в настройках cookie.

Политика использования файлов cookie Согласие на обработку данных для аналитики