Любому владельцу сайта хочется, чтобы страницы сразу после появления привлекли посетителей и попадали в индекс. Например, в случае с интернет-магазинами это новые категории или товары. Информационные порталы заинтересованы в том, чтобы размещённые материалы как можно дольше не теряли актуальность. Даже сайты с разными услугами соревнуются с конкурентами в поиске.
Рассмотрим несколько способов как ускорить индексацию страниц сайта!
Улучшение внутренней СЕО-оптимизации
На первом этапе обязательно проверяют файл под названием robots.txt.
- Смотрят на то, правильно ли выстроен синтаксис.
- Делают так, чтобы страницы авторов и архивы, теги и результаты поиска, системные файлы оказались закрытыми. Элементы бесполезны в случае с поиском, а роботы тратят время на то, чтобы всё отсканировать. Иногда из-за этого не успевает добраться до основного контента.
- Проверяют, не запрещена ли индексация. Для этого страницы не нужно закрывать с помощью директивы Disallow. Если в роботе прописана данная строка, значит, роботы не проводят индексацию именно для этого сайта, она запрещена.
- Нужно проверить, имеется ли этот файл вообще в наличии. site.ru/robots.txt — стандартное место расположения. При отсутствии элемента всё создают и настраивают.
Раздел с инструментами и анализа в Яндекс. Вебмастере помогает найти ошибки в robots.txt, если они есть.
Этот раздел анализирует не только текущую версию файла, но и предыдущие. Можно скачивать документ, чтобы потом всё редактировать.
Доступность отдельных адресов для индексации проверяется в этом же разделе.
Создание файла sitemap.xml
В файле sitemap.xml есть ссылки, ведущие на каждую страницу сайта. Благодаря этому поисковым системам проще ориентироваться в общей структуре. Sitemap.xml включает все новые страницы, которые появляются на проекте.
В robots.txt тоже надо прописать отдельную строку с указанием пути к файлу.
В панелях для вебмастеров тоже есть раздел с инструментами и анализом файлов Sitemap. Это в равной степени касается Яндекса и Google.
Динамический вариант того же самого документа избавляет владельца от необходимости обновлять информацию вручную каждый раз после того, как появятся новые страницы. Для этого используют плагины. All in OnE SEO Pack — пример самого популярного инструмента для WordPress. Либо можно выбрать для этого средства PHP. Перед обращением робота динамические страницы создаются каждый раз автоматически.
Карта сайта в формате HTML
Создаётся отдельная страница со ссылками на другие адреса сайта, которые могут представлять интерес. Такой вариант актуален как для посетителей, так и для роботов. Отличный вариант, чтобы организовать перелинковку.
В случае с Google данный метод утратил актуальность. Рекомендуется работать со структурой сайта напрямую, чтобы не создавать карты сайта HTML. Пока что в Яндексе подобных заявлений не публиковали. Поэтому отказываться не стоит тем более, что на решение вопроса уходит всего несколько минут.
Проверка ответов сервера
Код 200 должен появляться при обращениях к серверу от поискового робота. Например, если страница существует. При несуществующем элементе появляется ошибка 404. 1,5-2 секунды считается оптимальным временем ответа. В противном случае роботы не дожидаются ответов, покидают сайты.
Проверить ответ со стороны сервера можно в разделе Инструментов сервиса Яндекс Вебмастер.
Улучшение внутренней перелинковки
На страницу надо размещать ссылки с других адресов, которые уже были проиндексированы. Главное — чтобы контент оставался близким к той или иной тематике.
Максимальной эффективностью в этом плане отличаются ссылки с главной страницы, либо с других адресов, которые пользователи посещают чаще всего. Например, можно в конце статей размещать новые материалы или популярные, либо те, что похожи на текущую статью.
Уровень вложенности
Именно от этого показателя зависит то, как быстро робот добирается до нового адреса. Хорошо, если от главной страницы его отделяет максимум три клика. Уровни 5,6 и больше индексируются уже не так хорошо.
Составление уникальных и полезных текстов
Наличие поверхностного рерайта и плагиата приведёт к тому, что страницы не окажутся в индексе. Поисковые системы считают, что это дубликат другого контента, поэтому пользователи не получат пользу от такого текста и seo сайта будет не на высоте.
Заключение
Выше перечислены далеко не все методы, которые помогают улучшить результаты поисковой выдачи. Мало одного качественного контента. Надо, чтобы он постоянно обновлялся. Чем чаще выходят новые публикации — тем лучше. При этом не стоит забывать передавать интересные материалы каналам, которые хорошо посещают люди. Особенно это касается социальных сетей. Тогда у страницы будет больше шансов на добавление в индексы.
Чем больше ссылок с авторитетных ресурсов на проект клиента — тем лучше. Это тоже повышает значимость сайта. Прямое сотрудничество с вебмастерами тоже повышает результаты. Есть множество сервисов, с помощью которых легко найти проекты, подходящие под конкретные запросы.