AGD Index

Индексация WordPress: как ускорить попадание постов в Google

WordPress — самая распространённая CMS в мире, и индексация на ней имеет характерные особенности: свои стандартные блокировки, свой генератор sitemap, свои плагины «мгновенной индексации». Разбираем полную цепочку: базовые настройки, снятие блокировок и главный рычаг ускорения — массовая отправка URL визитами ботов AGD Index, которая работает поверх любой версии WordPress без Google Cloud и скриптов.

Базовая настройка индексации WordPress

Проверьте главный выключатель

Самая частая причина, почему WordPress-сайт не индексируется: Настройки → Чтение → «Попросить поисковые системы не индексировать сайт». Галочка ставится на время разработки и забывается. Она проставляет noindex всему сайту — от главной до свежих постов.

Проверьте прямо сейчас: откройте исходный код главной страницы и найдите <meta name='robots' content='noindex... — если он есть, снимите галочку и запросите переобход.

ЧПУ и структура URL

Настройки → Постоянные ссылки: включите «Название записи» (/nazvanie-zapisi/). Стандартные URL вида /?p=123 индексируются, но создают дубли и хуже кликаются в выдаче. После смены структуры URL — обязательные 301-редиректы со старых адресов.

Настройки конфиденциальности

Проверьте, не стоит ли сайт в режиме «поисковая видимость ограничена» и нет ли пароля на хостинге (.htaccess basic auth закрывает сайт от ботов целиком).

Sitemap для WordPress

Современный WordPress (5.5+) генерирует sitemap.xml из коробки — базовый, по типам контента. Плагины SEO расширяют его: Yoast SEO и Rank Math создают sitemap с фильтрацией (можно исключить таксономии, архивы авторов, теги).

Настройка:

  1. Убедитесь, что sitemap доступен: ваш-сайт.ru/sitemap.xml (Yoast: /sitemap_index.xml, Rank Math: /sitemap_index.xml).
  2. Добавьте ссылку на карту в Search Console → «Файлы Sitemap».
  3. Уберите из карты мусор: архивы по датам, страницы тегов без контента, media-страницы вложений.

Проверьте robots.txt: в нём не должно быть Disallow: /sitemap.xml и других запретов, перекрывающих карту.

Дубли контента: что закрыть от индексации

WordPress по умолчанию создаёт множество URL-дублей одной сущности:

  • архивы категорий, тегов, авторов, дат;
  • фид-страницы (/feed/);
  • вложения (attachment-страницы картинок);
  • пагинация (/page/2/);
  • ссылки с параметрами (поиск, сортировки).

Что делать:

  • закройте от индексации теги (если не ведёте их осознанно), архивы дат, фид-страницы — через настройки SEO-плагина (раздел «Таксономии»);
  • canonical на страницах пагинации должен указывать на саму себя, а не на первую страницу;
  • внутренний поиск и служебные URL — в robots.txt (Disallow: /?s=).

Чем меньше дублей — тем больше crawl budget остаётся вашим постам. Подробно про блокировки: Robots.txt и noindex.

Плагины мгновенной индексации — почему они больше не работают

Для WordPress есть плагины, отправляющие URL через Google Indexing API сразу после публикации:

  • Rank Math — Instant Indexing (бесплатный модуль): настройка сервисного аккаунта Google Cloud из админки, автопосылка новых/обновлённых записей;
  • Instant Indexing & Check for Google SEO и аналоги из каталога плагинов.

Схема у них такая: публикация поста → запрос URL_UPDATED в Indexing API → Google ставит URL в очередь обхода. Проблема — последний шаг для обычных записей больше не происходит: официально Indexing API разрешён только для вакансий (JobPosting) и трансляций (BroadcastEvent), а запросы для остальных страниц Google игнорирует. Вебмастера массово фиксируют, что метод «перестал работать».

Настройка сервисного аккаунта Google Cloud и сам плагин здесь уже ничего не дают: посты через Indexing API в очередь обхода не попадают. Рабочая альтернатива для WordPress — массовые визиты ботов (ниже).

WP-Cron: скрытый тормоз индексации

WordPress планирует задачи (включая уведомления плагинов) через WP-Cron — он срабатывает при заходах посетителей. На сайте с низким трафиком публикации «висят»: карта обновляется с задержкой, плагины отправляют уведомления с опозданием.

Решение — системный cron на хостинге:

*/5 * * * * wget -q -O - https://ваш-сайт.ru/wp-cron.php

и константа DISABLE_WP_CRON в wp-config.php (настройка для администраторов; при сомнениях — поддержите стандартное поведение).

Как отправить посты WordPress на индексацию массово

Ситуации, когда нужен объём, а не штучная отправка:

  • после миграции домена или смены структуры URL;
  • программные страницы: тысячи записей каталога, созданные импортом;
  • интернет-магазин: массовое обновление товарных страниц;
  • контентные сети: десятки сайтов на WordPress с ежедневными публикациями.

Порядок действий:

  1. Выгрузите чистый список URL (экспорт из БД, плагинами типа Export All URLs или из sitemap).
  2. Прогоните чек-лист: 200 OK, нет noindex, canonical корректен (подробности — почему Google не индексирует страницы).
  3. Отправьте список .txt файлом в Telegram-бот AGD Index — реальный Googlebot (или Bingbot) придёт на каждый URL: один визит = один URL из файла. Без квот Search Console и настройки Google Cloud.
  4. Для регулярной отправки подключите API: публикация поста → автоматическая отправка URL.

Тарифы — от 2 000 визитов за 10 USDT, новые пользователи получают стартовый бонус.

Часто задаваемые вопросы

Как добавить сайт на WordPress в Google?

Создайте ресурс в Google Search Console (подтверждение через HTML-файл или плагины SEO), включите sitemap, снимите галочку «Попросить поисковые системы не индексировать сайт». После этого отправляйте главную и ключевые URL на обход.

Почему посты WordPress не индексируются?

Топ-причины: галочка «не индексировать» в настройках чтения; noindex от SEO-плагина для типа записи; сайт закрыт в robots.txt; дубли съедают crawl budget; контент тонкий. Диагностика по шагам — в гайде почему Google не индексирует страницы.

Нужен ли плагин для sitemap на WordPress?

С WordPress 5.5 базовый sitemap есть из коробки. Плагин (Yoast, Rank Math) нужен для фильтрации: исключение таксономий, контроль приоритетов, мультисайт-сценарии.

Пинг-сервисы (ping services) ускоряют индексацию?

Устаревшая механика: WordPress рассылает уведомления RPC-сервисам, которые никто не читает. Современный аналог — визиты ботов.

Стоит ли ещё настраивать Indexing API для WordPress?

Нет — для обычных постов он больше не работает: Google официально оставил API только для вакансий и трансляций, а запросы для остальных страниц игнорирует. Для регулярных публикаций и объёмов рабочий канал — визиты ботов: они покрывают и чужие URL (беклинки), без настройки Google Cloud.

Как ускорить переиндексацию после обновления товара/поста?

Обновите дату изменения в sitemap (плагины делают сами), запросите индексирование в GSC или отправьте обновлённый URL визитом бота. Для сотен обновлённых страниц — списком через AGD Index.

Что дальше

Бот для индексации страниц в Google и Bing

Подходит для новых сайтов и массовой загрузки backlinks. Направляем реальных поисковых ботов Googlebot и Bingbot на ваши URL — страницы и ссылки обнаруживаются быстрее, чем при ожидании естественного обхода.

Открыть Telegram-бота