Как отправить страницу на переобход в гугл
Перейти к содержимому

Как отправить страницу на переобход в гугл

  • автор:

Как ускорить индексацию сайта в Яндексе и Google ��

Чем быстрее страница займет место в выдаче поисковой системы, тем быстрее ее смогут увидеть пользователи, и тем больше вероятность, что она будет считаться первоисточником контента.

Нельзя точно сказать, когда боты поисковых систем просканируют страницу и она появится в выдаче. На частоту индексирования страниц ботами влияет:

  • Частота обновления контента страниц. Боты составляют краулинговый бюджет сайта на основе данных об обновлении контента. Если страницы не меняются, нет смысла их часто сканировать.
  • Поведенческие факторы, которые обрабатывают поисковые боты. Чем лучше ПФ, тем востребованнее сайт у аудитории, а это еще один сигнал к повышению внимания от робота.
  • Хостинг. На загруженном хостинге снижается скорость обработки запросов от робота.

Разберем типичные проблемы, с которыми сталкиваются оптимизаторы.

Частые проблемы с индексацией сайта в ПС

Страницы вообще не индексируются

Если роботы и Яндекса, и Google игнорируют страницы сайта, нужно убедиться, что ботам не запретили обход. Проверьте настройки хостинга и файл robots.txt — там не должно быть запрета на индексацию. Также запрет может быть в HTTP-заголовке X-Robot-Tag, который находится в файле конфигурации сервера. Проверить запрет через X-Robots-Tag можно в инструменте бесплатно.

Страницы не индексируются одним из поисковиков

Если либо Google, либо Яндекс не индексируют страницы сайта, проблема может быть в санкциях от этого поисковика. Нужно определить, какие санкции лежат на сайте, и исправить ошибки. Помогут материалы о санкциях Яндекса и фильтрах Google.

Страницы индексируются, но долго

Если приходится долго ждать индексации новых страниц, вариантов может быть много: контент редко обновляется и поэтому боты редко его посещают, страницы не оптимизированы, не участвуют в перелинковке или проблема в чем-то другом. Способы ускорить индексацию мы разберем дальше.

Посмотреть динамику индексации страниц и найти ошибки в SEO можно в сервисе для анализа сайта от PR-CY:

Проверить индексирование страниц онлайнГрафик индексации в сервисе

Итак, если страницы не индексируются, то проверьте ограничения, если игнорирует поисковик, то возможны санкции, а если индексирование идет, но долго, это повод попытаться его ускорить.

Как ускорить индексацию страниц

Представитель Google Джон Мюллер на вопрос об индексировании ответил так:

Создавайте превосходный контент, а если ваш контент плохо индексируется, то он недостаточно превосходный. 🙂 Это все, конечно, хорошо, но давайте посмотрим, что конкретно можно сделать, чтобы ускорить процесс.

Отправить страницу на переобход

Можно дополнительно обратить внимание поисковиков на конкретные URL. В Google Search Console и Яндекс.Вебмастере найдите переобход страниц и отправьте нужные URL на индексацию.

В Яндекс.Вебмастере это раздел Индексирование — Переобход страниц. В консоли Google это Инструмент проверки URL.

Массовая отправка страниц на переиндексацию в Google

Есть способ отправлять на повторное сканирование не по одной ссылке за раз, а по 200 URL в день. В этом мог бы помочь бесплатный скрипт, который сделал SEO-отдел компании Journey Further на базе Indexing API Google. Проблема в том, что для его работы понадобится аккаунт в Google Cloud Platform, но в марте Google перестал регистрировать пользователей из России в своем облачном сервисе.

Если вы не из РФ, можете настроить скрипт для массовой переиндексации URL. Для этого нужно:

Создать сервисный аккаунт в Google Cloud Platform.

Создать закрытый JSON-ключ.

Скачать скрипт и вставить ключ вместо содержимого service_account.

Связать скрипт с Google Search Console: назначить владельцем client_email. Нужен не полный доступ, а именно роль «Владелец».

Перейти по ссылке, выбрать сервисный аккаунт, который вы создали, и включить Index API.

В папке скрипта открыть файл urls и внести в него до 100 URL. Если нужно больше, можно отправить еще до 100 во втором заходе. В день можно отправлять не больше 200 ссылок.

Вызвать PowerShell, зажав Shift и правую кнопку мыши в окне.

Прописать node index.js.

Готово, через несколько секунд появится 200 ОК.

Проверить разрешения в robots.txt

В файле robots.txt веб-мастер прописывает рекомендации для поисковых ботов Яндекса и Google. Можно запретить ботам посещать некоторые страницы, для этого есть директива «disallow», «nofollow», можно использовать мета-тег «noindex» или «none». Тогда при следующем посещении сайта бот увидит запрет и может к нему прислушаться. А может и не прислушаться.

Как говорит Ксения Пескова, SEO-TeamLead в Siteclinic:

В любом случае, лучше проверить файл robots, вдруг там стоят запреты, к которым прислушались боты поисковых систем.

Создать Sitemap — Карту сайта

Карта сайта помогает поисковым ботам понять структуру ресурса и обнаруживать обновления контента.

Для ускорения индексации карту можно сделать динамической, то есть по мере создания новых страниц она сама будет обновляться. Для проектов на конструкторах сайтов, например, на Tilda, карта по умолчанию динамическая, для CMS есть плагины и отдельные сервисы. К примеру, на WordPress с этой задачей справится All in One SEO Pack.

Можно обновить файл Sitemap вручную. Обновленные страницы Google рекомендует отметить в Карте тегом < lastmod >. Обновленный файл отправьте с помощью специального отчета. Не стоит загружать один и тот же файл повторно: если вы ничего не поменяли в Карте сайта, никаких изменений не будет.

Но опять же, ссылки в Карте сайта — это рекомендации, важнее создать грамотную структуру сайта и организовать внутреннюю перелинковку.

Проверить структуру и перелинковку разделов

На сайте не должно быть страниц, оторванных от других. Если на страницу не ведут ссылки с категорий, разделов и других страниц, поисковикам сложнее определить ее релевантность и неоткуда перейти на нее для сканирования. Такие страницы называют сиротами.

Страница без ссылок в структуре

Страница-сирота в структуре сайта

Нужно встроить их в структуру сайта. К примеру, в этой схеме каждая страница имеет ссылку с родительской категории, но они вполне могут линковаться и между собой:

Грамотная структура сайта

Упрощенный пример структуры сайта, подходит для меню

Еще один момент, который влияет на поведение бота — это Click Distance from Index (DFI), то есть количество кликов от главной до текущей страницы. Чем оно меньше, тем важнее считается страница, тем больший приоритет она получит с точки зрения бота. Приоритетные страницы он смотрит первее остальных.

DFI не определяется по числу директорий в URL, они могут не совпадать. Например, если на главной странице будет ссылка на хит продаж — конкретную модель холодильника Atlant, то DFI будет равен двум. Но при этом карточка модели может находиться в каталоге и подразделе каталога, тогда директорий будет больше — site.com/shop/refrigerator/one_chamber_refrigerators/atlant/h_1401_100.

Если страница не индексируется, проверьте ее расположение в структуре сайта и количество кликов до нее с главной.

Взять за правило обновлять контент

Поисковики ценят, когда веб-мастер следит за актуальностью контента, исправляет его и добавляет что-то новое. Регулярно обновляющийся сайт бот будет чаще сканировать. Чем реже обновлять контент, тем реже боту понадобится его перепроверять.

Сотрудник Google советовал добавлять на страницу видео с Youtube, если странице нечего добавить и содержание еще актуально. Поведенческие улучшатся за счет просмотра видео, на странице появится новый формат контента — это тоже хороший сигнал для поисковика.

Публиковать ссылки в соцсетях и на других площадках

Найдите сторонние сайты по вашей тематике, где можно оставлять ссылки или публиковать посты, и размещайте таким образом ссылки на новые материалы.

CTO компании Pear Advert Иван Самохин:

Вы можете договориться о партнерстве с площадкой, близкой вам по тематике, и обмениваться ссылками. Главное, что размещения ссылок должны выглядеть естественными и подходить по теме. К примеру, ссылка на магазин рыболовных снастей будет уместно выглядеть на форуме рыболовов или туристическом портале. Ищите справочники, форумы, другие соцсети, отзовики, сервисы вопросов и ответов и другие площадки для размещения.

Если вы ведете страницы в социальных сетях, размещайте на них анонсы ваших новых материалов. С помощью разметки OpenGraph можно задать ссылке красивое превью с нужной картинкой и заголовком, и получить переходы пользователей на страницу.

Как сделать превью для ссылки

Превью ссылки в посте в ВКонтакте

Ускорить загрузку сайта

Ограничивать индексацию может долгий ответ сервера. По словам Джона Мюллера из Google, если в среднем это время составляет больше одной секунды, Google не будет сканировать столько страниц, сколько мог бы.

Медленная загрузка страниц вредит им по всем параметрам: пользователи не ждут, а поисковые системы считают страницы некачественными и могут даже понизить сайт в выдаче, если проблема с загрузкой есть у всех страниц.

Многое можно проверить на сайте автоматически. Поможет сервис для анализа сайта: он оценит загрузку сайта и отдельно найдет конкретные страницы, на которых есть проблема со скоростью.

Сервис для измерения скорости сайта онлайнПроверка скорости загрузки Онлайн сервис для аудитаПоиск медленных страниц на сайте

FAQ: что еще влияет на скорость индексации сайта

Как страницы вне индекса могут повлиять на отношение поисковика к сайту?

Качество контента на сайте поисковики оценивают только по проиндексированным страницам.

Тег noindex может влиять на индексацию страницы после его снятия?

По словам Джона Мюллера из Google, у веб-мастера не будет проблем с реиндексацией URL, на которых когда-то был noindex.

Как редирект влияет на индексацию страниц?

Джон Мюллер утверждает, что поисковик скорее всего не проиндексирует конечный URL при использовании ссылок с 301 редиректом.

Как ускорить индексацию страниц, которые были 404?

Если адрес страницы отдавал 404 и не был индексирован, на индексирование может потребоваться некоторое время. Как советуют Seroundtable, можно создать новый URL для этого контента и настроить 301 редирект со старого адреса, либо запросить повторное сканирование URL.

Как поисковики относятся к URL c хэшами?

URL с хешами поисковик не проиндексирует. То есть ссылка https://site.ru/news/p/statya проиндексируется, а ссылка на конкретную часть статьи — https://site.ru/news/p/statya#step — нет.

Расскажите, какие способы ускорить попадание в индекс знаете вы? Добавьте в комментариях, если мы что-то упустили в материале.

Как использовать Google Search Console для SEO: Урок 3 «Как обновлять, расширять контент»

Задавайте вопросы по курсам WordPress

После того как мы разобрались в интерфейсе Google Seaarch Console давайте посмотрим как с пользой можно использовать этот крутой инструмент. Самое частое и самое важное применение Google Search Console это возможность смотреть по каким запросам вас ищут и расширять контент по запросам людей. Для примера я возьму свой сайт и на нем покажу что можно делать и как развивать.

Для начала войдите в Serch Console и выберите свой сайт, а в левом меню выберите эффективность. На вкладке эффективность, немного ниже, во вкладке страницы найдите и выберите ту страницу которую вы хотите развивать.

google search console эффективность список страниц

После выбора страницы у вас включится фильтр по странице.

google search console фильтр страниц

Далее важный момент, когда у вас выбрана вкладка «Страницы» и активный фильтр с адресом важной страницы. А теперь просто переключаемся на вкладку «Запросы» и на ней видим полный перечень запросов, по которым в выдаче гугла ваш сайт находили.

Если вы посмотрите эти запросы, то часто в них есть те, которых даже нет на вашей странице. Google часто старается показать людям то что им может быть полезно не только, то что есть в вашей статье, а если он уже начал показывать вашу страницу по запросу которого нет в тексте, то 100% его надо использовать на вашей странице и он точно вырастит. Таким образом, вы сможете качественно обновлять статьи на вашем сайте.

Для примера я взял статью с моего сайта с курса по фрилансу «ПЕРЕГОВОРЫ С ЗАКАЗЧИКОМ«. И взял со вкладки «Запросы» те запросы, которые мне понравились, после чего добавил запросы в «Топвизор» для проверки позиции. Запросов на странице не было встроено и до встраивания запросов в текущую статью были позиции такими:

проверка позиций сайта в google топвизор

По результатам оптимизации этой страницы отпишусь чуть позже, так как делал проверку прямо во время написания этого мини курса. Но в любом случаи внедрение новых ключевых слов и дописывание материала всегда приводит к росту посещаемости. Google любит, когда идет актуализация, обновление и расширение материала.

Первый результат на 2 день появился, но думаю еще подожду и отпишусь.

google search console первые результаты оптимизации

После того как вы добавили новые слова в текст и возможно сделали изображения с атрибутом ALT с нужными словами я бы рекомендовал запускать страницу на переобход. Это ускорит процесс индексации нового контента, так как на данный момент у вас google может заходить на сайт для переиндексации крайне редко.

Что нужно для переобхода страниц в Google Search Console

Скопируйте ссылку которую нужно отправить на переобход и вставьте в верхней части кабинета, после чего нажмите Enter. Делайте так как показано на картинке ниже:

google search console отправить ссылку на переобход

Если после проверки Google увидит, что страницы нет в индексе, или если страница есть, но ее надо переиндексировать, то вы можете «Запросить индексирование» и проверить страницу на сайте.

Google search console запросить индексирование страницы

После этого ваша ссылка может поменять позицию уже через час, но часто это может занять больше времени. В любом случаи запрос переиндексации страницы ускорит процесс.

Перечень тем мини Курса

Директор веб-студии ProGrafika. Занимаюсь разработкой, дизайном и продвижением веб-сайтов. Всегда рад новым читателям блога и хорошим клиентам.

Читайте также:
Как использовать Google Search Console для SEO: Урок 4 «Как работать со ссылками в Google Search Console?»

27 августа, 2021

Автор: Николаенко Максим · Published 27 августа, 2021

Как использовать Google Search Console для SEO: Урок 1 «Как все работает»

27 августа, 2021

Автор: Николаенко Максим · Published 27 августа, 2021

Как использовать Google Search Console для SEO: Урок 2 «Интерфейс Google Search Console»

27 августа, 2021

Автор: Николаенко Максим · Published 27 августа, 2021

Добавить комментарий Отменить ответ

Этот сайт использует Akismet для борьбы со спамом. Узнайте, как обрабатываются ваши данные комментариев.

Как отправить сайт или страницу на переиндексацию

197110, Россия, Санкт-Петербург, а/я 144, ООО «Юми» +7 (812) 309-68-23 logo

Содержимое любого сайта периодически меняется. Добавляются новые тексты или страницы, формируются и удаляются категории. Пока Яндекс и Google не соизволят заглянуть на ваш ресурс и переиндексировать его, любые изменения будут бесполезны. Чтобы не ждать этого неделю, отправьте сайт на переиндексацию вручную.
Вообще сам процесс этот означает повторный обход страницы поисковиками и обновление информации о нем в кэше.

Сайт на переиндексации

Переиндексируем сайт с помощью Яндекс. Вебмастер

Сначала авторизуйтесь в своем кабинете вебмастера. Если вас там нет, зарегистрируйтесь и добавьте свой сайт. Подтвердите права на владение сайтом через панель управления сайтом на 1С-UMI и перейдите в раздел «Индексирование» ― подраздел «Переобход страниц».
В пустом текстовом блоке укажите url (адрес) того сайта/страницы, который хотите отправить на переиндексацию. При желании можно вписать до 20 ссылок на различные страницы. Это нужно в том случае, если повторная индексация требуется не для всего веб-ресурса, а только для отдельных его страниц, где была обновлена какая-либо информация.

Переиндексация сайта с помощью Яндекс.Вебмастера

Указав ссылку, воспользуйтесь кнопкой «Отправить». После этого внизу, в блоке «Отправленные страницы», отобразятся те ссылки, которые были отправлены на переиндексацию в Яндекс.
Статусов может быть 3:

  • В очереди — означает, что url’ы только что были добавлены и еще не успели обработаться.
  • Робот обошел — поисковая система заглянула на сайт и учла его новое содержимое, осталось только дождаться ближайшего обновления.
  • Ошибка — по какой-то причине произошел сбой. Попробуйте переиндексировать страницу заново.

После этих действий нужно немного подождать, и вскоре Яндекс будет выдавать только актуальные данные о вашем ресурсе.

Переиндексируем сайт с помощью Google Search Console

Если сайта еще нет в панели вебмастера Google, добавьте его. Если есть, следуйте инструкции ниже. Нас интересует инструмент Google Search Console.
В инструментарии сервиса найдите раздел «Crawl» и перейдите в подраздел «Fetch as Google».

Переиндексация сайта с помощью Google Search Console

Здесь вписываем адрес страницы без указания домена. Затем кликаем по кнопке «FETCH», ждем пару секунд добавления ссылки в список и появления надписи «COMPLETE» рядом с ним, что будет означать готовность к переиндексации.
Финальное действие — жмем на кнопку с названием «Request Indexing» напротив добавленной страницы. Это действие приведет к появлению окошка, где следует выбрать один из двух вариантов переобхода Google ресурса.

Выбор варианта переобхода сайта в Google Search Console

Первый пункт означает переиндексацию только одной страницы, а второй — повторное индексирование данной страницы и всех ссылок, размещенных на ней. Этот вариант отлично подойдет в том случае, если нужно переиндексировать несколько разделов или категорий веб-ресурса.

Переиндексируем сайт с помощью Mail.ru

Несмотря на относительно низкую популярность данной поисковой машины, с нее трафик также приходит, хоть и в небольших количествах. Самостоятельная индексация здесь происходит очень медленно, поэтому лучше это делать вручную, даже если не требуется переиндексация. А для последней в кабинете вебмастера есть отдельный инструмент.
К сожалению, Mail не позволяет отправлять на переиндексацию отдельные страницы, применить это можно только ко всему сайту.

Переиндексация сайта с помощью Mail.ru

Чтобы переиндексировать свой ресурс, авторизуйтесь в панели вебмастера, зайдите в раздел «Сканирование» и подраздел «Переиндексация». Затем просто кликните по кнопке с соответствующим вашей цели названием и дождитесь окончания процесса.
Предварительно лучше загрузить обновленную версию Sitemap, чтобы индексация была выполнена еще быстрее.
Осуществлять переиндексацию можно раз в неделю, но лучше делать это реже, чтобы столь частый переобход страниц не повредил текущим позициям сайта.

Переиндексируем сайт с помощью Bing.com

Данная поисковая система набрала популярность в США, но в Рунете ею мало кто пользуется. Несмотря на это, пренебрегать ею не стоит, так как даже один или два целевых посетителя могут принести неплохую прибыль бизнесу.
Если у вас уже зарегистрирован профиль в Microsoft, просто войдите в панель вебмастера, если еще нет, пройдите простую регистрацию.
Зайдите в раздел «Настройка сайта» и кликните по пункту «Отправить URL-адреса».

Переиндексация сайта с помощью Bing

Укажите нужные страницы или весь сайт целиком и нажмите на кнопку «ОТПРАВИТЬ».
Bing также имеет возможность настраивать скорость сканирования и время обхода сайта. Помимо этого, вы можете при помощи функции «Управление обходом Bingbot» выбирать медленный или быстрый обход и его режим для определенного времени суток. Таким образом, можно увеличить пропускную способность, ограничив активность поискового бота в так называемый «час-пик». А в периоды затишья позволить Bing сканировать сайт на предмет добавления новых страниц или нового контента в виде статей и изображений.

Ускоряем индексацию с помощью соцсетей

Чтобы переиндексация или первичная индексация сайта прошла быстрее, можно попробовать публикации в соцсетях. Речь идет о публикации ссылок в Facebook*, ВКонтакте и Twitter.
Что касается Facebook* и VK, ссылки можно размещать как на личных страницах, так и в сообществах. Очень желательно на такие публикации создавать волну обсуждения, для этого ваш текст должен содержать небольшую провокацию (работайте с эмоциями), вопрос к аудитории. Это позволит создать вирусный эффект и способствует широкому охвату записи среди пользователей социальной сети. После популяризации вашего поста поисковые системы с большей вероятностью проиндексируют запись и перейдут по ссылке на ваш сайт.
Не забывайте, что переиндексация нужна только при обновлении содержимого сайта или добавлении новых страниц. Просто так ее делать не нужно!

*Meta, материнская компания Facebook и Instagram, признана в России экстремистской.

Добавляем страницу в индекс Google

citron-online.ru: повторное сканирование страниц в Google

В одной из предыдущих публикаций мы рассматривали данный вопрос более подробно с точки зрения «полезности», в данной же публикации рассмотрим только техническую сторону вопроса.

Для того чтобы сообщить поисковой системе о появлении на сайте новой страницы или изменения контента на текущей, в сервисе Googe Search Console имеется специальный функционал.

Как сообщает сам Google, это можно сделать двумя способами, причём, с одинаковым результатом.

— инструмент проверки URL

— отправка файлов Sitemap

Сегодня мы рассмотрим инструмент проверки URL

Предполагается, что Вы уже вошли в сервис.

Далее Вам нужно выполнить два простых действия:

1. Добавить URL целиком в строку 1 (после этого необходимо будет подождать)

2. И кликнуть на пункт 2

В случае в переобходом (повторным сканированием) существующей страницы — действуем полностью аналогично.

Добавить комментарий

Ваш адрес email не будет опубликован.