Как ускорить индексацию сайта

10 способов ускорить индексацию и ранжирование контента в Google

Каждый владелец сайта хочет, чтобы только что опубликованный контент побыстрее проиндексировался и оказался в ТОПе выдачи. Обычно процесс занимает время: сначала нужно ждать, пока он проиндексируется, потом, пока дойдет до хороших позиций в выдаче. Опускаются руки: хорошего ранжирования материала приходится ждать недели, а то и месяцы. Как ускорить индексирование и ранжирование, если терять время не хочется?

На этот вопрос основатель агентства Zyppy Цирус Шепард ответил в еженедельной рубрике Moz Whiteboard Friday, а редакция SEOnews перевела транскрипцию видео с его выступлением.

Индексирование

Используйте инструмент для проверки URL (бывший Fetch & Render)

Google сам предоставляет вебмастерам инструменты для ускорения индексации. Самый простой и быстрый из них – инструмент проверки URL в новом интерфейсе Search Console. Это – новый аналог Fetch&Render, оставшегося только в старой версии Search Console. С помощью URL Inspection Tool можно дать ссылкам приоритет в очереди Google на сканирование: Googlebot найдет и обработает их быстрее.

Файлы Sitemap

Если вы еще не используете файлы Sitemap, начните. Это – один из самых простых и быстрых способов проиндексировать страницу в Google. Добавляя ссылки в файл, вы, наверное, хотите, чтобы Google узнал, что они действительно там. Есть несколько техник, которые помогут оптимизировать этот процесс.

Первый и самый популярный способ – указать в robots.txt путь к файлам Sitemap. Просто пропишите в конце списка директив команду [Sitemap:] и укажите путь к файлу.

Второй способ – добавить Sitemap через Search Console, достаточно указать относительный URL файла на странице с отчетом о файлах Sitemap и нажать «Отправить». Обработка файла начнется сразу, однако для полного сканирования перечисленных URL может понадобиться время. В этом же отчете можно просмотреть историю отправок и сведения об ошибках в файле. То же самое доступно в Search Console API.

Третий, не очень популярный способ – оповестить Google о файлах Sitemap с помощью запроса ping. Это можно сделать в любом браузере, достаточно ввести в строку google.com/ping? и URL, по которому находится файл Sitemap. После этого Google мгновенно поставит Sitemap в очередь на сканирование, благодаря чему содержащиеся в нем URL проиндексируются быстрее, если они конечно отвечают стандартам качества Google.

Google Indexing API

Относительно недавно Google представил Indexing API, который позволяет напрямую уведомить Google о добавлении, изменении и удалении страниц. С его помощью можно за раз обрабатывать тысячи URL.

Google позиционирует Indexing API как инструмент исключительно для работы со страницами с разметкой для вакансий и онлайн-трансляций. Однако SEO-эксперт Девид Соттимано поэкспериментировал с инструментом и выяснил, что на самом он работает для разных типов контента.

Другие советы по ускорению индексирования:

Индексирование и ранжирование

Инструменты, которые не только ускоряют индексирование, но и помогают контенту быстрее попасть в ТОП.

Ссылки с важных страниц

Опубликовав новый контент, убедитесь, что на него есть ссылки с важных страниц сайта – домашней, блога – любой страницы, которая хорошо ранжируется в поиске. Это основное, что нужно сделать: не бросать страницы без входящих ссылок.

Добавляя ссылки, вы сообщаете Google две вещи. Во-первых, что ссылку нужно добавить в очередь на сканирование. Во-вторых, что это – важная ссылка. Google поймет, что на новый контент ссылаются качественные страницы и будет лучше его ранжировать.

Старый контент

Пункт, о котором часто забывают – обновление старого контента. Стоит линковать не только новые страницы со старыми, но и старые с новыми.

Как понять, с каким старым материалом залинковать новый? Можно воспользоваться поиском по сайту или командой: site: [URL сайта + запрос], вбитой в поиске Google.

Соцмедиа

Очевидный пункт, который нельзя обойти стороной. Существует большая взаимосвязь между количеством репостов публикации в социальных сетях и ранжированием. Особенно полезно делиться статьями в агрегаторах контента, таких как Reddit: Google сканирует такие ссылки и анализирует активность на подобных сайтах. Такие внешние ссылки даже лучше перелинковок с собственным сайтом.

Трафик страницы

До сих пор идут споры о том, является ли трафик сигналом для индексирования и ранжирования. Несмотря на это, техника работает раз за разом: сгенерируйте трафик на новую страницу, и она быстрее займет высокие позиции в поиске.

Первое – общее про ПФ, тут как раз можно узнать о трафике, как факторе ранжирования.

Второе – как влиять на внутренние и внешние ПФ.

Другие советы по ускорению индексации и ранжирования контента:

Ранжирование

Предположим, что мы добились своего и контент проиндексирован. Как же теперь ускорить ранжирование?

Клики из поиска

Генерировать стоит не только трафик, но и переходы из поиска.

Например, делясь материалом в Twitter, добавьте ссылку не на страницу, а на результаты поиска по запросу, по которому ваш материал точно окажется в ТОПе. Вместо https://www.seonews.ru/ дайте ссылку https://www.google.com/search?q=seonews.

На Западе подобная тактика распространена для ТВ-рекламы. Например, в рекламе Суперкубка говорилось: «Идите в Google и введите в поиске [Toyota машины 2019]».

Стратегия позволяет увеличить CTR и лучше ранжироваться по предлагаемым запросам. Чем чаще запрос вводится в поиск, тем больше у него шансов попасть в автозаполнение.

«Свежий» ключевой запрос

Новый контент лучше ранжируется по «свежим» ключевым словам, тем, по которым поиску выгоднее показывать самые последние публикации.

Например, по запросу «кафе открытые в рождество 2019» будут отображаться более новые страницы, так как пользователям интересно получить актуальную информацию. Статьи и подборки подобными ключевиками будут быстрее подниматься в поисковой выдаче.

Сравните с запросом «История второй мировой войны». Введите этот запрос в Google прямо сейчас и вы, скорее всего, увидите много старых материалов. Такие результаты обновляются редко, попасть в ТОП по подобным запросам удастся не сразу.

Введите Google ключевики, по которым вы хотите ранжироваться, и посмотрите, насколько старые материалы попадают в ТОП. Выберите «свежие» ключевые слова и добавьте их в свой материал.

Структура URL

В прошлом в Google говорили, что позиция URL в структуре сайта влияет на ранжирование.

Когда Google видит новую страницу, ему не хватает сигналов, чтобы ранжировать ее. Существует много алгоритмов, которые «пытаются понять», какой позиции заслуживает сайт.

Например, The New York Times размещает все обзоры на книги в одном разделе newyorktimes.com/book-reviews. Все страницы в нем высоко ранжируются. Из-за этого новый URL, появившийся в том же разделе, может временно получить сигналы ранжирования раздела, что поможет быстрее начать хорошо ранжироваться.

У нового контента, опубликованного в «авторитетных» разделах временно будет преимущество в ранжировании перед остальными страницами, пока алгоритмы Google не проанализируют саму страницу.

Заключение

Это – неполный список техник, которые позволят новым страницам быстрее индексироваться и ранжироваться. А какими способами, повышающими скорость индексации и ранжирования, пользуетесь вы?

Источник

Как ускорить индексацию сайта: 5 способов на все случаи жизни

Все способы подходят для Яндекса и Google, проверены и работают в 2021 году

Всем хочется, чтобы опубликованные страницы мгновенно попадали в индекс и сразу же приводили посетителей.

Если вы хотите, чтобы новые страницы сайта побыстрее стали доступны в выдаче, следуйте нашим советам.

Почему не индексируется сайт

Проблемы с индексацией сайта бывают трех типов:

Узнайте, какие именно страницы проиндексированы Яндексом и Google. В помощь — специальный инструмент от PromoPult. После этого вы сможете оценить характер и масштаб проблемы. Подробная инструкция — здесь.

Последние две проблемы устраняются или очень легко (если нужно просто разрешить индексацию страниц) или очень долго (если придется выводить сайт из-под санкций Яндекса или Google). В этой же статье рассмотрим именно способы ускорения индексации.

Давайте разберем способы ускорения индексирования сайта поисковиками.

1. Улучшите внутреннюю SEO-оптимизацию

Начните с сайта. Проблемы с внутренней оптимизацией могут усложнить индексацию.

Проверьте файл robots.txt

Найти ошибки в robots.txt можно в Яндекс.Вебмастере в разделе Инструменты / Анализ robots.txt:

В разделе можно проанализировать текущую и предыдущие версии файла, инструмент покажет ошибки. Здесь же можно скачать файл для того, чтобы отредактировать:

В этом же разделе есть функционал для проверки доступности для индексации отдельных URL — просто укажите интересующий URL в поле «Разрешены ли URL?», нажмите «Проверить», и система выдаст ответ.

Создайте sitemap.xml

Этот файл содержит ссылки на все страницы сайта и помогает поисковикам сориентироваться в его структуре. Если появляются новые страницы, они попадают в sitemap.xml, и роботы их быстрее находят.

После создания sitemap.xml пропишите в robots.txt строку для указания роботу пути к файлу:

Также укажите путь в панелях для вебмастеров:

Чтобы не обновлять файл вручную после появления новых страниц, используйте динамический sitemap.xml. Он настраивается с помощью плагинов (например, один из популярных для WordPress – All in One SEO Pack) или средствами PHP. Динамический файл sitemap.xml создается каждый раз перед обращением робота (а значит, всегда актуален).

Добавьте HTML карту сайта

Создайте отдельную страницу, с которой будут идти ссылки на все значимые страницы ресурса. Это полезно не только для посетителей, но и для индексации роботами, а также является одним из способов перелинковки.

Интересно, что этот способ утратил свою актуальность для Google: представители поисковика советуют лучше прорабатывать структуру сайта, тогда надобность в HTML карте отпадет. Но от Яндекса подобных заявлений пока не было, так что создавайте по принципу «хуже не будет». Тем более делается это буквально за несколько минут штатными средствами CMS или при помощи специальных плагинов.

Важно! HTML и XML-карта — не одно и то же. HTML-карта располагается на сайте, ее видят пользователи. XML-карта нужна только поисковикам, пользователи ее не видят.

Проверьте ответы сервера

Сервер при обращении поискового робота должен отдавать код 200 (если страница существует) и код 404 (если страницы не существует). Кроме того, время ответа не должно превышать 1,5-2 с — в противном случае робот может не дождаться и покинуть сайт.

Проверить ответ сервера можно в Яндекс.Вебмастере в разделе Инструменты / Проверка ответа сервера.

Подробно о кодах ответа сервера мы рассказывали в этой статье.

Поработайте над внутренней перелинковкой

Чтобы поисковый бот понял, что на новую страницу стоит зайти, поставьте ссылки на нее с уже проиндексированных страниц. Контент, в котором находится ссылка (ссылочное окружение) должен быть близким по тематике:

Лучше всего работают ссылки с главной и других посещаемых страниц сайта, поэтому разместите на них линки на новые статьи или товары.

В блогах добавьте похожие записи (в конце статей) и популярные или новые записи (в сайдбаре).

В интернет-магазинах – блоки рекомендуемых товаров или комплектующих/аксессуаров:

Следите за уровнем вложенности

Как быстро робот доберется до нового url, зависит в том числе от его уровня вложенности. Идеальный вариант – не более трех кликов от главной. Страницы на 5, 6 и далее уровнях индексируются хуже.

Хотите научиться расставлять внутренние ссылки так, чтобы улучшить поведенческие показатели и позиции в поиске? В статье «Как сделать перелинковку для успешного SEO и роста конверсий» описаны все самые эффективные подходы.

Пишите полезные и уникальные тексты

Если вы размещаете плагиат или поверхностный рерайт, то не удивляйтесь, что страницы не попадают в индекс. Поисковики считают такой контент дублирующимся и не несущим ценности для пользователей. О том, какими должны быть грамотно оптимизированные тексты для сайта, читайте здесь.

Чаще публикуйте записи и обновляйте страницы

Поисковики любят «живые» сайты. Если несколько месяцев ничего не размещали, то робот перестает регулярно посещать сайт.

Как поддерживать актуальность сайта:

Устраните дубли на сайте

Дубли создают не только неудобства для вебмастеров, но и ухудшают качество сайта в глазах поисковиков. Они могут быть:

Устраняются они путем настройки 301 редиректа, указания канонических страниц, с помощью robots.txt. Все способы с примерами описаны в статье «Что такое дубли на сайте и как с ними бороться?».

2. Используйте инструменты для вебмастеров

После запуска сайта обязательно зарегистрируйте его в панелях для вебмастеров: в Яндекс.Вебмастере и Google Search Console. Так вы сообщите поисковикам о появлении нового сайта, сможете отслеживать динамику индексации, будете получать уведомления об ошибках.

После создания новой страницы или обновления старой необходимо уведомить об этом поисковики, чтобы ускорить индексацию (переиндексацию). Делается это с помощью так называемых «аддурилок» (от англ. «add URL» — «добавить URL»).

В Яндексе этот инструмент находится в Вебмастере (раздел Индексирование / Переобход страниц). Введите новый URL и нажмите «Отправить».

В октябре 2021 года Яндекс представил технологию IndexNow. Это протокол, при помощи которого поисковая система сможет в режиме реального времени узнавать обо всех изменениях на сайте. Технически реализовать IndexNow можно при помощи API или плагинов для популярных CMS. Перед тем, как передавать URL, нужно будет сформировать и разместить на сайте специальный ключ, который подтвердит, что сайт принадлежит вам. Подробная инструкция по использованию протокола — в Справке Вебмастера.

В Google Search Console после обновления интерфейса как таковой «аддурилки» нет. Но можно воспользоваться функцией проверки URL:

Вбиваете новый URL, получаете данные о его статусе и нажимаете «Запросить индексирование». Таким же способом можно отправлять на переобход гуглобота страницы с внесенными изменениями:

Эти действия — не гарантия попадания страницы в индекс или ускорения процесса (сами же поисковики ничего не обещают). Но поскольку такие инструменты есть, ими грех не воспользоваться.

3. Добавьте сайт в RSS-каналы, каталоги, рейтинги и соцсети

Каталоги и рейтинги хорошо индексируются поисковыми системами, и если в них будут ссылки на ваш сайт, то повысится вероятность быстрой индексации.

RSS-агрегаторы уходят в прошлое. Из тех, что еще работают в 2020-м году, отметим:

Добавить блог можно в такие каталоги:

Нелишним будет добавить сайт в бесплатные рейтинги:

Здесь важно серьезно подойти к отбору площадок, на которых регистрируете свой ресурс. Обходите стороной заспамленные «братские могилы» сайтов. Обращайте внимание на посещаемость, траст и ИКС. Отдавайте предпочтение тематическим каталогам и рейтингам а также тем, которые принадлежат к региону, в котором вы продвигаетесь.

Также для ускорения индексации советуем разместить ссылку на новую запись в соцсетях – в своих и тематических группах. Для России особенно важны ВКонтакте и Одноклассники, для продвижения на западных рынках – Twitter и Facebook.

Еще один канал для привлечения дополнительного трафика на новые материалы – Яндекс.Дзен. Трансляция публикаций в канале с хорошей посещаемостью обеспечит переходы и поспособствует быстрому добавлению страницы в индекс.

Для новостных сайтов актуальна работа с быстровыдачей Яндекса, которая формируется по актуальным на данный момент запросам. Для этого нужно подключить сайт ко всем доступным агрегаторам новостей, транслировать свежие статьи в соцсетях. Кроме этого, нужно использовать актуальные ключевые слова в заголовках и избегать кликбейта. Пользователь должен находить ценность в материале. Высокий процент отказов подскажет Яндексу о низком качестве источника. В этом случае путь к высоким местам в быстровыдаче будет закрыт.

4. Используйте пинг-сервисы

С помощью пинг-сервисов вы уведомляете поисковые системы о появлении новых страниц на сайте. В интернете можно найти громадные списки пинг-сервисов, и многие используют сразу все. Это ошибка. В данном случае принцип «чем больше, тем лучше» не работает. Достаточно 5-7 сервисов:

Пример списка пинг-сервисов для блога на WordPress

Практика показывает, что использование пинг-сервисов ускоряет индексацию — особенно это заметно в случае с молодыми сайтами, которым меньше 6 месяцев.

5. Нарабатывайте «сильные» ссылки

Чем больше будет ссылок на ваш ресурс с авторитетных площадок, тем лучше. Это повысит значимость сайта в глазах поисковиков. Проблема в том, что на «добычу» естественных ссылок нужны годы.

Ускорить процесс можно, сотрудничая напрямую с вебмастерами с целью интеграции ссылок на трастовых ресурсах. Найти релевантные площадки можно с помощью модуля PromoPult «Естественные ссылки» — достаточно добавить сайт, и система самостоятельно подберет ключи, посадочные страницы и внешние ресурсы.

Если у вас возникнут вопросы, то всегда можно воспользоваться услугой «Персональный менеджер» — специалист проведет аудит сайта, будет регулярно высылать рекомендации по его улучшению и отвечать на возникающие вопросы.

Источник

Как улучшить индексацию блога в Яндексе и Google?

Доброго времени суток, друзья! Сегодня мы поговорим о такой насущной теме, а для некоторых проблеме, как индексация новых страниц в Яндексе и Google. В рамках данного материала я отвечу на популярный вопрос, как ускорить индексацию сайта в поисковых системах.

В этой статья я расскажу, какими методами пользуюсь я, для улучшения индексации страниц сайта. Таким образом, вы можете быть уверены в действенности этих способов, т.к. у меня они работают. Как я писал в информации «О блоге», я вебмастер-практик, все советы, которые я даю в блоге, я проверяю на себе и с чистой совестью могу рекомендовать их вам. Итак, поехали!

Общие рекомендации ( UPD 05.2019 )

Всё ниже описанное также влияет на ускорение индексации и все методы перечисленные в данной статье настоятельно рекомендую к использованию. Однако, статья писалась в 2015 году, а на момент этой правки на дворе 2020 год. Появились дополнительные методы быстрого загона статей в индекс.

Лично я использую два сервиса быстрой индексации страниц сайта:

Всё что от вас требуется – это скопировать в соответствующие поля список URL’ов для индексации. ВСЁ!

Indexer от Баночкина Indexme – быстрая индексация страниц в Гугле и Яндекс

У indexme.site есть возможность “просмотреть” страницы из-под мобилы:

Для индексации сайт под Яндекс и Google одновременно используйте мобильную версию сайта (в режиме теста из браузера. Тест с телефона был пройден успешно и Google проиндексировал всю пачку URL)

В чём смысл данных индексаторов? Страницы открываются поочередно в вашем браузере и тем самым дают сигнал поисковикам зайти на эту страницу. Всё просто 🙂

Причём Яндекс.Браузер “стучит” роботам Яндекса, а если вам нужно добавить страницы в индекс Гугла, то нужно заходить на данные сайты через Google Chrome.

Как ускорить индексацию сайта в Яндексе?

Многие вебмастера сталкиваются с проблемой индексации новых страниц сайта в Яндексе. Все они бьются над одним и тем же вопросом, как улучшить индексацию сайта? Я отвечу на этот вопрос и дам рекомендации по улучшению данного параметра.

Подготовка

Для начала нужно сделать первичный анализ индексации, чтобы знать, от чего отталкиваться. Заходим на Seopult, находим раздел «Профессиональные инструменты» и выбираем «Анализ индексации страниц». Так мы быстро проверим сайт и в Яндексе, и в Google. Первые 8 проверок (не больше 100 страниц) бесплатные, за остальные придется платить.
После выгрузки xlsx-файла и замера начальных данных можно уже приступать к работе

Социальные сети

При создании сайта, я настоятельно рекомендую создавать для него группы во всех популярных социальных сетях. Кстати, о том, как создать сайт на Вордпресс, я уже писал. Особенно важны для ускорения индексации сайта: Twitter и Google+. О важности Твиттера в скорости индексации страниц говорится уже давно, раньше с помощью этой социальной сети можно было, чуть ли не моментально проталкивать страницы в индекс Яндекса. Сейчас ситуация несколько хуже, но тем не менее важность Twitter в улучшении индексации новых страниц сложно переоценить. Кроме того, с недавних пор Google начал индексировать твиты в «прямом эфире», что, несомненно, говорит об авторитете этой соцсети и в Гугле.

Если про Twitter знают многие, то влияние Google+ на скорость индексации страниц, причём как не странно именно в Яндексе, а не Google, знают или хотя бы слышали единицы. А влияние очень существенное.

Исходя из вышенаписанного, вам просто необходимо завести аккаунты в Twitter и Google+ для ускорения индексации в Яндекс. Кроме того, не лишним будет иметь группу в ВКонтакте, хотя там техподдержка не из лучших, и в Facebook.

Во все соцсети необходимо настроить кросспостинг, например, с помощью платного сервиса novapress.pro, им я сам лично пользуюсь. Или постить новые опубликованные статьи в социальные сети самостоятельно.

Закупка временных ссылок на новые статьи

Одним из вариантов для улучшения индексации новых страниц в Яндексе является закупка нескольких временных ссылок на новую опубликованную статью.

Важно закупать временные ссылки с ресурсов, на которых «живёт» быстроробот, тогда новая страница быстро влетит в индекса поисковика.

Ссылка с ресурса в Яндекс.Новостях

Если вам необходимо, чтобы страница попала в выдачу Яндекса за считанные минуты, то, есть смысл купить ссылку в статье, которая попадёт в Яндекс.Новости. Быстроробот в ЯН индексирует новые статьи, чуть ли не за секунды, а значит, он быстро попадёт и к вам на сайт и быстро «съест» новую страницу.

Публикация через Главную

Все новые страницы на сайте должны проходить через Главную. Это значительно улучшит индексацию сайта в Яндексе. Кроме того, можно создать специальный блок в сайдбаре, куда вы будете вручную добавлять «Популярные статьи», об этом я писал в статье про правильную перелинковку страниц сайта.

Переобход страниц

Решил обновить статью, т.к. у Яндекса в 2017 году появилось сразу несколько инструментов для быстрой индексации новых страниц и обновления старых.

Итак, первый инструмент называется – Переобход страниц. Находится данное меню в Вебмастере Яндекса —> Индексирование —> Переобход страниц.

Метод очень действенный, робот приходит в тот же день и быстро добавляет в быстроиндекс, а после первого же апдейта добавляет в постоянный индекс. Единственная проблема – таким способом можно добавить для быстрой индексации только 20 страниц в сутки. Однако, буквально месяц назад Яндекс предоставил другую возможность, на этот раз уже для массовой индексации и переиндексации страниц на сайте, о нём ниже.

Переобход sitemap.xml

Данный метод быстрой индексации новых страниц и обновлённых старых подойдёт для интернет-магазинов, у которых ассортимент исчисляется не одним десятком товаров.

Для того, чтобы как можно скорее обновить ассортимент, следует зайти в Яндекс.Вебмастер —> Индексирование —> Файлы Sitemap и там выбрать нужный нам файлик и поставить его в очередь на переобход.

В месяц можно переобходить карту сайта только 10 раз, так что добавляйте на переиндексацию только тогда, когда работа по обновлению карточек товаров завершена на 146% 🙂

Все эти способы помогут ускорить индексацию новых страниц. Ну, что, я ответил на вопрос, как улучшить индексацию сайта в Яндексе? Думаю, да 🙂

Как ускорить индексацию сайта в Google?

Честно говоря, ни на одном из сайтов у меня не возникало проблем с индексацией страниц в Google. В принципе, для Гугла применяются все описанные выше методы. Однако, есть один 146%-ый способ улучшить индексацию сайта в Google – это его инструмент, который есть в Гугл Вебмастере. Я о нём рассказывал в статье о необходимости добавления сайта в Яндекс и Google вебмастеры.

Напишу ещё раз, вам необходимо зайти в Google Webmaster, а затем проследовать в «Сканирование» и «Просмотреть как Googlebot» и туда уже добавить URL новой страницы, которую вы хотели бы быстро добавить в поиск Гугла.

Обратите внимание, что УРЛ нужно добавлять без названия домена.

После того, как вы скопировали туда путь до статьи, нажимаете «Сканирование», и статья появится в течение часа в поиске Google.

Таким способом, вы можете ускорить индексацию в Гугле.

Резюме

Итак, подведём итоги, для улучшения индексации сайта вам необходимо:

Надеюсь, мне удалось ответить на вопрос, как улучшить индексацию блога и теперь у вас не будет возникать таких проблем.

А какими способами ускорения индексации пользуетесь вы?

Источник