Опасность медленной индексации. Ускоряем отправку новых страниц в индекс

Пожалуй, самый волнующий вопрос всех вебмастеров это как ускорить индексацию сайта в поисковых системах .

Причем если Google индексирует быстро и не надо прилагать особых усилий, то индексация в Яндексе иногда затягивается надолго. Поэтому, рассматривая сегодня вопрос ускорения, мы будем в первую очередь подразумевать ускорение индексации сайта в Яндексе.

Ускорить процесс индексации можно как платными методами, так и бесплатными. Для получения гарантированного результата желательно использовать сразу несколько перечисленных ниже способов. Итак, переходим к самим способам ускорения. Я решил описать все бесплатные способы ускорения индексации, какие только возможны.

Быстрая индексация сайта в Яндексе и Google

1) Структура сайта . Продумайте и постройте структуру своего сайта так, что бы поисковый робот без труда добрался до любой страницы. Очень желательно сделать вложения страниц не более трех кликов от морды. В противном случае индексация может затянуться.

2) Внутренняя перелинковка сайта . О пользе внутренней перелинковки я уже писал. Как раз одна из ее задач это ускорение индексации ресурса. Мы помним, что бот ходит по ссылкам внутри сайта, чем больше ссылок ведут на разные страницы. Тем быстрее бот их найдет и включит в индекс.

3) Карта сайта (sitemap) . Это должен быть неотъемлемый элемент любого веб-сайта. Ее основная и единственная задача — это ускорение нахождения роботом всех страниц сайта. Показать Google и Яндексу карту сайта, можно через панель вебмастера. Так же путь к ней указывается в файле robots.txt . Так же будет полезным сделать html вариант карты сайта, которая будет доступна в одном клике т главной. Все сомнений, что карта сайта хорошо помогает ускорить индексацию внутренних страниц сайта.

4) Добавление сайта в панель вебмастера Яндекса и Google . Панели вебмастера дают широкие возможности по контролю за разными параметрами сайта. И если для хороший сайтов это плюс, то для откровенных ГС будет минусом. Если у вас СДЛ то смело добавляйте.

6) Добавление сайта в популярные рейтинги . Такие широко известные рейтинги как Рейтинг@Майл , Рамблер ТОП100 и LiveInternet часто посещаются поисковыми ботами. Соответственно если они найдут там ссылку на ваш сайт, то перейдут на него.

7) Регистрация в трастовых каталогах . Не поленитесь и отправьте заявки на добавление сайта в трастовые каталоги. Они есть у всех популярных поисковиков: На Яндексе это Яндекс.Каталог (с 2018 года не принимают новые сайты ), у Googla это DMOZ (закрылся в 2017 году ) и Каталог Майла . На самом деле регистрация в них нужна не для индексации а для набора траста сайта . Ведь попасть в каталог, даже если ваш сайт туда примут можно в лучшем случае через три месяца (для Я.Каталога). В дмоз же вообще можно прождать год, там жуткая нехватка модераторов и сайт будет висеть на рассмотрении до посинения…

8) Прогон по каталогам . Речь идет про регистрацию в куче низкосортных каталогов. Вручную делать это безумие, нужно пользоваться специальными сервисами. Например, я раньше пользоваться сервисом 1PS . Он мне очень нравился тем, что в ночное время можно было работать с сервисом совершенно бесплатно. В то время каждая копейка была на счету. Сейчас этот сервис предоставляет большое количество услуг, не только прогоны.

9) Публикация статей в каталогах статей . По сути, это тоже самое, что пункт выше, только там мы размещаем ссылки, а тут статьи. В сети есть большое количество таких каталогов, а так же сервисы рассылок по ним. Прогон по каталогам статей для ускорения индексации нового сайта так же можно сделать через упомянутый выше сервис.

10) Использование социальных закладок . Социальные закладки хорошо индексируются поисковиками. Вы можете сделать прогон по социальным закладкам или вручную добавить ссылки на страницы своего сайта. Отличие от прогона по каталогам в том, что в каталоги можно добавить только главные страницы, а в закладки еще и внутренние.

11) Размещение анонсов и пресс-релизов на трастовых сайтах . Процесс полностью ручной и очень трудоемкий. Я собрал свою базу трассовых сайтов через один сервис, который сейчас загнулся.

12) Используем сервисы вопросов и ответов . Сервисы вопросов и ответов очень любят поисковые боты, наравне с пользователями, которые там тусуются. Там тоже можно оставить ссылку на свой сайт, как самому, так и найти исполнителя через адвего . Если у вас нет прокаченной репы, то вашу ссылку, скорее всего, удалят модераторы. Они там очень злые))). Поэтому лучше найти хорошего исполнителя и работать с ним. Google прикрыл свой сервис, теперь там можно только читать, а вот на Mail.ru еще можно.

13) Комментарии в тематических блогах . Качественные блоги, которые не завалены рекламой, часто обновляются и имеют постоянных читателей так же часто посещаются поисковыми роботами. Такие блоги тоже можно использовать для ускорения индексации. Конечно, если будете спамить толку не будет, админы будут удалять ваши ссылки. Просто добавляйте ссылку в предназначенное для этого поле. Найти такие блоги легко, можно воспользоваться одним из Интернет-рейтингов, спросите в Яндексе «рейтинг блогов».

14) RSS-трансляция . Если на вашем сайте есть такая возможность, можно организовать RSS-трансляцию в специальные RSS-каталоги. Анонсы ваших новых материалов на других сайтах смогут привести поисковых ботов на ваш ресурс. Рекомендую добавить трансляцию в эти каталоги: Feedreader.ru, Feedburner.com, Newsread.ru, LiveRSS.ru, Rssreader.ru, Plazoo.com.

15) Используйте популярные форумы . Хороший способ ускорить индексацию сайта это ссылка в профиле популярного форума (если профиль открыт к индексации) и ссылка в подписи. Найдите топовые форумы по вашей тематике и зарегистрируйтесь в них. Боты любят форумы с большим количеством новых ежесуточных сообщений. Участвуйте в «горячих» диалогах на форуме и бот найдет вашу ссылку в подписи. Помимо индексации такие ссылки еще дадут и трафик на сайт, пусть не большой, но все же.

16) Пингование . Популярные движки для сайтов, типа WordPress обладают функцией пингования. Т.е. они посылают сигнал ПС о новой странице на сайте. Если у вашей CMS есть такая функция — почему бы не воспользоваться ей.

17) E-mail рассылка . Доказанный факт, что быстрая индексация сайта возможна при почтовых рассылках. Особенно если люди будут переходить на рекламируемый сайт по ссылкам из почты. Самый популярный сервис для e-mail рассылки Subscribe.ru . Вам нужно там зарегистрироваться и организовать выпуск рассылки.

18) Блоги на бесплатных блогохостингах . Блоги на бесплатных хостингах LiveJournal.com (он же ЖЖ), Blogger.com , Liveinternet.ru , Blogs.Mail.ru и т.д. тоже могут помочь нам в индексации нового сайта. Заводим там себе новый блог и ставим ссылки на нужный сайт. Боты любят эти сервисы и обязательно заметят появление нового блога. Что бы ускорить этот процесс, можно завести «дружбу» с другими блогерами этого сервиса.

19) Социальные сети . Я оставил это на закуску. В данный момент это один из лучших способов ускорения индексации сайта. Особенно твиттер. Обязательно заведите себе твиттер аккаунт. Прокачайте его как следует, и это будет незаменимая вещь для индексации новых страниц сайта. Буквально через минуты, после публикации ссылки в прокаченном твиттере, станицы появляются в выдаче Яндекса. Раскрутить твиттер можно

Всем хочется, чтобы опубликованные материалы мгновенно попадали в индекс и сразу же приводили посетителей. Особенно это актуально при продвижении в Яндексе, которому порой требуется несколько апдейтов для индексации новой страницы. А что если за это время истечет актуальность статьи? Получается, что вы зря потратили ресурсы на ее создание. Если вы хотите, чтобы статьи уже спустя пару часов после публикации были доступны в поиске, следуйте представленным ниже советам.

Почему не индексируется сайт?

Проблемы с индексацией сайта бывают трех типов:

страницы долго индексируются (зачастую причина - в низкой частоте обновления контента на сайте, и робот просто реже его посещает; также проблема может крыться в плохой SEO-оптимизации, некачественном контенте и сайте в целом);
страницы не индексируются ни Яндексом, ни Google (в этом случае нужно убедиться, что не установлен запрет на обход площадки роботами в robots.txt , настройках хостинга или в мета-тегах robots);
страницы не индексируются только одним поисковиком (стоит проверить сайт на фильтры поисковых систем).

Последние две проблемы устраняются или очень легко (если нужно просто разрешить индексацию страниц) или очень долго (если придется выводить сайт из-под санкций Яндекса или Google). В этой же статье рассмотрим именно способы ускорения индексации.

Способы ускорения индексирования сайта поисковиками

1. Улучшите внутреннюю SEO-оптимизацию

Сделайте внутреннюю перелинковку

В теле статей ставьте ссылки на другие страницы сайта. Также добавьте похожие записи (в конце статей) и популярные или новые записи (в сайдбаре). Не делайте более 3-4 уровней вложенности - страницы на 5 и 6 уровне индексируются хуже.

Хотите научиться расставлять внутренние ссылки так, чтобы улучшить поведенческие показатели и позиции в поиске? В статье «Как сделать перелинковку для успешного SEO и роста конверсий » описаны все самые эффективные подходы.

Пишите полезные и уникальные тексты

Если вы размещаете плагиат или поверхностный рерайт, то не удивляйтесь, что страницы не попадают в индекс. Поисковики считают такой контент дублирующимся и не несущим ценности для пользователей. О том, какими должны быть грамотно оптимизированные тексты для сайта, читайте .

Чаще публикуйте записи и обновляйте страницы

Поисковики любят «живые» сайты. Если несколько месяцев ничего не размещали, то робот перестает регулярно посещать сайт.

Как поддерживать актуальность сайта:

публикуйте новые записи не реже 1 раза в неделю;
добавляйте ссылки со старых страниц на новые материалы;
актуализируйте и обновляйте информацию на сайте;
настройте заголовки Last-Modified и If-Modified-Since (так поисковики будут обходить старые страницы только после внесенных на них изменений).

Устраните дубли на сайте

Дубли создают не только неудобства для вебмастеров, но и ухудшают качество сайта в глазах поисковиков. Они могут быть:

явными (URL со слешем в конце и без него, с WWW и без WWW, с HTTP и HTTPS, с GET-параметрами);
неявными (дубли страниц с комментариями, страницы товаров со схожими описаниями, страницы пагинации).

Устраняются они путем настройки 301 редиректа , указания канонических страниц , с помощью robots.txt. Все способы с примерами описаны в статье «Что такое дубли на сайте и как с ними бороться?» .

2. Используйте инструменты для вебмастеров

После запуска сайта обязательно зарегистрируйте его в панелях для вебмастеров: в Яндекс.Вебмастере и Google Search Console. Так вы сообщите поисковикам о появлении нового сайта, сможете отслеживать динамику индексации, будете получать уведомления об ошибках.

После создания новой страницы или обновления старой необходимо уведомить об этом поисковики, чтобы ускорить индексацию (переиндексацию). Делается это с помощью так называемых «аддурилок» (от англ. «add URL» - «добавить URL»).

В Яндексе этот инструмент находится в Вебмастере (раздел Индексирование / Переобход страниц). Введите новый URL и нажмите «Отправить».

«Аддурилка» Яндекса

До изменения в 2018 году интерфейса Search Console в Google был инструмент, который позволял добавлять любую страницу для переобхода. До сих пор в сети «висит» масса статей со ссылками на этот инструмент и описанием его работы, но он больше не поддерживается .

Старая «аддурилка» Google

Новые страницы в Google уже не нужно куда-то добавлять для индексации - достаточно того, чтобы они были в sitemap.xml. А вот старые страницы, на которых вы изменили контент, можно переиндексировать быстрее. Для этого перейдите в новый интерфейс Search Console в раздел «Проверка URL», введите адрес интересующей страницы и нажмите кнопку «Запросить индексирование». Это сигнал роботу обойти страницу вне очереди.

Данные действия - не гарантия попадания страницы в индекс или ускорения процесса (сами же поисковики ничего не обещают). Но поскольку такие инструменты есть, ими грех не воспользоваться.

Если вы только начинаете вести свой блог, рекомендую вам делать все правильно с самого начала, иначе затем корректировать старые заметки довольно сложно, отнимает много времени, требует терпения и концентрации.

Для начала, изучите вот этот пост: (все правила выполнять вполне реально)

Пишите вы новый пост и хотите, чтобы он «влетел» в индекс поисковых роботов Google и Яндекc за считанные минуты, хотя бы за пару часов (для некоторых и это уже результат!). Я вспоминаю свои первые заметки и очень жаль, что я не знал раньше всех правил, поскольку некоторые посты по полгода была не проиндексированы. Но, не будем о грустном.

Как ускорить индексацию в Яндекс

1.Используйте «Оригинальные тексты» Яндекса

Для начала вам обязательно необходимо зарегистрироваться в Яндекс Вебмастер и добавить свой сайт в личном кабинете.

Когда ваша заметка уже готова, осталось провести небольшие корректировки со ссылками, перелинковке, проверить орфографию и т. д.

Желательно за 5-10 часов до того, как вы нажмете кнопку «Опубликовать», вам нужно кликнуть на вашей еще не опубликованной заметке, затем нажать волшебные сочетания клавиш Ctrl+A (выделить всё, если не знали, пригодится) и затем Ctrl + C (скопировать).

После этого заходите в свой кабинет Яндекс вебмастер , . Выбираете свой сайт, далее «Содержание сайта»

После этого вставляете текст, который вы скопировали в своем редакторе вордпресс ранее. Вставляете вот сюда:

И жмем кнопку «добавить» под вставленным тестом. Если вы не пользовались инструментом «Оригинальные тексты», то я настоятельно вам рекомендую закинуть туда по очереди тексты всех ваших заметок на блоге, это не долго, но очень полезно, поверьте.

2. Добавляем URL в аддурилку Яндекса

Сразу после публикации новой заметки вам необходимо скопировать её URL и внести его в аддурилку Яндекса по ссылке —

Главное ввести корректно свой URL и правильно подобрать капчу)) и этот пункт выполнен.

Кстати, если вы отредактировали свой старый пост, тогда его также необходимо внести в аддурилку Яндекса. Это даст сигнал поисковым роботам вновь проиндексировать отредактированный контент.

3. Регулярно публикуйте новый контент

Если вы составите для себя план и будете публиковать 1 пост в день/неделю/2 недели не важно, то поисковые роботы и будут приходить на сайт через такой промежуток времени для очередной индексации. Ключевое слово тут — регулярно , а не как можно чаще.

Лучше опубликовать полновесную обзорную статью раз в 2 недели, чем публиковать каждые три дня статьи о том, что у вас нового произошло на блоге. Если у вас огромная аудитория и вы мега-популярная личность, то можно и несколько постов в день писать, не спорю.

Насколько часто вы приучите поисковые роботы к вам наведываться для индексации, такой результат и получите. Если вы публикуете 1 заметку в месяц, то не ждите, что она влетит в индекс Яндекса за несколько часов или дней. Иногда на это уходит месяц или больше.

4. Распространяем контент в социальных сетях

Буду с вами предельно откровенным и скажу сразу, что не каждый контент и не во всех тематиках можно сделать и раскрутить в социальных сетях. Однако, необходимо экспериментировать и искать свою социальную сеть, в которой находится ваша .

На примере одного из своих сайтов могу вам дать пример, как я собираю с публикации в группах соцсетей большой трафик и более 200 лайков!

Описано там все понятно и доступным языком, изучайте и пытайтесь добиться еще лучшего результата.

Обязательно в теле каждой статьи установите кнопки социальных сетей. Не важно, как вы это сделаете: скриптом, кодом, плагином не имеет значения. Главное — расположите кнопки удобно и реализуйте их так, чтобы ими не сильно нагружали сайт.

Я использую этот сервис, почитайте, может и вам подойдет:

5. Плагин «Социальный замок» простой и эффективный!

Это очень эффективный инструмент, который поможет вам собирать лайки читателей.

Для этого вы раскрываете тему статьи почти полностью, а оставляете пару «плюшек» на десерт. Этот участок текста вы скрываете при помощи плагина под красивой картинкой. Открывается этот текст после лайка по любой из предложенных соцсетей.

Согласитесь, всё гениальное просто))

Вот подробная статья про этот плагин:

6. Наращивайте ссылочную массу и траст

Для того, чтобы вас уважали в жизни необходимо у людей заслужить доверие. Так и в интернете, существует понятие « «, который по определенным алгоритмам поможет вам стать более заметным в поиске.

Если сайт будет трастовым, то и новые заметки будут появляться в индексе Яндекс за считанные минуты.

7. Добавить поиск от Яндекс на сайт

Реализовать это довольно просто, подробная инструкция тут:

Этот способ прямо в ускорении индексации вам не особо поможет, но косвенно это будет дополнительным стимулом. Если вы больше нацелены на поиск от Гугл, то используйте его, но он обязательно должен присутствовать на сайте.

8. Создайте корректные файлы Sitemap.xml и robots.txt

Довольный важный фактор, реализовать эти файлы не сложно. Подробно я описал это в заметке:

Всё, с Яндексом понятно, давайте перейдем к индексации новой статьи роботами Google

Ускорить индексацию роботами Google

Для начала, каждому вебмастеру необходимо зарегистрировать свой сайт на Google Вебмастер

После этого выберите сайт, индексацию которого вы хотите ускорить, заходим в панель для вебмастеров.

Выбираете свой сайт, затем в панели слева «Сканирование», затем «Посмотреть как Google бот»

Ввели url новой заметки после названия сайта в нужное поле, как на скрине ниже и жмем «Сканировать»

Затем ниже появится строка и напротив неё зеленая галочка и подпись «Готово», а дальше «Добавить в индекс». Как вы уже догадались, ее нам и нужно нажать. После этого вы увидите окно со следующим содержанием:

Выбираете 1 или 2 вариант, ставите точку в чекбоксе и жмете «Отправить»

После этого вы должны увидеть следующую фразу — «URL добавлен в индекс»

Вот и с индексацией нового поста в Google мы проделали все необходимые действия. Если будут вопросы, обязательно пишите в комментариях, отвечу оперативно.

До встречи!

Интересные посты по данной теме:

Вебмастера часто сталкиваются с проблемой, когда страницы неделями не попадают в индекс поисковой системы. Особенно актуальна она в Яндексе - новые страницы в нем появляются значительно позже, чем в Google. А в последнее время Яндекс еще и редко делает текстовые апдейты - 2-3 раза в месяц. В этой статье мы рассмотрим, что влияет на индексацию сайта, как ее можно ускорить и как следить за ней.

Что влияет на частоту индексирования сайта поисковым роботом

— Загруженность сервера, на котором находится сайт (качество хостинга)

Если на сервере находится много других ресурсов, а технические характеристики сервера не позволяют оперативно справляться со всеми запросами робота, робот начинает посещать такой сайт реже. Соответственно, ему потребуется больше времени для включения страниц в результаты поиска.

— Частота обновления сайта в целом

Поисковые роботы анализируют частоту обновления контента на сайте, в результате чего определяют, как часто будут посещать тот или иной сайт.
Чем чаще на сайт добавляется новый контент, тем чаще роботы ПС посещают его.

— Интерес посетителей к сайту (ПФ)

Поисковый робот может пересмотреть политику планирования и посещать сайт чаще, если на сайт регулярно добавляются новые материалы, интересные пользователям (например, новости, статьи):

пользователи задерживаются на сайте;
переходят по внутренним страницам;
добавляют сайт в закладки;
делятся материалом в соц. сетях и т.д.

Как улучшить индексацию сайта

Поисковый робот за один визит индексирует определенное количество страниц согласно выделенной квоте, которая зависит от множества параметров сайта. Т.е. даже если робот посетил ваш сайт, это еще не значит, что он проиндексирует и включит в свою базу все страницы сайта. Поэтому очень важно, чтобы робот-индексатор не только посетил ваш сайт, но и включил в свою базу все новые и измененные страницы сайта.

Ниже в статье мы рассмотрим, как заставить робота ПС чаще посещать ваш сайт и при этом увеличить количество страниц, которое за раз может проиндексировать робот ПС, - краулинговый бюджет .

1. Проанализируйте сайт на наличие дублей

Данный пункт поставили первым, так как дубли страниц - одна из основных проблем, которая ухудшает индексацию сайта поисковыми роботами.

Когда на сайте есть дубли, краулинговый бюджет тратится на бесполезные страницы вместо новых страниц или страниц с обновленным материалом.

О том, как найти на сайте дубли, подробно написано в статьях нашего блога:

2. Настройте сервер на выдачу правильного HTTP-статуса

Корректная настройка кодов статуса HTTP очень важна для правильной индексации сайта.

Когда робот ПС запрашивает страницу сайта, код статуса предоставляет ему информацию о сайте и конкретной странице:

существует страница или нет,
настроена ли переадресация,
нет ли на стороне сервера ошибки.

Например, код http «404 Not Found» сообщает, что страница по запрашиваемому адресу не существует, а код http «OK 200» сообщает, что страница доступна.

Заголовок Last-Modified информирует робота ПС о дате последнего изменения документа. Таким образом, робот-индексатор проверяет на обновление только документы, действительно изменившиеся со времени предыдущего обхода, или новые страницы, не тратя при этом краулинговый бюджет на страницы, которые не менялись.

Подробно о заголовке Last-Modified .

3. Мониторьте время отклика сервера и скорость загрузки страниц

Время ответа сервера на запрос браузера напрямую влияет на индексацию сайта.

С учетом сетевых задержек оно должно быть не более 300 мс.

Сервисы по измерению отклика сервера:

Увидеть, есть ли недочеты, можно с помощью сервиса Google PageSpeed .

4. Грамотно организуйте структуру сайта

Чем понятней для поискового робота выглядит структура сайта, тем он лучше будет его индексировать.

— Уровень вложенности страниц

Любая продвигаемая страница должна быть не дальше, чем в 3 кликах от главной. Это очень важно для индексации, так как поисковому роботу потребуется гораздо меньше времени на индексацию простого и неглубокого сайта, чем на сложный ресурс с запутанной системой навигации.

— Реализуйте на сайте хабовые страницы

Хабовые страницы - это страницы, которые содержат ссылки на разделы и подразделы, служащие для навигации пользователей по сайту.

Для того чтобы улучшить индексацию, хабовые страницы необходимо реализовать в один клик от главной страницы сайта.

Что нам даст реализация хабовых страниц:

А. Уменьшит уровень вложенности
Б. Ускорит индексацию страниц поисковым ботом
В. Поможет пользователям легче найти нужный материал

— Выводите анонсы на новые страницы на главную сайта

Поисковый робот чаще всего посещает главную страницу сайта. Если на ней будут размещены ссылки на новые страницы или страницы с обновленным контентом, есть большая вероятность, что робот их проиндексирует.

Например:

— Реализуйте виджет в сайдбаре последних статей

Еще один хороший способ связать между собой страницы сайта:

— Не делайте меню на скриптах и flash

Главным недостатком использования меню на скриптах и flash является то, что поисковые роботы его не видят.

5. Настройте файл robots.txt

Корректно составленный robots.txt позволит исключить возможные проблемы, возникающие при сканировании сайта роботом. Это может значительно ускорить индексацию ресурса в целом.

В файле robots.txt нужно прописать инструкции для роботов поисковых систем: какие страницы сайта индексировать, а какие - нет. В таком случае поисковикам потребуется меньше времени для сканирования сайта.

Например, в robots.txt можно закрыть:

служебные файлы и папки CMS;
внутренние и внешние дубли (если есть);
формы ответа на форуме;
технические страницы;
файлы, которые не несут пользу для пользователя (например, статистика посещений, страницы с результатами поиска).

Как создать правильный robots.txt?

1. Создайте файл robots.txt в текстовом редакторе.

3. Проверьте файл в сервисе Яндекс.Вебмастер — > Анализ robots.txt .

Скриншот из Яндекс.Вебмастера:

4. Если проверка прошла успешно и ошибок не обнаружено, загрузите файл в корень сайта.

Зарегистрируйте сайт в трастовых каталогах, справочниках и рейтингах (например, Яндекс.Каталог , DMOZ и Каталог Mail.ru);
Размещайте свои статьи на платной основе на сайтах такой же тематики;
Общайтесь на тематических форумах (о крауд-маркетинге подробнее );
Интегрируйте сайт с социальными сетями;
Создайте RSS-трансляцию на сайте;
Размещайте статьи в сервисах социальных новостей;
Работайте с социальными закладками.

7. Пишите качественный и уникальный контент

Качество контента также влияет на скорость индексации сайта. Плохой контент, который не дает полный ответ на запрос пользователя, в котором есть грамматические ошибки, большая плотность ключевых слов, индексируется хуже.

При написании текста важно учитывать, что:

Тексты должны содержать только наиболее важную информацию, полезную посетителям.
Материал должен давать полный ответ на запрос, после прочтения которого пользователь перестанет искать информацию на эту тему.
Акцентируйте внимание на важных нюансах, убирайте «воду» и рассуждения ни о чем.
Тексты должны быть грамотно структурированы (используйте заголовки, подзаголовки, делите текст на абзацы, делайте списки, когда они уместны, и т. д.)
Тексты должны содержать ключевые слова, но в умеренном количестве - избегайте переспама.
Желательно, чтобы уникальность текстов была не ниже 70%, согласно сервису https://advego.ru/plagiatus/ или https://www.etxt.ru/antiplagiat/ .

Как следить за индексацией сайта

Добавьте сайт в сервис Яндекс.Вебмастер и Google Search Console

Если сайт еще не добавлен в панели вебмастеров поисковых систем, настоятельно рекомендуем добавить. С их помощью вы сможете легко анализировать индексацию проекта. Например:

когда робот последний раз посещал ваш ресурс;
сколько страниц он загрузил в свою базу;
включена ли определенная страница в базу поиска;
какие ошибки обнаружил робот;
время загрузки страницы.

Также вы можете сообщить ПС о новых или удаленных страницах и мониторить другие параметры сайта, не связанные с индексацией. Например, внешние ссылки, ведущие на сайт, запросы, по которым пользователи переходят на сайт, и т.д.

Только полный анализ сможет помочь вовремя выявить и исправить ошибки индексации сайта.

Зарегистрировать сайт в вебмастере Яндекса и Google просто.

Для этого нужно выполнить процедуру в 3 шага, которые сопровождаются , в Я.Вебмастер:

Добавление сайта в Google Search Console также сопровождается инструкцией :

Как сообщить роботу ПС об изменениях на сайте

— Создайте карту сайта

Чтобы помочь поисковому роботу найти новые страницы на сайте, рекомендуем создать карту сайта в двух форматах: xml и html.

Карту в формате html нужно выложить на сайт в качестве отдельной страницы. При сканировании сайта робот попадает на данную страницу - она должна содержать ссылки на все страницы сайта, а это поможет ему найти их.

Карту в формате XML (Sitemaps) нужо добавить в панель инструментов для вебмастеров Google и Яндекса.

— Карта сайта должна автоматически генерироваться и обновляться при добавлении на сайт новых URL или удалении старых.

— В карту сайта не должны попадать закрытые от индексации страницы.

— После создания файла необходимо убедиться, что в нем нет ошибок. Сделать это можно при помощи специальных инструментов поисковых систем:

Также в карте XML (Sitemap) можно указать:

приоритет индексации - при помощи тега ;
частоту обновления конкретной страницы - при помощи тега .

После того как карта сайта будет создана, информацию о ней нужно добавить в панель инструментов для вебмастеров Google и Яндекса.

— Напишите скрипт «Ловец ботов»

Для крупного проекта можно применить следующую методику - в момент прихода робота ПС на сайт специальный скрипт показывает роботу ссылки на не проиндексированные страницы сайта.

Недостаток использования методики - сложная техническая реализация.

— Используйте « Add URL » поисковых систем

Это наиболее «традиционный» способ ускорения индексации новых страниц на сайте. С помощью « Add URL» поисковой системе можно сообщить как о новом сайте, так и о новой странице на сайте.

Чтобы сообщить о новой странице ПС Яндекс, используйте форму add url Яндекс :

Чтобы сообщить о новой ПС Google, используйте форму add url Google :

Недостаток использования этого инструмента - добавление страниц в данные формы не дает гарантий, что страница сразу же окажется в базе поисковой системы.

— Для быстрой индексации новых страниц в Google используйте инструмент «Посмотреть как Googlebot»

Воспользоваться данным инструментом можно после того, как сайт будет добавлен в Google Search Console (вебмастер).

Google Search Console — > Раздел Сканирование — > Посмотреть как Googlebot — > Вводим нужный URL — > Кнопка «Сканировать» — > Кнопка «Добавить в индекс», после чего появится надпись «URL отправлен на индексирование»:

Также с помощью данного инструмента можно узнать время загрузки страницы и данные по процессу сканирования.

Единственный недостаток - необходимо каждый раз при добавлении нового материала адрес вводить вручную.

— Плагин-пингер для ускорения индексации новых страниц в Яндекс

Повысить приоритет индексирования новых страниц сайта можно с помощью специальных POST-запросов. Подробнее .

Если ваш сайт построен на основе популярных CMS, например, WordPress, Joomla, Drupal - установите специальный плагин Пингер. Он автоматически будет сообщать Яндексу о появлении новых страниц на вашем сайте.

Что для этого необходимо сделать:

А. Установите :

Б. Установите и настройте плагин в соответствии с инструкцией :

После публикации новой страницы зайдите в настройки плагина, в окне «Сообщение о статусе плагина» должно появляться сообщение «Плагин работает корректно» и выводиться последний добавленный адрес.

Другие возможные статусы и их значения можно посмотреть .

— Специальные формы ПС для ускорения индексации блога «Пинг»

Если у вас блог с подпиской на RSS, для ускорения индексации новых страниц вы можете использовать специальную форму ПС «Пинг».

«Пинг» - это оповещение поисковых систем об изменениях на вашем сайте.

Для добавления новой записи в ПС Google нужно использовать форму « Blog Search» по адресу :

Для добавления новой записи в ПС Яндекс нужно использовать форму « Отправить пинг» по адресу :

Для ускорения индексации новых документов используйте бесплатные сервисы пингования, например, https://seo-ng.net/seo-instrumenty/ping_services.html :

Важно! Сервисы пингования используйте только при наличии свежего материала на сайте. Также не стоит один и тот же сайт пинговать в разных сервисах.

Подведем итоги - чтобы ускорить индексацию сайта в целом, необходимо:

1. Провести техническую оптимизацию сайта.

2. Организовать грамотную структуру сайта.

3. Регулярно добавлять новый качественный материал на сайт.

4. Добавляя новые страницы, нужно сообщать о них ПС.

5. Привлекать на сайт роботов ПС с помощью внешних ссылок.

Подписаться на рассылку

Дорогие читатели, сегодня мы поговорим об ускорении индексации сайта или блога.

Что такое индексация сайта? Это добавление ваших вновь написанных статей в индекс (базу) поисковых систем. Т.е. чем быстрее поисковый робот пришел на ваш сайт и скопировал к себе новые статьи, тем быстрее они проиндексируются и тем лучше! Сейчас я обо всем по порядку расскажу.

Почему важно ускорить индексацию сайта

Для ускорения индексации, конечно, наиболее важна XML карта сайта. Не забудьте указать ее адрес в вебмастере и файле robots.txt. Данный способ хорош тем, что нужно один раз сделать и забыть.

Настройте файл robots.txt

Используйте Аддурилки поисковых систем

Аддурилка (англ. Add URL – добавить адрес) – сервис, через который можно сообщить поисковой системе о выходе новой статьи. Это своего рода очередь на индексацию, в которую вы становитесь, написав новую статью.

Кроме того, добавив статью в аддурилку Яндекса вы получите ответ по результату индексирования. Или сервис сообщит вам об ошибке или невозможности индексации статьи. Так что данный сервис очень удобен для ускорения индексации сайта, конечно, если вам не лень каждый раз добавлять в него статьи.

Настройте пинг

Пинг – сигнал, который ваш сервер посылает поисковым системам при публикации статьи. Этот сигнал сообщает, что новую статью необходимо проиндексировать. Данный способ ускорения индексации сайта так же удобен тем, что не требует никаких действий, кроме разовой настройки.

Настраивается просто: зайдите в «Параметры» -> «Написание». В самом низу в «Сервисы обновления» впишите список пинг-северов. Полный список скопируйте из .

О том, как ускорить индексацию сайта яндексом и гуглом можно говорить бесконечно. Рассмотренные способы – самые удачные и полезные на мой взгляд.

Я советую вам использовать как можно больше из перечисленных способов для ускорения индексации сайта, и результат не заставит ждать. Но если вы знаете еще какие-то важные и действенные способы, непременно пишите в комментариях.

Всем быстрой индексации!

Возможно, будет полезно почитать: