35 способов быстро индексировать сайт

Для того чтобы быстро загнать новые страницы в индекс многие вебмастера используют различные методики и инструменты, чтобы подсказать роботу о наличии свежих материалов.

Рассмотрим 35 способов и приемов, которые помогут добавить новую страницу, сайт в поисковую систему Яндекс, Google и другие ПС в короткие сроки.

В данном кейсе я собрал не только свой опыт, но и учел мнения опытных веб мастеров, блогеров и оптимизаторов с таких популярных источников как:
Maultalk, Sbup, Webmasters, социальные сети, блоги и другие проверенные материалы.

35 способов быстро индексировать сайт или как поселить на своем сайте быстробота от Яндекса и Google:

1. Аддурилка от Yandex, через сервис Яндекс Вебмастер – сленговое слово среди практикующих Seo - webmaster.yandex позволяет сообщить о новом сайте.
2. HTTP запрос от Яндекса. Для того чтобы воспользоваться данной функцией необходимо установить на свой сайт форму поиска от Yandex. После этого вы сможете указать нужный URL и поставить приоритет для необходимых материалов, сделав специальный HTTP запрос. От вас требуется указать IP адрес сервера, с которого вы планируете выполнять такие запросы. Также можно указать URL вручную, но только после того как вы добавили на сайт форму поиска.
3. Установка плагина для CMS: Drupal, Joomla, K2 for Joomla, Modx, Typo3, Wordpress Скачав плагин к примеру, на Джумла вы должны заполнить в плагине следующие поля: Ключ (Key), ID поиска (searched), Имя пользователя (login) – обычно это имя вашей почты без @. Подробная документация по установке и настройке плагинов можно также найти на официальном сайте Яндекса в разделе помощь: help.yandex

   Будьте внимательны если ип-адрес у вас динамический, его придется вручную менять после того как вы хотите опубликовать новый материал, пост или статью.

4. Указать URL вручную через панель Яндекс Вебмастера. Вам потребуется в разделе поиски для сайта добавить свой поиск, заполнив все данные. Документация также находится в разделе помощи на Яндексе. После нужно будет перейти во вкладку Индексирование и указать URL адреса вручную и отправить.
5. Яндекс Блоги. Данную форму используют для добавления блогохостингов и автономных блогов blogs.yandex
6. Google Блоги. Форма для добавления blogsearchgoogle ping URL . Далее вам нужно вписать адрес сайта, если все правильно сделано вы должны получить такое сообщение Thanks for ping (Спасибо за пинг).
7. Аддурилка от Google. Старый и проверенный способ указать поисковику о том, что вы хотите добавить или обновить информацию о вашем сайте - Google Webmasters Tools чтобы добавить информацию нужно зайти в свой аккаунт.
8. Просмотреть как Googlebot. Для того чтобы ускорить процесс индексации в поисковой системе Google вам достаточно пройти в свой аккаун Гуггл и зайти в GOOGLE WEBMASTERS, открыть инструменты для веб-мастеров > Сканирование > Просмотреть как Googlebot. Если вам нужно чтобы робот прошелся по главной странице, оставьте поле URL пустым и нажмите на кнопку: Сканировать, после этого вам нужно нажать: "Добавить в индекс". В появившемся окне выбираем сканировать только этот URL. Месячная квота, предоставляемая инструментом Google Webmasters составляет 500 ссылок. При добавлении страницы в индекс вы также можете выбрать сканирование для ПК, Mobile: Smartphone, для мобильных устройств: XHTML/WML, для мобильных устройств сHTML.

   Признаться, меня удивил этот способ добавления в индекс, страницы очень быстро появляются в поисковике Google.

9. Аддурилка от Mail. mailAddurl Здесь как и в Гуглл нужно также авторизоваться под своим аккаунтом, после перейти по ссылке и как показано на скриншоте добавить адрес нового сайта.
10. Bing аддурилка – перейти в Bing Webmasters Поисковая система Bing от Microsoft не потребует от вас регистрации аккаунта, но порекомендует зарегистрироваться, дабы ускорить индексацию вашего проекта.

    Для этого вам также, как и в Mail потребуется скачать код верификации, дабы подтвердить права на ваш сайт. После удачной проверки вы получаете ещё одну панель вебмастера с интересной аналитикой и новым функционалом.

11. Bing веб-мастер. Аналогично, как и в Google Webmaster мы отправляем нужные URL-адреса и просим ускорить индексирование наших страниц. Лимит 50 страниц в месяц.
12. XML-RPC пингование. Для тех, кто использует на своем сайте систему под управлением Wordpress разработчики предусмотрели оповещение ping-сервисов в настройках админ панели. Параметры > Написание > Сервисы обновления – далее вам нужно собственноручно внести список ping серверов, после сохранить изменения. Скачать список пинг сервисов можно здесь.
    Многие не рекомендуют добавлять слишком много сервисов для пингования вашего сайта, т.к. это может вызвать большую нагрузку на ваш хостинг. Рекомендация: выделите для себя наиболее значимые сервисы и добавьте их в XML-RPC.
13. Robots.txt – настройте текстовый документ правильно согласно, рекомендациям Yandex и Google Webmasters, исключив ненужные материалы, дубли и страницы пагинации, формы ответа на форуме, технические страницы, результаты поиска, указывайте специальные символы регулярных выражений '*' и '$' – это облегчит работу роботу при прохождении вашего сайта.
    В документе Robots.txt следует прописать путь к файлу sitemap. Например, Sitemap: http://sait-partnerka.ru/sitemap.xml
14. Дубли. Дублированный контент, очень важная проблема для многих оптимизаторов и поисковых систем. Закрывайте файлом Robots.txt, удаляйте если это возможно из базы данных, вручную в панели вебмастера, настраивайте 301 редирект. Устранение этой проблемы существенно улучшит видимость для паука.
15. Sitemap.xml при добавлении нового материала вам следует добавить соответствующий приоритет странице priority по умолчанию ваш документ принимает значение 0,5 – в нашем случае необходимо поставить приоритет «1» чтобы придать важность документу. При очередном обходе поисковых систем на ваш проект эти цифры дают прямой сигнал к действию. Здесь важно помнить, если вы проставите высокий приоритет на многих страницах это лишь помешает корректно выстроить порядок сканирования ваших страниц.

    Также при составлении файла Sitemap.xml следует обратить внимание на атрибут lastmod, который отвечает за дату последнего изменения документа.

    Будет большим плюсом для вас если вы сможете сгруппировать сегменты вашего сайта и по категориям разбить в файле sitemap.xml это упростит порядок и подачу поисковому роботу.
    Рекомендация: если вы думаете, что в файл sitemap.xml нужно обязательно загружать все URL адреса вашего проекта, то это заблуждение. Те, страницы, которые не были проиндексированы поисковиками необходимо включить в первую очередь. Страницы, которые находятся в индексе, а также те, которые регулярно не обновляются можно не включать в файл sitemap.xml.
16. Дата добавления материала: При добавлении новой информации на сайт, особенно если вы ведете блог желательно включать отображение даты публикации, изменения материала. Это положительно влияет на быстрое попадание страниц в поиск.
17. CS Yazzle и другие программы – ещё один верный помощник проиндексировать новый документ.

    17.1. Обычное добавление страниц в индекс. Достаточно пройти в Инструменты > Сайт > Добавление страниц в индекс, ввести несколько URL адресов, выбрать поисковые системы и нажать Запуск.

    Рекомендация: зарегистрируйтесь на сайте Antigate, чтобы не вызывать проблем с капчей при добавлении страниц в индекс.

    17.2. Оповещение Ping-сервисов. Инструменты > сайт > Оповещение пинг-сервисов.
18. Создание карты сайта. Здесь пожалуйста не путайте карту сайта с файлом sitemap.xml. Карта сайта это краткое или полное содержание о разделах вашего сайта. Представьте себе книгу, на первых страницах обязательно будет присутствовать содержание, где вы с легкостью сможете найти нужный раздел, страницу. Точно также и поисковый робот, сканируя ваш сайт, попадая в карту сайта просматривает ваши разделы, содержащие ссылки на все документы сайта.
19. Ошибка 404. При отсутствии документа с отображением кода ответа 404 на вашем сайте могут возникнуть проблемы. К примеру: после удаления материала или смены URL адреса страница может оставаться долгое время в индексе, тем самым замусоривая поиск и усложняя работу пауку.
20. Перелинковка сайта. Линкование вашего нового материала со старыми статьями дает дополнительный ссылочный вес на свежий пост и тем самым вы даете дополнительный сигнал поисковым роботам обратить внимание и начать сканировать в конце концов нужную страницу. Используйте на сайте дружественную навигацию: «Хлебные крошки», использование тегов для разбивки контента rel="next" rel="prev".
21. ЧПУ URL. Человеку понятные URL адреса способствуют понятному отображению в поиске ваших страниц. Многие CMS системы предусматривают такую функцию при добавлении новых материалов. Вот пример правильной страницы для рунета.
    К примеру тема статьи: "Приемы быстрой индексации" > ваш сайт/bystraya-indeksaciya-sayta. У кого нет такой функции, рекомендую воспользоваться онлайн генератором ЧПУ ссылок.
    Для зарубежных проектов рекомендуется использовать дословный перевод: ваш сайт/fast-indexing-pages.
22. Уровень вложенности и кликабельности. Не прячьте ваш документ слишком глубоко это усложнит работу поисковика, желательно публиковать материал таким способом, чтобы с главной страницы его можно было найти максимум за 3 клика.
23. Прогон по соц.закладкам
    Вручную по 24 лучшим сервисам Postquickly
24. Каталог бесплатных статей, пресс-релизов. Rusarticles и другие популярные сервисы.
    Cледует добавить рерайт вашего материала с указанием источника статьи т.е. вашей ссылки на новую статью. Также хорошо прием работает и после того как страница уже будет добавлена в поисковик.
25. База трастовых каталогов. Выполняем прогон по каталогам с высоким трастом по белой тематической базе. Для этого можно использовать программу Allsubmitter. Данный софт можно купить или скачать в интернете на крупном трекере. Можно воспользоваться платным способом для экономии времени сервисом 1ps для регистрации в тематических каталогах и досках объявлений.
26. Прогон страниц по профилям известных форумов. В нашем случае желательно использовать тематическую базу с хорошим уровнем доверия со стороны поисковых систем. Здесь также можно воспользоваться платным инструментом Xrumer, Xneolinks, XseoN.
27. Twitter и другие микроблоги. Активно пиарим свою ссылку в Твиттер аккаунте.

    Здесь стоит отметить, что если на ваше сообщение с проставленной ссылкой сделали Ретвит с популярного аккаунта, то это увеличит ваши шансы максимально быстро попасть в индекс и получить дополнительный «+» от Твиттера.
    Чтобы ускорить процесс добавления свежих материалов в Twitter аккаунт используем RSS-ленту, для этого нам понадобится сервис TwitterFeed. Кто использует российский микроблог Jot-it, а также Wmsn и Juick упоминание о вашем материале способствует дополнительному сигналу, не забывайте добиваться репоста – это важно.?

28. Социальные сети. Вконтакте, Facebook, Google+ не оставляем стороной. В вашей группе или сообществе добавляйте свежие материалы, анонсы новостей с ссылкой на новый материал. Если вы используете для продвижения сайта приложение с элементами соц.сети Instagram, вам следует также использовать и его, не забывайте ставить ссылку на материал. Если вы хотите использовать более быструю индексацию за деньги, стоит ознакомиться с интересным менеджером автоматической публикации в социальных сетях Novapress данный сервис охватывает (Vk, Instagram, Odnoklassniki, Facebook, Twitter, Google+ и Livejournal), также вы можете настроить отложенный постинг и настроить RSS ленту для отдельных групп.

29. Арендные ссылки на новостных порталах, блогах. После публикации материала следует закупить пару арендных ссылок для новой страницы. Следует отметить, что в анкоре ссылки, следует указывать пару строчек из вашей статьи (название темы статьи, основная тема). Форсируйте события с помощью новостей и размещайте пару ссылок, результат обеспечен.
30. Ответы и вопросы. Задавайте на таких популярных сервисах как Otvet.Mail достигнув статуса "Знаток". Включайтесь в тематические вопросы и дискуссии на Toster и других популярных сайтах со схожей тематикой. Правильное упоминание в ответе или вопросе поспособствует дополнительному сигналу на вашу ссылку с опубликованной статьей. Главное чтобы это не выглядело как спам. Думайте о прежде всего о репутации.
31. Getbot и Indexgator, Fastbot – платные сервисы, которые предоставляют гарантированную индексацию в поисковой системе в Яндексе и Google. Постоянно использую эти сервисы в своей работе.
32. Мета-тэги не забывайте добавлять при размещении статьи. Улучшение ваших снипетов посредством уникальных метаданных: Title, Description и наличия Keywords повышают ваши шансы занять хорошую позицию в SERP, а также помогает роботу при индексировании новых материалов.
33. E-mail рассылка. Этот способ всегда работал хорошо, распространив свежие новости вашим подписчикам вы создадите хорошие условия
34. Рассылка на доски объявлений? — один из самых эффективных способов ускорить индексацию сайта, а также привлеч новых посетителей ростом позиций сайта в поисковой выдаче Яндекса и Google и поднять показатели тИЦ и PageRank. 
35. Контент наш король. Довольно часто поисковики начинают вредничать и не посещать ваш сайт даже если вы и проделали все доступные способы загона страниц в индекс. Почему спросите вы?

    Поисковые движки постоянно улучшаются и идут в ногу со временем. Если раньше при сканировании не уникальных материалов страница плохо ранжировалась, то сейчас она может просто на просто не попасть в поиск.

    Важно всегда стараться добавлять уникальный и полезный материал. Также не следует забрасывать сайт на долгое время, слишком большие промежутки, паузы при добавлении новой информации дают явный сигнал роботам, что им пока рано заходить к вам в гости.