Иногда, бывает так, что вроде сайт ведется по всем правилам, а все же он продолжительное время не индексируется. Такое может случиться из-за того, что роботы-поисковики не видят ваш ресурс. Чтобы ускорить индексацию сайта в поисковых системах Google и Яндекс, нужно следовать приведенной ниже инструкции:
Если вы до сих пор не добавили сайт в "Центр веб-мастера Google" и "Яндекс. Вебмастер", то сделайте это. Порой этого хватает для ускорения индексации сайта.
Не пренебрегайте файлом Sitemap и укажите в нем все страницы, которые хотите проиндексировать. Не стоит игнорировать этот файл, иногда именно с его помощью можно ускорить индексацию. Для еще большего ускорения добавьте сайт Sitemap в панель вебмастера, указав путь к файлу. В случае, если плагины вашего движка не могут сгенерировать файл Sitemap, то можно это сделать с помощью специализированного сайта XML Saitmaps Generator. Сначала вводите адрес своего сайта, нажимаете Start, затем скачиваете и загружаете файл по ftp в корневую папку вашего веб-ресурса. После чего остается только указать в панели вебмастера путь к файлу Sitemap.
Можно ускорить индексацию сайта с помощью внешних ссылок. Наибольшего эффекта можно получить, если добиться того, чтобы на главные страницы вашего ресурса ссылались различные блоги, близкие вам по теме. Найти список вечных ссылок с блогов на сайт можно на сервисе Blogun или на других специальных сайтах.
Можно ускорить индексацию, если правильно настроить файл robots.txt. Для этого сначала надо закрыть все папки и страницы, не нуждающиеся в индексации. В противном случае поисковик может их проиндексировать даже если на них нет ссылок с вашего сайта. Прежде чем закрыть какие-либо файлы от индексации, следует изучить раздел "Использование файла robots.txt." Затем останется только найти в сети рекомендуемые для этого файла настройки.
Еще один способ ускорения индексации сайта - это создание карты сайта. Что скрывается под словосочетанием "карта сайта"? Это веб-страница, которая содержит все ссылки, указывающие на страницы вашего сайта. С помощью карты сайта поисковые роботы могут быстрее проиндексировать ваш ресурс.
Не забываем про правило трех кликов. Навигация на сайте должна быть устроена таким образом, чтобы до любой страницы вашего сайта можно было добраться не сложнее, чем в 3 клика от главной страницы.
Регистрация в каталогах – еще один хороший способ. Если еще не регистрировали сайт в каталогах, то лучше сделать это. Более подробнее о регистрации в каталогах можно узнать тут: “Прогон по каталогам — как лучше и стоит ли?“. Желательно регистрировать сайт в каталогах вручную.
Организуйте для сайта RSS-трансляцию материалов, после чего зарегистрируйте вашу RSS-ленту в тематических RSS-каталогах, чтобы ускорить индексацию сайта. RSS позволяет публиковать анонсы новых материалов на других сайтах. Можно использовать, например: Feedburner.com