Хочу привести несколько советов от Яндекса, Google и других для ускорения индексации сайта. Яндекс дает простые рекомендации:
- Нужно исключить из индексации ненужные страницы.
- Сообщать роботу о новых страницах.
Действия для достижения данных целей:
- Первым делом надо запретить индексирование страниц, которые будут неинтересны пользователем. Делается это в файле robots.txt. Это страницы статистики посещений, архив старых версий страниц, формы ответа на форуме, страницы с категориями и метками.
- Создать файл Sitemap для поисковых систем. А также прописать этот файл в robots.txt:
Sitemap: http://ichiblog.ru/sitemap.xml
- Создать карту сайта. Это одна или несколько страниц с ссылками на все документы сайта.
- Правильно настроить ответы сервера, чтобы правильно отображались ошибки (404, 304, 403 и другие).
- Следить, чтобы не было битых ссылок. Из-за ссылок, которые введут на несуществующие сайты можно попасть под фильтры ПС. Также надо следить за внутренней линковкой, ведь иногда мы меняем адреса страниц или удаляются записи или файлы. Обычно, тут очень помогают различные плагины для CMS.
- Пометить дублирующие страницы атрибутом canonical. Подробнее про это можете почитать тут.
- Не допускать в тексте ошибок, как орфографических, так и пунктуационных. Тексты с большим количество ошибок плохо ранжируются поисковыми системами.
- Подключить сайт к системе Яндекс.ПДС (или Яндекс.Пингер). Это специальный сервис Яндекса, которому можно сообщать про новые страницы на сайте.
По мере различных экспериментов или дельных советов комментаторов, список будет меняться (дополняться и редактироваться).