Зачем быстрое индексирование вообще нужно? Ну, написали статью, разместили на сайте, поисковики ее заметили и проиндексировали. И какая разница, произошло это через час или через неделю?
Нет, вот реальный вопрос: зачем нужно быстрое индексирование страниц сайта? Если вы не новости размещаете, не самое свежее предложение, а обычную муть, которой полно в Интернете, и если ваша муть окажется интереснее, полезнее, красивее других, то людям абсолютно все равно, когда именно ваше высочество ее разместило – они найдут ее тогда, когда будут искать, и ни секундой раньше.
Поисковые системы публикуют рекомендации, как ускорить индексирование. Конечно, они пишут истины, самые простые правила – исключить из поиска ненужные страницы и информацию, чтобы бедненьким роботам было проще обходить сайт и не заниматься лишней работой.
Заниматься лишней работой не хочет, конечно же, робот Яндекса. Google не обращает внимание ни на что, его мощная машина чуть ли не всеядна. И потом, набрав, как собака блох, кучу ссылок и страниц, Google даст информацию о чем угодно.
Яндекс брезгливо тычет в сайт («что за дерьмо?») и со скрипом индексирует десяток страниц в день. В лучшем случае. Это, конечно, не касается новостей и топовых блогеров. Вот, где важнейшая, блин, информация.
Среди элементарных плавил ускорения индексации:
запрет ненужных страниц в robots.txt (как мы знаем, Яндексу лучше этого не делать – не будет индексировать вообще ничего, сославшись на сбой);
обязательный нормальный sitemap на сайте со ссылками на все страницы (Яндекс же ленивый что капец);
кроме «ботного» sitemap, нужна еще карта сайта «человеческая» (страница с выводом ссылок на страницы);
и, конечно же, корректные ответы: 404, 304 и так далее (не дай бог, робот Яндекса растеряется, маленький наш, и не поймет, где оказался).
А когда сделали всё для робота – начинайте думать о себе. Настройте кросспостинг в соцсети, установите кнопки «поделиться», сделайте нормальную подписку, которая будет греметь на весь Интернет своей RSS-лентой и так далее.
Удачи, бездельники!
