Что такое «Быстробот»?
Робот поисковой системы, предназначенный для индексации новых материалов на сайте, для мгновенного появления последних в выдаче. Чтобы пояснить его назначение, представьте, что обычный робот Яндекса достаточно медленно индексирует страницы. И любая новость, индексируемая обычным роботом Яндекса, появится в результатах поиска только через неделю-две. И, конечно же, новостью такое сообщение уже не будет.
В связи с этим Яндекс в 2005 году разработал быстроробота. Если ваш сайт оценен Яндексом, как часто обновляющийся (например, в сутки появляется, по крайней мере, одна статья), тогда он будет включён в список посещаемых быстророботом.
Помимо работы с часто обновляющимися ресурсами быстроробот также собирает информацию о вновь появившихся сайтах. Это, однако, не означает, что впоследствии он также будет посещать этот сайт только потому, что он тут уже был. Таким образом Яндекс узнает лишь о появлении нового ресурса.
Ранжирование, собранного быстроботом контента, ведется на основе ряда внутренних параметров страницы и не зависит от параметров внешних. В этом и состоит отличие быстробота от основного индексирующего робота поисковой системы. Следует заметить, что позиции в выдаче по какому-либо ключевому слову, присвоенные странице быстроботом, могут быть (и скорее всего будут) изменены после индексации этой страницы полной версией индексирующего робота.
Основное условие для прихода быстробота на конкретный сайт — его частое обновление. Новостные сайты, блоги, социальные сообщества — всё это примеры сайтов, которые быстробот будет посещать довольно часто. Наличие RSS ленты — тоже большой плюс в его глазах. Особым вниманием быстробота пользуются сервисы социальных закладок, из-за непрекращающегося в них потока ссылок на свежесозданные материалы других сайтов.
Зачастую, работу быстрого робота можно отследить по дате индексации страницы, указанной в сниппете результата поисковой выдачи. Например, таким образом можно отследить быстробота Яндекса.
Скорость индексирования быстророботом
Скорость индексирования быстророботом по некоторым сообщениям достигает максимум 2-х часов (в идеале страница в индексе появляется мгновенно). То есть через это время ваши сообщения появятся в выдаче Яндекса. Появившаяся страница оценивается по алгоритмам, отличным от обычных. Спустя 2 дня она исчезает из выдачи и после очередного апдейта и оценки веса по стандартным алгоритмам снова в ней появляется.
Мечтой любого блоггера является «завести» на своём сайте этого быстрого «паучка». Что ж это вполне возможно, постарайтесь каждый день публиковать хотя бы одну новую статью.
Быстроробот очень плотно работает с RSS-каналами.
Сайты с быстророботом и ускоренная индексация
Если вам необходима быстрая индексация ваших ресурсов, то можно разместить ссылки на новые посты на сайтах, посещаемых быстророботом.
Иногда в результатах поиска Яндекса можно увидеть две копии одной и той же статьи. Это может означать и то, что эта страница проиндексирована не только основным, но и быстрым роботом. Таким образом, можно выяснить, посещает ли ваш сайт быстроробот.
У каждого поискового робота есть собственный useragent, и они указаны Яндексом. А вот для быстроробота Яндекс не указал useragent, поэтому выяснить, был ли у вас быстроробот достаточно проблематично.
Быстророботы часто посещают социальные закладки, именно поэтому регистрация сайта в них приводит к ускоренной индексации. И хотя веса такие ссылки не прибавляют, для ускорения индексации регистрация в закладках оказывается полезной.
Как привлечь быстробота к сайту
Для того, чтобы повысить вероятность индексации новых материалов на сайте быстроботом, старайтесь выполнять следующие рекомендации:
- Регулярная и частая публикация новых материалов. Старайтесь добавлять контент на сайт систематически и, хотя бы, раз в неделю. Систематичекая публикация приучит быстробот к вашему сайту, а частое обновление заставит его бывать на сайте как можно чаще;
- Убедитесь в наличие и корректной работе RSS ленты вашего сайта. RSS лента для быстробота — один из сигнализаторов об обновлении сайта. К формату RSS можно привести что угодно: новые темы на форуме, посты в блоге, обновления каких-либо материалов в сервисе. Не пренебрегайте этой возможностью;
- Добавление свежесозданного контента в социальные закладки. Как уже было сказано выше, соцзакладки — одно из постоянных мест обитания быстробота, а также место, где он собирает ссылки на новый материал;
- Используйте только уникальный контент. Поисковые системы не интересует контент, уже размещенный до вас на каком-либо сайте. Как следствие, такой контент не интересен и быстроботу. Поэтому очень важно, чтобы публикуемый вами контент был уникальным и полезным посетителю.