Автор: Приветствую вас дорогие читатели, данная статья поможет вам пополнить свои знания в области продвижения сайтов.
Если вы еще не слыхали, что существует такой робот поисковик, или же просто не имеете понятия как он работает, и для чего он нужен, то в этой статье я постараюсь вам все объяснить.
Основной задачей поискового робота – является хранение всего списка урл адресов, которые он сможет проиндексировать.
Он постоянно выкачивает документы со всех сайтов, которые находятся в его поисковой системе, когда робот анализирует ваш сайт, он обязательно натолкнется на новую ссылку, после чего он обязательно ее добавит в свой список.
Из этого всего можно сделать простой вывод о том, что любой сайт, на котором появляются новые ссылки, он обязательно внесет в свою базу.
Давайте с вами рассмотрим, какие бывают разновидности роботов, которые индексируют страницы.
Роботы, которые индексируют страницы вашего сайта бывают разными, существует их несколько видов.
Каждый робот выполняет свои необходимые задачи, на которые он собственно и запрограммирован.
Существуют роботы, которые созданы для того, чтобы индексировать RSS – ленты для поиска по сайтам и блогам.
Есть роботы, которые 
занимаются индексацией картинок.
Но стоит отметить, что среди все простых роботов, существует и главный индексирующий робот. Главной его функцией – является поиск и индексирование страниц. Данная задача формируется этим роботом для специальной базы основного поиска.
Заметьте, что основной робот не может работать в одиночку, так как ему попросту не справиться с огромными потоками различной информации, поэтому у него обязательно должны быть помощники, одним их таких помощников – является быстрый робот.
Быстрый робот создан для того, чтобы все оперативно обрабатывать, а именно новую информацию, которая только появилась на сайте или же просто актуальна. Бывают такие случаи, что среди проиндексированных страниц попадаются копии, это может означать только одно, что страница проиндексировалась сразу двумя роботами, основным и быстрым роботом.
Вот пожалуй и все, дорогие читатели, перед тем как что-то делать со своим сайтом, внимательно ознакомьтесь с моими статьями, так как на данное время поисковые системы обновляют свои алгоритмы с быстрой скоростью, и вы просто можете заниматься продвижением сайта, которое не актуально на сегодняшний день. Удачи вам в развитии своих ресурсов.
