Представьте себе паука со множеством лапок. А знаете ли вы, что в каждой поисковой системе «живет» свой паук? При помощи паука поисковая система собирает информацию о каждом появившемся сайте. Только паук, «живущий» в поисковой системе, не имеет лапок и мохнатого брюшка.
Паук – это условное название поискового робота: программы, которая исследует сайты и интернет-страницы и заносит полученную информацию в базу данных поисковой системы. Процесс сбора информации называется индексированием.