Специальная программа, входящая в состав поисковой системы, которая регулярно просматривает web-страницы Интернета, выбирает ключевые слова и составляет базу данных, к которой уже и обращается пользователь, называется …
черепахой-поисковиком
web-обходчиком
Интернет-путешественником
поисковым роботом