Робот (спайдер) – составная часть поисковой машины, основная задача которой – запрашивать информацию с сайтов и передавать ее индексатору для дальнейшей обработки.
К словарю