Краулер (поисковый бот, робот, паук)– это неотъемлемая для поисковой системы программа, отвечающая за поиск сайтов и сканирование их содержимого путем перехода по страницам и ссылкам для занесения собранной информации в базу данных поисковика.
Справочник - SEO
Краулер

Записаться на курсы или получить консультацию
Вас ждут увлекательные лекции и практические задания на основе реальных кейсов, Вы получите навыки поискового продвижения любых проектов
- Старт курса: 30 мая
- Осталось: 7 мест