Видеоурок

Парсинг сайтов с несколькими уровнями категорий

Как последовательно пройти несколько уровней категорий сайта - от общего каталога до карточки товара - и собрать данные на каждом уровне.

Структура задачи

Урок объясняет, как собрать ссылки с главных страниц каталога на разделы категорий, а затем перейти глубже - к отдельным товарам, - через контекстное меню кампании.

XPath на каждом уровне

Для каждого уровня переходов настраивается собственное XPath-выражение, а также пагинация для многоуровневой навигации по сайту.

Сбор и экспорт

После выстраивания всех переходов по категориям настраивается сбор данных карточки товара, XPath при необходимости корректируется, а результат тестируется и выгружается в Excel.

Ко всем видеоурокам