Как правильно реализовать цикл у парсера?

Question

[badEd]

Задача, создать парсер, который спарсит наименование компаний и их телефоны с каталога.

Каталог имеет такую структуру: Область - Город - Район - Фирма
Областей, естественно, много. В каждой области много городов и так далее.
Как правильно написать цикл, чтобы оно шло по страницам каталога до тех пор, пока не наткнется на страницу фирмы?

Answer 1

[xmoonlight]

Рекурсивный обход "дерева" ссылок и ориентир по признакам (например, URL) для определения типа содержимого страницы: Область, Город, Район или Фирма.