Как просканировать сайт wget на наличие внешних ссылок?

Question

[De YURII]

Есть необходимость просканировать около 1000 страниц на наличие внешних ссылок на странице, куда копать и подойдет ли для этого wget ?

Answer 1

[Dimonchik]

вообще гляньте вот это
home.snafu.de/tilman/xenulink.html

что касаестя wget - настройте зерклирование, выкачку только ХТМЛ страниц и возможность ходьбы по внешним ссылкам - тогда на локальном увидите, какие папки-домены он создаст

это - лучшая дока по dutn dbserv.pnpi.spb.ru/~shevel/Book/node103.html