Как узнать список внешних ресурсов используемых при загрузке вебстраницы?

Question

[m0ps]

Подскажите плз каким способом можно узнать список внешних ресурсов, используемых при загрузке вебстраницы. Необходим список доменов, отличных от адреса сайта.
К примеру при загрузке toster.ru доп контент загружается еще и со следующих доменов:
apm.24mon.com
dr.habracdn.net
fonts.googleapis.com
habrastorage.org
googletagservices.com
и т.д.
Собственно меня интересует способ, которым можно собрать информацию по ~80+ сайтам. Вручную это можно увидеть в "инспекторе" вебстраницы в Google Chrome на вкладке Sources. Но в ручную - это довольно муторное дело, т.к. экспорт этого списка в браузее сделать автоматически нельзя.

Answer 1

[Дима Долготер]

парси страницу и собирай теги в которых есть абсолютные пути. Потом удаляй из этого списка ссылки (тег а) и вот тебе внешние ресурсы

Comments

[m0ps]

Скажем так, вопрос был о конкретной реализации а не теории. Нужен этот список - для корректной реализации фильтрации сайтов по вайтлисту.

[Дмитрий Кузнецов]

m0ps,

Скажем так, вопрос был о конкретной реализации а не теории.

Мало кто решит писать за вас. Так же, в этом случае, этот "вопрос" можно посчитать за задании и пожаловаться.

[m0ps]

Дмитрий Кузнецов, что писать?.. вопрос был о конкретном инструменте (готовое приложение или сервис)