Как создать граф внутренних ссылок сайта?

Question

[hawkkoff]

Добрый день

Понадобилось визуализировать граф внутренних ссылок сайта средствами Python. Нашёл библиотеку networkx, но я не смог придумать как быстро на нём создать граф сайта. Единственное, нашёл что можно импортировать графы из некоторых форматов

NetworkX is able to read/write graphs from/to files using common graph formats:
• edge lists
• adjacency lists
• GML
• GEXF
• Python pickle
• GraphML
• Pajek
• LEDA
• YAML

Но я не смог понять, как создать эти файлы. Самому с нуля писать краулер не хочется, надеюсь есть готовое решение. Кто нибудь сталкивался с подобной проблемой?

Answer 1

[Максим Васильев]

networkx - это тупо библиотека для работы с любыми графами.
чтобы туда загрузить ссылки, вам нужен сканер сайтов
например grab.readthedocs.org
и прикрутить к нему функцию записи ссылок в граф.