Как написать простенький парсер на django?

Question

[a_palanski]

Добрый день, подскажите, как на django сделать веб приложение парсер с ютуба. Чтобы он просто при вводе адреса канала, выдавал комментарии, когда комментарии были опубликованы и какое количество просмотров?

Answer 1

[sim3x]

Лучше не пасить, а запрашивать через апи
https://developers.google.com/youtube/v3/getting-s...

Answer 2

[Игорь Лютоев]

Пишите отдельно парсер (например на Grab или простом requests) и приложение Django, которое спарсенные в базу данные показывает.

Comments

[a_palanski]

у меня просто опыт не большой и хочется узнать как это реализовать

[Игорь Лютоев]

Подробно объяснять очень долго.

С начала, сделайте приложение Django, в котором будете хранить получаемую информацию - комментарии, просмотры и т.д. Т.е. нужно продумать модель данных - получим базу данных с полями.

Теперь базу нужно заполнить данными. Используем для этого парсинг. Начните отсюда (документация на Grab с примером парсинга habrahabr) - docs.grablib.org/en/latest/spider/intro.html
В этом случае адрес канала будете забивать руками в код парсер.

Далее можете усложнять. Сделать форму, в которую будете вводить адрес канала и передавать его в парсер. Можно сделать таблицу-очередь (в нее записывать адреса каналов) и периодически запускать парсер, чтобы он проходил по этой очереди и парсил каналы.

Answer 3

[un1t]

Для выкачки страницы используй requests или urllib, для парсинга - lxml. Туториалы какие-нить погугли, их полно.