Как парсить элементы сайта, генерируемые Angular JS?

Question

[fruitourist]

Хочу парсить тексты треков с genius.com, но там они генерируется джаваскриптом или чем то подобным: типа, сначала в routable-page стоит ng-non-bindable (снизу в командной строке) - думаю, requests быстренько берет что есть и уходит, - а после спустя несколько секунд (видимо, что то подгружается) в routable-page ng-non-bindable сменяется ng-outlet, где и содержаться тексты. Искал в интернете - пишут из JSON'а что то брать, а как не знаю, мда, вот так вот. Помогите

Comments

[AWEme]

Попробуй такой xpath //div[@class="lyrics"]//p/*

[fruitourist]

AWEme, красавчик! Спасибо

Answer 1

[Сергей Карбивничий]

Может я не правильно понял вопрос, но текст песни забирается requests'стом с genius.com буквально в одну-две строчки.

Comments

[fruitourist]

дадад, спасибо, уже понял :3

[approximate solution]

Орнул с выбора песни для экзампла. Лайк.

Answer 2

[Roman Fov]

В head смотрите

<meta content="трататамноготекста" itemprop="page_data"/>

Парсим его и разбираем json.
Профит.

Comments

[Roman Fov]

Вот напр: view-source:https://genius.com/a/drake-reveals-how-the-notorio...

Answer 3

[nokimaro]

Для genius используйте их api
https://docs.genius.com/#/getting-started-h1