Почему парсер python на requests не работает?

Question

[Yraron_it]

Здравствуйте, я пытаюсь создать свой первый парсер, но он не работает, просто выдаёт []. Объясните пожалуйста, как это исправить и что мне нужно подучить.

import webbrowser as wb
import requests
from lxml import etree
import lxml.html
import csv

def parse(url):
    api = requests.get(url)
    tree = lxml.html.document_fromstring(api.text)
    text = tree.xpath('//*[@id="mw-content-text"]/p/text()')
    print(text)

parse('https://ru.wikipedia.org/wiki/%D0%A0%D0%B5%D0%BA%D1%83%D1%80%D1%81%D0%B8%D1%8F')

Comments

[Алан Гибизов]

Вы подебажили, посмотрели, что возвращает request.get, что там в api.text приходит?

Answer 1

[Владимир Куц]

Он работает, и выдает именно то что вы запрашиваете.
У вашего выбранного элемента с id="mw-content-text" нет непосредственного тега-потомка p - поэтому и выводит пустое множество.

Answer 2

[Emil Revencu]

//p/text()