Как исправить AttributeError: 'NoneType' object has no attribute 'find_all'?

Question

[Collonil Tolli]

Гуглил долго, а до сих пор не могу понять, в чём ошибка?
Выдаёт: AttributeError: 'NoneType' object has no attribute 'find_all'

Я так понимаю, не находит нужный блок, но как это исправить?
пытаюсь спарсить имя пользователя со страницы в вк

import requests;from bs4 import BeautifulSoup

link = input("")
responce = requests.get(link).text
soup = BeautifulSoup(responce, 'lxml')
block = soup.find('div', id = "page_info_wrap")
check_nikname = block.find_all('h1')[0].text
print(check_nikname)

Comments

[o5a]

Конкретно по самой ошибке - просто block не находит ничего по указанным критериям, поэтому и дальше find_all не будет работать.
А не находит скорее всего потому, что код страницы генерируется во время запуска через javascript, поэтому через requests информацию и не получаете. Можно проверить, выведя получившееся в "responce", попробуйте сами найти в нем свои тэги, их там и не будет.
Для эмуляции браузера можно использовать библиотеку selenium.
А учитывая, что парсите vk, то лучше использовать их собственный API вместо парсинга страницы.

Answer 1

[Yupiter7575]

import requests;from bs4 import BeautifulSoup
У меня на родине, за такое расстреливают на месте

responce = requests.get(link).text
soup = BeautifulSoup(responce, 'lxml')

response в переводе означает "ответ". А у вас в ответе лежит html разметка, имя переменной не правильно подобрано. Да и пишется response

block = soup.find('div', id = "page_info_wrap")
Скиньте ссылку, где вы видели чтобы так писали. Понятное дело он не находит. Правильный синтаксис, прописанный в документации:

block = soup.find('div', attrs={"id":"page_info_wrap"}

И если есть возможность, лучше искать только по тегу или по классу.

check_nikname = block.find_all('h1')[0].text
И на последок, имя переменной не правильно подобрано. check - глагол, глаголы используют в названиях Функций

UPD:
Перечитал вопрос. А зачем вы через requests парсите то вк? У них же api свой есть

Comments

[Collonil Tolli]

Ошибка не пропала. С другими сайтами, мой вариант кода работает. через апи вк не могу в силу нескольких причин.
в браузере (мозила) в консоль выводится

"Запрос из постороннего источника заблокирован: Политика одного источника запрещает чтение удаленного ресурса на https://stats.vk-portal.net/web-stats/p. (Причина: не удалось выполнить запрос CORS)."

можно ли как-то это обойти?

[Yupiter7575]

Collonil Tolli, Ммм круто. Заголовки попробуйте вставить в запрос.

[soremix]

Collonil Tolli, а корсы откуда взялись?

[Wispik]

Yupiter7575,

block = soup.find('div', id = "page_info_wrap")
Скиньте ссылку, где вы видели чтобы так писали. Понятное дело он не находит. Правильный синтаксис, прописанный в

попробуй сам прочитать документацию, вполне себе нормальная запись, а тот же attrs в документации упоминается только для кастомных полей, типо:
data_soup.find_all(attrs={"data-foo": "value"})