Почему при парсинге вылезает такая ошибка?

Question

[Adam001]

по этому прошу помощи. Как мне решить эту ошибку?
TypeError: 'NoneType' object is not subscriptable

import requests

from bs4 import BeautifulSoup

URL = "https://habr.com/ru/search/?target_type=posts&q=python&order_by=date"

page = requests.get(URL)
soup = BeautifulSoup(page.content, "html.parser")

post = soup.find("li", "", id=True)
post_id = post["id"]

post = soup.find("li", class_="tm-article-snippet tm-article-snippet", id=True)
post_id = post["id"]
#print(post_id)

title = post.find("a", class_="post__title_link").text.strip()
description = post.find("div", class_="post__text post__text-html post__text_v1").text.strip()
url = post.find("a", class_="post__title_link", href=True)["href"].strip()

Comments

[Модератор]

Фрагменты кода надо размещать в виде текста и оборачивать тэгом code для корректного отображения. Удобно делать кнопкой </>
Это обязательно, см.п.3.8 Регламента.
Сюда же относится traceback, ввод и вывод в консоли и другая структурированная текстовая инфа.

[Модератор]

Не надо ставить как можно больше тэгов. Лучше оставить один, но конкретный, с которым проблема.
См.п.3.1 Регламента. Также обратите внимание на п.3.4, 3.6

Answer 1

[Олег]

Загляните в https://habr.com/robots.txt
User-agent: *
Crawl-delay: 10
Disallow: /search/

хабр против

А вот в коде страницы есть
https://habr.com/ru/rss/articles/?fl=ru

читайте rss . Складывайте локально новые анносы и спокойно делайте поиск у себя по базе данных.
Не нужно дергать хабр на каждое обращение к боту

Comments

[Adam001]

а если другая примерно NEWS.am

[Олег]

я дополнил ответ. Как можно не напряжно для сайта учиться писать ботов

[Adam001]

ну ладно спасибо большое