Цикл в парсинге?

Question

[Василий Шешунов]

Изучаю парсинг, с одной задачей совсем запутался.
Буду благодарен за ответ. Вопрос в том, как написать цикл который бы собирал информация из блока а.
Расположенный в коде следующим образом:
Как написать код так, то бы он смог найти а ?

вот мой код который ничего не находит.

items = soup.find_all("div", class_="catalog-grid__item")
        for catalog in items:
            catalog_title = catalog.find('a', class_="product-snippet__desc")
            print(catalog_title)

-div "catalog-grid__item'
   -artical “product-snippet”
      -div “product-snippet__top”
         -div “product-snippet__right”
            -div “product-snippet__desc”
               -a
               -a
               -a
               -a
               -a
               -...
-div "catalog-grid__item'
   -artical “product-snippet”
      -div “product-snippet__top”
         -div “product-snippet__right”
            -div “product-snippet__desc”
               -a
               -a
               -a
               -a
               -a
               -...
-div "catalog-grid__item'
   -artical “product-snippet”
      -div “product-snippet__top”
         -div “product-snippet__right”
            -div “product-snippet__desc”
               -a
               -a
               -a
               -a
               -a
               -...
-...

Comments

[igorzakhar]

Дай ссылку на страницу, которую парсишь.

[Василий Шешунов]

igorzakhar, simplewine.ru

[igorzakhar]

Василий Шешунов, Смотри ответ Денис Шавалеев

Answer 1

[Денис Шавалеев]

В предыдущем ответе Dr. Bacon верно указал на ваши ошибки.
Итого получится что-то наподобие такого:

"""Изначальный вариант, подразумевается что <a> только в структуре, что вы привели"""
items = soup.find_all("a")
for catalog in items:
    catalog_title = catalog.text
    print(catalog_title)
 
"""Если тег <a> еще где-то присутствет на странице"""
items = soup.find_all("div", class_="product-snippet__desc")
for catalog in items:
    a_tags = catalog.find_all("a")
    for a in a_tags:
        catalog_title = a.text
        print(catalog_title)

Comments

[Василий Шешунов]

Спасибо за помощь, все отлично.
Но данные собираются только из первого DIV блока.
Как сделать так, что бы данные собирались в списки, из всех DIV блоков на странице ?

[Денис Шавалеев]

Василий Шешунов, А вы точно find_all используете, а не find?
Как вариант можете поменять задание атрибута для поиска div:

soup.find_all("div", {'class': 'product-snippet__desc'})

Хотя по факту данный атрибут не должен на что-то повлиять.