Как вывести ссылки на всех авторов с этой страницы?

Question

[kan3k1k3n]

нужно получить все ссылки на всех авторов на странице: stihibase.ru/author/
то есть выводится должно /author/a/ahmatova/ например. вот код:

import requests
from bs4 import BeautifulSoup
url = 'https://stihibase.ru/author/'
response = requests.get(url)
bs = BeautifulSoup(response.text,"lxml")
autori = bs.find_all('li', class_='alfavit-stixi-title')
print(autori)
for a in autori:
        print(a.find('a')['href'])

выдает только несколько ссылок: /author/a/ahmatova/
/author/a/annenskij/
/author/a/apuhtin/
а нужно все 147

Answer 1

[Максим Припадчев]

код рабочий в принципе немного подкорректируй последнюю часть и все

try:
    print(a.find('a')['href'])
except TypeError:
    pass

добавь эту конструкцию в тело цикла for и все проверил выводит ровно все 147 ссылок.

Comments

[kan3k1k3n]

спасибо большое, все получилось!

[Максим Припадчев]

kan3k1k3n, дам вам маленький совет, если работаете с парсиногом то обязательно освойте конструкцию try except, потому что исключения которые нужно ловить в парсинге будут всегда. И подобные проблемы будут преследовать.

Answer 2

[Денис]

import requests
from bs4 import BeautifulSoup

url = 'https://stihibase.ru/author/'
response = requests.get(url)
bs = BeautifulSoup(response.text, 'lxml')
authors = bs.find_all('li', class_='alfavit-stixi-title')

for author in authors:
    link = author.find('a')
    if link is not None:
        print(link['href'])