Ответы пользователя по тегу Beautiful Soup
  • Что делать если парсится только одна ссылка?

    P.S Ты уже надел с глупыми вопросами, ты где парсингу учился? Если сам, то кинь в комент как с тобой связаться, скину тебе хороший курс по парсингу на python. После его прохождения таких вопросов у тебя не останется.

    Ну во первых, лучше использовать 'lxml', вместо 'html.parser'(он быстрее), устанавливается через pip.
    Во вторых, когда ищешь по классу можно писать так:
    find_all('div', class_='numeration')

    Ну и в третьих ты делаешь неправильно, нужно сначала найти 'div', он один, а потом уже в нём искать все 'a':
    for d in soup.find('div', class_='numeration').find_all('a'):

    А ты делаешь так, но div с таким классом один.
    soup.find_all('div', {'class': 'numeration'})


    Вся функция целиком должна выглядеть так:
    def bf_parse(base_url, headers):
        session = requests.session()
        request = session.get(base_url, headers=headers)
        soup = bs(request.content, 'lxml')
        for d in soup.find('div', class_='numeration').find_all('a'):
            link = d.get('href')
            print("https://www.rosfirm.ru"+link)
    Ответ написан
    3 комментария