Как убрать дубликаты из результата?

Question

[activebomb]

def bf_parse(base_url, headers):
    session = requests.session()
    request = session.get(base_url, headers=headers)
    if request.status_code == 200:
        soup = bs(request.content, 'html.parser')
        divs = soup.find_all('div', attrs=('forum-user-name'))
        for div in divs:
            users = div.find('a').get('href')
            print("https://www.banki.ru" + users)
        else:
            print("ерор")

bf_parse(base_url, headers)

Проблема в том что после принта того, что мне нужно, я получаю такой результат: как можно заметить, в первых двух строках результат повторяется, мне нужно исключить дубликаты.

Answer 1

[Сергей Горностаев]

links = (d.find('a') for d in soup.find_all('div', attrs=('forum-user-name')))
users = {'https://www.banki.ru' + a.get('href') for a in links if a is not None}
print('\n'.join(users))

Comments

[activebomb]

теперь у меня результат выводится несколько раз :/

[Сергей Горностаев]

activebomb, цикл надо убрать

[activebomb]

Сергей Горностаев, а как это правильно сделать не подскажите?

[Сергей Горностаев]

activebomb,

if request.status_code == 200:
    soup = bs(request.content, 'html.parser')
    links = (d.find('a') for d in soup.find_all('div', attrs=('forum-user-name')))
    users = {'https://www.banki.ru' + a.get('href') for a in links if a is not None}
    print('\n'.join(users))