Как отобрать нужные ссылки?

Question

[wkainen]

Написал простенький парсер, который собирает все ссылки с сайта

data = []
for p in range(0,1):
    print(p)
    
    url = f'https://spume.io'
    r = requests.get(url)
    soup = BeautifulSoup(r.text, 'lxml')
    All_tag = soup.findAll('a')
    
    for All_tags in All_tag:

        All_link = All_tags.get('href')
        
        data.append(All_link)

Он собирает и заносит в дату и выводит такой формат:



Как рассортировать эти данные, чтобы потом сохранить в таблицу по колонкам telegram/twitter/linkedin?

Answer 1

[Михаил Р.]

1. Перебираем массив.
2. Ищем в строке, например: "//twitter".
3. Если совпадение найдено > сохранить в массив sorted.twitter или в необходимую бд.

Comments

[wkainen]

Перебор массива можно таким образом сделать через try
soup.find(text = re.compile('https://instagram.com/'))

или как то иначе это сделать

[wkainen]

Можете именно процесс поиска по строке показать

[Михаил Р.]

wkainen, т.к. Вы не указали, какой именно ЯП собираетесь использовать, предположу, что это Python (поправил Ваш вопрос).

1. Гуглим "перебор массива python": https://www.yandex.ru/search/?lr=110269&offline_se...
2. Гуглим "поиск в строке python": https://www.yandex.ru/search/?text=%D0%BF%D0%BE%D0...
3. Гуглим "добавление в массив python": https://www.yandex.ru/search/?text=%D0%B4%D0%BE%D0...

Profit!

[Михаил Р.]

wkainen,

Можете именно процесс поиска по строке показать

Первое, что мне попалось при поиске "поиск в строке python": https://metanit.com/python/tutorial/5.2.php

[wkainen]

Михаил Р., Спасибо вам большое, вы очень сильно помогли

[Михаил Р.]

wkainen, я просто загуглил :)