Хочу найти все сайты которые продают парфюмерий. Как могу осуществить какую технологию использоватьподскажите? Scrapy, BeautifulSoup с ними как находить с определеного сайта какое-то информация найти знаю. Но чтобы найти сайты которые продают парфюмерии как осуществить ?
import requests
import bs4
res = requests.get('https://www.google.com/search?q=')
soup = bs4.BeautifulSoup(res.text, 'lxml')
for link in soup.find_all('a', href=True):
print(link['href'])
Как мне написать request, чтобы взять все сайты с ответа гугла? Не понимаю как реализовать?
