Dimonchik

JS браузер
например Селениум

или в Скрапи есть фича, как тебе советовал
https://qna.habr.com/q/1164398

Scrapy в помощь

но учти что 2gis парсить нелегко

переставь питон и библиотеки в C:/python310

или пользователя переименуй с кириллицы, но это не всегда помогает

https://t.me/clickhouse_ru

попроще нет

а вот посложнее, когда обратно уже не получится - есть
https://stackoverflow.com/questions/58301366/lost-...

profile.set_preference("browser.cache.disk.enable", False)
profile.set_preference("browser.cache.memory.enable", False)

но вообще причин куча возможных

не так скачиваешь бинарный файл

гугл requests , , stream=True, rawdata etc

с таким раскладом текстовых файлов хватит

а так - SQL Delete запрос

кури тут статьи
https://pyimagesearch.com/

сначала ограничиваешь область цифр, потом распознаешь

вот поэтому в вакансиях пишут "знание linux"

да, кстати, знание Python тоже надо, за
/home/www/main.py
по шапке

замени
root='.'
на пути от корня

а потом уже найдешь и заменишь на относительные, ну или забьешь

браузер не знает к нему маршрута, хотя попробуй в hosts указать ) может все на компе сломается ))))))))))

в Натиссимус

там дело в IP, гугли обход cloudflare , есть варианты, но они не сильно простые

https://stackoverflow.com/questions/35696126/selen...

читай мой коммент и пояснение
https://qna.habr.com/q/1157880#answer_2172352

файл читаешь построчно и построчно же пишешь в новый