Почему не работает вложенный цикл for Python?

Александр Кошелев, а ну надо проксировать, у меня Jupyter на бурж серваке висит (не мой) поэтому Just a moment не ловит, а сразу цель страницу. Не подскажите где взять проксю рабочую бесплатно?

Почему не работает вложенный цикл for Python?

Алан Гибизов, Знаете в чем прикол?
Прикол в том, что я начал переносить код в PyCharm и он не работает!
А не робит изза того, что сайт на cloudflare подвешен и я получаю
<title>Just a moment...</title>
Да, все верно, я также вижу такую превьюху когда захожу на сайт!
Но когда я делаю через Jupyter то он получает контент целевой странице, а в ином случае такая вот шляпа. Пока не знаю как это решить.
Вот тут я принтую данные и получаю что контент приходит не целевой страницы а cloudflare предупреждения, ппц!

data = requests.get(url).text
print(data)

Почему не работает вложенный цикл for Python?

Влад Григорьев, Я же тебе написал, что он не перезаписывается!!! Там создается новый файл. Учи основы короче!

Почему не работает вложенный цикл for Python?

По сути там еще цикл должен быть, цикл для пагинации. Я качаю контент по 468 ссылкам (источникам) только с первой странице, а там их несколько бывает. Но пока мне и столько хватит, потом допишу и все качну)

Почему не работает вложенный цикл for Python?

Влад Григорьев, получилось приятель. Без обид между нами!

Почему не работает вложенный цикл for Python?

Алан Гибизов, получилось, ееееу)
правда я контент принтую (забыл принт закоментить) и так как это не на компе все делается а на Jupyter не локал хост то слегка долго

Почему не работает вложенный цикл for Python?

Алан Гибизов, мне парень написал ответ который пропал почему то. Как бы и не ответ, но тупо сказал что ни че нет в string. А так как я в Jupyter тестово пишу то я вывел массив, а что там \n я не увидел, и вот и получилось что к не той ссылке шел запрос. Исправил траблу удалив лишний \n. Пойду тестить дальше))

Почему не работает вложенный цикл for Python?

Влад Григорьев, вопрос же по человечески задал, зачем блин морали читать. Жизнь без ошибок у вас если то вы прям неземное существо....

Почему не работает вложенный цикл for Python?

Алан Гибизов, первый цикл это запрос к разным страницам (их 400+) и второй цикл это уже обход каждой линки на нужные состовляющие

Почему не работает вложенный цикл for Python?

Влад Григорьев, ну к чему эти прилюдии про основы? Основы это одно , а прод другое!
Да, в этой строке и не нашлось, потому что линки на которые идет запрос в листе с \n и сам запрос идет с \n на 404, это было сложно определить с первого раза тк 404 тоже отдает контент, но в этом контенте тупо нет атрибута который я ищу, это и запудрило мне мозги, что контент есть а записи нету.
По поводу второго ващего комментария, то вы как знаток основ должны были увидеть что файл постоянно новый , тк там присутствует переменная в ссылке. А quotes.clear() для того чтобы очищать массив тк он после каждой итерации заполняется данными и если его не очищать то данные будут нагромождаться

Почему не работает вложенный цикл for Python?

Алан Гибизов, я там сам косякнул, в первой ветке прокоментировал ошибку. Спасибо за отзывчивость вам, уже не первый раз мне помогаете!

Почему не работает вложенный цикл for Python?

Вот эта херня которая мешала.

У Jupytera есть такое свойство.... что надо код бл*** перепроверять, хотя он выдает принты так будто все збс
Благодарю приятель

Почему не работает вложенный цикл for Python?

Ну ты походу прав, Page Not Found это херня.....
Это линка просто отображается в Jupyter типа она хорошая, но по факту контент отдается с левой страницы....
Там походу лишние символы есть в list authors, который содержит линки

Почему не работает вложенный цикл for Python?

Ну ты походу прав, Page Not Found это херня.....
Это линка просто отображается в Jupyter типа она хорошая, но по факту контент отдается с левой страницы....
Там походу лишние символы есть в list authors, который содержит линки

Почему не работает вложенный цикл for Python?

Вот все робит, объект soup_2 выдает данные.
PS то что page no found это ерунда, все там есть, просто title такой на страницах

Почему не работает вложенный цикл for Python?

mkone112, не может быть.
У меня не робит print(string)
Но print(data_2) и print(soup_2) выдают результат.
Поэтому я и в замешательстве

Почему не работает вложенный цикл for Python?

mkone112, так я написал что попринтовал, доходит дело до

for string in soup_2.select('[style="display: flex;justify-content: space-between"]'):

и код перестает работать, string уже не принтуется.
А отдельно работает запись в файл

Какую БД выбрать для парсинга на питоне и использовании в app на котлине?

Jacen11, можно с вами в телеграмме, ятобы объяснить в режиме онлайн пожалуйста?

Какую БД выбрать для парсинга на питоне и использовании в app на котлине?

Jacen11, согласен насчет room. Но тогда вопрос в том, как мне парсить данные на питоне добавляя их в БД? Room не работает с питоном. Гуглил как "конвертитровать" данные из sqlite в room и пока ничего не нашел!

все нормальные люди делают сервак и потом приложение делает запрос на него по требованию пользователя на обновление данных

Я написал, что хочу, чтобы прилолжение работало и без инета, поэтому сторонний сервак юзать не айс

Какую БД выбрать для парсинга на питоне и использовании в app на котлине?

rPman, угу, сделал. Вопрос кстати теперь в экспорте из sqlite studio. Я в студию закидываю файл .db, а вот обратно из студии я не могу файл .db экспортировать. Только пдф, sql и тд, но не .db.
Объясню не обходимость. Я например работаю в Jupyter, создал БД и наполняю данными. Затем мне захотелось визуально глянуть в студии например. Я качаю файл, заливаю в студию, правлю что-то (как вариант), потом обновленный файл БД мне нужна обратно в Jupyter закинуть, но эьто уже будет не .db файл. Как же мне обратно мою базу данных поместить в Jupyter ?