Почему я не могу получить атрибут элемента в Selenium?

Михаил, я уже разобрался как сделать наиболее короткий путь с указанием определенных условий вложенности:
//*[@class="landing-main"]//div[@data-ref]
Конкретно в этом случае это не нужно, т.к. я знаю, что атрибут data-ref всего 1 на странице, просто мне нужно было разобраться на будущее с этим.
driver.close() использую всегда, когда завершается выполнение кода.
И еще не подскажешь-ли, можно ожидать загрузку сразу двух страниц? К примеру я не знаю изначально авторизован пользователь, или нет. Если нет, то он попадает на 1 страницу, если авторизован - на другую.
Если я начинаю свой код с ожидания, пока на ней появится, к примеру, qr код для авторизации и timeout стоит 20 секунд, но при этом пользователь авторизован, то это просто впустую потраченные 20 секунд. И наоборот если пользователь не авторизован.

Почему я не могу получить атрибут элемента в Selenium?

Михаил, неправильно: допустим у меня есть несколько блоков div с разными классами, разбросанных по всей странице, но у них всех есть атрибут data-ref, при этом во всех этих блоках вложены разные элементы - в каком-то текст, в каком-то изображение и т.д. Будет странно, как мне кажется, добавлять довольно таки громоздкую проверку что именно находится в div, куда логичнее указать где именно расположен нужный мне div. Например, вот такая конструкция работает:

//*[@id="app"]/div/div/div[2]/div[1]/div/div[2]/div[@data-ref]

Но она слишком большая. Сокращаю:
//div[@class="landing-main"]/div/div[2]/
По-разному пытаюсь добавить [@data-ref] - не получается. Как мне правильно его вставить и, в идеале избавиться от div[2]?

Почему я не могу получить атрибут элемента в Selenium?

Михаил, а если я не знаю каким именно должен быть data-ref? Т.е. у меня есть 5 data-ref со случайно сгенерированными значения, но зато я знаю, что он должен быть вложен в div class="landing-main"/div/div.

Почему я не могу получить атрибут элемента в Selenium?

Михаил, да, на счет того, что data-ref подгружается после загрузки страницы я догадался, а за решение - спасибо.
Скажи, а если, к примеру, подобных атрибутов на странице несколько, как расширить xpath и сделать его более уточняющим? Например, следующая структура:

<div class="landing-main">
    <div class="_3XczR">
        <div class="XSdna">
            <div class="" data-ref="">

Я хочу составить XPath, который будет указывать на data-ref, который вложен в двух блоках div класса "landing-main".

Почему я не могу получить атрибут элемента в Selenium?

Так, попробовал найти по имени класса:

qr = driver.find_element_by_class_name('XSdna')
print(qr.get_attribute("innerHTML"))

Вывод:

<div class="_2EZ_m"><svg class="_1UDDE" width="65" height="65" viewBox="0 0 44 44"><circle class="_3GbTq _3AnXT" cx="22" cy="22" r="20" fill="none" stroke-width="4"></circle></svg></div>

Никакого data-ref нет. Смотрю на сайте через просмотр кода - есть, а селениум говорит, что нет. И селениум и я пользуемся одним браузером. Как это вообще возможно?

Почему я не могу получить атрибут элемента в Selenium?

Использовал innerHTML, вообще не понимаю, куда меня занесло:

<svg class="_1UDDE" width="65" height="65" viewBox="0 0 44 44"><circle class="_3GbTq _3AnXT" cx="22" cy="22" r="20" fill="none" stroke-width="4"></circle></svg>

Если что, то сайт web.whatsapp.com, на главной странице пытаюсь вытянуть data-ref QR-кода.

Почему я не могу получить атрибут элемента в Selenium?

Влад Григорьев, нет, тот самый. Пробовал расширять xpath:

'//*[@id="app"]/div/div/div[2]/div[1]/div/div[2]/div[contains(@class, "_2EZ_m")]'

Проверка все так-же проходит, результат вывода атрибута None.
Плюс у меня стоит ожидание загрузки страницы, если-бы элемент был не тот, то код вообще не работал-бы.

Почему явное ожидание ждёт вечно?

zlodiak, он не ищет, просто Exception не завершает работу скрипта. Хотите, что-бы в случае неудачного поиска завершалась работы скрипта - в блоке except пишите exit(0), а лучше используйте finally.

Как создать команду бан? Python-VK?

NooBick, вы-же написали

я сделал что бы при ответе сообщения и надписи бан он банил юзера

Соответственно у вас должно быть что-то вроде:

def ban_function():
    '''
    Тут функция, которая банит пользователя
    '''

Парсинг сайтов xpath?

AlexBoss, только вот selenium и requets немного не об парсинге.

Как правильно проверить ввел пользователь номер телефона или свою почту?

Сергей Горностаев, мне кажется это странным решением - пытаться отправить емеил, для проверки валидности. Уж лучше api, если нужна максимальная точность, в остальных случаях базовых регулярок хватает более чем.
Обратите внимание, что у человека вопрос стоит не в том, что-бы проверить емеил на валидность а в том, что-бы убедиться, что введен именно емеил.

Как правильно проверить ввел пользователь номер телефона или свою почту?

Роман Мирр, это самые базовые проверки на емеил и номер телефона. В случае с емеил группа символов, собачка, группа символов, точка.
К слову эта регулряка собрана из примеров официальной документации Python.

Как правильно проверить ввел пользователь номер телефона или свою почту?

Роман Мирр, ну так для этого, очевидно, нужно понять что именно ввел пользователь - просто бессмыслицу, или адрес.

Ошибка при написании Telegram Bot?

bbkmzzzz, это я слепой кретин перепутал конструкцию if-elseif в php и if-elif в python.

Ошибка при написании Telegram Bot?

bot.polling(none_stop=True)

Сильно-ли замедляется доступ к объектам словаря при большом количестве?

Владимир, неа, многие вопросы от совершенно разных приложений.
В целом для приложения, для которого хотел "прикрутить" базу я пробовал redis, postgresql. Redis жрет много ОЗУ - был выкинут сразу, "объемные" sql запросы слишком сильно засоряли код, т.к. их было много, хотя в целом о postgresql лично для себя сделал только один вывод: "зачем?". Пробовал извращение типа tinydb - то-ли я дурак (это факт, но в случае tinydb возможно было исключение), то-ли tinydb хлама кусок: частенько происходила "кривая" запись в db.json, из-за чего он становился невалидным и все крашилось, за скорость работы, ввиду выключенного кэширования по определенным обстоятельствам, я вообще молчу - ниже, такое ощущение, быть она в принципе не может. Читал много хвалебных отзывов о mongo, мол тоже построен на концепции документов json - попробую, но не сейчас. В любом случае в приложении была полностью изменена логика - все теперь работает сугубо в динами, а выходные данные, которые прям очень нужно сохранить - записываю в csv.

Сильно-ли замедляется доступ к объектам словаря при большом количестве?

Roman Kitaev,

что является ключом? pid — это число или строка? Тогда идеально

А что должно быть в ячейке, что-бы было "не идеально"? Другой словарь/список?

Сильно-ли замедляется доступ к объектам словаря при большом количестве?

Roman Kitaev, еще одно - раз в сутки скрипт перезапускается, соответственно status очищается. Пока что максимальное кол-во обращений было в районе 1500, соответственно и записей типа pid = {024635: 0} такое-же.

Сильно-ли замедляется доступ к объектам словаря при большом количестве?

Roman Kitaev, pid - это число.

Сильно-ли замедляется доступ к объектам словаря при большом количестве?

Не использовал хэш.
Просто заполняю status.update(pid, get_status()) и потом обращаюсь if status.get(pid) == 0: