Как реализовать поиск элемента по классу, Python3+Selenium?

Question

[Дмитрий]

Задача такая, при помощи селениума я захожу на сайт авторизуюсь а дальше мне надо пробежаться по странице и найти определенные классы сейчас пока что пробую сделать их в список, в дальнейшем конечно хочется в словарь, но пока я застрял на этом цикле,

unread=driver.find_element(by=By.CLASS_NAME, value='under')  #driver.find_element_by_class_name('under')
completed=driver.find_element(by=By.CLASS_NAME, value='completed')#driver.find_element_by_class_name('completed')
com=[]
for i in driver:
    if i == completed:
        com.append(i)
        print(com)
    elif i==unread:
        com.append(i)
        print(com)
    elif i!=unread and i!=completed:
        print("Ничего не обнаружено")

может что не так делаю но происходит ошибка:
Traceback (most recent call last):
File "C:/.../PycharmProjects/untitled/directum.py", line 28, in
unread=driver.find_element(by=By.CLASS_NAME, value='under') #driver.find_element_by_class_name("under")
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 752, in find_element
'value': value})['value']
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 236, in execute
self.error_handler.check_response(response)
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\errorhandler.py", line 192, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"class name","selector":"under"}
(Session info: chrome=55.0.2883.87)
(Driver info: chromedriver=2.26.436362 (5476ec6bf7ccbada1734a0cdec7d570bb042aa30),platform=Windows NT 10.0.14393 x86_64)

Answer 1

[Дмитрий Еремин]

Вот так

unread = [];
unread=driver.find_element_by_class_name('under');
completed = [];
completed=driver.find_element_by_class_name('completed');

UPD:
Вот к чему пока пришли:
- На странице нет элементов .unders. Так что в коде нужно писать условие, что если (len(unders) > 0), то идем дальше
- не ясности с кодом дальше:

unread = [] #вот тут создали массив
unread=driver.find_element_by_class_name('under') #вот тут его ничем не наполнили, т.к. 0

com=[]
for i in driver: #вот это вообще загадочная строка для меня. У вас драйвер - это не коллекция. Это объект другой. может быть, вы хотели for i in unread ?
  if i == completed: #вот тут тоже загадка. вы сравниваете объект типа WebElement с массивом. 
    com.append(i)
    print(com)
  elif i==unread: #и тут
    com.append(i)
    print(com)
  elif i!=unread and i!=completed: #и тут
    print("Ничего не обнаружено")

#Что происходит?

UPD2: и вот еще вопрос:

#вот тут у вас переменная логично названа: completed - тут все элементы класса completed
completed=driver.find_element(by=By.CLASS_NAME, value='completed')
#а вот тут переменная unread, а класс under. Так и надо?
unread=driver.find_element(by=By.CLASS_NAME, value='under')  #driver.find_element_by_class_name('under')

UPD3: И вообще, вот читать постоянно

Comments

[Дмитрий]

тогда идет вот такая ошибка:
C:\Python35\python.exe C:/.../PycharmProjects/untitled/directum.py
Traceback (most recent call last):
File "C:/..../PycharmProjects/untitled/directum.py", line 28, in
unread=driver.find_element_by_class_name('under')
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 413, in find_element_by_class_name
return self.find_element(by=By.CLASS_NAME, value=name)
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 752, in find_element
'value': value})['value']
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 236, in execute
self.error_handler.check_response(response)
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\errorhandler.py", line 192, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"class name","selector":"under"}
(Session info: chrome=55.0.2883.87)
(Driver info: chromedriver=2.26.436362 (5476ec6bf7ccbada1734a0cdec7d570bb042aa30),platform=Windows NT 10.0.14393 x86_64)

Process finished with exit code 1

[Дмитрий Еремин]

Дмитрий: selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"class name","selector":"under"}
ну нету такого элемента
покажите страничку, на которой делаете это все

[Дмитрий]

Дмитрий Еремин: страничку показать нет возможности, но я кажется понял почему, подскажите пожалуйста., допустим в переменной x записан адрес страницы с авторизацией после авторизации он переходит на другую ссылку как ее добавить в y и тогда я думаю поиск сработает

[Дмитрий Еремин]

Не очень понял, что вам нужно
Текущий адрес страницы, с которой работает драйвер, получают вот так currentUrl = driver.current_url

[Дмитрий]

Дмитрий Еремин: Traceback (most recent call last):
File "C:/.../PycharmProjects/untitled/directum.py", line 32, in
unread=driver_new.find_element_by_class_name('under')
AttributeError: 'str' object has no attribute 'find_element_by_class_name'

не понимаю почему

[Дмитрий Еремин]

Дмитрий: а покажите весь python-код

[Дмитрий Еремин]

Дмитрий: где-то у вас простая ошибка есть "no attribute 'find_element_by_class_name'"

[Дмитрий]

решил проблему вывода методом try except NoSuchElementException но вот не задача может подскажешь как же вывести первые 5 элементов при том что у них у всех есть одинаковый класс и вывести с пометкой прочитан не прочитан не отвечен

[Дмитрий Еремин]

Дмитрий: я питон вообще не знаю.
Но, имея то, что есть, идем таким путем:
- берем в массив (назовем его arr) все элементы по нужно нам классу.
- (если массив больше нуля) пишем цикл от для i от 0 до (len(arr) - 1)
- в цикле проверяем:
- если итератор > 4, то break; (почитайте про это ключевое слово)
- дальше, все еще в цикле, выводим arr[i] ну и для него же, в цикле, выполняем проверку, прочитал или нет

Все. Дальше уже только программу за тебя писать. С гуглом-пополам, за вечер такое напишешь

[Дмитрий]

Дмитрий Еремин: приветствую, извини может подскажешь в силениуме как игнорировать проверку на сертификат а то браузер ругается

[Дмитрий Еремин]

Дмитрий: stackoverflow.com/questions/24507078/how-to-deal-w...

[Дмитрий]

Дмитрий Еремин: на FF не работают те методы возможно я не так делаю но все равно показывает ошибку сертификата

Answer 2

[Дмитрий]

Дмитрий Еремин

from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import time

driver = webdriver.Chrome(executable_path="C:\Python35\chromedriver.exe")
#driver = webdriver.Firefox(executable_path = "C:\geckodriver.exe")

driver.get("https://directum.adm.yar.ru/Login.aspx") # Запускает браузер
#time.sleep(10) Ждет 10 сек

# Ввод логина
login = driver.find_element_by_id("sLogin")
login.clear()
login.send_keys("login")
# Ввод пароля
pswd = driver.find_element_by_id("sPwd")
pswd.send_keys("pass")
# Жмем войти
driver.find_element_by_id("btnLogin").click()

time.sleep(2) # Ждет 10 сек

button=driver.find_element_by_tag_name('button')
button.send_keys(Keys.ENTER)
time.sleep(5)

driver_new = driver.current_url
print('Новая страница: ', driver_new)

unread = []
unread=driver_new.find_element_by_class_name('under')
completed = []
completed=driver_new.find_element_by_class_name('completed')
com=[]
for i in driver_new:
    if i == completed:
        com.append(i)
        print(com)
    elif i==unread:
        com.append(i)
        print(com)
    elif i!=unread and i!=completed:
        print("Ничего не обнаружено")

Comments

[Дмитрий Еремин]

у вас в тексте ошибки указывался driver_new (unread=driver_new.find_element_by_class_name('under'))
а тут в коде так и используется driver

driver_new - это просто строка

[Дмитрий]

Дмитрий Еремин: я исправил) дак вот а как сделать так чтобы элементы искались по обновленной страничке

[Дмитрий Еремин]

попробуйте, после

driver_new = driver.current_url
print('Новая страница: ', driver_new)

написать
driver.get(driver_new) //попробуем еще раз подгрузить DOM

[Дмитрий Еремин]

Дмитрий: еще раз: unread=driver_new.find_element_by_class_name('under') - вот так не сработает. Потому что driver_new - это просто строка с текущим url. у нее нет метода find_element_by_class_name
работайте только с одним драйвером (driver)

Попробуйте, как я выше написал, еще раз перейти по новому адресу

[Дмитрий]

Дмитрий Еремин:
Traceback (most recent call last):
File "C:/.../PycharmProjects/untitled/directum.py", line 33, in
unread=driver.find_element_by_class_name('under')
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 413, in find_element_by_class_name
return self.find_element(by=By.CLASS_NAME, value=name)
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 752, in find_element
'value': value})['value']
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 236, in execute
self.error_handler.check_response(response)
File "C:\Python35\lib\site-packages\selenium\webdriver\remote\errorhandler.py", line 192, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.NoSuchElementException: Message: no such element: Unable to locate element: {"method":"class name","selector":"under"}
(Session info: chrome=55.0.2883.87)
(Driver info: chromedriver=2.26.436362 (5476ec6bf7ccbada1734a0cdec7d570bb042aa30),platform=Windows NT 10.0.14393 x86_64)

[Дмитрий Еремин]

Дмитрий: и второй вопрос: проследите, пожалуйста, ваши элементы, до которых вы хотите добраться, случайно ни в каком фрейме не вложены?

[Дмитрий]

Дмитрий Еремин: блин вообщем то что я ищу вложен в form а дальше в таблицу в одну из ячеек

[Дмитрий Еремин]

в браузере, в консоли пишем 4 команды
var unders = $$('.under').length //запомнили количество всего с классом under
var completeds = $$('.completed').length //запомнили количество всего с классом completed
unders //должно вывести число
completeds //должно вывести число
Дмитрий:

[Дмитрий]

Дмитрий Еремин: undefined не может определить

[Дмитрий Еремин]

Дмитрий: пишите, пожалуйста, развернуто, где пишет undefined, в какой части?

var unders = $$('.under').length
//вот здесь UNDEFINED - это нормально
var completeds = $$('.completed').length
//и вот здесь UNDEFINED - это нормально
unders //здесь - нет
completeds

можно просто вот так в консоль хрома написать
console.log($$('.under').length)

[Дмитрий]

Дмитрий Еремин: unreads 0 тк их нет но могут появиться
completeds 15

[Дмитрий Еремин]

Дмитрий: ну и все. Он на unreads и ругается. Потому что их нет
unread = [] - вот тут создали массив
unread=driver.find_element_by_class_name('under') - вот тут его ничем не наполнили, т.к. 0
...
com=[]
for i in driver: - вот это вообще загадочная строка для меня. У вас драйвер - это не коллекция. Это объект другой. может быть, вы хотели for i in unread ?
if i == completed: - вот тут тоже загадка. вы сравниваете объект типа WebElement с массивом.
com.append(i)
print(com)
elif i==unread: - и тут
com.append(i)
print(com)
elif i!=unread and i!=completed: - и тут
print("Ничего не обнаружено")

Что происходит?

[Дмитрий]

Дмитрий Еремин: ну поскольку с питоном я знаком не так давно и познаю пока азы а с селениумом я незнаком вообще так только в общих чертах поэтому я думал то
for i in driver: - циклом пробежать по всей странице
if i == completed: если есть совпадение то запихнуть в com.append(i) ну и по аналогии

сейчас да заработало вот блин только из-за такой банальности столько времени потрачено, подскажите тогда такую штуку если возникает ошибка при том что элемента нет? как реализовать такую мысль
вот страничка открылась обновилась а дальше запилить проверку если элемент есть то допустим вывести первые 5если нет то вывести 0

[Дмитрий Еремин]

Дмитрий: ну давайте по порядку:
- "for i in driver: - циклом пробежать по всей странице". driver - это не страница. Это скорее весь браузер. А помимо страницы у него есть еще множество полей. В общем, driver - точно не набор элементов. Набор элементов вы как раз вытаскиваете через драйвер и сохраняете в массив.

- "if i == completed". Ну, предположим, вы написали, for i in completeds. Тогда каждый i - это просто один из веб элементов. Нужно понимать, что сам WebElement тоже не только текст, но и набор html-атрибутов, вложенных элементов и еще много чего. Поэтому, если нужно сравнить текст, то надо копать в сторону if i.text == "текст для сравнения"

- "если возникает ошибка при том что элемента нет". Ошибка возникает не от того, что элемента нет, а от того, что вы пытаетесь обратиться к нему. Я там выше обновил ответ. Вам нужно выполнять доп проверку. Погуглте про длину массива. нужно получить набор элементов, проверить, что длина массива > 0 и тогда только начать делать то, что вам нужно

И вообще, вот selenium-python.readthedocs.io/index.html