Как правильно парсить страницу, что бы брать с нее информацию?

Question

[kosyak_47]

Добрый день.

Есть задача брать с определенной страницы информацию и загонять ее общую базу: количество и цену товара. В виду своей неопытности в парсинге сайтов, при просмотре кода страницы через браузер нужных цены и количества нет, но при исследовании элемента страницы эта информация есть. При парсинге я же буду получать весь код страницы где нет нужной мне информации.

Подскажите пожалуйста, о чем я не знаю или что не понимаю?

Парсер хочу писать на C#

Парсить сайт буду не часто - раз в 4 часа, так что проверку в виде капчи получить не должен.

Answer 1

[alexbprofit]

Selenium

Comments

[alexbprofit]

find_element_by_ методами

[kosyak_47]

alexbprofit, подскажите пожалуйста один момент, ибо в html языке не силен) Элемент в коде страницы чем является?
Вот пример элемента из нужной мне страницы:

Красным - основной элемент в котором хранятся нужные данные
Зеленым - элементы, которые нужно достать для базы

[alexbprofit]

Зеленый, это дочерний елемент родительского класса ( красного)

[kosyak_47]

alexbprofit, понял. А в driver.FindElement() что именно указывается? data-v-6e24da01?

[alexbprofit]

да, но там по моему есть различные аттрибуты для поиска
по тегу
по классу
по xpath

[Михаил Р.]

kosyak_47,

data-v-6e24da01

Обратите внимание, такие названия атрибутов/классов не просто так создаются и возможно, они динамически меняются...

[alexbprofit]

Михаил Р., тогда лучше делать поиск по xpath этого элемента