HTML парсер на Bash?

Question

[nak-alexey]

Есть ли какой нибудь парсер html на bash? Нужно вытянуть таблицу из сайта и работать с её данными.

Comments

[Adamos]

Вам не нужен парсер хтмл, вам всего лишь нужно погрепать таблицу.

[Виктор Таран]

если вам нужно выдрать контент и это нужно делать не на постоянной основен а тупо запускать руками или вообще 1 раз.
то самое простое решение это
https://chrome.google.com/webstore/detail/web-scra...
Хватает навыка уровень овощ, слышал про верстку.
Можно грабить контент любой сложности за 10 минут настройки.
выдирать не только таблицы но и парсить их и забирать нужные значения, все это забирается в нужном вам формате.

Answer 1

[pfg21]

возьми парсер на любом скриптовом языке, а в баше используй его выхлоп на стдоут.
будет и проще и нативнее.

Answer 2

[Saboteur]

xmllint
Для некоторых сайтов и grep/sed/awk вполне подойдут.

Answer 3

[xotkot]

в самом простом варианте можно с помощью pup выдрать таблицу и перегнать её в json, а там уже с помощью jq обработать нужные данные
curl -s 'URL' | pup 'table json{}' | jq ...

Comments

[nak-alexey]

Я установил PUP но когда перенаправляю туда вывод из curl терминал мне пишет pup no found

[xotkot]

nak-alexey, ну а как вы его установили ? возможно бинарник программы не находит из за того что он не лежит в одной из папок куда указывает переменная PATH

[xotkot]

nak-alexey, я ставливал через пользовательскую репу АУР (это в Арч линуксе), там всё автоматом прописывается как нужно

если вы устанавливали как
go get github.com/ericchiang/pup
то посмотрите куда скомпилировался бинарник и либо перенесите его например в одну из директорий куда указывает переменная PATH (echo $PATH) например /usr/bin или добавьте в PATH путь к папке где лежит бинарник

[xotkot]

nak-alexey, или как вариант просто укажите полный путь к бинарнику с программой
curl -s 'URL' | /полный/путь/к/pup 'table json{}'