Какие ИИ можно использовать для автоматического заполнения таблиц используя информацию с сайта продавца?

Question

[gularon]

К примеру, у меня есть ТЗ (техническое задание), где заказчик указал требуемую ему продукцию с указанием характеристик. Всё в форме электронной таблицы (в экселе или ворде). Я знаю, что эта продукция есть в интернете, даже знаю на конкретно каких сайтах. Мне нужно составить для заказчика коммерческое предложение исходя из его потребности указанной в ТЗ. Вроде бы простая задача, но если в ТЗ 30-40 наименований, то процесс занимает достаточно долгое время. Подскажите пожалуйста, есть ли варианты для решения?

Comments

[theurus]

Что нужно то. Универсальный парсер? Чатгпт с этим вполне справляется, ответы даёт джейсонами.

[gularon]

Чатгпт очень криво выдаёт, перепроверять всё приходится. Лучше по-старинке) Далеко не совершенны ещё "всемогущие" ИИ

Answer 1

[rPman]

Современные ИИ не подходят для сбора информации напрямую (типа даешь картинку, пишешь запрос,..), так как ответ будет с 70% вероятностью верным, а 30% нет (пропуски и фальшивое срабатывание)... но попытки такие (работающие с неструктурированной информацией) системы собрать само собой есть, не уверен, вроде бы топовые с 90% вероятностью проходят тестовые выборки.

Твоя задача должна решаться 'по старинке', собираешь список сайтов, для каждого сайта пишешь парсер, собранные данные приводишь к виду с единой структурой... и не забываешь в договоре с разработчиком пояснить, что сайты меняются, парсеры требуют поддержки и правки соответственно этим изменениям. Возможно каждый парсер простой, но когда у тебя их десятки, потребуется какая то система автоматического их контроля работоспособности,.. в общем не просто.

Comments

[gularon]

Спасибо за ответ. С парсерами была история, но ничего не получилось. Сложно к единой структуре всё привести. У меня то всё вроде бы по единому алгоритму выстроено, а вот заказчик со своими ТЗ...у одного так. у другого всё по-другому.

[rPman]

gularon,

а вот заказчик со своими ТЗ...у одного так. у другого всё по-другому.

ИИ с этим тебе не поможет

[gularon]

rPman, ДА уж, согласен. так называемый Вэб-скарпинг тоже не помог

Answer 2

[Everything_is_not_so_bad]

В качестве направления для решения проблемы погугли о AI web scraping tool.
Это могут быть NimbleWay и прочие сервисы, которые помогут автоматизировать сбор данных.
Затем можно пробовать автоматизировать некоторые процессы, связанные с сопоставлением и заполнением данных.

Comments

[gularon]

Подобные сервисы работают только с определёнными страницами сайта, т.н. вэб-скрапинг не работает со всем сайтом сразу