Как автоматически создавать большие отчёты из множества docx файлов?

Question

[YX1978]

В общем задача типичная, у компании за год из разных отделов прилетает по 100+ отчётов с разным содержанием, в конце года необходимо создать один большой отчёт о всей проделанной работе на 300+ страниц, делали это вручную, но сейчас решили автоматизировать процесс, возник вопрос - как это реализовать?
Я понимаю что скорее всего для этого подойдут нейронки, но как конкретно можно сделать? Важно отсутствие ошибок, чёткая структура и стиль который был до этого, удобство использования, например возможность добавлять по одному отчёту чтобы инструмент автоматически дополнял наш годовой отчёт. Данные не сильно чувствительные, но возможно его станут использовать для чего угодно другого. В общем нужно сделать что-то простое, чтобы выглядело сложно и выполняло свою задачу.

Comments

[Adamos]

Вопрос из серии "как вместо десяти сотрудников взмахнуть волшебной палочкой - и чтобы нейронка все сделала?"
Стоит добавить в типовые причины жалоб на удаление.

[Everything_is_bad]

на самом деле задача решается на порядки проще, "один большой отчёт о всей проделанной работе на 300+ страниц" это бюрократическая хрень, в реальности это отчет никому не нужен, читать его никто не будет, поэтому надо решить задачу на том же уровне, тупо не делать этот отчет, либо свести в формальность, просто объединить все файлы в один, без всякой обработки.

Answer 1

[mayton2019]

В общем задача типичная, у компании за год из разных отделов прилетает по 100+ отчётов с разным содержанием, в конце года необходимо создать один большой отчёт о всей проделанной работе на 300+ страниц, делали это вручную, но сейчас решили автоматизировать процесс, возник вопрос - как это реализовать?

Для нейронных сетей не свойственен "детерминизм". Тоесть дважды поставленная одна
и та-же задача для НС будет иметь 2 разных результата. Это свойство НС очень важно
например если вы их путаете с Lisp/Prolog и прочими экспертными системами которые
внутри себя действительно содержали if-else логику а НС так не работает. Она - "шумит".
Она завист от random генератора и этот генератор является ее базовым свойством.
Его принципиально нельзя отключить даже при 0 температуре алгоритмов НС.

Но если у вас есть программисты которые в состоянии написать парсер 100+ документов
с использованием НС и протестировав его доказать что результат правильный - то это
будет более верная стратегия. Подумайте в эту сторону.

Answer 2

[Refguser]

Нейронки и отсутствие ошибок - не реальное совмещение желаний.
Поэтому без "человечка для проверки" не обойтись.

А что бы это сделать задуманное нужно обучить свою модель. Для этого есть отдельные специалисты.

Comments

[YX1978]

Простое, вот ключевое требование.

[Refguser]

YX1978, ну захоти простой автомобиль на Луну...

Хотя обучить модель - это не так сложно. Но нужно научиться, да.

Ах да, заплатить деньги спецу - куда уж проще.

Answer 3

[evomed]

Инкриментально. Высылаешь нейронке этот один большой отчёт и просишь обновить на основе инфы из файла. И так 300 раз. Можно руками можно автоматизировать по апи

Comments

[Everything_is_bad]

300 раз

скорее всего ты ошибся на порядок, наверняка даже на несколько, текущие LLM имеют очень маленький размер входящих данных, чтобы из "100+ отчётов с разным содержанием" собрать "300+ страниц"

[evomed]

Everything_is_bad, поэтому я и предложил разделить не? хз у кого там сколько страниц и какие данные

[Everything_is_bad]

evomed, ты предложил 300 раз, поэтому и появился мой коммент, что это далеко от реального значения

[qqqgod]

Доброе время возможно мой совет поможет OCR файн ридер 16 версия отлично справится, после пихаешь в нейронку. Такие объемы текста только так и можно обработать. Работаю юристом по уголовным делам.