Как определить язык текста?

Question

[utsiye]

Как получить название языка, на котором написан текст?
langdetect - не подходит, маленький объем текста не получается определить.
textblob - скоро вырежут функцию + она не работает нормально.
polyglot - отличный вариант, но нужно заморачиваться с установкой и выворачиваться, чтобы установить.

Есть ли другие варианты?

Comments

[Алан Гибизов]

Всё это замечательно, но для того, чтобы ставить тэг python, надо код на языке или тонкости самого языка. А вопросы по лингвистике… тут python не в тему.

[serhiops]

в плане?
pip install polyglot

[d'Ivan]

но нужно заморачиваться с установкой и выворачиваться, чтобы установить.

а можно подробнее?

[12rbah]

Капитан Пронин,

pip install polyglot
sudo apt-get install python-numpy libicu-dev

Видимо это считается "заморачиваться "

[shurshur]

Ну вот например https://github.com/pemistahl/lingua-py обещает хорошие результаты, да и недавние коммиты там есть.

Или вот питоновый модуль https://github.com/zafercavdar/fasttext-langdetect к fasttext от facebook, который умеет в том числе language identification https://fasttext.cc/docs/en/language-identificatio....

В общем, поиск есть ещё куда продолжать.

[utsiye]

12rbah, ну удачи, попробуй установи, гений.

[utsiye]

Алан Гибизов, а что нужно было поставить? Перевод языков? Я ищу библиотеку для PYTHON

[Модератор]

utsiye, для поиска разработаны поисковые системы. На вопрос «как сделать» отвечает документация и поиск в интернет.

Тут отвечают на вопросы «почему я сделал, как в документации, а оно не работает. Поискал в интернет, вот запросы, в ответах не нашел. Что я делаю не так?»

Покажите, как вы пробовали решить проблему, приведите код попытки (пусть неудачной), опишите, как запускали, что ожидали и что получилось.
За готовыми решениями - на фриланс. В текущем виде это не вопрос, а задание. Нарушен п.5.12 Регламента.

[12rbah]

utsiye,

ну удачи, попробуй установи, гений.

ну так это тебе нужно поставить, а не мне. В целом по "а как упаковать всё в один exe" всё понятно

[utsiye]

12rbah, я задавал уже этот вопрос, никто не знает, ведь спец. библиотека не очень популярна и ее трудно упаковать.

Answer 1

[12rbah]

тут

Comments

[utsiye]

Видел, все не подходят. Либо не определяют нормально, либо не устанавливаются компактно.

[Василий Банников]

utsiye, это уже должно намекнуть, что компактно, точно, и без обращения к интернету - это несовместимые требования. Выбери два)

[calculator212]

utsiye, к сожалению часто такой компромис бывает, а в чем проблема установить зависимости, да и можно просто создать контейнер, в котором они будут храниться и потом уже распространять этот контейнер?

[utsiye]

calculator212, боюсь, что придется переделывать, так как не получиться упаковать в 1 exe файл все файлы + библиотеки.

[calculator212]

боюсь, что придется переделывать, так как не получиться упаковать в 1

а в чем тут проблема?

[Василий Банников]

utsiye, а зачем упаковывать в 1 exe?

[utsiye]

Василий Банников, программа будет компактная, удобно в 1 exe.

[Василий Банников]

utsiye, а какая именно проблема решается тем, что она в 1 exe?
Не любую программу можно упаковать так - с этим нужно смириться.

Да и не все нужно так упаковывать. Например, если делаешь какое-то клиент-серверное приложение, да заморачиваться упаковкой сервера в 1 исполняемый файл точно нет смысла, и тем более нет смысла заморачиваться с упаковкой в исполняемый файл для винды.