Как можно реализовать приложение для распознавания текста в unity3D?

Question

[Даниил Николаев]

Здравствуйте.
Подскажите, пожалуйста, с чего начать для создания приложения, которое распознает текст с картинки?
Сделал подобное в Android Studio, но хочется именно в Unity3D.

Answer 1

[Denis Gaydak]

а как вы его в андроид студии сделали?
полностью самописное - уж очень вряд ли, при наличии такого вопроса здесь.

значит взяли библиотеку/веб сервис с API каким-то и использовали их.

теперь возьмите плагин или библиотеку для юнити (написанный на C# и/или с оберткой на C#) или сами сделайте обертку.
обращение к камере,текстурам и тд - ничем сильно не отличаются.

с более конкретными вопросами ,если столкнетесь - потом сюда вернетесь).

а то выходит "я уже строил дом из кирпичей, сам с нуля, как мне построить его из газобетона".
да так же..ручками и потратив время)

Comments

[Даниил Николаев]

Denis Gaydak спасибо!
1) Конечно не самописное, делал по мануалу у Google по ML Kit)
2) Этот сервис не работает с unity. Ответ разработчиков: "While you can directly create a Text Recognition app using the ML Kit SDK for Android, I cannot guarantee if trying to wrap Android into your Unity app would work."
3) Про обертку почитаю)
4) Камеру смог подключить)
5) Спасибо!

[Denis Gaydak]

Даниил Николаев, если вам просто машинное обучение поизучать..
попробуйте просто что-то более родное у Юнити взять и поделать.
https://unity3d.com/how-to/unity-machine-learning-...
это к примеру, хотя наверное видели)

а так что юнитовское. что гугловое. все в бете и в состоянии "еще можем поменять все API" )) (на сколько я понял , бегло поглядев))

[Denis Gaydak]

ах да и если нужно прям для дела - то проще будет наверное купить готовый портированный пример с оберткой. хотя отзывов там не густо конечно. и цена не сказать что "приятная для попробовать"
https://assetstore.unity.com/packages/add-ons/mach...

[Denis Gaydak]

https://assetstore.unity.com/packages/add-ons/mach...
если только текст))

но все эти плагины как я понял имено про Cloud составляющую. то есть только через REST api дергаются через интернет)). по сути набор оберток для запросов готовый с примерчиками.
а офлаиновое для Firebaseи вот это вот все новое бетовое от гугл..мдэ..тут скорее всего ждать от гугла или юнити разработчиков - портирования.
хотя зачем оно сильно нужно в играх - не очень понятно. а движок все таки игровой.

[Даниил Николаев]

Denis Gaydak, спасибо за столько информации)
Дело в том, что хочется самому разобраться как подключить тот же Google Vision (нынче ML KIT), ARCore, Tesseract, или научить Vuforia делать скрин, распознавать текст и присылать ответ и все это в real-time как камера навелась на текст. Или может создать самому файл, в котором будут шрифты и с ними сопоставлять только видит камера... В общем вопросов все больше. Мне нужно направление, а плавать научусь)
Пока попробую ML-Agents от Unity)

[Denis Gaydak]

Даниил Николаев, на здоровье) рад что хоть как-то помог, а то так-то машинное обучение это не мое)) только погуглить чуток умею и сам интересовался когда то с годик назад , с чего б начать можно, но не зашло, не поехало))