Кто имеет опыт в создании калькулятора с камерой и нейросетью?

Question

[jew_Alibabay]

Приветствую всех! Задумал нестандартный проект и нуждаюсь в совете бывалых.
Калькулятор, который умеет считать не только по кнопкам, но и камерой. Пользователь наводит камеру на лист бумаги (или экран) с рукописным или печатным примером. Нейросеть распознаёт эту запись, производит вычисление и выводит результат прямо на экран. Один из важных аспектов, я планирую его создать для решения сложных химических уравнений, экран обычного инженерного калькулятора не сможет вывести символы необходимые для ответа. В планах разобрать инженерный калькулятор, с обратной стороны поместить модуль с камерой, а вместо обычного экрана вмонтировать что-то на подобии Waveshare, дабы видеть все символы для решения.
Буду рад, если посоветуете на базе чего можно собрать, модули, кодовую составляющую, нейросети.
P.S. - Я не являюсь программистом, и за код не особо шарю. Разве, что так, развлекался с пентестингом.
Пример, как выглядит инженерный калькулятор:

Comments

[Adamos]

Стоимость разработки такого девайса вполне окупит и репетиторов до, и платную вышку после.
Тем более, что эти влажные мечты "вот я ща ногтем поковыряю, взмахну нейронкой - и все будет зашибись" никакой разработкой не закончатся никогда.

[AUser0]

Есть вариант проще! Надо в имеющийся калькулятор вклеить кнопку "Сделать зашибись!", одно нажатие - и всё защибись, без всяких там торчащих камер и нейросетей, для которых просто нет CPU, и аккумуляторов, которые должны это всё тянуть.

[Василий Банников]

сложных химических уравнений

Вот тут уже можно закрывать.
Для решения сложных химических уравнений нужен не калькулятор, а справочник, в котором будет описано, как себя ведут вещества в зависимости от условий.
(Такие справочники есть)
Школьных правил со степенями окисления там не достаточно.

В корпус калькулятора с картинки врядли выйдет уместить. По хорошему тут нужно что-то типа телефона.

Upd: а, тут реально для школьных экзаменов

[Apasnychel]

Насколько мне известно, есть полно алгоритмов расспознования рукописного текста, включая мат формулы хим формулы и прочее где нейронки вообще нафиг не сдались. Отсюда следует что нейронкам нужно доверить только само решение?. Но смысл, есть вольфрам, в полне качественный движок, а про хим формулы не знаю, но думаю, там тоже есть свои движки,

Answer 1

[AlexVWill]

Не думаю что это будет хороший проект ,так как вместо изобретения велосипеда надо взять обычный смартфон, где вся железная часть уже присутствует и просто установить в него нужную программу.

Comments

[jew_Alibabay]

Да, вы правы. Я забыл добавить, что планирую его использовать для списывания, поэтому нужна тушка калькулятора.

[Telcontar]

jew_Alibabay, проще нормально учить материал, чем ваять этот велосипед

[VoidVolker]

jew_Alibabay, ну значит берёте вот такой калькулятор, меняете в нём дисплей на современный с большим разрешением, внутрь вставляете любой контроллёр с беспроводным модулем и камерой вместо его родной начинки, пишете для него прошивку, которая по беспроводной связи будет отправлять запрос на вашу неросеть и, получив ответ, выводить его на экран.

[pfg21]

jew_Alibabay, опять проблема XY: искомая задача про впиховывании в ограниченный корпус калькулятора полноценного андроида, а не про программу, которых уже навалом.
не забудь про связь с серверами. локальное железо нейросетку такой тяжести не вывезет :)

[Василий Банников]

jew_Alibabay, а что проверяющий на экзамене не заметит, что калькулятор выглядит как-то не так?

Часто даже простой инженерный калькулятор перегибают и запрещают брать.

[Василий Банников]

VoidVolker, а тут уже всё упирается в глушилки, которые на экзамене используют. Будет ли беспроводная связь работать?

[VoidVolker]

Василий Банников, да, всё верно. Нынче же ещё глушилки на экзаменах. Можно, конечно поискать свободный диапазон, но тут уже надо будет работать с радиомодулями, кастомными антеннами, усилителями и прочей радиотехникой, а так же знать какие диапазоны глушат. А с радио вообще лучше особо не заигрывать — а то ведь может внезапно стать очень грустно находясь лицом на полу в компании с сурьёзными дяденьками.
Я очень сомневаюсь, что такой девайс вообще пропустят. А как увидят — попросят продемонстрировать работу и отсутствие модификаций.

Answer 2

[Илья лук]

Для начала нужно изучить имеющийся материал чтобы убедиться что нейронка дает правильные ответы.