Есть опенсорсный проект YOLO, который работает очень даже неплохо. https://pjreddie.com/darknet/yolo/
Классифицирует объекты в кадре за 20ms при использовании видеокарты или спец. железок от Nvidia.
На процессоре около 6-9 секунд.

RWMutex нужен, когда у нас есть объект, который нельзя параллельно писать, но можно параллельно читать. Например, стандартный тип map.
Перед записью в защищаемый мьютексом объект делается .Lock(), а вызовы .Lock() и .RLock() в других горутинах будут ждать, пока вы не отпустите мьютекс через .Unlock().
Перед чтением защищаемого объекта делается .RLock() и только вызовы .Lock() в других горутинах блокируются, вызовы .RLock() спокойно проходят. Когда отпускаете мьютекс через .RUnlock(), ждущие вызовы .Lock() по-очереди могут забирать мьютекс на себя.
Таких образом обеспечивается параллельное чтение объекта несколькими горутинами, что улучшает производительность.

Если в программе есть срез, значит в памяти есть соответствующий ему массив. Вы сами его не создаёте, но рантайм гошки его создаёт.
Массив нужен как более низкоуровневый примитив, для ускорения работы в некоторых случаях, чтобы не плодить лишних указателей.