Решил проблему через добавление "permissions": [] в файл app.json -> "expo" -> "android"
Проблема в том что если не указывать permissions - приложение будет запрашивать ВСЕ разрешения, если добавить пустой массив - будут только те разрешения, которые нужны по умолчанию для Expo