Добавьте своего юзера в группу dialout
usermod -a -G dialout YOU_USER
Или в UDEV задать правило на создание устройств с нужными правами, к примеру -
sudo vim /etc/udev/rules.d/50-ttyusb.rules
KERNEL=="ttyUSB[0-9]*",MODE="0666"
KERNEL=="ttyACM[0-9]*",MODE="0666"