El derecho a acceder a un puerto serie está determinado por los permisos del archivo del dispositivo (por ejemplo, /dev/ttyS0 ). Así que todo lo que necesita hacer es arreglar que el dispositivo sea de su propiedad, o (mejor) ponerse en el grupo que posee el dispositivo, o (si Fedora lo admite, lo cual creo que sí) arreglar que el dispositivo pertenecen al usuario que ha iniciado sesión en la consola.
Por ejemplo, en mi sistema (no Fedora), /dev/ttyS0 es propiedad del usuario root y el grupo dialout , por lo que para poder acceder al dispositivo serial, me agregaría al dialout grupo:
usermod -a -G dialout MY_USER_NAME