Też strasznie namęczyłem się z uprawnieniami i nic nie pomogło.

uruchomiłem VirtualBox jako root:
sudo VirtualBox

i jak się można było spodziewać jest dostęp do usb.