Não há como fazer isso com as extensões Guest, no entanto, configure o compartilhamento normal de arquivos Ubuntu em seu convidado e você poderá acessar os arquivos usando a rede virtual entre o host e o convidado. A versão OSE do VirtualBox não possui pastas compartilhadas, e este é o método de compartilhamento recomendado para o VirtualBox, conforme descrito aqui . O How-To Geek tem um tutorial aqui sobre como fazê-lo especificamente com o Ubuntu, e também se aplica a tudo fora das pastas pessoais.
O driver de rede é inteligente o suficiente para não enviar o tráfego pela conexão, mas ainda será usado para se comunicar com o convidado. Tenho algumas máquinas virtuais que executo e uso assim, tanto no Mac quanto no Windows.