Twoje połączenie sieciowe powinno wyglądać tak:
config.vm.network :forwarded_port, guest: [db port x, e.g. 3306 for MySQL], host: [unused host port y]
W swojej konfiguracji Django pozostaw host pusty (domyślnie localhost) i podaj ten sam port y z góry. VirtualBox przekaże Twoje żądanie do localhost:y do [gość]:x.