Napisati nadaljevanje za ta odstavek - Od 15. stoletja je bilo območje mesta, vključno z drugimi deli Labuana, pod Brunejskim cesarstvom. Njegova zgodovina sega v čas, ko je otok podelil sultan Omar Ali Saifuddin II. Britancev. Rodney Mundy, britanski pomorski častnik, je kasneje obiskal otok pod imenom kraljice Viktorije. Otok je nato okupiral Japonsko od 3. januarja 1942 do junija 1945 in ga je kot del vojaške enote Severni Borneo upravljal japonski 37. vojska. Med bitko pri Labuanu
Osvobodila jo je 9. divizija avstralskih cesarskih sil 10. junija 1945 in je bila pod britansko vojaško administracijo do 15. julija 1946, ko je bila vključena v kronsko kolonijo Severni Borneo. V tem času je vlada kolonije ponovno vzpostavila veliko infrastrukture, ki je bila uničena med vojno. Otok je kasneje leta 1963 postal del države Sabah in Malezije, preden je vlada države Sabah leta 1984 oddala otok zvezni vladi. Leta 1990 je bilo razglašeno za mednarodno finančno središče in območje proste trgovine, da bi pomagalo razvoju Victorije.