Fra 1867 til 1871 var han udenrigsminister. Når Californien State Capitol
Da bygningen var færdig, klatrede han op på toppen af kuplen og satte den gyldne kugle på plads. Mens han var i embedet, blev stedet udvalgt til University of California i Berkeley.