Den 9. maj 2011 erklærede Goldie sin hensigt om at træde tilbage som leder af de skotske konservative, med henvisning til hendes partis skuffende valgresultat; hun trådte tilbage den 4. november efter valget af Ruth Davidson som hendes efterfølger. Goldie tjente senere som partiets forfatningsmæssige talsmand under den skotske folkeafstemning i 2014
og trak sig tilbage fra parlamentet ved valget i 2016.