Walpoles indflydelse fortsatte med at falde dramatisk, selv efter at krigen var begyndt. Ved valget i 1741 sikrede hans tilhængere sig en stigning i stemmer i valgkredse, der blev besluttet af masse vælgere, men mislykkedes med at vinde i mange lommeborger (valgkredse, der var underlagt uformel, men stærk indflydelse af kunderne). Generelt gjorde regeringen fremskridt i England og Wales, men dette var ikke nok til at omstøde tilbagegangene i valget i 1734 og yderligere tab i Cornwall, hvor mange valgkredse var lydige mod prinsen af Wales (som også var hertug af Cornwall). Disse valgkredse vendte medlemmer af parlamentet til premierministeren.
Hertug af Argyll