Fischer, der var kvalificeret som amerikansk mester, besluttede sig for ikke at deltage i Amsterdam Interzonalen i 1964, og trak sig ud af verdensmesterskabet i 1966, selv efter at FIDE ændrede formatet for kandidatturneringen med otte spillere fra en runde-robin til en serie af knockout-kampe, hvilket eliminerede muligheden for hemmelig aftale. I stedet gik Fischer på turné i USA og Canada fra februar til maj, spillede en samtidig udstilling og holdt et foredrag i hver af mere end 40 byer. Han havde en 94% vinderprocentsats over mere end 2.000 spil. Fischer afviste en invitation til at spille for USA i 1964 Olympiad
i Tel Aviv.