Med den osmanniske erobring mistede slottet meget af sin strategiske betydning, selv om det blev besat af venetianerne under den osmanniske-venetianske krig i 1463-79 og angrebet af Malta-ridderne i 1620. I perioden med venetiansk herredømme i Peloponnes (1687-1715) efter Moreakrigen
, fungerede det som sæde for et skattedistrikt. Rapporterne fra de venetianske guvernører på det tidspunkt afviser imidlertid Chlemoutsi som lille i størrelse og næsten ubeboet. I 1701 foreslog "provveditore generale" Francesco Grimani, at det skulle ødelægges, da det var for langt fra havet - en vital bekymring for den maritime republik - og vanskeligt at forsvare, og anbefalede, at Glarentza, der dengang var forladt og ødelagt, blev genopbygget i stedet. I 1715 vendte Morea tilbage til osmannisk kontrol, og i begyndelsen af det 19. århundrede var fæstningen fuldstændig forladt. I 1825, under den græske uafhængighedskrig, indtog Ibrahim Pasha fra Egypten slottet og nedrivede en del af dets mure, så det ikke kunne bruges af de græske oprørere.