Sydney og Parramatta Loyalist Associations, med cirka 50 medlemmer hver, blev dannet i 1804 for at imødegå radikale samfund i disse amter, og efterfølgende hjalp med at slå ned Castle Hill dommer oprør
senere samme år.