Castle Rock se formou há cerca de 350 milhões de anos, quando a atividade vulcânica deixou o magma endurecido sob a superfície. Com o passar do tempo, a erosão retirou a rocha mais macia, deixando o duro tampão de dolerito acima da cidade, criando um local defensivo que atraiu os colonos.



