Castle Rock ble dannet for rundt 350 millioner år siden da vulkansk aktivitet etterlot herdet magma under overflaten. Over tid fjernet erosjonen mykere bergarter, slik at den harde diabaspluggen reiste seg over byen og skapte et forsvarsverk som trakk til seg nybyggere.



