Castle Rock powstała około 350 milionów lat temu, gdy aktywność wulkaniczna pozostawiła pod powierzchnią stwardniałą magmę. Z czasem erozja usunęła bardziej miękkie skały, pozostawiając twardy dolerytowy korek wznoszący się nad miastem, tworząc miejsce obronne, które przyciągnęło osadników.



