Sir Colin Campbell, Glenorchyko lehen lordak eraiki zuen 1450 urte inguruan, hasieran gazteluaren tamainakoa zen uharte txiki batean. XVI eta XVII mendeetan eraikinak gehitu zitzaizkion.

1715 eta 1745 artean Jakobiten matxinada garaian gobernuaren soldaduen gordelekua izan zen. 1760an tximistan batek jo eta gaztelua oso kaltetua gelditu zen. Orduan bertan behera utzia izan zen. 1817an aintziraren ur maila jeitsi egin zen eta uhartea lurrarekin elkartua gelditu zen.