De VOC bouwde hier in 1673 een klein fort, dat waarschijnlijk rond 1743 werd herbouwd als militaire post. Dit Posthuys is het oudste nog bestaande gebouw in Muizenberg. Het werd Fort Muys genoemd, naar sergeant Wynand Willem Muys, die er het bevel voerde. De locatie zou Muys Zijn Bergh zijn genoemd, wat via Muysenbergh werd tot Muizenberg.[1] Het fort werd na 1743 belangrijker omdat Simonstad een haven werd. In 1795 vond bij Muizenberg een veldslag tussen Nederlanders en Britten plaats; de Slag om Muizenberg. De Britse overwinning vormde het begin van het Britse bewind over de Kaapkolonie.

Eind 1882 werd Muizenberg ontsloten door een spoorlijn vanaf Soutrivier.[2] Het werd al snel een belangrijke badplaats; het Brighton van Zuid-Afrika.[3] Nadat in 1904 de hoofdstraat was opgeknapt lieten rijke mensen er een buitenhuis bouwen, soms ontworpen door sir Herbert Baker. Er verrezen hotels en een paviljoen, dat in 1929 werd vervangen door een veel groter paviljoen. In de jaren twintig raakte het surfen er in opkomst. De economische bedrijvigheid nam sterk toe door een instroom van Joden uit Oost-Europa, en in 1924 werd een synagoge gebouwd.[4]