Le palais est l'ancienne résidence des gouverneurs de l'Indochine française.

Ce palais a été construit entre 1900 et 1906 par Auguste Henri Vildieu à la commande du gouverneur Paul Doumer. Il est de style néoclassique avec quelques éléments néorenaissance italienne. Le gouvernement y tient ses réunions et y reçoit les ambassadeurs. La surface du palais est de 1 300 m2 et celle du parc de 14 ha. L'entrée est interdite au public, sauf certaines zones du parc, dont l'allée des manguiers et la tonnelle de fleurs, moyennant un droit d'entrée.