Le bâtiment a été édifié à partir de 1784 sur l’ordre de Louis XVI, pour servir d’Hôtel du gouvernement. Il fut ensuite reconstruit et transformé par Napoléon 1er en 1812 pour servir de palais à son fils, le roi de Rome.

De nos jours, l’aile droite est devenue un lieu dédié à des expositions thématiques temporaires. Après sa visite, découvrez son jardin, d’ambiance romantique qui a fait l'objet en 1991 d'un aménagement suivant les plans originaux.