Siedzibą królów był do roku 1682 gdy Ludwik XIV przeniósł się do Wersalu. Puste wnętrza starano się wykorzystać jako galerię zbiorów królewskich udostępnianych publicznie, ale dopiero Rewolucja Francuska doprowadziła do utworzenia w tym miejscu muzeum. Po przejęciu przez państwo zbiorów królewskich stały się one podstawą ekspozycji.