旧建物は、1900年のパリ万博開催に向けて建設された駅舎兼ホテル。設計はVictor Laloux他。1939年まで長距離鉄道の終着点及びホテルとして機能していた。一時、取り壊しが検討されていた。

セーヌ川のほとりにあった鉄道駅兼ホテルの建物は、1970年に一時、取り壊しが決定されていたが、当時の文化大臣の反対により歴史的建造物として保存されることとなった。1986年、イタリアの建築家ガエ・アウレンティによって、旧建物の大屋根や中央ホールをそのまま活用し、美術館として生まれ変わった。建物内部には、鉄骨柱や大時計など、鉄道駅の面影が随所に残っている。