Музей был основан в 1801 году указом о распределении между 15 крупными французскими провинциальными городами сокровищ, реквизированных во время революции и собранных в центральном музее Парижа. От этих богатств и от коллекции маркиза Лаказа ведут свое происхождение представленные в экспозиции полотна Рубенса, ван Дейка, Тициана и Веронезе. Но намного лучше представлена собранная самим музеем и многочисленными дарителями французская живопись XIX–XX веков, объединившая произведения Коро и Делакруа, Ренуара и Лотрека, Боннара и Матисса.