Il museo fu creato nel 1825 grazie alla generosità del pittore di Montpellier François-Xavier Fabre (1766-1837) che riunì varie collezioni. Il suo fondo, arricchitosi in seguito soprattutto grazie alle donazioni di artisti locali come Bazille o Soulages, conta oltre 900 opere (ma nel museo ne sono custodite 7000), presentate in ordine cronologico, dal Rinascimento ad oggi.