Le Musée est situé dans un ancien prieuré clunisien, fondé au XIIe et réaménagé au XVe siècle, témoin de cette époque, la salle d’apparat, classée Monument historique et restaurée en 2003.
Le musée accueille désormais un musée complet où la faïence de Charolles (1844 à nos jours) côtoie les paysages de J. Laronze (1852-1937) et de P. L. Nigaud (1895-1937). L’ancienne chapelle du XIXe siècle abrite les œuvres de R. Davoine, sculpteur charolais (1888-1962).
Chaque année, au printemps, une exposition dossier présente les collections sorties des réserves. Elle est complétée par une exposition de céramique contemporaine tous les étés.