Le musée a été créé parallèlement à une école de dessin et de sculpture en 1834. Au premier noyau d'oeuvres réuni par le peintre Etienne Bouhot (1780-1862) sont venus s'ajouter des objets antiques, médiévaux ou modernes, assemblés par la Société des sciences historiques et naturelles.