Le musée de Valence se présente aujourd'hui comme un vaste hôtel particulier du XVIIIe siècle, entre cour et jardin. Ancien évêché de Valence, il trouve ses origines en des temps plus lointains. C'est à l'époque troublée des IV et Ve siècles, et sans doute à l'évêque Apollinaire (492-520) que la tradition fait remonter sa fondation. Plus près de nous, on attribue sa reconstruction à Jean de Poitiers, évêque de 1390 à 1448.