Dès le Xe  siècle, les bénédictins de l’Abbaye de St Guilhem Le Désert mettent en valeur le Causse de la Selle. A la croisée des routes de Saint Martin de Londres, Saint Jean de Buèges, Saint Guilhem le Désert et Brissac, le plateau a alors une vocation pastorale et forestière.

Brunet figure sur La carte de Cassini (XVIIIe siècle). La plus ancienne partie des caves remonte au XIIe siècle.