I århundrer trodde baronene pavens autoritet i Avignon og Frankrikes konger, og tilbød protestanter tilflukt under religionskrigene, inntil Ludvig XIII i 1632 beordret at Les Baux ble ødelagt.
Ludvig XIII flyttet til slutt til Les Baux for å leve ut sine år.