Het dorp heeft een Gallo-Romeinse oorsprong en werd in de 11e eeuw gebouwd aan de voet van het kasteel, een bolwerk van de familie Poitiers. Talrijke rivaliteiten, de godsdienstoorlogen en de Franse Revolutie hebben het dorp beschadigd. Vandaag de dag is het ook een botanisch dorp.
De naam Chabrillan komt van het Provençaalse woord voor "geit", "chabra". De dominante ligging biedt bezoekers een uitzonderlijk uitzicht op de Vivarais, de Vercors en tot aan de berg Saoû en zijn hoge synclinale.
Binnen de goed bewaard gebleven vestingmuren in het noorden is Chabrillan een mooi voorbeeld van een middeleeuws dorp op een heuvel, gegroepeerd rond de voet van het kasteel en gedomineerd door de ruïnes van de donjon. Het was een leengoed van de familie Poitiers en vervolgens een koninklijk domein. In 1450 werd het door dauphin Louis verkocht aan de familie Moreton in ruil voor de co-seigneurschap van Pierrelatte. In 1679 werd het een markgraafschap. Het kasteel was het toneel van vele rivaliteiten en leed door de jaren heen schade tijdens de oorlogen en de Revolutie. Het werd meerdere keren verbrand en verwoest, maar werd tot 1650 door de eigenaars bewoond.
Beneden, op de gemeentelijke begraafplaats, staat de Romaanse kerk (11e-12e eeuw), die in 1862 op de monumentenlijst werd geplaatst. Van zijn middeleeuwse verleden heeft het goed gerestaureerde dorp zijn calades en smalle straatjes behouden.
Vandaag de dag huisvesten de stadsmuren de café-bibliotheek, een plek van cultuur en gezelligheid. Het botanische pad, gevuld met de geur van pioenrozen, zal je ervan overtuigen dat het een geweldige plek is om te wonen!