Ce château est bâti sur l'emplacement de l'ancienne seigneurie de Villars. Le premier seigneur connu est Jean de Villars, qui possède, en 1300, le domaine éponyme. Ses descendants en héritent jusqu'au début XVIe siècle, période à laquelle est construit l'édifice actuel. Le dernier seigneur du lieu est Louis de Chargères. Le château fut largement remaniée au XIXe siècle. De plan rectangulaire, elle présente une façade cantonnée aux angles de deux tours circulaires, dont l’une a un diamètre inférieur à l’autre. A proximité, se trouve une forte tour ronde coiffée d’un toit à lanternon, à usage de pigeonnier.