Une grosse tour ronde à dôme et lanternon ouvre la longue façade de schiste et de tuffeau, rythmée de lucarnes sculptées et terminée par la seconde tour. La tour Nord s'éleva lors de la première campagne, après 1539, et la tour Sud seulement sous Guillaume de Bautru, à partir de 1636, mais le plan d'origine donne au château son unité.