Le fort d'Azay est brûlé par Charles VII en 1418 lorsque le roi, de séjour à Azay sur la route de Chinon, est provoqué par les troupes bourguignonnes qui occupent la place forte. Le capitaine et 350 soldats sont exécutés, et le village garde d'ailleurs jusqu'au xviiie siècle le nom d'Azay-le-Brûlé, qui est aussi celui d'une commune des Deux-Sèvres et d'Azay-sur-Indre.

La veuve de Jean du Puy-du-Fou, Marie d'Auxigny, est alors la dame d'Azay avec son deuxième mari épousé vers 1442 (leur fils René de Montgomery sera le père de Jacques de Montgomery de Lorges, capitaine de la Garde écossaise, et le grand-père du célèbre Gabriel) ; puis la fille aînée de Marie d'Auxigny, Catherine du Puy-du-Fou, transmet Azay à son mari Fouques de Bois-Jourdan, et à leurs enfants Jehannet du Bois-Jourdan (qui cède Azay en 1504 à Antoine de Loubes, époux de Renée de Daillon — fille de Jean (de) Daillon du Lude, une descendante des Bueil et des Fontaines : cf. Jean III — mais le fils de Jehannet, Charles du Bois-Jourdan, réussit à récupérer cette part d'Azay vers 1505/1507 et jusque vers 1509/1510), et Jeanne/Catherine du Bois-Jourdan, cette dernière étant la première femme († avant 1497) de Jacques de Bueil (vers 1462-1513), comte de Sancerre (fils d'Antoine de Bueil — aussi seigneur de Vaujours, de Montrésor et d'Ussé — petit-fils de l'amiral Jean V de Bueil, arrière-petit-fils de Jean IV et de Marguerite-Dauphine, la dernière fille de la comtesse Marguerite et du dauphin Béraud II, donc un arrière-arrière-arrière-petit-fils du comte Jean III de Sancerre).