Au début du 6 ème siècle , Saint Romain s'installe dans les grottes qui dominent les sources. Sa piété est à l'origine de la construction d'un monastère vers 543.

Ce village ( Drogia ) est cité comme paroisse d'Auxerre dans un document daté de 596 .

La première agglomération fut sans doute une modeste enceinte palissée permettant d'offrir refuge aux habitants.

Dans la deuxième moitié du 12 ème siècle , le château fort fut construit sur ce promontoire calcaire élevé .

Le château à été rendu illustre par Pierre II de Courtenay petit fils de Louis 6 le GROS qui avait épousé Agnès de Nevers et par sa fille La Contesse MAHAUT

En 1216, Pierre de Courtenay reçoit les ambassadeurs venus lui offrir la couronne de l'Empire de Constantinople

Druyes est alors a l'apogée de sa grandeur .

A partir du 14 ème siècle , Druyes entra en décadence .

En 1659 Mazarin acheta le comté et le légua a son neveu Mancini.

En 1735 après la vente de Druyes à Louis de Damas , la vie du château cessait.

Après la révolution, les différents propriétaires ne s'occupèrent plus de son entretien et le temps exerça lentement ses ravages .

A partir de 1958 commença une période de restauration .