Extraits tirés de la collecte historique de Isabelle Le Cain (DRAC de Rouen)

1091, le troisième fils du Conquérant, Guillaume le Roux, bloque le château en contrebas et les accès au village. Le capitaine de la place étant favorable à Robert Courteheuse, le fils aîné du Conquérant. La place forte passe alors aux mains de Guillaume de Breteuil.

1092, après plusieurs revendications pour obtenir le château d'Ivry et sa lignée due à sa descendance, Ascelin Goel, seigneur de Bréval et de Guainville, se rend maître du château. Il aura auparavant dévasté la région et brûlé l'abbaye. La forteresse de Guainville dépendait du duché de France, de l'autre coté de la vallée de l'Eure et se situait à 5 km environ d'Ivry. Elle sera détruite vers 1350.

 1094, le duc de Normandie Robert Courteheuse donne le château à Roger de Beaumont puis à nouveau à Guillaume de Breteuil.

 1119, le roi Louis VI le Gros met le siège devant Ivry et incendie le château après sa campagne désastreuse de Breteuil. 

1122, Guillaume LOUVEL, frère d'Ascelin Goel, prend possession du château à la mort de ce dernier.

1177, en septembre, "le castellum" d'Ivry est remis entre les mains de Henri II d'Angleterre au décès de Galeran, flis de Guillaume Louvel.

1180, le 28 juin le roi Philippe Auguste et Henri II d’Angleterre renouvelle le traité d'alliance conclu à Ivry entre Louis VII et Henri II

1188, Henri II d'Angleterre menace Mantes. Philippe Auguste le rejoint à Soindres et le contrait à se retirer à Ivry. 

 1191, Philippe Auguste, profitant de la captivité de Richard Coeur de Lion, s'empare d'Ivry. En 1196 le château est rattaché à la couronne de France.   

1200,   en juillet, promesse est faite par Robert d'Ivry de remettre la forteresse au Roi si besoin.         

 1204, travaux de renforcement concernant très probablement la gaine de défense.

1317 , le roi de France Philippe V Le Long vient d'être couronné (1316-1322) et séjourne au château

1390, le château est aux mains de Charles d'Ivry, chambellan du roi (Charles VI le Fou - 1380 à 1422)

1398, Charles d'Ivry reçoit 4000 francs or pour les revenus des "isles Charcy (Jersey) et Grenisy (Guernesey)

1414, Charles d'Ivry est nommé "conseiller du Roy, maitre et refformateur des eaues du royaume de France" 

1415, Charles d'Ivry et son fils sont tués à la bataille d'Azincourt.

1418, le 19 mai, Pierre Dorgery est le nouveau seigneur du château

1418, en septembre, le connétable Anglais John TALBOT et son artillerie s'emparent de la forteresse après 40 jours de siège.

1427, le 12 juillet, Henri VI d'Angleterre donne "comté, terres, seigneurerie et baronnie d'Ivry" à John Holland, comte de Huntingdon.