Avis négatif ABF

Bonjour.

Nous essayons de faire construire notre maison depuis 2 ans.
Nous sommes dans le périmètre des bâtiments de France.
Il y a 2 ans, nous sommes allés voir plusieurs fois l'urbanisme et l'ABF était là à chaque fois.
On était en désaccord uniquement avec la hauteur du faitage autorise. On avait demandé ce qui était interdit par les bâtiments de France, ils nous avaient dit qu'il n'y avait rien de particulier.
On a enfin pu déposer le permis de construire il y a un mois. On galère tellement avec cette maison qu'on n'a pas pensé à aller voir l'ABF avant le dépôt du permis.
On vient de recevoir un mail de la mairie nous disant qu'ils voulaient nous rencontrer. Dans ce mail était joint l'avis de lABF.
Cet avis dit qu'il n'est que consultatif. Ils disent que notre projet dénote par rapport à l'environnement. Ils nous demandent de changer bcp de choses. Des changements qui changent vraiment tout.
On ne comprend pas cet avis car toutes les maisons sont différentes dans le quartier. Aucune uniformite de taille de hauteur de couleur d'emplacement de matériaux... Il n'y a pas 2 maisons qui se ressemblent. Toutes les modifications demandées sont visibles sur une minorité de maisons et sur des maisons differentes. La taille des tuiles demandee n'est visible que sur un immeuble. Le sens de la toiture concerne 10 % des maisons etc... Ils demandent des fenêtres de couleur pastel qui n'existe pas dans la rue.
Notre projet est le plus simple possible.

Pensez vous qu' Il est possible d'argumenter face à l'ABF?

Merci