Problème avec permis de construire

bonjour, nous allons construire dans le 91 et nous avons un soucis avec notre permis de construire. L architecte exige une distance de 5 m entre mon pignon de maison et ma cloture car il y a de l autre cote de ma cloture un passage piétonnier du coup mon garage qui avait été élaboré et signé avec 4m de largeur interieur se retrouve avec 2m76 c est a dire a peine plus grand que mon box actuel. Mon mari n est pas content car c est le projet de notre vie et nous aurons un garage trop petit a notre gout (comme dit le constructeur rare son les personnes qui mettent leur voiture dedans mais nous si) et du coup on se retrouve avec un bout de terrain énorme sur un cote et l autre un garage de lilipucien .Qu en pensez vous ? Que feriez vous a notre place ? Nous sommes a 2 doigts de tout stopper merci pour vos reponses