Limite séparative et déclaration préalable de division

Bonjour et meilleurs vœux à tous les construtonautes !

Je sollicite votre aide car je cherche des réponse à ma question.
Nous avons signé une promesse de vente pour un terrain suivi d'un CCMI.
Le propriétaire cède 1000m² de son terrain qu'il divise en 2.
Il y a donc 2 parcelles 1 pour nous et 1 pour nos futurs voisins.
C'est le même constructeur pour les 2 terrains.
Un déclaration préalable de division foncière a été accordée le 31.05.2011
Nous avons déposé une 1er permis de construire en juin puis un autre en août. Le PC a été accordé le 19.09.2011

Aujourd'hui on s'aperçoit (tardivement), que nos voisins sont implantés à 2 mètres la limite séparative entre nos 2 terrains.
Le PLU indique pourtant que les habitations doivent s'implanter en limite ou bien à 4m

Après interrogation du constructeur, celui nous répond que c'est autorisé car la parcelle n'est pas encore divisée etc... parfois ça passe comme ça etc....

On a un peu du mal à comprendre, la division a été prononcée avant l'accord du permis de construire, et qu'il y a bien un trait entre nos 2 terrains

Alors par avance merci si vous pouvez nous expliquer si c'est juste ou non ?

PS : j'ai adressé un courrier à la mairie auquel je n'ai pas encore eu de réponse.

Ci dessous le plan d'implantation de note maison (c'est notre garage qui est implanté en limite de propriété)
sachant que nos futurs voisins se trouvent à droite à 2 m sur toute la longueur du terrain et 4 m des autres extrémités.