Utiliser les plans d’un permis de construire d’un constructeur

Bonjour,
Je vous résume la situation, j’ai fait l’acquisition d’un terrain et dessus je fais construire 3 maisons (2 locatives et 1 perso).
Pour être sur que notre maison perso soit réalisable, nous avons du déposer un permis de construire groupé.
Nous sommes passés par un constructeur et un architecte à signer les plans pour le permis de construire.
Nous avons signé 2 CCMI pour les maisons locatives par contre pour notre maison perso nous n’avons pas de ccmi en cours car la faisabilité est assujettie à la futur vente de notre maison actuelle ( nous avions néanmoins signé ce contrat mais il n’a pas été validé c’est à dire envoyé avec délai de rétractation).
Le permis de construire a été accepté pour les 3 maisons, les 2 premières sont en cours de construction.
Notre maison actuelle ne s’est pas vendue au prix escompté, souhaitant quand même réaliser ce projet , nous souhaitons le réaliser nous même.
Est ce que le constructeur peut nous réclamer quelquechose ?
Devons nous effectuer des modifications sur les plans de la maison et donc faire un permis modificatif ?
Je vous en remercie d’avance