Refus de prêt bancaire mais contrat CCMI signé Résolu

Bonjour a vous tous,
Voila avec mon épouse nous avons signé un contrat CCMI pour la maison et avec le lotisseur une promesse de vente pour un terrain le 19 juin 2018.
Mais voila nous avons vu notre banque qui nous a refusé notre prêt immobilier.
Je souhaitais savoir comment je devais faire pour annuler aussi bien le contrat CCMI et aussi la promesse de vente du terrain.

Dans le contrat c'est bien indiqué dans les conditions suspensives "annulation du ccmi si pas obtention du prêt"
Mais le plan de financement indiqué sur le ccmi de correspond plus a la réalité d'aujourd'hui car nous avons plus le droit au PTZ et le le taux du prêt indiqué n'est plus les taux actuels.

Est-ce que je suis dans mes droits pour faire annulé le contrat CCMI avec une "simple" lettre de refus de ma banque ?
est-ce que cela va me couter de l'agent?
dois-je être accompagné par un notaire ou un avocat.

merci de votre aide.