Avis plan plain pied T6 170-180 m2 dans le 31

Bonjour à tous, 
voici plusieurs mois que je lis vos récits ou vos idées de plan en vu de la réalisation d'un nouveau projet de construction. Nous avons avec ma femme et nos 2 enfants une première maison que nous avons faite construire par un constructeur. 
Nous souhaiterions aujourd'hui recommencer l’aventure, pour cela nous avons déjà trouvé un terrain qui nous plait, mais les contraintes que ce soit sur la parcelle ou sur la maison sont nombreuses, nous avons vu plusieurs professionnels (maître d'oeuvre, architecte,  constructeurs) et les propositions qui nous ont été faites ne nous ont pas emballées (cuisine au nord, maison en U avec ombre portée sur la terrasse, chambre à l'ouest, une seule baie sur le sejour...) soit par le positionnement des pièces ou par le style de la maison.

Je souhaiterai donc profiter de vos conseils pour savoir si le projet est réalisable ou pas par rapport à ce terrain.

La parcelle est composée de deux zones cadastrale, partie basse non constructible (en blanc) et partie haute constructible (en marron clair), l'accès pourra se fera en haut à droite par le rond point.

Nos souhaits: une maison de plain pied T6 profitant au maximum de l'ensoleillement et bien orientée avec 2 parties nuits distinctes pour être à l'écart des enfants, 4 chambres dont 2 suites parentales une pour nous et une pour les invités et bureau.

Suite aux plans que l'on a vu sans nous convaincre, j'ai fait un croquis qui reprend l'esprit de ce que nous souhaitons (les dimensions sont un peu grande volontairement car je n'ai pas inclus l'épaisseur des murs), mais la plupart des professionnels qui l'ont vu m'ont indiqué la complexité du projet voire son impossibilité.

Q'en pensez vous et comment l'améliorer pour le rendre réalisable à un coût convenable.
Je vous joins le plan de la parcelle (je n'ai pas réussi à le tourner pour avoir le Nord en haut) et celui de mon croquis, j'espère avoir respecté les codes du forum.
Je vous remercie pour votre aide