Isolation porte de cave et escaliers mais VMC sans entrée d'air

Bonjour à tous, 

J'ai une maison plutôt récente de 2008. J'ai une VMC simple flux (bouches dans la cuisine, deux toilettes et deux salles de bain) et un insert à bois. 
Je ne sais pas pourquoi, il n'y a aucune entrée d'air aux fenêtres ou même dans les caissons des volets. Par contre j'ai bien un jour sous chaque porte pour la circulation d'air. 

J'ai une porte qui donne accès à la cave dans mon entrée (la cave est en accès direct avec l'extérieur par deux portes de garage). 
Entre la VMC et l'insert bois quand il fonctionne, j'ai un appel d'air qui passe par la porte de cave et  ramène le froid de l'extérieur vers l'entrée. J'ai également mon escalier du premier étage qui passe au dessus de ma descente de cave, du coup même problème, entre chaque marche d'escalier passe le froid du sous-sol.

Ma question : Faut-il isoler en dessous de l'escalier et sous ma porte de cave car cela fait venir énormément de froid? 
J'ai peur que la maison ne devienne trop "étanche" en le faisant car je n'identifie pas trop d'autres entrées d'air, mais les menuiseries ont déja 15 ans et la fumée de cheminée ne refoule pas donc il doit y avoir assez d'entrée au final. 

merci,