Remplacer isolant polystyrène avec carrelage dans la salle de bain

Bonjour,
Je suis en train de rénover ma salle de bain qui se trouve dans un appartement.
Les murs latéraux sont en plaques de plâtre et ne posent pas de souci, mais le mur en face de la porte, qui est le mur extérieur du bâtiment (collé contre le bâtiment voisin) est en béton sur lequel se trouve un isolant qui d'après le plan du logement fait 11cm d'épaisseur et est composé en surface d'une plaque de placo d'environ 1cm et le reste c'est du simple polystyrène.

Initialement je comptais retirer le carrelage de ce mur mais c'est impossible sans arracher tout le polystyèrène, donc j'ai laissé tomber en me disant que j'allais recaler par dessus l'ancien.

Le problème c'est qu'au pied de ce mur (là où on voit le maçon ) il y a un petit caisson faisant toute la longueur de la pièce (et pièces voisines : WC séparé puis ensuite salle d'eau avec juste une douche) dans lequel se trouvent les arrivée et évacuations d'eau, et c'est très embêtant puisque nous avons demandé la réalisation d'un meuble sur mesure qui ne pourra être posé à cause de ce caisson ! Meuble qui devra déjà être repris à cause de la sur-épaisseur de carrelage ...

Alors ma question, qui impliquerait certes beaucoup de boulot mais ça ne me fait pas peur, serait : est-ce que je peux arracher tout ce placo + polystyrène pour le refaire (avec autre chose de préférence, qui permettrait en outre de tenir un meuble sous vasque suspendu), d'y déplacer tous les réseaux d'eau et de refermer pour faire un mur propre d'où rien ne dépasse ?

Quoi prendre comme matériau ?

Merci d'avance !