Pilier abimé d'EDF sur mon terrain

Bonjour, nous avons acheté il y a 2 ans et demi une maison sur une exploitation agricole qui a été divisée. Aujourd'hui nous avons l'autorisation d'ouvrir notre accès sur la rue (nous passions par un autre endroit jusqu'à maintenant). Problème : un pilier béton Edf est présent en bordure de propriété mais bien chez nous. Ce pilier est très abimé, il s'effrite et des morceaux de béton tombent régulièrement. Il comporte un transfo et une ligne qui n'alimente plus personne. Edf, consulté et venu sur place nous dit que ce poteau et ce qu'il y a dessus nous appartient car c'est l'ancien propriétaire qui avait demandé cette dérivation pour son exploitation. Aucune information à ce sujet ne nous a été donné chez le notaire au moment de la signature. Edf nous dit que pour supprimer la ligne, démonter le transfo et faire tomber le pilier, ils vont nous faire un devis, qui va être très élevé et que ça pourrait prendre 6 mois de délais administratifs. Comment pouvons-nous nous défendre afin qu'Edf prenne les frais de démontage et démolition à sa charge ?