Valeur d'un plan de bornage sans procès verbal de signé ?

Bonjour,

Je vous écris suite à un litige que j'ai avec mon voisin.

J'ai acheté une maison avec un terrain en 2015 ( que j'appelerai parcelle A ).
Avant l'achat, j'ai pu remarqué que mon voisin (occupant la parcelle B) utilisait une bande d'environ 1m sur 10m de long en guise de passage sur ma parcelle A pour accéder à une parcelle C lui appartenant.

Mon notaire m'avait vivement conseillé de demander l'intervention d'un géomètre-expert avant d'être tranquille lors de l'acte de vente.
Le géomètre intervient et dresse un plan de bornage qui indique bien la limite de propriété et indique une "servitude de passage" sur la bande de terrain qu'utilise mon voisin.
J'ai signé l'acte en déclarant que je reconnaissais que mon voisin accède à son terrain C par ma parcelle A, et que j'en faisais mon "affaire personnelle".

Un an plus tard, je décide de ré-aménager mon terrain et d'en discuter avec mon voisin. Celui-ci me dit qu'il a besoin de conserver mon bout de terrain car il ne voit aucunes autres solutions pour accéder à sa parcelle au-dessus.
Je lui propose donc de lui céder à l'euro symbolique, en contre partie de prendre en charge les frais de géomètre pour réaliser la nouvelle division et la réalisation d'une cloture.
Mon voisin s'énerve et refuse : " Pourquoi devrais-je payer alors que j'ai toujours emprunter ce bout de terrain pour accéder à ma parcelle C ?"
Refusant mon offre, il décide de se créé un accès de sa parcelle B à C via un escalier : de ce fait, il ne devrait avoir plus besoin de passer par mon terrain. Cependant, il continue tout de même à revendiquer la bande de terrain, en m'alarmant sur le fait que si je me mets en limite et que j'ai tord, il fera stopper mes travaux.


J'ai dès lors contacter le géomètre qui avait dressé le plan de bornage en 2015 pour avoir accès au PV afin d'avoir en ma possession tous les documents officiels. Il me répondit que le PV n'existe pas car les anciens propriétaires qui m'ont vendu le bien avait refusé la servitude de passage.
Cependant, le géomètre me confirme bien que je peux me fier à la limite de propriété dressée sur le plan.

Ma question est la suivante : Puis-je me remettre en limite selon le plan de bornage dressé par le géomère-expert, sachant que le PV n'a pas été signé ?

Merci pour votre soutien !