Mi vecino está vallando su terreno cogiendo parte del mío, puedo hacer que quite la valla dentro de unos años?

Mi vecino está vallando su finca cogiendo parte de la mía, a mi actualmente no me importa pero quizás en un futuro necesite ese trozo de finca, ¿si no le exijo ahora que retire la valla adquiere derechos sobre mi terreno?, ¿Puedo dentro de unos años si necesito la finca hacerle quitar la valla o si no reclamo inmediatamente puede el ejercer algún derecho sobre ese trozo de finca que está cuidando?