Que se debe hacer para que un párroco viva en la casa parroquial como diocesano y no en otro pueblo en comunidad religiosa

Somos de un pueblo de Toledo y siempre hemos tenido al sacerdote diocesano en la casa parroquial viviendo. Ahora la casa parroquial está vacía y el obispo ha hecho como un convenio de cinco años que es renovable con una orden religiosa que tiene su sede en otro pueblo, por lo que apenas tiene el sacerdote que envían, tiempo de hablar con la gente de mi pueblo ni visitar enfermos. ¿La pregunta es qué podemos hacer para que el obispo nos dé un cura diocesano y no religioso?