Viajar de baja

Hola, mi pregunta es la siguiente, estoy de baja laboral 6 meses ya porque que an puesto una prótesis en la rodilla y me esta causando problemas a la hora de caminar el resto hago vida normal, pero me impide trabajar pues me duele al estar tiempo de pie, que es mi trabajo, el tema es que me quería ir una semana al pueblo de mi mujer en Ávila yo estoy en Alicante, se lo he comentado a mi medica de cabecera y me a dicho que por nada del mundo me puedo desplazar y mucho menos a Ávila, ¿esto es así? ¿Qué me puede pasar si me voy y en el viaje me ocurre algo que requiera asistencia medica?, tengo entendido que estando de baja no te puedes desplazar fuera de tu Provincia, no se me preocupa el tono radical de mi medica, si podéis comentarme algo lo agradecería, saludos.