Hola expertos, mi pregunta es la siguiente: ¿Puedo entrar en mi router no estando conectado a la red

Bueno mi problema es que tengo internet pero la señal no me llega a toda la casa. Anteriormente estaba en otra compañía pero me he cambiado, la compañía anterior me ha dejado el router porque lo pague y es mio, ahora lo quiero usar para repetidor de la señal de la nueva conexión.No tengo el cd de instalación, porque no lo daban, por lo que no me puedo conectar con el.Mi pregunta es la siguiente,¿ puedo entrar en el router sin conexión a internet o lo tengo que tirar?.Un saludo y gracias.