Hola! ¿Cuándo prescribe una libreta vivienda abierta en el 2004?

Abrí la libreta vivienda en el 2004, desgravándomela ese año. ME compre la vivienda en el 2005 pero no fue de vivienda habitual sino para alquilar (ahora ya se que no sirve la libreta). Ahora estamos en el 2012 y he recibido una paralela de la renta presentada en el 2010 reclamándome lo que me desgrave en el 2004 porque con la ampliación de los 2 años consideran que no se ha prescrito 2004+4 años + 2 años=2010.
Quería saber si tengo alguna oportunidad de hacer alguna alegación por prescripción.
Otra cosa que no entiendo si la aperturo y desgravo en el mismo 2004, los 4 años no serian hasta el 2007. (2004-2005-2006 y 2007???)
Gracias, necesito contestar antes de 8 días.