Duda sobre contrato de alquiler finalizado

En 2011 firme un contrato de alquiler, que se termino en septiembre de 2014. Dejamos la vivienda pero las llaves no se las entregamos ya que el arrendador no queria devolvernos la fianza. Al final hace unos días accedimos a devolverle las llaves a pesar de que aun tenia de fianza un importe de unos 2000 euros. En 2014 se acordó en descontar las ultimas mensualidades que nos quedaban por pagar del importe de la fianza ya que tenia en total 4500 euros y nos aconsejaron que lo hiciéramos así para evitar que se quedara con nuestro dinero como paso con las anteriores inquilinas.

Ahora me esta reclamando que la casa tiene muchos desperfectos, que cuando yo me fui no estaban: cristales rotos, etc. Y dice que me va a pasar una liquidación con el dinero que les debo.

¿Qué puedo hacer?

Gracias y saludos!