¿Ganancia patrimonial?

Muchas gracias de antemano.
Tengo un problema con Hacienda resulta que en el año 2007 cambie un terreno por un piso a una constructora es decir yo les entregue un terreno y ellos se compormetieron a darme un piso cuando estuviese construido, ¿el valor del terreno cuando lo compre era de 3000? Y el valor del piso que me daban era por 120000, yo entendía que había una ganancia patrimonial que tenía que declarar pero fui a Hacienda y me dijeron que no era así que lo tendría que declarar cuando lo vendiese. Resulta que este año me viene un escrito reclamándome unos 14000 euro por incremento patrimonial del año 2007 junto con intereses y demás no estaba muy conforme pero lo pagué pero después de pagarlos ahora me reclaman una sanción por no haberlo realizado en fecha mi duda es ¿cuándo tendría que haber declarado la ganancia patrimonial cuando venda el piso como en un principio me dijo Hacienda, cuando firme el contrato privado con la constructora que fue en el 2007 o cuando he realizado ya las escrituras y es cuando el piso esta resgistrado a mi nombre que es en el 2009?