Incumplimiento arras por parte del vendedor

A ver si me puedes aconsejar qué hacer.
¿Mi pareja y yo hemos firmado un contrato de arras con el vendedor del piso. Son arras penitenciales en las cuales hemos entregado 2000? ¿En mano al vendedor y 4000? En un cheque nominativo al vendedor que está depositado en la inmobiliaria. Teníamos de plazo hasta hoy 9 de marzo para confirmar si la operación de hipoteca salia positiva, y hasta el 16 de abril para firmar la compra-venta ante notario.
El banco nos ha confirmado la hipoteca al 99% a falta de la tasación. Hemos estado 1 semana intentando localizar la vendedor para poder ir a tasar y primero nos lo ha retrasado todo lo que ha podido y a última hora ya ni contestaba el teléfono. Ayer a ultima hora la inmobiliaria y nosotros fuimos a casa del vendedor y después de un rato diciéndonos su mujer que no estaba salió cuando oyó la palabra denuncia. Él dice que no hemos llegado a tiempo a hacer la tasación y que por tanto no hay operación. La realidad es que tiene otro comprador que le da más dinero, pero no el suficiente para incumplir el contrato de arras y darnos el doble de lo que entregamos.
¿Qué podemos hacer? La inmobiliaria nos aconseja seguir para adelante con todo, enviarle un burofax para hacer la tasación y esperar al 16 de abril para denunciar.
Estamos hechos un lío...