Cumplo mi jornada laboral de 8 horas y tres más por desplazamiento desde obra a centro de trabajo ¿Me las deben pagar como horas

Yo entro a las 7 en mi centro de trabajo, pero luego en furgoinestas de la empresa nos desplazamos a las obras en distintas localidades de alrededor, pero ahora ha salido una obra a tres horas ida y vuelta y el jefe dice que esas horas nos la paga como desplazamientos a la mitad que una hora extra, por supuesto nos negamos a hacerlas, no nos lo comunica por escrito y desearía informarle de mis derechos según convenio de la industria e instalaciones del metal de la comunidad de madrid ¿me podrías orientar un poco?gracias