Mi empresa a petición del cliente quiere cambiarme el horario, incluso no trabajar las 8h de la jornada.

Mi empresa a petición del cliente quiere cambiarme el horario de tal forma que hay días que no seria necesario trabajar las 8h de la jornada laboral y esas horas que no trabajo guardárselas para cuando las necesite y mi empresa ha aceptado comunicándomelo de palabra. ¿Se puede hacer? ¿Me puedo negar?