Me pueden hacer cambiar el horario laboral?

Soy un trabajador del sector de la alimentación que ejerzo de administrativo desde hace ya 28 años en la misma empresa. Tengo un contrato indefinido desde esa fecha con un tope de horas semanales establecido en el mismo (40). Después de algunos cambios implantados en la empresa quieren incorporar un horario nocturno e ir rotando entre los 4 compañeros de oficina de forma obligatoria sin negociación ni aumento de sueldos ni nada, simplemente porque los jefes lo quieren así. También tenemos que ir cuando no tenemos el turno de noche durante una semana al mes de 11 a 12 de la noche para sacar por ordenador los estallidos de carga para los compañeros del almacén. Mi horario de trabajo es hasta ahora es de 7 a 2 y de 5 a 7. Puedo negarme a aceptar los cambios de horario propuestos por los jefes, podrían despedirme si no lo acepto, ¿qué consecuencias podría acarrearme si me niego a ello?