Ordenar datos en los gráficos de Access por algún campo

Tengo un informe en el que me salen datos anuales de horas extras, concretamente los campos trabajador y número de horas (ordenados de mayor a menor). Debajo le he insertado un gráfico de barras el cual quería que ordenara las barras de mayor a menor o viceversa. El tema es que me aparecen ordenados como le da la gana y si entro en el gráfico o en la hoja de datos me aparecen ejemplos no los datos con los que estoy trabajando, sin embargo en otros gráficos si me aparecen mis datos ¿alguien sabe la solución?