No bajo de peso

Soy una chica de 33 años, peso unos 57 kilos y mido 1,64. Evidentemente no estoy gorda, pero cada vez me cuesta más perder peso. Con 23 años pesaba unos 52 y, aunque no pretendo pesar lo que pesaba con 23, si que creo que 5 kilos en 10 años son muchos kilos. Como sano y hago spinning 4 días a la semana desde hace años. Todo el mundo me dice que estoy muy bien y que eso son los años, pero me da miedo seguir cuidándome y aún así seguir engordando. Cuando he estado a dieta estricta y ejercicio he llegado a los 55 y ese peso está bien, pero la verdad es que pasaba hambre y eso no es bueno. Creo que el fallo puede estar en la alimentación. Normalmente desayuno un café y un par de galletas( 7:00) y luego a las 11 un café y media tostada. Almuerzo lo que haya, legumbres, arroz, pasta. No comemos fritos (quizá un par de veces al mes) y no platos muy llenos. Para merendar fruta y una taza de te y por la noche depende, un filete a la plancha, huevo duro, pescado, yogur... Dependiendo del hambre que tenga. No suelo picar entre horas y si pico, normalmente es fruta desecada o un par de nueces. En el fin de semana hay un día de almuerzo o cena libre (cerveza y tapas o hamburguesa o pizza,...). No se si ese día de almuerzo o cena libre debería desaparecer, pero me cuesta mucho seguir una alimentación adecuada si alguna vez no saco los pies del tiesto un poco. En fin, espero que me pueda ayudar o al menos me de unas pautas de dónde puede estar el fallo.