Como puedo actuar ante esta situación

Muy buenos días, tengo 40 años, soy madre soltera y tengo una hija de 19 años. Mi vida sentimental nunca ha sido estable pero he tenido varias relaciones cortas. En estos momentos tengo una persona con la que deseo irme a vivir, es la primera vez en mi vida que alguien me da tanta seguridad, es una persona muy bonita en todo el sentido de la palabra, me quiere, me respeta, es separado. Pero hay algo que me preocupa y es que él siempre quiere estar indagando sobre mi vida pasada y es algo que yo considero q lo pasado pasado esta y q es mi vida. Que debo hacer al respecto, él es compañero de trabajo y nunca me imaginé tener algo con él pero esta pasando y es muy bonito. Hay algo que no me deja tranquila y es que hace un tiempo tuve algo con otra persona que también trabaja con nosotros y siempre tengo el temor o cargo de conciencia pensando que mi pareja se pueda enterar de lo sucedido. Gracias por la ayuda al respecto.