Separación, convivencia e hijos de por medio

Me acabo de separar. No estamos casados. Convivimos y estoy embarazada de gemelos y tengo un nene que no es de el de 2 años y medio . El día que explotó todo hubo forcejeo de ambos lados. Yo me fui de la casa. Unos días después llegan los padres de viaje. La hermana y la madre de el vinieron a la casa de mi mamá (donde estoy ahora) a decirme se todo y pedirme la llave de la casa, donde yo tenía mis cosas todavía.
Llamo a mi ex pareja a que venga hablar con ellos y que iba a sacar mis cosas. Esperando a que venga para que vea las cosas que me estaba llevando aparece el padre y pregunta que pasaba, le cuento lo sucedido y me dice que no había problema que saque las cosas el se quedaba. Terminando de sacar las cosas aparece mi ex pareja. Cuando sacó las últimas cosas mi papá pide el teléfono que tenía mi ex que está al nombre mio y el cual estoy pagando yo. El padre de mi ex se empieza a sobreexsaltar y a tratar mal a mi papá, amenazando de pegarle.
¿Quisiera saber que es lo que debo Hacer? ¿Cómo debo Seguir? No quiero que. Mis hijos tengan trato con ellos. Si quiero que el padre se haga cargo como corresponde pero que no pueda a llevarse los bebes.