¿Qué puedo hacer legalmente ante esta situación?

Si cuando convivía con mi pareja la mama y la abuela de el hablaban mal de mi, hasta el punto de decirle que el hijo que iba a tener no era de el, motivo por el cual pasaron muchas situaciones de violencia y amenazas. Ahora que el no quiere responder por el niño ellas se la pasan llamando queriendo saber de el bebe, conociendo que gracias a los comentarios de ellas se llego a este punto. Que puedo hacer para que ellas no reclamen derechos sobre el bebe que tiene 7 meses si el padre no quiere responder ni saber nada de nosotros, esto tiene algún nombre legalmente lo que ellas hicieron de hablar mal de mi, inventar cosas.