Ex marido amenaza

Buenas. Llevo separada más de 4 años.Tengo la custodia de los 2 peques y vivimos en el piso que pagamos su padre y yo. Él además pasa una pensión a los pequeños. Según va pasando el tiempo, el comportamiento de mi ex pareja es cada vez peor. Amenazas, insultos,... Puso una demanda hace un año para aumentar el régimen de visitas y bajar la pensión. Consiguió lo primero pero la jueza dejó la pensión como estaba. Los últimos meses ha estado más o menos tranquilo. Pero vuelve a la carga. Él entiende que como 'paga' yo tengo obligaciones y él derechos. Estoy cansada ¿qué puedo hacer? Muchas gracias