Tengo una una niña de 4 meses y que me quiero separar.

Tengo una niña de 4 meses y me quiero separar de mi pareja porque es agresivo y tiene problemas con las drogas. Ahora mismo estamos viviendo con su madre ya que no no podemos permitir un alquiler. El no trabaja. Y yo trabajo en hostelería. Recibo de el vejaciones y algún que otro altercado. Aparte me ha quitado dinero para drogarse. Cuando quiero irme con mi niña el no me deja y me amenaza con que no puedo llevármela. Y como me la lleve me va a hacer la vida imposible. ¿Qué derechos tengo para poder llevarme a mi hija? Seria a casa de mi tía. Ya que mis padres los tengo muy lejos.