No poder ver a mi hijo

Hola mi pregunta es.- ¿Estoy en paro y dejado de pasar la manutención a mi ex-mujer diciéndole mi situación y me dice que si no le pago que no me deja ver a mi hijo eso es posible o lo tiene que decir un juez(claro esta no me he negado a pagarle solo que mi situación es complicada)?