¿Dónde devolver al niño tras una visita del padre?

Buenas tardes;
Mi ex marido me amenaza con no depositar al niño en mi domicilio si no estoy yo para recogerle, por no tener que dárselo a mi actual pareja.
En el convenio pone que el padre debe recoger al niño en mi casa y depositarlo en mi casa o donde yo le indique, puedo indicarle que lo devuelva en mi trabajo, a 30 kms de mi domicilio?
Porr otra parte, muchas veces el no puede venir a recogerlo por estar trabajando en negro y no me pasa manutención por el niño, puede venir cualquier otra persona que el mande? (en el convenio solo estipula que venga el padre).
Gracias.