statuto

Necesito saber que es un crawler, como funciona, que funciones y posibilidades tiene, requisitos técnicos necesarios, lenguajes de trabajo mejores para hacerlo... Me gustaría que me informaras sobre algún manual o algún lugar donde pueda encontrar...