SOBRE JOBEEZYBOT
Sobre JobeezyBot
JobeezyBot es el rastreador que encuentra ofertas de trabajo para la app de Jobeezy. Manda este agente de usuario: JobeezyBot/1.0 (+https://jobeezy.com/bot)
Lee páginas públicas de empleo y los tableros públicos de los sistemas de contratación. No inicia sesión, no llena formularios y no aplica por nadie.
Las reglas que sigue
Obedece robots.txt en cada dirección y en cada redirección que sigue, con el nombre jobeezybot, o con las reglas para todos los rastreadores cuando ese nombre no aparece. Vuelve a leer robots.txt al menos una vez al día y no entra a un sitio cuyo robots.txt responde con un error del servidor.
Hace como máximo dos peticiones a la vez a un mismo servidor y espera la pausa entre visitas que pide robots.txt, hasta 30 segundos.
Cuando un servidor responde 429 o 503, espera lo que pide Retry-After, hasta dos minutos. Si le piden esperar más, se detiene y lo intenta de nuevo en una visita posterior.
Cómo mantenerlo fuera de tu sitio
Agrega estas líneas a tu robots.txt:
User-agent: JobeezyBot Disallow: /
Para preguntar cualquier cosa sobre él, escribe a support@jobeezy.com.