MXDATARastreador

Nuestro rastreador

¿Viste MXDATA-signals en tus registros? Aquí explicamos qué recoge, con qué frecuencia y cómo detenerlo.

Identificación

User-Agent
MXDATA-signals/1.0 (+AI usage-rights signal archive; daily, low-rate; robots.txt respected)

User-Agent en robots.txt: MXDATA-signals

Qué recogemos

RecursoCuándo
/robots.txtUna vez al día
/ai.txt, /.well-known/tdmrep.json, / (inicio)Una vez al día, si robots.txt permite MXDATA-signals
Hasta 2 archivos de licencia RSL del mismo sitioUna vez al día, si están referenciados y permitidos

Límites de acceso

Las solicitudes son secuenciales: como máximo una por segundo a cada sitio. La recogida se realiza una vez por sitio al día.

Fuera de alcance

No iniciamos sesión, enviamos formularios, ejecutamos JavaScript ni recogemos artículos, imágenes o datos personales.

Detener el rastreador

robots.txt

User-agent: MXDATA-signals
Disallow: /

Con esta regla, dejamos de solicitar otros archivos. Seguimos leyendo robots.txt una vez al día para conocer tus instrucciones y registrar esa declaración pública. Para retirar el dominio de la muestra por completo, escríbenos.

Contacto

crawler@mxdata.ai

Intentamos responder en 2 días laborables.

Direcciones IP

Publicaremos los rangos IP cuando dispongamos de direcciones fijas.

Pide un informe para los sitios que necesitas revisar.

Pedir una muestra