Microsoft
Bingbot
Índice de búsquedaIndexa para Bing, que es el índice del que bebe Copilot.
Si lo bloqueás: Salís de Bing y, con eso, de Copilot. Bloquearlo por "Bing no me trae tráfico" es la decisión que más caro sale hoy.
Cómo identificarlo en tus logs
Buscá esta cadena en el User-Agent de las peticiones a tu servidor:
bingbot
Cómo saber si el que entró era el de verdad
El User-Agent lo escribe cualquiera. Un scraper que quiere pasar desapercibido se presenta como bingbot justamente porque casi nadie verifica, y porque casi nadie bloquea a un bot conocido. El nombre no prueba nada: lo que prueba es la IP de origen.
Microsoft publica sus rangos. Si la IP de la petición no está en esta lista, el bot no es suyo:
https://www.bing.com/toolbox/bingbot.json
Permitirlo en robots.txt
User-agent: bingbot Allow: /
Bloquearlo en robots.txt
User-agent: bingbot Disallow: /
Ojo: robots.txt es una convención, no una barrera técnica. Los rastreadores de las grandes plataformas la respetan; si necesitás una barrera de verdad, va del lado del servidor.
Documentación oficial de Microsoft: www.bing.com