En el análisis, sólo se 51.143.124.155 se mencionarán , aunque
52.250.62.82,
52.250.19.204,
52.250.119.153 también brilló en los registros ,
pero se comportan más culturalmente.
Cómo se ve el problema en el ejemplo de una selección de bots de Bing del registro de ayer de un sitio:
$ cat ./20201026* | grep -F bingbot | awk '{print $1}' | sort | uniq -c | sort -rn | head -10
404582 51.143.124.155
10449 157.55.39.174
10037 207.46.13.162
10036 207.46.13.86
10008 157.55.39.152
6638 207.46.13.207
4993 207.46.13.238
4113 157.55.39.200
3897 157.55.39.205
2995 157.55.39.166
Cómo se ve un típico bot de Bing "viejo":
$ whois 157.55.39.174 | grep -i "org[-]*name"
OrgName: Microsoft Corporation
$ host 157.55.39.174
174.39.55.157.in-addr.arpa domain name pointer msnbot-157-55-39-174.search.msn.com.
Se basan en las redes
157.56.0.0/14,
157.54.0.0/15,
157.60.0.0/16,
207.46.0.0/16
y se verifican con éxito en www.bing.com/toolbox/verify-bingbot-verdict :
How “new »Bots:
$ whois 51.143.124.155 | grep -i "org[-]*name"
org-name: Microsoft Limited
$ host 51.143.124.155
Host 155.124.143.51.in-addr.arpa not found: 3(NXDOMAIN)
$ host 52.250.62.82
Host 82.62.250.52.in-addr.arpa not found: 3(NXDOMAIN)
$ host 52.250.19.204
Host 204.19.250.52.in-addr.arpa not found: 3(NXDOMAIN)
$ host 52.250.119.153
Host 153.119.250.52.in-addr.arpa not found: 3(NXDOMAIN)
Y en consecuencia:
al mismo tiempo, la escritura a mano, la actividad en todos los sitios a la vez, así como los mensajes de colegas que después de bloquear estas "nuevas" notificaciones IP de Bing Webmaster Tools sobre la indisponibilidad del sitio se reciben , nos permiten concluir que estos bots realmente son el trabajo de microsoft .
Por supuesto, se ignoran las solicitudes de apoyo y los abusos.
En general, no golpee a los bots de las redes 51.140.0.0/14, 52.224.0.0/11 de inmediato. Probablemente sean bifidobacterias útiles (o al menos inofensivas).
Upd (28.10.2020 08:48 MSK):
Ayer (el 27 / Oct / 2020: 11: 56: 24 +0300) las solicitudes se detuvieron.
No hubo respuestas al abuso.
@Facan tuiteó un comentario sobre una solicitud similar:
… Algunos sitios informaron que un pequeño porcentaje del rastreador de Bing no resolvía correctamente el DNS y que estuvimos rastreando fuera de las direcciones IP habituales durante unos días. Lo arreglamos ayer.