LinkBot

LinkBot es el rastreador web de Link (linkco.ai). Se identifica así:

LinkBot/<version> (+https://linkco.ai/bot)

Por qué lee su sitio

Solo por dos motivos. Alguien introdujo la dirección de su sitio en la prueba en vivo de linkco.ai para que Link describa qué vende la empresa y a quién. O Link busca empresas que podrían comprarle a uno de sus usuarios y lee la página de inicio (a veces también la página «Quiénes somos») de las empresas que considera.

Qué lee

Solo texto público: su archivo robots.txt, su página de inicio y, en un sitio que se prueba, hasta otras 30 páginas del mismo dominio y el mapa del sitio que indique su robots.txt. Solo lee por https, no ejecuta JavaScript, no rellena formularios y no sigue enlaces a otros dominios.

Con qué frecuencia

Poco. Un mismo sitio se lee como mucho unas pocas veces al día, y cada prueba lee como máximo 31 páginas. LinkBot lee como máximo 4 páginas a la vez de un mismo sitio y respeta Crawl-delay.

Cómo bloquearlo

LinkBot respeta robots.txt (RFC 9309). Para impedirle todo su sitio:

User-agent: LinkBot
Disallow: /

Si su robots.txt no responde (un error del servidor), LinkBot no lee nada.