Bytespider
Agente da ByteDance do tipo “rastreador de treinamento de IA”.
- Operador
- ByteDance
- No user agent
Bytespider- Token do robots.txt
Bytespider- Respeita o robots.txt
- não diz se respeita o robots.txt
- Documentação oficial
- não encontrada; identificado pelo user agent observado
- Conferido em
- 2026-11-04
O que é o Bytespider?
O Bytespider é um agente da ByteDance do tipo “rastreador de treinamento de IA”. Ele coleta páginas que podem ser usadas para treinar modelos de IA. A visita não responde ninguém agora; ela decide o que os próximos modelos vão saber sobre você.
Descrição do operador: ByteDance crawler associated with AI model data collection.
Como bloquear ou liberar o Bytespider?
Pelo robots.txt, com o token Bytespider. A ByteDance não diz se respeita o robots.txt. Para bloquear o site inteiro:
User-agent: Bytespider
Disallow: /Para liberar, troque Disallow por Allow. Antes de bloquear, pense no que ele traz: bloquear não tira você das buscas de IA, mas os próximos modelos saberão menos sobre você.
Como saber se o Bytespider visitou o meu site?
Nos logs de acesso do servidor ou da CDN, procure Bytespider no user agent. O Google Analytics não mostra essas visitas: agentes não rodam o JavaScript dele.
O nome no user agent pode ser copiado por qualquer um, então contar linhas não basta. O Knocklog lê o tráfego do seu site em qualquer hospedagem, confirma quem é quem e mostra quantas vezes o Bytespider veio, quais páginas leu e o que isso trouxe.
Como saber se é o Bytespider de verdade?
A ByteDance não publica um jeito de verificar o Bytespider. Qualquer programa pode usar esse nome, então o Knocklog mostra essas visitas como “não verificáveis”, nunca como verdadeiras.
O Bytespider visita o seu site?
Veja em segundos como o seu site trata os agentes de IA. Depois, conecte o tráfego para saber quem veio de verdade.