Tem gente monitorando o fediverso, fazendo crawlers, usando os dados para tirar insights, alimentar AI.
Quem faz isso não respeita o seu robots.txt,
A reflexão que fica é: deixa eles, é bom pq vai mostrar qual o tipo de conversa que tem por aqui. OU Bora fechar as instâncias para membros apenas e dificultar quem tá tentando lucrar com esses dados?