Vai al contenuto
TLD.SCStrumenti per domini e URL
  1. Home
  2. Dati
  3. Crawler AI
8.427 sitiPaesi Bassi

Siti che bloccano i crawler AI nei Paesi Bassi

Quali bot AI i siti bloccano in robots.txt: GPTBot, ClaudeBot, CCBot, Google-Extended e altri.

6,4 %
Blocca un crawler AI
1.075 / 16.705
47 %
Blocca GPTBot
7.906 / 16.705
4,9 %
Blocca CCBot
818 / 16.705
46 %
Blocca Google-Extended
7.759 / 16.705

Crawler AI bloccati in robots.txt

CrawlerGestoreGlobalePaesi BassiRegno UnitoItaliaSpagnaGiapponeAmerica Latina
GPTBotOpenAI (addestramento)9,6 %47 %52 %8,4 %9,6 %3,7 %6,1 %
ChatGPT-UserOpenAI (richieste degli utenti)5,1 %44 %49 %3,7 %4,9 %2,1 %2,4 %
OAI-SearchBotOpenAI (ricerca)3,8 %44 %48 %3,1 %4,1 %2 %1,9 %
ClaudeBotAnthropic8,7 %47 %51 %8 %9,3 %3,3 %5,9 %
anthropic-aiAnthropic (vecchio)7,6 %46 %51 %6,8 %7,5 %2,3 %5,2 %
Google-ExtendedGoogle (Gemini)7,8 %46 %50 %7,2 %7 %2,6 %5,2 %
CCBotCommon Crawl9,4 %4,9 %4,9 %8,6 %8,4 %3 %6 %
PerplexityBotPerplexity5 %44 %49 %3,8 %4,6 %2 %2,3 %
BytespiderByteDance9,2 %4,6 %4,6 %7,3 %8,5 %3,3 %6,5 %
Applebot-ExtendedApple7,7 %3,5 %4 %6,2 %6,4 %2,7 %5,1 %
AmazonbotAmazon8 %47 %51 %7,6 %8,9 %3 %5,9 %
meta-externalagentMeta7,9 %47 %51 %7,5 %8,6 %3,2 %5,4 %
cohere-aiCohere7,3 %46 %50 %6,7 %7 %2,3 %5,1 %
DiffbotDiffbot7,2 %46 %50 %6,6 %7,1 %2,1 %5,2 %

Quota di siti il cui robots.txt blocca il bot per nome sulla homepage.

Per mercato

MetricaGlobalePaesi BassiRegno UnitoItaliaSpagnaGiapponeAmerica Latina
Blocca un crawler AI10 %6,4 %5,7 %10 %11 %3,8 %6,7 %
Blocca GPTBot9,6 %47 %52 %8,4 %9,6 %3,7 %6,1 %
Blocca ClaudeBot8,7 %47 %51 %8 %9,3 %3,3 %5,9 %
Blocca CCBot9,4 %4,9 %4,9 %8,6 %8,4 %3 %6 %
Blocca Google-Extended7,8 %46 %50 %7,2 %7 %2,6 %5,2 %
Blocca PerplexityBot5 %44 %49 %3,8 %4,6 %2 %2,3 %
Content-Signal in robots.txt4,5 %2,5 %2,7 %4,4 %4,1 %0,6 %4,2 %
llms.txt15 %13 %16 %14 %13 %7 %19 %

Bot dei motori di ricerca bloccati

  1. 1Baiduspider57 %7.822
  2. 2SeznamBot53 %7.281
  3. 3Yeti53 %7.263
  4. 4Naverbot53 %7.251
  5. 5Sogou53 %7.249
  6. 6DuckDuckBot53 %7.219
  7. 7PetalBot4,9 %667
  8. 8YandexBot3,3 %447
  9. 9Applebot1,3 %176
  10. 10Bingbot0,8 %112

Quota su 13.698 siti del campione.

Bot SEO bloccati

  1. 1BLEXBot55 %7.511
  2. 2Barkrowler54 %7.368
  3. 3Screaming Frog SEO Spider53 %7.277
  4. 4SiteAuditBot53 %7.267
  5. 5MJ12bot4,8 %657
  6. 6SemrushBot4,2 %574
  7. 7AhrefsBot4 %547
  8. 8DotBot3,5 %480
  9. 9DataForSeoBot2 %272
  10. 10rogerbot1,5 %201

Quota su 13.698 siti del campione.

Il nostro crawler: 8.427 siti · Paesi Bassi · aggiornato il 12 nov 2026 · Metodologia

Tanti domini, poco tempo?

Esaminiamo tutto il tuo portafoglio di domini e sistemiamo DNS e sicurezza e-mail.