Archivo robots.txt Distribución de uso En Botsuana

Arriba en Archivo robots.txt Distribución de uso En Botsuana

Tecnología	Sitios web	%
Robots Disallow	170	17,86
Google AdsBot Disallow	138	14,5
Googlebot Disallow	128	13,45
Google AdsBot Mobile Disallow	120	12,61
GPTBot Disallow	31	3,26
Ahrefs Bot Disallow	27	2,84
Common Crawl Bot Disallow	25	2,63
Anthropic Claude Bot Disallow	25	2,63
Google Bard Disallow	23	2,42
Facebook Bot Disallow	23	2,42
AppleBot Disallow	22	2,31
Cohere AI Disallow	22	2,31
Apple AI Bot Disallow	22	2,31
Perplexity	22	2,31
Yandex Bot Disallow	19	2
Google AdsBot Mobile Apps Disallow	16	1,68
Google Media Partners Disallow	13 *	1,37
Microsoft BingBot Disallow	13	1,37
Semrush Bot Disallow	13	1,37
Majestic Bot Disallow	12	1,26
ByteDance Bytespider Disallow	11	1,16
Yahoo Slurp Disallow	10	1,05
Soso Bot Disallow	9	0,95
Alexa Bot Disallow	8	0,84
Webz Omgili Disallow	7	0,74
Diffbot Disallow	6	0,63
YOU Disallow	6	0,63
Microsoft MSNBot Disallow	3	0,32
Google Image Bot Disallow	3	0,32
360 Bot Disallow	2	0,21
Exalead Bot Disallow	1	0,11
BuiltWithBot Disallow	1	0,11
DuckDuckGo Bot Disallow	1	0,11

952 Detecciones

de Archivo robots.txt En Botsuana. Última actualización 21st abr. 2025.

Robots Disallow Actualmente es la tecnología más popular en esta categoría.