Robots.txt Distribución de uso en Haití

Distribución para sitios web que utilizan Robots.txt tecnologías

Tecnología	Sitios web	%
GPTBot Disallow	62	7,34
Robots Disallow	55	6,51
Common Crawl Bot Disallow	54	6,39
Google AdsBot Mobile Apps Disallow	54	6,39
Anthropic Claude Bot Disallow	48	5,68
Google Bard Disallow	48	5,68
Facebook Bot Disallow	46	5,44
Yandex Bot Disallow	44	5,21
Alexa Bot Disallow	44	5,21
Cohere AI Disallow	40	4,73
Soso Bot Disallow	39	4,62
Microsoft BingBot Disallow	38	4,5
Sogou Bot Disallow	38	4,5
Ahrefs Bot Disallow	37	4,38
Yahoo Slurp Disallow	37	4,38
AppleBot Disallow	33	3,91
Apple AI Bot Disallow	31	3,67
Perplexity	29	3,43
Majestic Bot Disallow	16	1,89
Semrush Bot Disallow	11	1,3
Exalead Bot Disallow	9	1,07
Webz Omgili Disallow	7	0,83
Google Image Bot Disallow	6	0,71
ByteDance Bytespider Disallow	5	0,59
360 Bot Disallow	3	0,36
Microsoft MSNBot Disallow	2	0,24
BuiltWithBot Disallow	1	0,12
Google News Bot Disallow	1	0,12
Google Video Bot Disallow	1	0,12
DuckDuckGo Bot Disallow	1	0,12
Google Favicon Disallow	1	0,12
Google API Bot Disallow	1	0,12
Google DuplexWeb Disallow	1	0,12
Diffbot Disallow	1	0,12
Pipl Disallow	1	0,12