Robots.txt Distribución de uso en Zimbabue

Distribución para sitios web que utilizan Robots.txt tecnologías

Tecnología	Sitios web	%
Google AdsBot Disallow	392	15,02
Googlebot Disallow	374	14,33
Google AdsBot Mobile Disallow	356	13,65
Robots Disallow	342	13,11
GPTBot Disallow	73	2,8
Ahrefs Bot Disallow	70	2,68
Common Crawl Bot Disallow	68	2,61
Google AdsBot Mobile Apps Disallow	67	2,57
Baidu Bot Disallow	65	2,49
Google Media Partners Disallow	65 ^*	2,49
Google Bard Disallow	61	2,34
AppleBot Disallow	60	2,3
Facebook Bot Disallow	60	2,3
Anthropic Claude Bot Disallow	59	2,26
Apple AI Bot Disallow	59	2,26
Perplexity	59	2,26
Cohere AI Disallow	57	2,18
Yandex Bot Disallow	53	2,03
Yahoo Slurp Disallow	37	1,42
Microsoft BingBot Disallow	34	1,3
Semrush Bot Disallow	33	1,26
Majestic Bot Disallow	32	1,23
Alexa Bot Disallow	27	1,03
Sogou Bot Disallow	24	0,92
Soso Bot Disallow	23	0,88
Microsoft MSNBot Disallow	15	0,57
Google Image Bot Disallow	11	0,42
Google News Bot Disallow	5	0,19
Google Video Bot Disallow	4	0,15
ByteDance Bytespider Disallow	3	0,11
Exalead Bot Disallow	3	0,11
Webz Omgili Disallow	3	0,11
DuckDuckGo Bot Disallow	3	0,11
Google Favicon Disallow	3	0,11
Google API Bot Disallow	3	0,11
Google DuplexWeb Disallow	3	0,11
360 Bot Disallow	2	0,08
BuiltWithBot Disallow	1	0,04