Archivo robots.txt Distribución de uso En España

Arriba en Archivo robots.txt Distribución de uso En España

Tecnología	Sitios web	%
Googlebot Disallow	60.875	7,37
Google AdsBot Disallow	56.371	6,83
Google AdsBot Mobile Disallow	42.259	5,12
Baidu Bot Disallow	41.435	5,02
Sogou Bot Disallow	36.660	4,44
Some Robots Disallow	32.708	3,96
Anthropic Claude Bot Disallow	32.378	3,92
GPTBot Disallow	31.749	3,84
Common Crawl Bot Disallow	31.358	3,8
Yandex Bot Disallow	30.440	3,69
AppleBot Disallow	30.309	3,67
Google Bard Disallow	29.606	3,59
Facebook Bot Disallow	29.390	3,56
Perplexity	29.156	3,53
Apple AI Bot Disallow	28.890	3,5
Yahoo Slurp Disallow	28.806	3,49
Robots Disallow	28.793	3,49
Cohere AI Disallow	28.639	3,47
Ahrefs Bot Disallow	26.568	3,22
Alexa Bot Disallow	25.675	3,11
Google AdsBot Mobile Apps Disallow	24.169	2,93
Microsoft BingBot Disallow	23.449	2,84
Soso Bot Disallow	22.098	2,68
Majestic Bot Disallow	15.404	1,87
Semrush Bot Disallow	11.007	1,33
Microsoft MSNBot Disallow	8.838	1,07
ByteDance Bytespider Disallow	6.993	0,85
Webz Omgili Disallow	5.916	0,72
YOU Disallow	5.009	0,61
Diffbot Disallow	4.855	0,59
Google Media Partners Disallow	3.781 *	0,46
Exalead Bot Disallow	3.580	0,43
Google Image Bot Disallow	2.154	0,26
360 Bot Disallow	1.664	0,2
Youdao Bot Disallow	1.015	0,12
BuiltWithBot Disallow	735	0,09
Google News Bot Disallow	541	0,07
DuckDuckGo Bot Disallow	510	0,06
Google Video Bot Disallow	481	0,06
Google Favicon Disallow	391	0,05
Google API Bot Disallow	356	0,04
Google DuplexWeb Disallow	352	0,04
Pipl Disallow	313	0,04
LLMS Text	18	0
Google FeedFetcher Disallow	13	0
Google Read Aloud Disallow	11	0
Google Web Light Disallow	4	0

825.722 Detecciones

de Archivo robots.txt En España. Última actualización 21st abr. 2025.

Googlebot Disallow Actualmente es la tecnología más popular en esta categoría.