Archivo robots.txt Distribución de uso En Alemania

Arriba en Archivo robots.txt Distribución de uso En Alemania

Tecnología	Sitios web	%
Googlebot Disallow	751.645	12,04
Baidu Bot Disallow	577.785	9,26
Sogou Bot Disallow	547.012	8,76
Yandex Bot Disallow	418.495	6,7
Microsoft BingBot Disallow	410.905	6,58
Alexa Bot Disallow	410.725	6,58
Yahoo Slurp Disallow	404.927	6,49
Soso Bot Disallow	394.991	6,33
Robots Disallow	289.665	4,64
Ahrefs Bot Disallow	284.099	4,55
Some Robots Disallow	228.202	3,66
Majestic Bot Disallow	216.390	3,47
Semrush Bot Disallow	212.666	3,41
Google AdsBot Disallow	207.475	3,32
ByteDance Bytespider Disallow	178.569	2,86
Google AdsBot Mobile Disallow	146.881	2,35
GPTBot Disallow	44.856	0,72
Anthropic Claude Bot Disallow	41.929	0,67
Google AdsBot Mobile Apps Disallow	39.698	0,64
Common Crawl Bot Disallow	38.590	0,62
Google Bard Disallow	32.674	0,52
Facebook Bot Disallow	32.053	0,51
AppleBot Disallow	31.465	0,5
Cohere AI Disallow	28.974	0,46
Google Media Partners Disallow	28.884 *	0,46
Perplexity	28.234	0,45
Apple AI Bot Disallow	28.208	0,45
Google Image Bot Disallow	24.766	0,4
Microsoft MSNBot Disallow	21.387	0,34
DuckDuckGo Bot Disallow	19.225	0,31
Exalead Bot Disallow	16.940	0,27
Google News Bot Disallow	16.143	0,26
Google Video Bot Disallow	16.134	0,26
Google Favicon Disallow	15.911	0,25
Google API Bot Disallow	15.859	0,25
Google DuplexWeb Disallow	15.744	0,25
Webz Omgili Disallow	8.079	0,13
360 Bot Disallow	5.164	0,08
Diffbot Disallow	3.380	0,05
BuiltWithBot Disallow	3.238	0,05
YOU Disallow	2.584	0,04
Pipl Disallow	736	0,01
Youdao Bot Disallow	188	0
Google FeedFetcher Disallow	104	0
Google Read Aloud Disallow	16	0
LLMS Text	16	0
Google Web Light Disallow	3	0
Google BIG Bench Disallow	2	0

6.241.616 Detecciones

de Archivo robots.txt En Alemania. Última actualización 21st abr. 2025.

Googlebot Disallow Actualmente es la tecnología más popular en esta categoría.