Роботы.txt Распределение использования в Италия

Топ в Роботы.txt Распределение использования в Италия

Технологии	Веб-сайты	%
Googlebot Disallow	247 125	13,59
Baidu Bot Disallow	173 040	9,51
Yandex Bot Disallow	148 209	8,15
Microsoft BingBot Disallow	145 326	7,99
Sogou Bot Disallow	145 075	7,98
Yahoo Slurp Disallow	144 371	7,94
Soso Bot Disallow	142 420	7,83
Alexa Bot Disallow	141 726	7,79
Google AdsBot Disallow	108 668	5,98
Google AdsBot Mobile Disallow	76 928	4,23
Ahrefs Bot Disallow	60 975	3,35
Robots Disallow	35 523	1,95
Semrush Bot Disallow	28 966	1,59
Some Robots Disallow	27 096	1,49
GPTBot Disallow	20 351	1,12
Majestic Bot Disallow	17 458	0,96
Common Crawl Bot Disallow	16 545	0,91
Anthropic Claude Bot Disallow	12 754	0,7
Facebook Bot Disallow	12 145	0,67
Google Bard Disallow	12 111	0,67
Google AdsBot Mobile Apps Disallow	11 174	0,61
Cohere AI Disallow	11 007	0,61
AppleBot Disallow	11 005	0,61
Apple AI Bot Disallow	10 104	0,56
Perplexity	9 729	0,53
Microsoft MSNBot Disallow	8 751	0,48
Exalead Bot Disallow	4 778	0,26
Google Media Partners Disallow	4 733 *	0,26
Google Image Bot Disallow	4 532	0,25
360 Bot Disallow	4 509	0,25
Webz Omgili Disallow	3 667	0,2
ByteDance Bytespider Disallow	3 481	0,19
BuiltWithBot Disallow	2 896	0,16
Google News Bot Disallow	1 653	0,09
Google Video Bot Disallow	1 605	0,09
DuckDuckGo Bot Disallow	1 364	0,07
Diffbot Disallow	1 362	0,07
Google Favicon Disallow	1 281	0,07
Google API Bot Disallow	1 242	0,07
Google DuplexWeb Disallow	1 235	0,07
YOU Disallow	1 217	0,07
Youdao Bot Disallow	455	0,03
Pipl Disallow	88	0
Google FeedFetcher Disallow	10	0
Google Read Aloud Disallow	5	0
Google Web Light Disallow	2	0

1 818 697 Обнаружения

из Роботы.txt в Италия. Последнее обновление 01st ноя 2024.

Googlebot Disallow на данный момент является самой популярной технологией в этой категории.