Роботы.txt Распределение использования на островах Кука

Вверху Роботы.txt Распределение использования на островах Кука

Технологии	Веб-сайты	%
Ahrefs Bot Disallow	12	9,02
Majestic Bot Disallow	11	8,27
GPTBot Disallow	9	12,16
Common Crawl Bot Disallow	9	12,16
AppleBot Disallow	9	6,77
Anthropic Claude Bot Disallow	9	12,16
Google Bard Disallow	9	12,16
Facebook Bot Disallow	9	12,16
Cohere AI Disallow	9	12,16
Apple AI Bot Disallow	9	12,16
Perplexity	9	12,16
Google AdsBot Mobile Apps Disallow	9	6,77
Robots Disallow	8	6,02
Microsoft BingBot Disallow	3	2,26
Yandex Bot Disallow	2	1,5
Semrush Bot Disallow	2	1,5
Alexa Bot Disallow	1	1,35
Yahoo Slurp Disallow	1	0,75
Soso Bot Disallow	1	0,75
Microsoft MSNBot Disallow	1	0,75
Google Image Bot Disallow	1	0,75

133 Обнаружения

из Роботы.txt на островах Кука. Последнее обновление 21st апр 2025.

Ahrefs Bot Disallow в настоящее время является самой популярной технологией в этой категории.