Роботы.txt Распределение использования в Сирия

Топ в Роботы.txt Распределение использования в Сирия

Технологии	Веб-сайты	%
Robots Disallow	38	19,1
Some Robots Disallow	19	9,55
Yandex Bot Disallow	15	7,54
Microsoft BingBot Disallow	13	6,53
Alexa Bot Disallow	13	6,53
Yahoo Slurp Disallow	13	6,53
Sogou Bot Disallow	13	6,53
Soso Bot Disallow	13	6,53
Common Crawl Bot Disallow	6	3,02
AppleBot Disallow	6	3,02
GPTBot Disallow	5	2,51
Anthropic Claude Bot Disallow	5	2,51
Google Bard Disallow	5	2,51
Facebook Bot Disallow	5	2,51
Google AdsBot Mobile Apps Disallow	5	2,51
Apple AI Bot Disallow	5	2,51
Cohere AI Disallow	5	2,51
Perplexity	5	2,51
Microsoft MSNBot Disallow	2	1,01
Ahrefs Bot Disallow	1	0,5
Majestic Bot Disallow	1	0,5
Semrush Bot Disallow	1	0,5
Exalead Bot Disallow	1	0,5
Google Image Bot Disallow	1	0,5
360 Bot Disallow	1	0,5
BuiltWithBot Disallow	1	0,5
DuckDuckGo Bot Disallow	1	0,5

199 Обнаружения

из Роботы.txt в Сирия. Последнее обновление 01st ноя 2024.

Robots Disallow на данный момент является самой популярной технологией в этой категории.