ملف الروبوتات.txt توزيع الاستخدام في جزر آلاند

ليثبت ملف الروبوتات.txt توزيع الاستخدام في جزر آلاند

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	95	21.69
AppleBot Disallow	29	6.62
Anthropic Claude Bot Disallow	28	6.39
GPTBot Disallow	27	6.16
Common Crawl Bot Disallow	26	5.94
Google Bard Disallow	26	5.94
Facebook Bot Disallow	26	5.94
Apple AI Bot Disallow	26	5.94
Perplexity	26	5.94
Cohere AI Disallow	25	5.71
Google AdsBot Mobile Apps Disallow	22	5.02
Robots Disallow	17	3.88
Yandex Bot Disallow	9	2.05
Ahrefs Bot Disallow	7	1.6
Majestic Bot Disallow	5	1.14
ByteDance Bytespider Disallow	5	1.14
Webz Omgili Disallow	5	1.14
Semrush Bot Disallow	4	0.91
Diffbot Disallow	4	0.91
YOU Disallow	4	0.91
Microsoft BingBot Disallow	3	0.68
Alexa Bot Disallow	3	0.68
Yahoo Slurp Disallow	3	0.68
DuckDuckGo Bot Disallow	3	0.68
Soso Bot Disallow	2	0.46
Microsoft MSNBot Disallow	2	0.46
Google Image Bot Disallow	1	0.23
Google News Bot Disallow	1	0.23
Google Video Bot Disallow	1	0.23
Google Favicon Disallow	1	0.23
Google API Bot Disallow	1	0.23
Google DuplexWeb Disallow	1	0.23

438 الاكتشافات

ل ملف الروبوتات.txt في جزر آلاند. آخر تحديث 29th رجب 2025.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.