ملف الروبوتات.txt توزيع الاستخدام في جزر آلاند

ليثبت ملف الروبوتات.txt توزيع الاستخدام في جزر آلاند

تكنولوجيا	المواقع الإلكترونية	%
GPTBot Disallow	27	9.44
AppleBot Disallow	24	8.39
Anthropic Claude Bot Disallow	24	8.39
Common Crawl Bot Disallow	23	8.04
Google AdsBot Mobile Apps Disallow	23	8.04
Google Bard Disallow	22	7.69
Facebook Bot Disallow	22	7.69
Apple AI Bot Disallow	22	7.69
Perplexity	22	7.69
Cohere AI Disallow	21	7.34
Robots Disallow	12	4.2
Yandex Bot Disallow	8	2.8
Ahrefs Bot Disallow	7	2.45
Majestic Bot Disallow	5	1.75
Semrush Bot Disallow	4	1.4
DuckDuckGo Bot Disallow	3	1.05
Microsoft BingBot Disallow	2	0.7
Yahoo Slurp Disallow	2	0.7
Microsoft MSNBot Disallow	2	0.7
Alexa Bot Disallow	1	0.35
Sogou Bot Disallow	1	0.35
Soso Bot Disallow	1	0.35
ByteDance Bytespider Disallow	1	0.35
Google Image Bot Disallow	1	0.35
Webz Omgili Disallow	1	0.35
Google News Bot Disallow	1	0.35
Google Video Bot Disallow	1	0.35
Google Favicon Disallow	1	0.35
Google API Bot Disallow	1	0.35
Google DuplexWeb Disallow	1	0.35

286 الاكتشافات

ل ملف الروبوتات.txt في جزر آلاند. آخر تحديث 12th جمادى الأولى 2024.

GPTBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.