ملف robots.txt توزيع الاستخدام في الرأس الأخضر

أعلى في ملف robots.txt توزيع الاستخدام في الرأس الأخضر

تكنولوجيا	المواقع الالكترونية	%
Robots Disallow	17	39.53
Alexa Bot Disallow	4	33.33
Ahrefs Bot Disallow	3	6.98
Yahoo Slurp Disallow	2	4.65
Google Image Bot Disallow	2	4.65
Microsoft BingBot Disallow	1	2.33
GPTBot Disallow	1	8.33
Common Crawl Bot Disallow	1	8.33
AppleBot Disallow	1	2.33
Anthropic Claude Bot Disallow	1	8.33
Google Bard Disallow	1	8.33
Facebook Bot Disallow	1	8.33
Cohere AI Disallow	1	8.33
Apple AI Bot Disallow	1	8.33
Perplexity	1	8.33
Google AdsBot Mobile Apps Disallow	1	2.33
Majestic Bot Disallow	1	2.33
Semrush Bot Disallow	1	2.33
Microsoft MSNBot Disallow	1	2.33
DuckDuckGo Bot Disallow	1	2.33

43 الكشف

ل ملف robots.txt في الرأس الأخضر. آخر تحديث 23st شوال 2025.

Robots Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.