ملف robots.txt توزيع الاستخدام في الجزر الصغيرة النائية بالولايات المتحدة

أعلى في ملف robots.txt توزيع الاستخدام في الجزر الصغيرة النائية بالولايات المتحدة

تكنولوجيا	المواقع الالكترونية	%
Robots Disallow	20	24.69
GPTBot Disallow	5	6.17
Common Crawl Bot Disallow	5	6.17
AppleBot Disallow	5	6.17
Anthropic Claude Bot Disallow	5	6.17
Google Bard Disallow	5	6.17
Facebook Bot Disallow	5	6.17
Cohere AI Disallow	5	6.17
Apple AI Bot Disallow	5	6.17
Perplexity	5	6.17
Google AdsBot Mobile Apps Disallow	5	6.17
Ahrefs Bot Disallow	3	3.7
Yandex Bot Disallow	2	2.47
Semrush Bot Disallow	2	2.47
Microsoft BingBot Disallow	1	1.23
Alexa Bot Disallow	1	1.23
Yahoo Slurp Disallow	1	1.23
Soso Bot Disallow	1	1.23

81 الكشف

ل ملف robots.txt في الجزر الصغيرة النائية بالولايات المتحدة. آخر تحديث 14th شعبان 2025.

Robots Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.