ملف الروبوتات.txt توزيع الاستخدام في سان مارينو

ليثبت ملف الروبوتات.txt توزيع الاستخدام في سان مارينو

تكنولوجيا	المواقع الإلكترونية	%
Robots Disallow	39	16.81
Googlebot Disallow	29	12.5
Ahrefs Bot Disallow	21	9.05
Semrush Bot Disallow	14	6.03
Anthropic Claude Bot Disallow	11	4.74
Baidu Bot Disallow	10	4.31
Yandex Bot Disallow	9	3.88
GPTBot Disallow	8	3.45
AppleBot Disallow	8	3.45
Common Crawl Bot Disallow	7	3.02
Google Bard Disallow	7	3.02
Facebook Bot Disallow	7	3.02
Apple AI Bot Disallow	7	3.02
Majestic Bot Disallow	7	3.02
Some Robots Disallow	6	2.59
Cohere AI Disallow	6	2.59
Perplexity	6	2.59
Google AdsBot Mobile Apps Disallow	6	2.59
Microsoft BingBot Disallow	5	2.16
Alexa Bot Disallow	5	2.16
Yahoo Slurp Disallow	4	1.72
Soso Bot Disallow	4	1.72
ByteDance Bytespider Disallow	2	0.86
Microsoft MSNBot Disallow	2	0.86
Exalead Bot Disallow	1	0.43
Webz Omgili Disallow	1	0.43

232 الاكتشافات

ل ملف الروبوتات.txt في سان مارينو. آخر تحديث 04th رجب 2025.

Robots Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.