ملف الروبوتات.txt توزيع الاستخدام في كوت ديفوار

ليثبت ملف الروبوتات.txt توزيع الاستخدام في كوت ديفوار

تكنولوجيا	المواقع الإلكترونية	%
Robots Disallow	311	18.77
Googlebot Disallow	203	12.25
Baidu Bot Disallow	97	5.85
Sogou Bot Disallow	89	5.37
Ahrefs Bot Disallow	88	5.31
Yandex Bot Disallow	84	5.07
Soso Bot Disallow	71	4.28
Microsoft BingBot Disallow	66	3.98
Yahoo Slurp Disallow	65	3.92
Alexa Bot Disallow	64	20.78
Some Robots Disallow	53	3.2
Common Crawl Bot Disallow	49	15.91
GPTBot Disallow	38	12.34
Majestic Bot Disallow	33	1.99
Google AdsBot Mobile Apps Disallow	32	1.93
Semrush Bot Disallow	31	1.87
AppleBot Disallow	27	1.63
Google Bard Disallow	27	8.77
Anthropic Claude Bot Disallow	26	8.44
Facebook Bot Disallow	26	8.44
Apple AI Bot Disallow	26	8.44
Cohere AI Disallow	25	8.12
Perplexity	25	8.12
Exalead Bot Disallow	15	0.91
360 Bot Disallow	14	0.84
BuiltWithBot Disallow	13	0.78
Google Image Bot Disallow	9	0.54
Microsoft MSNBot Disallow	7	0.42
Google News Bot Disallow	7	0.42
Google Video Bot Disallow	7	0.42
DuckDuckGo Bot Disallow	7	0.42
Google Favicon Disallow	7	0.42
Google API Bot Disallow	7	0.42
Google DuplexWeb Disallow	7	0.42
Webz Omgili Disallow	1	0.32

1,657 الاكتشافات

ل ملف الروبوتات.txt في كوت ديفوار. آخر تحديث 04th رجب 2025.

Robots Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.