ملف robots.txt توزيع الاستخدام في مالي

أعلى في ملف robots.txt توزيع الاستخدام في مالي

تكنولوجيا	المواقع الالكترونية	%
Google Media Partners Disallow	146 *	17.8
Robots Disallow	89	10.85
Googlebot Disallow	60	7.32
Yandex Bot Disallow	57	6.95
Alexa Bot Disallow	54	6.59
Microsoft BingBot Disallow	51	6.22
Yahoo Slurp Disallow	51	6.22
Soso Bot Disallow	50	6.1
Google AdsBot Disallow	36	4.39
Baidu Bot Disallow	33	4.02
Sogou Bot Disallow	30	3.66
GPTBot Disallow	16	1.95
Some Robots Disallow	13	1.59
Common Crawl Bot Disallow	13	1.59
Anthropic Claude Bot Disallow	12	1.46
Google Bard Disallow	12	1.46
Ahrefs Bot Disallow	11	1.34
Facebook Bot Disallow	11	1.34
Perplexity	10	1.22
AppleBot Disallow	9	1.1
Cohere AI Disallow	9	1.1
Apple AI Bot Disallow	9	1.1
Semrush Bot Disallow	9	1.1
Majestic Bot Disallow	8	0.98
Google AdsBot Mobile Apps Disallow	7	0.85
ByteDance Bytespider Disallow	4	0.49
Webz Omgili Disallow	3	0.37
Diffbot Disallow	2	0.24
Exalead Bot Disallow	1	0.12
Microsoft MSNBot Disallow	1	0.12
Google Image Bot Disallow	1	0.12
YOU Disallow	1	0.12
Youdao Bot Disallow	1	0.12

820 الكشف

ل ملف robots.txt في مالي. آخر تحديث 23st شوال 2025.

Google Media Partners Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.