ملف الروبوتات.txt توزيع الاستخدام في فانواتو

ليثبت ملف الروبوتات.txt توزيع الاستخدام في فانواتو

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	71	9.74
Google AdsBot Mobile Disallow	65	8.92
Googlebot Disallow	60	8.23
Robots Disallow	51	7
Google Media Partners Disallow	32 *	4.39
GPTBot Disallow	30	4.12
Common Crawl Bot Disallow	29	3.98
AppleBot Disallow	29	3.98
Anthropic Claude Bot Disallow	29	3.98
Google Bard Disallow	29	3.98
Facebook Bot Disallow	29	3.98
Apple AI Bot Disallow	28	3.84
Perplexity	27	3.7
Cohere AI Disallow	25	3.43
Baidu Bot Disallow	22	3.02
Google AdsBot Mobile Apps Disallow	22	3.02
Microsoft BingBot Disallow	17	2.33
Sogou Bot Disallow	16	2.19
Yandex Bot Disallow	16	2.19
Alexa Bot Disallow	15	2.06
Yahoo Slurp Disallow	15	2.06
Soso Bot Disallow	15	2.06
Some Robots Disallow	12	1.65
Ahrefs Bot Disallow	12	1.65
Semrush Bot Disallow	7	0.96
ByteDance Bytespider Disallow	7	0.96
Webz Omgili Disallow	7	0.96
Majestic Bot Disallow	4	0.55
Diffbot Disallow	2	0.27
Exalead Bot Disallow	1	0.14
Microsoft MSNBot Disallow	1	0.14
360 Bot Disallow	1	0.14
Google Image Bot Disallow	1	0.14
BuiltWithBot Disallow	1	0.14
YOU Disallow	1	0.14

729 الاكتشافات

ل ملف الروبوتات.txt في فانواتو. آخر تحديث 04th رجب 2025.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.