ملف الروبوتات.txt توزيع الاستخدام في جزر فيرجن البريطانية

ليثبت ملف الروبوتات.txt توزيع الاستخدام في جزر فيرجن البريطانية

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	8,819	13.06
Baidu Bot Disallow	8,807	13.04
Some Robots Disallow	8,741	12.94
Yandex Bot Disallow	8,136	12.05
Microsoft BingBot Disallow	8,133	12.04
Yahoo Slurp Disallow	8,132	12.04
Sogou Bot Disallow	8,131	12.04
Soso Bot Disallow	8,131	12.04
Alexa Bot Disallow	126	36.42
Robots Disallow	65	0.1
GPTBot Disallow	32	9.25
Google Bard Disallow	27	7.8
Common Crawl Bot Disallow	26	7.51
AppleBot Disallow	26	0.04
Anthropic Claude Bot Disallow	26	7.51
Facebook Bot Disallow	26	7.51
Apple AI Bot Disallow	26	7.51
Google AdsBot Mobile Apps Disallow	24	0.04
Cohere AI Disallow	23	6.65
Perplexity	22	6.36
Majestic Bot Disallow	12	0.02
Semrush Bot Disallow	10	0.01
Ahrefs Bot Disallow	9	0.01
Webz Omgili Disallow	4	1.16
Google Image Bot Disallow	3	0
ByteDance Bytespider Disallow	2	0.58
Exalead Bot Disallow	2	0
Microsoft MSNBot Disallow	2	0
Diffbot Disallow	2	0.58
Google News Bot Disallow	1	0
Google Video Bot Disallow	1	0
DuckDuckGo Bot Disallow	1	0
Google Favicon Disallow	1	0
Google API Bot Disallow	1	0
Google DuplexWeb Disallow	1	0
Pipl Disallow	1	0

67,532 الاكتشافات

ل ملف الروبوتات.txt في جزر فيرجن البريطانية. آخر تحديث 12th جمادى الأولى 2024.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.