ملف الروبوتات.txt توزيع الاستخدام في القديسة لوسيا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في القديسة لوسيا

تكنولوجيا	المواقع الإلكترونية	%
Googlebot Disallow	123	9.53
Baidu Bot Disallow	113	8.76
Yandex Bot Disallow	98	7.6
Alexa Bot Disallow	97	34.52
Yahoo Slurp Disallow	96	7.44
Microsoft BingBot Disallow	94	7.29
Sogou Bot Disallow	93	7.21
Soso Bot Disallow	93	7.21
Ahrefs Bot Disallow	86	6.67
Robots Disallow	78	6.05
Some Robots Disallow	39	3.02
Google Media Partners Disallow	32 *	2.48
GPTBot Disallow	27	9.61
Common Crawl Bot Disallow	21	7.47
Anthropic Claude Bot Disallow	21	7.47
Google Bard Disallow	21	7.47
Facebook Bot Disallow	21	7.47
Google AdsBot Mobile Apps Disallow	21	1.63
Cohere AI Disallow	21	7.47
AppleBot Disallow	20	1.55
Apple AI Bot Disallow	20	7.12
Perplexity	19	6.76
Majestic Bot Disallow	6	0.47
Semrush Bot Disallow	6	0.47
Microsoft MSNBot Disallow	4	0.31
ByteDance Bytespider Disallow	3	1.07
Google Image Bot Disallow	3	0.23
Diffbot Disallow	2	0.71
Pipl Disallow	2	0.16
Exalead Bot Disallow	1	0.08
Webz Omgili Disallow	1	0.36
Google News Bot Disallow	1	0.08
Google Video Bot Disallow	1	0.08
DuckDuckGo Bot Disallow	1	0.08
Google Favicon Disallow	1	0.08
Youdao Bot Disallow	1	0.08
Google API Bot Disallow	1	0.08
Google DuplexWeb Disallow	1	0.08
YOU Disallow	1	0.36

1,290 الاكتشافات

ل ملف الروبوتات.txt في القديسة لوسيا. آخر تحديث 12th جمادى الأولى 2024.

Googlebot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.