ملف الروبوتات.txt توزيع الاستخدام في بيرو

ليثبت ملف الروبوتات.txt توزيع الاستخدام في بيرو

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	5,436	16.64
Googlebot Disallow	3,871	11.85
Ahrefs Bot Disallow	3,620	11.08
Robots Disallow	2,478	7.58
Google AdsBot Mobile Disallow	2,172	6.65
Google Media Partners Disallow	1,793 *	5.49
Baidu Bot Disallow	1,266	3.87
Yandex Bot Disallow	837	2.56
Microsoft BingBot Disallow	767	2.35
Yahoo Slurp Disallow	742	2.27
Some Robots Disallow	732	2.24
Alexa Bot Disallow	699	12.99
GPTBot Disallow	699	12.99
Sogou Bot Disallow	671	2.05
Common Crawl Bot Disallow	639	11.88
Soso Bot Disallow	636	1.95
Google Bard Disallow	559	10.39
Anthropic Claude Bot Disallow	541	10.06
Google AdsBot Mobile Apps Disallow	530	1.62
AppleBot Disallow	528	1.62
Facebook Bot Disallow	520	9.67
Apple AI Bot Disallow	501	9.31
Cohere AI Disallow	488	9.07
Perplexity	488	9.07
Semrush Bot Disallow	379	1.16
Majestic Bot Disallow	342	1.05
Microsoft MSNBot Disallow	166	0.51
Google Image Bot Disallow	133	0.41
Exalead Bot Disallow	91	0.28
ByteDance Bytespider Disallow	66	1.23
Webz Omgili Disallow	45	0.84
360 Bot Disallow	44	0.13
Google News Bot Disallow	34	0.1
Google Video Bot Disallow	34	0.1
Youdao Bot Disallow	34	0.1
BuiltWithBot Disallow	26	0.08
DuckDuckGo Bot Disallow	13	0.04
Diffbot Disallow	12	0.22
Google Favicon Disallow	11	0.03
YOU Disallow	9	0.17
Google API Bot Disallow	8	0.02
Google DuplexWeb Disallow	8	0.02
Pipl Disallow	6	0.02
Google FeedFetcher Disallow	3	0.01

32,677 الاكتشافات

ل ملف الروبوتات.txt في بيرو. آخر تحديث 12th جمادى الأولى 2024.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.