ملف الروبوتات.txt توزيع الاستخدام في كوستا ريكا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في كوستا ريكا

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	3,073	14.68
Google AdsBot Mobile Disallow	2,516	12.02
Googlebot Disallow	1,939	9.26
GPTBot Disallow	1,054	13.28
Common Crawl Bot Disallow	1,012	12.75
Google AdsBot Mobile Apps Disallow	983	4.69
Anthropic Claude Bot Disallow	945	11.91
Google Bard Disallow	938	11.82
Facebook Bot Disallow	933	11.76
AppleBot Disallow	924	4.41
Cohere AI Disallow	920	11.59
Apple AI Bot Disallow	914	11.52
Perplexity	910	11.47
Ahrefs Bot Disallow	668	3.19
Robots Disallow	548	2.62
Baidu Bot Disallow	352	1.68
Google Media Partners Disallow	291 *	1.39
Some Robots Disallow	270	1.29
Yandex Bot Disallow	254	1.21
Yahoo Slurp Disallow	208	0.99
Alexa Bot Disallow	189	2.38
Microsoft BingBot Disallow	184	0.88
Sogou Bot Disallow	163	0.78
Soso Bot Disallow	155	0.74
Semrush Bot Disallow	135	0.64
Majestic Bot Disallow	115	0.55
Microsoft MSNBot Disallow	77	0.37
Exalead Bot Disallow	58	0.28
Google Image Bot Disallow	42	0.2
ByteDance Bytespider Disallow	30	0.38
Webz Omgili Disallow	23	0.29
Google News Bot Disallow	19	0.09
Google Video Bot Disallow	19	0.09
DuckDuckGo Bot Disallow	13	0.06
360 Bot Disallow	11	0.05
Google Favicon Disallow	11	0.05
Google API Bot Disallow	10	0.05
Google DuplexWeb Disallow	10	0.05
BuiltWithBot Disallow	7	0.03
Youdao Bot Disallow	6	0.03
Diffbot Disallow	5	0.06
Pipl Disallow	3	0.01
YOU Disallow	2	0.03

20,939 الاكتشافات

ل ملف الروبوتات.txt في كوستا ريكا. آخر تحديث 12th جمادى الأولى 2024.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.