ملف الروبوتات.txt توزيع الاستخدام في ماليزيا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في ماليزيا

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	13,806	20.69
Googlebot Disallow	11,638	17.44
Google AdsBot Mobile Disallow	9,073	13.59
Robots Disallow	4,074	6.1
Ahrefs Bot Disallow	3,945	5.91
Baidu Bot Disallow	1,840	2.76
Google Image Bot Disallow	1,547	2.32
Some Robots Disallow	1,480	2.22
GPTBot Disallow	1,239	1.86
Anthropic Claude Bot Disallow	1,175	1.76
Alexa Bot Disallow	1,157	1.73
Common Crawl Bot Disallow	1,124	1.68
Yandex Bot Disallow	1,107	1.66
Microsoft BingBot Disallow	1,068	1.6
Google AdsBot Mobile Apps Disallow	1,019	1.53
Google Bard Disallow	996	1.49
AppleBot Disallow	981	1.47
Facebook Bot Disallow	977	1.46
Yahoo Slurp Disallow	974	1.46
Apple AI Bot Disallow	947	1.42
Perplexity	931	1.4
Majestic Bot Disallow	930	1.39
Cohere AI Disallow	927	1.39
Sogou Bot Disallow	875	1.31
Soso Bot Disallow	846	1.27
Semrush Bot Disallow	714	1.07
Google Media Partners Disallow	388 *	0.58
Microsoft MSNBot Disallow	220	0.33
Exalead Bot Disallow	206	0.31
ByteDance Bytespider Disallow	84	0.13
Webz Omgili Disallow	68	0.1
Google News Bot Disallow	57	0.09
Google Video Bot Disallow	54	0.08
Youdao Bot Disallow	47	0.07
DuckDuckGo Bot Disallow	39	0.06
360 Bot Disallow	36	0.05
Google Favicon Disallow	35	0.05
Google API Bot Disallow	31	0.05
Google DuplexWeb Disallow	30	0.04
BuiltWithBot Disallow	19	0.03
Diffbot Disallow	19	0.03
Pipl Disallow	8	0.01
YOU Disallow	7	0.01

66,738 الاكتشافات

ل ملف الروبوتات.txt في ماليزيا. آخر تحديث 12th جمادى الأولى 2024.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.