ملف robots.txt توزيع الاستخدام في الكويت

أعلى في ملف robots.txt توزيع الاستخدام في الكويت

تكنولوجيا	المواقع الالكترونية	%
Google AdsBot Disallow	784	17.67
Googlebot Disallow	423	9.53
Ahrefs Bot Disallow	420	9.46
Google AdsBot Mobile Disallow	418	9.42
Robots Disallow	299	6.74
Common Crawl Bot Disallow	150	3.38
GPTBot Disallow	140	3.15
AppleBot Disallow	140	3.15
Google Bard Disallow	139	3.13
Anthropic Claude Bot Disallow	135	3.04
Facebook Bot Disallow	135	3.04
Perplexity	134	3.02
Apple AI Bot Disallow	132	2.97
Cohere AI Disallow	130	2.93
Google AdsBot Mobile Apps Disallow	129	2.91
Baidu Bot Disallow	111	2.5
Yandex Bot Disallow	82	1.85
Some Robots Disallow	79	1.78
Microsoft BingBot Disallow	68	1.53
Yahoo Slurp Disallow	65	1.46
Alexa Bot Disallow	64	1.44
Soso Bot Disallow	64	1.44
Majestic Bot Disallow	42	0.95
Semrush Bot Disallow	31	0.7
Google Media Partners Disallow	27 *	0.61
Exalead Bot Disallow	16	0.36
Microsoft MSNBot Disallow	14	0.32
Google Image Bot Disallow	14	0.32
360 Bot Disallow	11	0.25
BuiltWithBot Disallow	11	0.25
Webz Omgili Disallow	7	0.16
ByteDance Bytespider Disallow	6	0.14
DuckDuckGo Bot Disallow	6	0.14
Diffbot Disallow	3	0.07
Google News Bot Disallow	3	0.07
Google Video Bot Disallow	3	0.07
Google Favicon Disallow	1	0.02
Google API Bot Disallow	1	0.02
Google DuplexWeb Disallow	1	0.02

4,438 الكشف

ل ملف robots.txt في الكويت. آخر تحديث 23st شوال 2025.

Google AdsBot Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.