ملف robots.txt توزيع الاستخدام في روسيا

أعلى في ملف robots.txt توزيع الاستخدام في روسيا

تكنولوجيا	المواقع الالكترونية	%
Robots Disallow	750,988	23.32
Ahrefs Bot Disallow	381,202	11.84
Majestic Bot Disallow	374,835	11.64
Semrush Bot Disallow	303,777	9.43
Yandex Bot Disallow	229,154	7.11
Microsoft BingBot Disallow	229,065	7.11
Baidu Bot Disallow	227,893	7.08
AppleBot Disallow	209,141	6.49
Googlebot Disallow	126,295	3.92
Some Robots Disallow	87,246	2.71
Alexa Bot Disallow	71,202	19.21
Microsoft MSNBot Disallow	27,917	0.87
Sogou Bot Disallow	23,723	0.74
Yahoo Slurp Disallow	21,905	0.68
Common Crawl Bot Disallow	21,584	5.82
Soso Bot Disallow	19,869	0.62
GPTBot Disallow	16,679	4.5
Exalead Bot Disallow	13,307	0.41
Google AdsBot Disallow	10,251	0.32
Google Bard Disallow	9,304	2.51
Google AdsBot Mobile Disallow	9,127	0.28
Google Media Partners Disallow	8,836 *	0.27
Facebook Bot Disallow	7,775	2.1
Anthropic Claude Bot Disallow	7,248	1.96
Perplexity	6,114	1.65
Webz Omgili Disallow	4,704	1.27
Google Image Bot Disallow	4,182	0.13
360 Bot Disallow	3,773	0.12
ByteDance Bytespider Disallow	3,314	0.89
BuiltWithBot Disallow	3,067	0.1
Cohere AI Disallow	2,441	0.66
Apple AI Bot Disallow	957	0.26
Google AdsBot Mobile Apps Disallow	570	0.02
Diffbot Disallow	549	0.15
YOU Disallow	461	0.12
Google News Bot Disallow	457	0.01
Google Video Bot Disallow	379	0.01
DuckDuckGo Bot Disallow	354	0.01
Google API Bot Disallow	230	0.01
Google Favicon Disallow	226	0.01
Youdao Bot Disallow	222	0.01
Pipl Disallow	212	0.01
Google DuplexWeb Disallow	204	0.01
Google FeedFetcher Disallow	74	0
LLMS Text	23	0

3,220,836 الكشف

ل ملف robots.txt في روسيا. آخر تحديث 23st شوال 2025.

Robots Disallow هي حاليًا التكنولوجيا الأكثر شيوعًا في هذه الفئة.