ملف الروبوتات.txt توزيع الاستخدام في سيريلانكا

ليثبت ملف الروبوتات.txt توزيع الاستخدام في سيريلانكا

تكنولوجيا	المواقع الإلكترونية	%
Google AdsBot Disallow	1,169	14
Googlebot Disallow	1,075	12.87
Robots Disallow	948	11.35
Google AdsBot Mobile Disallow	765	9.16
Ahrefs Bot Disallow	503	6.02
Baidu Bot Disallow	320	3.83
Some Robots Disallow	266	3.19
Yandex Bot Disallow	237	2.84
Google Media Partners Disallow	210 *	2.51
Alexa Bot Disallow	208	2.49
GPTBot Disallow	198	2.37
Microsoft BingBot Disallow	187	2.24
Yahoo Slurp Disallow	182	2.18
Common Crawl Bot Disallow	178	2.13
Sogou Bot Disallow	175	2.1
Google AdsBot Mobile Apps Disallow	171	2.05
Soso Bot Disallow	167	2
Google Bard Disallow	159	1.9
Anthropic Claude Bot Disallow	155	1.86
AppleBot Disallow	153	1.83
Facebook Bot Disallow	153	1.83
Apple AI Bot Disallow	147	1.76
Cohere AI Disallow	147	1.76
Perplexity	143	1.71
Semrush Bot Disallow	106	1.27
Majestic Bot Disallow	94	1.13
Google Image Bot Disallow	40	0.48
Microsoft MSNBot Disallow	24	0.29
Exalead Bot Disallow	13	0.16
Google News Bot Disallow	7	0.08
Google Video Bot Disallow	7	0.08
DuckDuckGo Bot Disallow	7	0.08
Webz Omgili Disallow	6	0.07
ByteDance Bytespider Disallow	5	0.06
Google Favicon Disallow	5	0.06
Youdao Bot Disallow	5	0.06
Google API Bot Disallow	5	0.06
Google DuplexWeb Disallow	5	0.06
360 Bot Disallow	4	0.05
BuiltWithBot Disallow	2	0.02

8,351 الاكتشافات

ل ملف الروبوتات.txt في سيريلانكا. آخر تحديث 12th جمادى الأولى 2024.

Google AdsBot Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.