ملف الروبوتات.txt توزيع الاستخدام في جورجيا الجنوبية وجزر ساندويتش الجنوبية

ليثبت ملف الروبوتات.txt توزيع الاستخدام في جورجيا الجنوبية وجزر ساندويتش الجنوبية

تكنولوجيا	المواقع الإلكترونية	%
Robots Disallow	125	19
Some Robots Disallow	71	10.79
Alexa Bot Disallow	42	21.76
Microsoft BingBot Disallow	40	6.08
Yahoo Slurp Disallow	38	5.78
Yandex Bot Disallow	37	5.62
Sogou Bot Disallow	35	5.32
Soso Bot Disallow	35	5.32
Anthropic Claude Bot Disallow	19	9.84
GPTBot Disallow	17	8.81
Common Crawl Bot Disallow	17	8.81
AppleBot Disallow	17	2.58
Facebook Bot Disallow	16	8.29
Apple AI Bot Disallow	16	8.29
Ahrefs Bot Disallow	14	2.13
Google Bard Disallow	14	7.25
Majestic Bot Disallow	11	1.67
Semrush Bot Disallow	11	1.67
Google AdsBot Mobile Apps Disallow	10	1.52
Cohere AI Disallow	10	5.18
Webz Omgili Disallow	10	5.18
Perplexity	9	4.66
Microsoft MSNBot Disallow	9	1.37
ByteDance Bytespider Disallow	7	3.63
Google Image Bot Disallow	5	0.76
Diffbot Disallow	4	2.07
Google News Bot Disallow	3	0.46
Google Video Bot Disallow	3	0.46
Google Favicon Disallow	3	0.46
Exalead Bot Disallow	2	0.3
DuckDuckGo Bot Disallow	2	0.3
Youdao Bot Disallow	2	0.3
Google API Bot Disallow	2	0.3
Google DuplexWeb Disallow	2	0.3

658 الاكتشافات

ل ملف الروبوتات.txt في جورجيا الجنوبية وجزر ساندويتش الجنوبية. آخر تحديث 12th جمادى الأولى 2024.

Robots Disallow حاليًا هي التقنية الأكثر شيوعًا في هذه الفئة.