ロボット.txt 使用量の分布 で キュラソー

トップイン ロボット.txt 使用量の分布 で キュラソー

テクノロジー	ウェブサイト	%
GPTBot Disallow	16	8.42
Common Crawl Bot Disallow	16	8.42
AppleBot Disallow	16	8.42
Google AdsBot Mobile Apps Disallow	16	8.42
Robots Disallow	15	7.89
Anthropic Claude Bot Disallow	15	7.89
Google Bard Disallow	15	7.89
Facebook Bot Disallow	15	7.89
Apple AI Bot Disallow	15	7.89
Cohere AI Disallow	15	7.89
Perplexity	15	7.89
Microsoft BingBot Disallow	6	3.16
Majestic Bot Disallow	4	2.11
Ahrefs Bot Disallow	3	1.58
Semrush Bot Disallow	3	1.58
Microsoft MSNBot Disallow	2	1.05
Yandex Bot Disallow	1	0.53
Yahoo Slurp Disallow	1	0.53
Google Image Bot Disallow	1	0.53

190 検出

の ロボット.txt で キュラソー. 最終更新 01st 11 2024.

GPTBot Disallow 現在、このカテゴリで最も人気のあるテクノロジーです。