ロボット.txt 使用量の分布 で ミャンマー

トップイン ロボット.txt 使用量の分布 で ミャンマー

テクノロジー	ウェブサイト	%
Google AdsBot Disallow	213	14.2
Googlebot Disallow	184	12.27
Robots Disallow	159	10.6
Ahrefs Bot Disallow	70	4.67
Baidu Bot Disallow	63	4.2
GPTBot Disallow	63	4.2
Google AdsBot Mobile Apps Disallow	58	3.87
Common Crawl Bot Disallow	53	3.53
Some Robots Disallow	46	3.07
Anthropic Claude Bot Disallow	42	2.8
Google Bard Disallow	42	2.8
Facebook Bot Disallow	42	2.8
Yandex Bot Disallow	41	2.73
AppleBot Disallow	41	2.73
Cohere AI Disallow	39	2.6
Microsoft BingBot Disallow	37	2.47
Google Media Partners Disallow	32 *	2.13
Majestic Bot Disallow	32	2.13
Apple AI Bot Disallow	32	2.13
Yahoo Slurp Disallow	31	2.07
Perplexity	31	2.07
Sogou Bot Disallow	30	2
Semrush Bot Disallow	29	1.93
Alexa Bot Disallow	26	1.73
Soso Bot Disallow	25	1.67
360 Bot Disallow	6	0.4
ByteDance Bytespider Disallow	6	0.4
Microsoft MSNBot Disallow	5	0.33
Exalead Bot Disallow	5	0.33
DuckDuckGo Bot Disallow	5	0.33
Google Image Bot Disallow	3	0.2
Webz Omgili Disallow	3	0.2
BuiltWithBot Disallow	2	0.13
Google News Bot Disallow	1	0.07
Google Video Bot Disallow	1	0.07
Youdao Bot Disallow	1	0.07
Diffbot Disallow	1	0.07

1,500 検出

の ロボット.txt で ミャンマー. 最終更新 11th 9 2024.

Google AdsBot Disallow 現在、このカテゴリで最も人気のあるテクノロジーです。