로봇.txt 사용량 분포 ~에 아일랜드

다음을 사용하여 웹사이트에 배포 로봇.txt 기술

핀을 꼽는 로봇.txt 사용량 분포 ~에 아일랜드
기술 웹사이트 %
Google AdsBot Disallow 28,337 11.54
Google AdsBot Mobile Disallow 20,759 8.46
Googlebot Disallow 20,519 8.36
GPTBot Disallow 10,924 12.65
Common Crawl Bot Disallow 10,085 11.68
Google AdsBot Mobile Apps Disallow 9,844 4.01
Anthropic Claude Bot Disallow 9,390 10.88
Google Bard Disallow 9,376 10.86
Facebook Bot Disallow 9,326 10.8
Baidu Bot Disallow 9,285 3.78
AppleBot Disallow 9,226 3.76
Cohere AI Disallow 9,197 10.65
Yandex Bot Disallow 9,158 3.73
Apple AI Bot Disallow 9,144 10.59
Perplexity 9,073 10.51
Microsoft BingBot Disallow 8,939 3.64
Yahoo Slurp Disallow 8,844 3.6
Alexa Bot Disallow 8,828 10.23
Sogou Bot Disallow 8,689 3.54
Soso Bot Disallow 8,636 3.52
Ahrefs Bot Disallow 8,326 3.39
Robots Disallow 2,842 1.16
Some Robots Disallow 1,347 0.55
Majestic Bot Disallow 1,191 0.49
Semrush Bot Disallow 1,007 0.41
Microsoft MSNBot Disallow 478 0.19
Google Media Partners Disallow 468 * 0.19
Google Image Bot Disallow 380 0.15
Exalead Bot Disallow 373 0.15
ByteDance Bytespider Disallow 252 0.29
Webz Omgili Disallow 230 0.27
Google News Bot Disallow 173 0.07
360 Bot Disallow 172 0.07
Google Video Bot Disallow 165 0.07
BuiltWithBot Disallow 117 0.05
Google Favicon Disallow 84 0.03
Diffbot Disallow 83 0.1
DuckDuckGo Bot Disallow 65 0.03
Google API Bot Disallow 45 0.02
Google DuplexWeb Disallow 45 0.02
YOU Disallow 45 0.05
Youdao Bot Disallow 24 0.01
Pipl Disallow 18 0.01
Google FeedFetcher Disallow 2 0
Google Read Aloud Disallow 2 0

245,513 탐지

~의 로봇.txt ~에 아일랜드. 마지막 업데이트 14th 11 2024.

Google AdsBot Disallow Google AdsBot Disallow 현재 이 카테고리에서 가장 인기 있는 기술입니다.

맨 위 1m
트래픽 기준 상위 1,000,000개 사이트
870,756
맨 위 100k
트래픽 기준 상위 100,000개 사이트
155,828
맨 위 10k
트래픽 기준 상위 10,000개 사이트
22,443
전체 인터넷
181,836,258
캐나다
2,192,600
미국
51,449,962
독일
7,320,724
영국
4,745,675
러시아
4,021,848
호주
3,071,917
이탈리아
1,818,697
프랑스
1,318,355
브라질
1,228,331
.co
1,094,249
네덜란드
1,026,836
스페인
922,136
일본
903,337
인도
799,080
스위스
793,080
중국
606,587
NZ 뉴질랜드
482,853
PL 폴란드
476,756
BE 벨기에
460,967
SE 스웨덴
417,700
ME .me
375,089
AT 오스트리아
360,511
NO 노르웨이
323,209
MX 멕시코
307,633
CZ 체코 공화국
302,675
DK 덴마크
297,563
ZA 남아프리카
271,807
KR 대한민국
250,334
IE 아일랜드
245,513
TR 칠면조
231,135
RO 루마니아
228,510
IO .io
225,409
CC 코코스 제도
209,891
FI 핀란드
203,791
ID 인도네시아
200,001
PH 필리핀 제도
167,936
PT 포르투갈
149,268
SG 싱가포르
137,469
TW 대만
132,381
AR 아르헨티나
124,703
TH 태국
119,356
CL 칠레
114,862
HU 헝가리
106,300
TV .TV
105,858
HK 홍콩
105,657
GR 그리스
100,422
UA 우크라이나
100,040
VN 베트남
96,899
IL 이스라엘
85,999
AI 앵귈라
77,732
AE UAE
76,837
SK 슬로바키아
69,944
VG 영국령 버진아일랜드
67,532
MY 말레이시아
66,738
LU 룩셈부르크
57,720
SA 사우디 아라비아
43,868
PK 파키스탄
41,139
WS 사모아
40,723
IR 이란
38,238
LT 리투아니아
37,455
BG 불가리아
36,585
EE 에스토니아
34,795
IS 아이슬란드
33,150
LV 라트비아
33,037
PE 페루
32,677
CM 카메룬
32,440
SI 슬로베니아
30,243
HR 크로아티아
23,943
NU 니우에
21,927
PR 푸에르토 리코
21,377
CR 코스타리카
20,939
RS 세르비아
19,547
BY 벨라루스
18,806
EC 에콰도르
18,606
NG 나이지리아
17,240
KE 케냐
17,083
UY 우루과이
16,596
PW 팔라우
16,454
IM 맨 섬
16,357
KZ 카자흐스탄
13,862
LI 리히텐슈타인
13,644
DO 도미니카 공화국
13,613
RE 재결합
13,384
TO 통가
12,999
MT 몰타
12,664
GG 건지
11,762
BD 방글라데시
11,607
MA 모로코
11,592
GT 과테말라
11,097
EG 이집트
10,479
VC 세인트 빈센트 그레나딘
10,205
SH 세인트 헬레나
9,893
PA 파나마
8,943
LB 레바논
8,688
GE 그루지야
8,409
LK 스리랑카
8,351
CY 키프로스
8,015
VE 베네수엘라
7,761
AL 알바니아
7,590
QA 카타르
6,944
GH 가나
6,650
AM 아르메니아
6,510
UG 우간다
6,438
UZ 우즈베키스탄
6,336
SO 소말리아
6,201
BZ 벨리즈
6,105
TZ 탄자니아
5,979
KW 쿠웨이트
5,778
FM 미크로네시아
5,734
NP 네팔
5,435
JO 요르단
4,814
MK 마케도니아
4,630
HN 온두라스
4,518
MD 몰도바
4,453
CX 크리스마스 섬
4,128
PY 파라과이
3,924
MU 모리셔스
3,723
TN 튀니지
3,647
BS 바하마
3,367
SV 엘살바도르
3,266
BO 볼리비아
3,151
MC 모나코
3,116
AZ 아제르바이잔
3,111
BM 버뮤다
2,991
MN 몽골리아
2,936
BA 보스니아 헤르체고비나
2,902
NA 나미비아
2,891
AG 앤티가 바부다
2,824
VI 미국령 버진아일랜드
2,815
RW 르완다
2,713
BH 바레인
2,671
ZW 짐바브웨
2,609
OM 오만
2,542
KH 캄보디아
2,537
KY 케이맨 제도
2,499
DZ 알제리
2,492
TT 트리니다드 토바고
2,429
ST 상투메 프린시페
2,404
JE 저지
2,206
ZM 잠비아
2,185
NI 니카라과
2,094
GP 과들루프
2,081
AF 아프가니스탄
2,030
ET 에티오피아
1,999
SC 세이셸
1,957
JM 자메이카
1,845
MM 미얀마
1,729
IQ 이라크
1,662
FO 페로 제도
1,654
MZ 모잠비크
1,638
NC 뉴 칼레도니아
1,631
MV 몰디브
1,621
AD 안도라
1,574
MS 몬세라트
1,564
PM 생 피에르 앤 미클롱
1,540
CI 코트디부아르
1,537
AO 앙골라
1,511
YT 마요트
1,450
BB 바베이도스
1,439
FJ 피지
1,381
GI 지브롤터
1,361
CD 콩고
1,348
MQ 마르티니크
1,334
SX 신트마르턴
1,309
BW 보츠와나
1,307
LC 세인트 루시아
1,290
SN 세네갈
1,267
TC 터크스 케이커스 제도
1,263
KG 키르기스스탄
1,251
GL 그린란드
1,226
AS 아메리칸사모아
1,187
MG 마다가스카르
1,055
HT 아이티
939
AW 아루바
933
ML 말리
917
PS 팔레스타인
916
GY 가이아나
770
GD 그레나다
762
GF 프랑스령 기아나
753
VU 바누아투
687
GS 사우스조지아 사우스샌드위치 제도
658
MW 말라위
653
BF 부키 나 파소
639
TG 토고
628
WF 월리스푸투나
588
GM 감비아
556
TJ 타지키스탄
543
CU 쿠바
524
PG 파푸아 뉴기니
496
GU
462
SL 시에라리온
404
BJ 베냉
392
DJ 지부티
386
BN 브루나이
370
TL 동 티모르
367
SR 수리남
361
SB 솔로몬 제도
310
YE 예멘
287
AX 올란드 제도
286
LR 라이베리아
286
LA 라오스 인민민주공화국
282
PF 프랑스 령 폴리네시아의
281
SD 수단
272
HM 허드섬과 맥도날드 제도
248
NE 니제르
244
SM 산 마리노
239
BI 부룬디
228
CK 쿡 제도
225
BT 부탄
212
SY 시리아
199
SZ 스와질란드
193
LY 리비아
191
CW 퀴라소
190
MP 북마리아나 제도
175
KN 세인트키츠네비스
172
GA 가봉
158
TM 투르크메니스탄
158
LS 레소토
154
DM 도미니카
150
MR 모리타니
139
MO 마카오
134
UM 미국령 군소 제도
105
SJ 스발바르와 얀마옌
98
CV 카보 베르데
83
NF 노퍽 섬
79
CG 콩고
72
GN 기니
67
KI 키리바시
64
TD 차드
64
MH 마샬 군도
58
SS 남 수단
55
BL 생 바르텔레미
50
GW 기니비사우
49
FK 포클랜드 제도
45
VA 바티칸 시국
43
PN 핏케언
34
NR 나우루
30
BQ 보네르
20
AQ 남극 대륙
16
ER 에리트레아
16
GQ 적도기니
13
카테고리