자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 마스터 24.09.05.16:25 281
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 7322
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 2119
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 16686
4371 복권의 폐해 ㅠㅠㅠㅠㅠ (최근 5일 간 현황 캡쳐) 16 image 이니스프리 이니스프리 16.12.13.18:39 209
4370 자칭 서민의 일등석 체험기 제2탄 [펌] 4 이니스프리 이니스프리 16.12.05.18:01 209
4369 인간의 욕심은 끝이 없고... 6 image Femiz 16.10.13.22:11 209
4368 이번 추석..잘보내시기 바랍니다! 6 image 에듀 title: 맛스타의 자물쇠에듀 16.09.13.21:13 209
4367 전국민의 수강신청 humit title: 황금 서버 (30일)humit 16.08.17.22:26 209
4366 PHP8 JIT 빠르기는 꽤 빠르네요 3 네모 네모 20.12.24.00:17 208
4365 페이지가 상당히 느려졌네요. 8 슬기 슬기 20.05.05.14:29 208
4364 1년을 이어온 출석이 끊겼습니다. 14 제르엘 제르엘 19.11.02.00:18 208
4363 이건 더위가 아닙니다. 22 image 제르엘 제르엘 18.08.01.13:08 208
4362 지름신이 왓어요 조만간 리뷰 올립니다 ^^ 14 image 핫슈 18.05.02.14:27 208
4361 괜히 xe를 영구 제거 햇습니다 ㅜㅜ 6 핫슈 18.04.06.09:38 208
4360 이 전화 스팸각인가요? 8 국내산라이츄 국내산라이츄 18.02.13.03:05 208
4359 실수로 출석 버튼이 보였는데 (출석하세요)를 다시 눌렀습니다 6 Seia Seia 17.12.06.00:00 208
4358 인형가게에 가 보았습니다. 3 image 라엘 라엘 17.11.22.19:59 208
4357 어제 잠실 댕겨왔습니다. 9 image 국내산라이츄 국내산라이츄 17.11.12.21:44 208
4356 음감 테스트 진행 불가... 2 image 마카롱 마카롱 17.11.07.01:32 208
4355 제발 알림을 받을 수 있는 메일로 설정 부탁드립니다. 7 마스터 마스터 17.11.03.16:14 208
4354 뉴 서피스 프로에 관한 이야기(+잡담) 6 준그루 17.10.14.22:39 208
4353 FTP도입후... 6 기특한크리퍼 17.10.10.19:37 208
4352 내일만 나가면 대망의 추석입니다. 12 image 국내산라이츄 국내산라이츄 17.09.28.16:49 208

검색