자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 [작업 완료] 설 명절 맞이 서버 업데이트 안내 3 마스터 마스터 24.02.11.17:21 917
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 4587
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 479
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 15388
2200 설날 이밴트 군요 11 핫슈 19.02.04.17:36 133
2199 부품 도착햇습니다! 12 핫슈 19.02.04.17:39 129
2198 설날이 좋긴 하네요 11 누리 19.02.04.18:34 146
2197 제 하드를 소개합니다. 14 image Kongjak Kongjak 19.02.04.19:29 101
2196 화려한 채광 스테이션(설날에 작업하는 전략 게임..?) 32 image BVC_Liper_Okbul BVC_Liper_Okbul 19.02.04.20:13 121
2195 전부쳤습니다 ㅋㅋ 10 image 국내산라이츄 국내산라이츄 19.02.04.20:27 104
2194 오랜만에 스트리밍 시작합니다. 2 image 제르엘 제르엘 19.02.04.21:08 150
2193 설 연휴에는 유머글 못 올리겠네요ㅠㅠ 17 NUBE title: 크롬NUBE 19.02.04.23:37 105
2192 복권을 합시다 27 image humit title: 황금 서버 (30일)humit 19.02.05.00:23 122
2191 어서 출첵하세요 13 누리 19.02.05.01:00 131
2190 흠.. XE에서 외부 SMTP를 이용해 메일을 보내는 방법이 없을까요? 10 YGL 19.02.05.03:24 115
2189 세뱃돈 7 Seba 19.02.05.06:56 94
2188 새 복 많이 받으새요 ^^ 10 핫슈 19.02.05.07:12 114
2187 복권 오랫만에 본전 이상이 나왔네요! 13 image 네모 네모 19.02.05.07:49 104
2186 새해 복 많이 받으세요~^^ 34 버터 title: 크롬버터 19.02.05.10:18 126
2185 새해 복 많이 받으세요 !!! 17 image 자뻑보이 자뻑보이 19.02.05.12:33 135
2184 익명이가 너무 기엽습니다! 7 image 네모 네모 19.02.05.14:14 1186
트래픽 검색봇들.. 8 유키시로 유키시로 19.02.05.14:34 128
2182 복권 -3000원 당첨되엇내요 33 핫슈 19.02.05.18:51 148
2181 설이라고 하도 먹어서 살 찔까 걱정했는데 3 NUBE title: 크롬NUBE 19.02.05.21:34 133

검색