자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 마스터 6일 전16:25 216
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 7279
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 2055
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 16632
2229 노트북이 죽은 것 같습니다. 11 국내산라이츄 국내산라이츄 21.04.09.03:20 145
2228 스포어 호스팅 관련 질문 3 OAUTH2 20.09.01.17:04 145
2227 늦었지만 설 인사 드립니다. ^^ 12 루디프리아 루디프리아 20.01.28.09:56 145
2226 회사에 일이 들어올지도 모르겠습니다. 갱생협스 갱생협스 20.01.15.09:58 145
2225 너무 심심해서 그림을 그렸습니다. (3) 2 image BVC_Liper_Okbul BVC_Liper_Okbul 20.01.11.21:47 145
2224 생존중 5 Nginx Nginx 19.12.26.20:36 145
2223 왜 올때마다 어느 한게임에 미쳐있는 걸까요 저는... 9 BVC_Liper_Okbul BVC_Liper_Okbul 19.11.05.23:35 145
2222 랜심웨어 조심합시다! 4 핫슈 19.11.03.18:25 145
2221 안녕하세요 3 OAUTH2 19.07.19.16:06 145
2220 곰룜이 만들어야겠습니다. 2 BVC_Liper_Okbul BVC_Liper_Okbul 18.12.25.18:29 145
2219 어벤져스 4 예고 떴습니다 7 Kongjak Kongjak 18.12.07.23:15 145
2218 콘서트 가보신 분 있으신가요? 2 260578 260578 18.12.05.00:02 145
2217 일단 현재 멀티 플레이 게임 상황 5 BVC_Liper_Okbul BVC_Liper_Okbul 18.12.04.23:56 145
2216 네신 사용후기 대박 8 image title: 대한민국 국기gimmepoint 18.11.25.20:16 145
2215 오늘자 TV는 사랑을 싣고는 참 안타까웠습니다. 3 국내산라이츄 국내산라이츄 18.11.17.00:16 145
2214 오늘 복권 2등 2번 당첨되었습니다. 5 image humit title: 황금 서버 (30일)humit 18.11.05.18:25 145
2213 gimmepoint님 게시글 보고 복권을 뽑았더니... 7 image 네모 네모 18.11.03.00:06 145
2212 마스터님 3 OAUTH2 18.10.11.06:59 145
2211 [OOO]가 [OOO] 하다 12 마카롱 마카롱 18.09.13.13:33 145
2210 지형 개편 상태입니다. 6 image BVC_Liper_Okbul BVC_Liper_Okbul 18.09.12.22:31 145

검색