자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 마스터 24.09.05.16:25 971
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 7766
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 2372
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 16925
2232 으앙 졸려듀금 9 국내산라이츄 국내산라이츄 18.07.10.08:08 148
2231 어떤 스트리머의 근황 7 image title: 대한민국 국기gimmepoint 18.06.28.18:25 148
2230 망했습니다. 11 제르엘 제르엘 18.06.12.12:00 148
2229 갑자기 삘받아서 만든 프로그램인데...! 11 image 네모 네모 18.06.03.15:45 148
2228 모니터 문제가 선 때문이였다니... 3 title: 은메달도다 18.05.25.23:46 148
2227 새벽 1시 30분되면 컴퓨터 마무리작업 해야갯습니다. 6 핫슈 18.05.14.20:08 148
2226 내일 친구네 놀러갑니다. 헤헿 3 국내산라이츄 국내산라이츄 18.05.11.23:06 148
2225 오늘 생일이라... (시즌 2) 6 image 국내산라이츄 국내산라이츄 18.03.29.01:59 148
2224 스포어 유입 경로 2 맛수타 17.06.19.07:00 148
2223 아.. 사이트 등록을 해야 호스팅을 사용할 수 있나요.. 2 LuisK 17.06.16.12:35 148
2222 오호. 벌써 레벨 25입니다. 5 NoYeah NoYeah 17.05.26.00:01 148
2221 왜 제다 전쟁뉴스인가요? 핫슈 17.04.10.21:11 148
2220 에듀 님께 ^^ 1 이니스프리 이니스프리 17.01.07.11:58 148
2219 어느덧 10만원으로 ~ 5 image 대전댁 title: 은메달대전댁 17.01.01.23:44 148
2218 오늘 필자의 생일입니다 ^^ 13 핫슈 16.12.18.07:51 148
2217 비오네오. 4 title: 네오웨이브네오웨이브 16.11.18.20:12 148
2216 [Packtpub] Object-Oriented Programming with PHP5 1 humit title: 황금 서버 (30일)humit 16.11.17.13:08 148
2215 심슨 작가가 예견한 것들 4 image BlackTeddyBear 16.11.12.16:39 148
2214 20렙은 경험치 얼마나 필요한가요? 7 derCSyong derCSyong 16.10.19.22:39 148
2213 호스팅 방식 바뀌고 좀 걱정인게... 5 derCSyong derCSyong 16.10.18.16:41 148

검색