자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 마스터 24.09.05.16:25 265
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 7309
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 2091
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 16658
1870 핫핫 계란찜이라능 14 image 국내산라이츄 국내산라이츄 18.08.31.21:08 137
1869 걘역시 공책 6 모서리 스삿 어떻게 떠요? 5 국내산라이츄 국내산라이츄 18.08.29.21:20 137
1868 컴활... 며칠째지...? 3 국내산라이츄 국내산라이츄 18.08.21.10:08 137
1867 캠프 마지막날! 과제 다 끝내고 모델링하고 있습니다! 7 image BVC_Liper_Okbul BVC_Liper_Okbul 18.07.20.04:25 137
1866 드디어 선거 종료! 의원님들 고생하셧습니다! 4 핫슈 18.06.14.15:57 137
1865 천국에서도 잘 지내야해... 12 망할윈도우미 망할윈도우미 18.05.08.17:23 137
1864 생일이닷! 8 망할윈도우미 망할윈도우미 18.03.01.19:08 137
1863 동네사람들 이거봐요 2 image 국내산라이츄 국내산라이츄 18.01.05.23:17 137
1862 pc방 야간 하면서 손님들 영상통화 자제 해야댈가요? 2 핫슈 17.09.22.00:47 137
1861 이번 아이폰 어떠신가요? 12 death death 17.09.18.18:00 137
1860 오- 이런 곳이 있었네요 3 D-Park 17.07.08.16:11 137
1859 에일리언 : 커버넌트 보고 왔습니다. 1 title: 네오웨이브네오웨이브 17.05.09.23:38 137
1858 바쁘다보니 .. 3 대전댁 title: 은메달대전댁 17.03.11.22:36 137
1857 허허.... 3 Ciel Ciel 17.03.09.22:46 137
1856 ???:회원 여러분! 9 image 에듀 title: 맛스타의 자물쇠에듀 17.02.25.01:21 137
1855 어떤출석부 개발자 팀 블로그를 발견하여 글을 씁니다. 참고 URL 들.. 5 Seia Seia 17.02.11.13:43 137
1854 롯데리아 클래식 치즈버거 다시 주문했습니다 ^^; (사진첨부) 8 file 이니스프리 이니스프리 17.01.22.01:31 137
1853 이번에 새로 들어온다던 서버에서 쓰는 호스팅 패널 사양이... 5 title: 은메달도다 16.12.18.10:42 137
1852 1년 개근.... 포인트는?? 5 image kgoon 22.08.16.17:37 136
1851 안녕하세요 : ) 오늘 처음 가입했는데, 흥미로운 자료들이 많네요! 11 iwantheal iwantheal 20.12.20.11:03 136

검색