자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 마스터 6일 전16:25 232
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 7291
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 2059
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 16639
1890 문득 고전게임이 생각나네요.. 11 여우나라 title: Fox여우나라 17.11.03.10:17 221
1889 오늘도 스포어 출첵은 정말로 아슬아슬합니다. 9 image Seia Seia 17.11.08.00:02 221
1888 스크래치 게임 만들기 전에 만들어봤어요. 4 제르엘 제르엘 18.02.12.22:19 221
1887 신라인터넷면세점 신규가입하면 이런 혜택이 있네요 홓 2 image αGO 18.02.22.03:11 221
1886 독감입니다ㅠ 18 네모 네모 19.01.12.22:55 221
1885 저만 제 도메인 사이트에서 503이 뜨나요...? 10 image 혜임 19.06.19.22:03 221
1884 집근처에 대학교가있으면 안좋은점 3 슬기 슬기 24.05.24.21:45 221
1883 이번이 최종정착이길 빕니다 11 title: 금메달 (30일)동방개념지국 16.07.12.21:56 222
1882 랭킹의 넘사벽 2 하루살이 title: 황금 서버 (30일)하루살이 16.07.15.18:27 222
1881 뜬금없는 미드 추천!! Westworld 웨스트월드 4 image Femiz 16.10.06.20:50 222
1880 죄송합니다. 7 image TVJ title: 열려라 맛스타의 자물쇠TVJ 17.03.12.23:21 222
1879 에듀님 부계정설? 5 맛수타 17.07.11.19:59 222
1878 일단 호스팅 신청했습니다. 3 국내산라이츄 국내산라이츄 17.08.01.23:58 222
1877 대단한분들 많네요 흑흑 11 모니터 모니터 17.08.22.13:22 222
1876 혹시 보신분..? 7 image TVJ title: 열려라 맛스타의 자물쇠TVJ 17.09.29.15:56 222
1875 스포어의 흑역사(?) 이야기 네트워크에 대한 정보를 수집합니다. 10 기특한크리퍼 17.10.16.16:30 222
1874 할로윈 Day라서 이태원 BJ들 많내염 3 핫슈 17.10.28.23:53 222
1873 으아아아악! 13 image Dobob title: 도밥위키!Dobob 17.11.03.10:26 222
1872 아이폰 X 가격 더럽게 비싸네요. 11 NoYeah NoYeah 17.11.06.18:12 222
1871 스팀 연쇄 할인마의 유혹을 참지 못하고.. 16 image NoYeah NoYeah 17.11.26.17:04 222

검색