- 8
- 유키시로
- 조회 수 130
트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..
CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..
검색봇이 맞나 싶을정도로 ㅠㅠ
해결하신분 있나요?
댓글 8
신고
"세뱃돈 For Us님의 댓글"
이 댓글을 신고 하시겠습니까?
humit 
robots.txt 에 대해서 검색해보시기 바랍니다.
신고
"humit님의 댓글"
이 댓글을 신고 하시겠습니까?
다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.
http://www.happyjung.com/lecture/2619
humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.
http://www.happyjung.com/lecture/258
우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^
신고
"이니스프리님의 댓글"
이 댓글을 신고 하시겠습니까?
NUBE
→ 이니스프리
헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다
신고
"NUBE님의 댓글"
이 댓글을 신고 하시겠습니까?
신고
"세뱃돈 For Us님의 댓글"
이 댓글을 신고 하시겠습니까?
네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고
IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ
신고
"이니스프리님의 댓글"
이 댓글을 신고 하시겠습니까?
제 사이트의 경우 검색봇 차단해버렸슴다.
블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...
신고
"네모님의 댓글"
이 댓글을 신고 하시겠습니까?
신고
"세뱃돈 For Us님의 댓글"
이 댓글을 신고 하시겠습니까?
joyful