자유게시판

  • 목록
  • 아래로
  • 위로

트래픽 검색봇들..

유키시로

트래픽 무제한 클라우드 호스팅 또는 AWS lightsail 등을 사용해서 트래픽이 넉넉했는데..

CDN을 한개 더 적용하면서 쓰는 만큼 과금되다 보니 (Pay as you go) 검색봇들이 트래픽을 많이 먹네요..

검색봇이 맞나 싶을정도로 ㅠㅠ

해결하신분 있나요?

댓글 8

세뱃돈 For Us
profile image
새해 복 많이 받으세요! 유키시로님! 800포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 14:34

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 황금 서버 (30일)humit
profile image

robots.txt 에 대해서 검색해보시기 바랍니다.

comment menu
2019.02.05. 15:06

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리
profile image

다양한 검색봇에 대해 잘 정리된 해피정 님의 페이지입니다.

http://www.happyjung.com/lecture/2619

 

humit 님께서 말씀하신 robots.txt의 설정과 관련된 페이지이구요.

http://www.happyjung.com/lecture/258

우선 여기 샘플에 있는 것부터 적용하시면 될 것 같아요 ^^

comment menu
2019.02.05. 16:05

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

title: 크롬NUBE → 이니스프리
profile image

헉 저도 robots.txt 때문에 네이버 웹마스터 도구가 제대로 안되던데 확인해봐야겠네요! 감사합니다

comment menu
2019.02.05. 16:20

신고

"NUBE님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → NUBE
profile image
새해 복 많이 받으세요! 캣치님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.05. 16:20

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 → NUBE
profile image

네이버봇은 기본적으로 Yeti이지만 user-agent 값을 바꾸기도 하고

IP도 변경되는 경우가 있어서 복잡하더군요 ㅠㅠ

comment menu
2019.02.05. 16:28

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

네모
profile image

제 사이트의 경우 검색봇 차단해버렸슴다.

블로그는 취미용이고... 다른 사이트에는 문의글 밖에 없어서...

comment menu
2019.02.06. 13:57

신고

"네모님의 댓글"

이 댓글을 신고 하시겠습니까?

세뱃돈 For Us → 네모
profile image
새해 복 많이 받으세요! 네모님! 300포인트만큼 세뱃돈을 드립니다!
comment menu
2019.02.06. 13:57

신고

"세뱃돈 For Us님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 [1차 해결 및 추가] 서버 접속 불가 문제 안내 13 마스터 마스터 24.06.20.15:22 753
공지 [작업 완료] 설 명절 맞이 서버 업데이트 안내 3 마스터 마스터 24.02.11.17:21 2690
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 6404
공지 낚시성 불법도박 홍보 게시글을 주의하세요. 9 image 네모 네모 22.08.09.18:13 1123
공지 슬기로운 포인트 벌이를 하는 법 (22.10.11 업데이트) 64 네모 네모 18.06.17.20:25 15829
2215 네신 사용후기 대박 8 image title: 대한민국 국기gimmepoint 18.11.25.20:16 139
2214 유튜브 오류.. 4 모니터 모니터 18.10.17.10:49 139
2213 어제 애니메이션 세팅을 끝내서 나중에 보면서 할라했으나 image BVC_Liper_Okbul BVC_Liper_Okbul 18.08.21.17:10 139
2212 오랜만에 1등했네요~ 4 image humit title: 황금 서버 (30일)humit 18.08.16.18:25 139
2211 으앙 졸려듀금 9 국내산라이츄 국내산라이츄 18.07.10.08:08 139
2210 슬프다... 7 푸른 18.06.17.00:27 139
2209 이것은 생전에 닭이라 불리었던 요리. 3 image 네모 네모 18.06.11.22:01 139
2208 탄소의 6월 추천 브금 10곡!!!! 3 탄소 18.06.06.10:54 139
2207 오늘도 이력서 작성했습니다...ㅠㅠ 9 국내산라이츄 국내산라이츄 18.05.09.01:06 139
2206 고맙긴 한데.. 3 도바킨 도바킨 18.04.09.18:47 139
2205 안녕하세여/포인트 모으기 어려워요ㅜ 5 망할윈도우미 망할윈도우미 18.02.26.20:40 139
2204 패드가 온 건 좋은데요... 3 국내산라이츄 국내산라이츄 18.02.02.17:33 139
2203 패드 수리는 했는데 얼척없네요 ㅋㅋㅋㅋㅋㅋ 6 국내산라이츄 국내산라이츄 18.01.30.02:45 139
2202 네 여러분 오사카인데요 -내일 출국 6 국내산라이츄 국내산라이츄 17.10.07.17:03 139
2201 대륙의 논문을 읽고 있습니다. 3 국내산라이츄 국내산라이츄 17.09.01.12:40 139
2200 앱 오류 !! 심각 8 image TVJ title: 열려라 맛스타의 자물쇠TVJ 17.05.14.16:52 139
2199 설은 설인지라 .. 5 image 대전댁 title: 은메달대전댁 17.01.25.11:57 139
2198 디아블로3 하시는 분있나요? 6 마스터 마스터 17.01.17.00:42 139
2197 월요일이에요..ㅠ 11 image 하루살이 title: 황금 서버 (30일)하루살이 16.12.05.08:06 139
2196 교수들이 이 정도인줄은 몰랐다 2 image dizak 16.11.30.00:07 139

검색