• 목록
  • 아래로
  • 위로

안녕하세요?


파이썬 Requests를 이용하여 아래 URL에서 할인 정보를 받아오는 스크립트를 작성했습니다.


s.get(https://www.premiumoutlets.co.kr/yeoju/sales_events/in_store_promotions)


그런데 GET 요청을 하면 Temporary failure in name resolution 에러가 발생하네요.



특이한 점은 동일한 스크립트로 윈도우에서는 잘 되는데 우분투 VPS에서 에러가 발생한다는 점이네요.


그리고 항상 안 되는 것이 아니라 간혹 우분투에서도 동일한 GET 요청에 성공하는 경우도 있더군요 ㄷㄷ


구글링해보니 1. pyopenssl을 설치해라, 2. time.sleep()을 충분히 줘라 이런 조언이 있었지만 이 방식으로는 해결되지 않았습니다.


방화벽 문제일 가능성이 높아서 그런 쪽으로도 구글링해서 해결해보려고 했는데 잘 안 되더군요 ㅠㅠ


그런데 HTTP 통신에서 GET 요청은 80번 또는 443번 포트 아닌가요?? 파이썬 Requests는 HTTP 통신이 아닌가 보죠?? ㅎㄷㄷ



제 수준에서는 도저히 해결이 안 되는 문제 같아서 에러 메시지를 긁어왔습니다.


그럼 점심식사 맛있게 드시고 편안한 오후 되세요~!


항상 감사드립니다 ^-^





Traceback (most recent call last):
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connection.py", line 141, in _new_conn
    (self.host, self.port), self.timeout, **extra_kw)
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/util/connection.py", line 60, in create_connection
    for res in socket.getaddrinfo(host, port, family, socket.SOCK_STREAM):
  File "/usr/local/anaconda/lib/python3.6/socket.py", line 743, in getaddrinfo
    for res in _socket.getaddrinfo(host, port, family, type, proto, flags):
socket.gaierror: [Errno -3] Temporary failure in name resolution
 
During handling of the above exception, another exception occurred:
 
Traceback (most recent call last):
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connectionpool.py", line 601, in urlopen
    chunked=chunked)
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connectionpool.py", line 346, in _make_request
    self._validate_conn(conn)
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connectionpool.py", line 850, in _validate_conn
    conn.connect()
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connection.py", line 284, in connect
    conn = self._new_conn()
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connection.py", line 150, in _new_conn
    self, "Failed to establish a new connection: %s" % e)
urllib3.exceptions.NewConnectionError: : Failed to establish a new connection: [Errno -3] Temporary failure in name resolution
 
During handling of the above exception, another exception occurred:
 
Traceback (most recent call last):
  File "/usr/local/anaconda/lib/python3.6/site-packages/requests/adapters.py", line 440, in send
    timeout=timeout
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/connectionpool.py", line 639, in urlopen
    _stacktrace=sys.exc_info()[2])
  File "/usr/local/anaconda/lib/python3.6/site-packages/urllib3/util/retry.py", line 388, in increment
    raise MaxRetryError(_pool, url, error or ResponseError(cause))
urllib3.exceptions.MaxRetryError: HTTPSConnectionPool(host='www.premiumoutlets.co.kr', port=443): Max retries exceeded with url: /yeoju/sales_events/in_store_promotions (Caused by NewConnectionError(': Failed to establish a new connection: [Errno -3] Temporary failure in name resolution',))
 
During handling of the above exception, another exception occurred:
 
Traceback (most recent call last):
  File "outlet.py", line 98, in
    result = parse_sh(u, urls[u])
  File "outlet.py", line 28, in parse_sh
    html = s.get(url)
  File "/usr/local/anaconda/lib/python3.6/site-packages/requests/sessions.py", line 521, in get
    return self.request('GET', url, **kwargs)
  File "/usr/local/anaconda/lib/python3.6/site-packages/requests/sessions.py", line 508, in request
    resp = self.send(prep, **send_kwargs)
  File "/usr/local/anaconda/lib/python3.6/site-packages/requests/sessions.py", line 618, in send
    r = adapter.send(request, **kwargs)
  File "/usr/local/anaconda/lib/python3.6/site-packages/requests/adapters.py", line 508, in send
    raise ConnectionError(e, request=request)
requests.exceptions.ConnectionError: HTTPSConnectionPool(host='www.premiumoutlets.co.kr', port=443): Max retries exceeded with url: /yeoju/sales_events/in_store_promotions (Caused by NewConnectionError(': Failed to establish a new connection: [Errno -3] Temporary failure in name resolution',))




작성자
이니스프리 119 Lv. (2%) 4186480/115200000EXP

Make StudyForUs Great Again!

 

CSVpuymXAAAVVpd.jpg

댓글 2

title: 황금 서버 (30일)humit
profile image

우분투 VPS에서 DNS 서버를 구글 DNS 서버나 CloudFlare DNS 서버로 설정해보시겠어요?

comment menu
2020.02.25. 21:24

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 작성자 → humit
profile image

오오~ 그게 문제였군요!! ㄷㄷ

 

그런데 /etc/resolv.conf를 수정하는 방법에 대해 구글링을 해봤는데 아쉽게도 어느 방법도 먹히질 않네요 ㅠㅠ

 

예전에 아파치 설치할 때 어디에선가 꼬인 부분이 여기에도 계속 영향을 미치는 것 같아요~

 

새로 인스턴트를 생성해서 다시 시도해보겠습니다!

 

다시 한 번 감사드립니다 ^-^

 

편안한 밤 되세요~

comment menu
2020.02.25. 21:52

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 24.09.05.16:25 2564
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 23.01.14.02:23 10005
공지 [필독] 질문하는 방법 17 마스터 18.02.23.03:09 4944
706 네이버 카페의 게시글 크롤링과 관련하여 질문 드려요 ^^ 7 image 이니스프리 20.04.04.23:33 1639
705 파이썬 Requests과 HTTP 통신에 관하여 이론적으로 궁금한건데요~ 4 이니스프리 20.04.03.15:55 335
704 아이콘 구매와 활용법에 대한 질문 10 해피보이 20.04.02.18:04 515
703 사이트 메인페이지에 갈림길 화면이 뜨게 하는 법에 대하여 어쭈어 봅니다. 5 image 입체그림 20.04.01.19:31 237
702 Cloudflare와 관련하여 질문 드려요 ^-^ 7 이니스프리 20.03.30.14:48 494
701 크롤링 용도로 사용하는 VPS의 트래픽이 얼마나 될까요?? 2 이니스프리 20.03.29.21:02 324
700 안녕하세요ㅠㅠ 위키 URL 리다이렉션 관련 질문입니다 1 김광현 20.03.26.16:33 264
699 그누보드용 회원차단 크롬 확장프로그램을 만들어보려는데요~ ^-^ 7 이니스프리 20.03.24.23:53 303
698 VPS 웹서버 설치 후 보안을 위해 추가로 해야되는 조치에는 어떤 것이 있을까요?? 6 이니스프리 20.03.13.22:46 466
697 페북이나 트위터처럼 태그 속성이 자주 변경되는 사이트의 크롤링은 어떻게 해야 될까요?? 4 이니스프리 20.03.09.00:27 297
696 브라우저 개발자도구에서 formdata를 숨기는 방법이 있는가요? 6 이니스프리 20.03.07.23:54 2760
695 그누보드5 홈피 관리해주실분 찾습니다. 찰리 20.03.04.23:10 235
694 [파이썬] 윈도우에서 datetime 객체의 invalid format string 에러 3 이니스프리 20.03.04.15:52 1643
693 XE 에디터가 작동하지 않아요 ㅠㅠ 4 image 입체그림 20.03.03.17:30 282
692 VPS 플랜 선택과 관련하여 질문 드립니다 ^-^ 4 image 이니스프리 20.02.28.20:52 363
691 스터디포어스 웹호스팅상에서 비주얼에디터 설치하는 중 오류가 났습니다 ㅠㅠ image 입체그림 20.02.28.14:40 593
690 [해결][CURL/PHP] 스터디포어스서버에서의 PHP CURL에 대한 특정 서버의 잘못된 응답에 대하여 3 Hanam09 20.02.27.15:36 496
689 [파이썬] 웹 페이지 크롤링 시 조건에 따라 보여졌다 안보여지는 class를 조건문으로 사용 하고 싶은데요.. 4 위돈톡애니모 20.02.25.15:19 1419
[파이썬] Temporary failure in name resolution에 대해 여쭤봅니다 2 이니스프리 20.02.25.11:50 1064
687 홈서버용 CPU 좀 봐주시면 감사하겠습니다~ ㅠㅠ 7 image 이니스프리 20.02.24.22:40 332