• 목록
  • 아래로
  • 위로

안녕하세요?


requests 라이브러리에서 with requests.Session()에 대한 간단한 질문을 드립니다.


경우에 따라서는 실무적으로 중요할 수도 있겠지만 개인적으로 궁금한 내용에 가까운데요 ^^



예컨대 아래와 같이 with requests.Session() as s: 을 사용하게 되면


session.close()를 하지 않아도 되는 장점이 있겠죠.


with requests.Session() as s:
    first_page = s.get('https://www.clien.net/service')
    LOGIN_INFO = {**LOGIN_INFO, **{'_csrf': csrf['value']}}
    login_req = s.post('https://www.clien.net/service/login', data=LOGIN_INFO)



그런데 header에 user-agent 같은 것을 다음과 같은 방식으로 넣었다고 가정하면요.



headers = {'Accept-Language': 'ko-KR,ko;q=0.9,en-US', 'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_9_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/35.0.1916.47 Safari/537.36'}




user-agent를 검사하는 사이트에서는 이렇게 get 또는 post 요청을 날릴 때마다 headers = headers를 계속 넣어줘야 아무런 문제가 발생하지 않을까요?


아니면 한 번 headers를 넣어주면 그 상태가 그대로 유지되는 것일까요?


간단히 테스트해보니 한 번 넣어줘도 별 문제가 없는 것 같은데 보편적으로 그런 것인지는 잘 모르겠네요.


이론적으로(?) 생각해보면 session이란 것은 상태정보를 웹 서버에 저장하는 것으로서 user-agent와는 직접적인 연관이 있지 않을 것 같은데요.


예컨대 브라우저의 확장 프로그램을 이용하여 user-agent를 변경해도 로그인 자체가 끊기지는 않으니깐요.


그런데 이렇게 계속 넣어야 한다면 상당히 비효율적인 것 같다는 생각이 들어서 여쭤보네요~


with requests.Session() as s:
    first_page = s.get('https://www.clien.net/service', headers = headers)
    LOGIN_INFO = {**LOGIN_INFO, **{'_csrf': csrf['value']}}
    login_req = s.post('https://www.clien.net/service/login', data=LOGIN_INFO, headers = headers)



그럼 오늘 일부 지역에서 날씨가 영하로 떨어졌다고 하던데 스포어 회원님들께서도 감기 조심하세요! ^-^


항상 감사드립니다!!


작성자
이니스프리 119 Lv. (2%) 4186530/115200000EXP

Make StudyForUs Great Again!

 

CSVpuymXAAAVVpd.jpg

댓글 2

title: 황금 서버 (30일)humit
profile image

headers 값을 갱신하면 됩니다.


with requests.Session() as s:
    # 아래와 같이 사용하시면 header 값이 고정되어서 실행됩니다.
    s.headers.update(headers)
    first_page = s.get('https://www.clien.net/service')
    LOGIN_INFO = {**LOGIN_INFO, **{'_csrf': csrf['value']}}
    login_req = s.post('https://www.clien.net/service/login', data=LOGIN_INFO)



https://github.com/psf/requests/blob/master/requests/sessions.py#L449


p.prepare(
            method=request.method.upper(),
            url=request.url,
            files=request.files,
            data=request.data,
            json=request.json,
            # 아래 부분을 통해 self.headers 값을 계속 사용하는 것을 알 수 있습니다.
            headers=merge_setting(request.headers, self.headers, dict_class=CaseInsensitiveDict),
            params=merge_setting(request.params, self.params),
            auth=merge_setting(auth, self.auth),
            cookies=merged_cookies,
            hooks=merge_hooks(request.hooks, self.hooks),
        )




comment menu
2019.11.11. 23:46

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 작성자 → humit
profile image

번번이 감사합니다 ^-^

s.headers.update(headers) 이런 간단한 방법이 있었군요!

제가 멍청했네요~ ㅠㅠ

라이브러리를 뜯어보면서 공부를 해야 되는 것이군요 ㄷㄷ

그럼 humit 님께서도 점심식사 맛있게 드시고 즐거운 오후 되세요!

comment menu
2019.11.12. 12:54

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 24.09.05.16:25 2582
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 23.01.14.02:23 10027
공지 [필독] 질문하는 방법 17 마스터 18.02.23.03:09 4944
파이썬에서 requests.Session()에 대한 간단한 질문을 드립니다 ^^ 2 이니스프리 19.11.09.21:45 2034
305 [SSD] Micron 1100 vs Samsung 860 QVO 어떻게 생각하시는가요? 7 image 이니스프리 19.11.09.22:52 342
304 현재 신제품 구매가 가능한 배터리 탈착식 스마트폰에 어떤 것이 있을까요? 이니스프리 19.11.10.22:18 274
303 유튜브에 유튜버 '분류' 또는 '장르'라는 것이 존재하나요?? 2 이니스프리 19.11.12.21:57 387
302 가계부 프로그램 추천 부탁드립니다! 2 이니스프리 19.11.12.23:59 313
301 스포어 호스팅 사용 중에 실수로 반복문을 잘못 돌리면 계정이 정지되나요? ㅠㅠ 2 이니스프리 19.11.14.00:25 577
300 구글 애드센스 잘아시는분 있나유? 2 슬기 19.11.14.23:54 312
299 윈도우7 익스플로러11에서 인터넷옵션/시작옵션/마지막 세션의 탭으로 시작이 작동이 안됩니다. 3 kyhsyou 19.11.15.10:54 348
298 국내 유료 웹호스팅 사이트 추천을 부탁드립니다 14 이니스프리 19.11.16.00:09 357
297 3.5인치 외장하드 케이스에 SSD를 연결하면 전압과 관련된 문제가 발생할까요? 3 이니스프리 19.11.16.02:04 491
296 카카오 API OCR의 인식률은 어떤가요? 1 이니스프리 19.11.16.22:31 1674
295 코딩 컨벤션상 전역변수와 지역변수의 변수명을 동일하게 하는 것이 무방한가요? 4 이니스프리 19.11.17.18:09 549
294 윈도우 NTFS에서 확장자의 대소문자가 구별되나요? (파이썬 pathlib.Path(file).suffix 관련) 9 이니스프리 19.11.19.00:50 1493
293 네이버 사전을 크롤링할 때 한자의 인코딩 관련 하여 질문 드립니다. (일부 한자만 깨지는 현상) 21 image 이니스프리 19.11.22.16:22 1307
292 기계식 키보드 추천을 부탁드립니다! 20 갱생협스 19.11.24.12:56 309
291 Amazon, Jomashop 등 대형 사이트에서는 크롤러를 어떻게 감지하나요? 10 이니스프리 19.11.24.15:12 1792
290 error page 설정은 어떻해야할까요? 2 슬기 19.11.24.21:27 357
289 데스크탑이냐 랩탑이냐, 그것이 문제입니다. 29 네모 19.11.28.14:15 387
288 노트북 발열 문제를 잘 잡는 분 계실까요? 6 이니스프리 19.12.04.19:04 306
287 [파이썬] 롯데백화점 크롤링과 관련하여 질문을 드립니다 2 image 이니스프리 19.12.04.21:56 411