- 4
- 이니스프리
- 조회 수 3178
안녕하세요?
requests를 이용하여 POST로 multipart/form-data 전송을 하려고 하는데요.
예로 들 수 있는 사이트가 마땅하지 않아서 부득이 스포어에 파일을 업로드했을 때 개발자도구의 Requests header를 예로 들어 질문드리겠습니다 ^^
[Requests header]
:authority: studyforus.com
:method: POST
:path: /index.php
:scheme: https
accept: */*
accept-encoding: gzip, deflate, br
accept-language: ko-KR,ko;q=0.9,en-US;q=0.8,en;q=0.7
content-length: 6051402
content-type: multipart/form-data; boundary=----WebKitFormBoundaryHuF3DiVfQquXgAtB
cookie: _f_=20190331151047; _ga=GA1.2.1465693216.1555800735; em_cdn_uid=t%3D1570157398541%26u%3Dc6e0d214e01f4b63b569e65355f6369c; em_p_uid=l:1576558688928|t:1570881221609|u:2f3327beebcb435da9a71713a91382f7; PHPSESSID=0e8f5250h4gk3sb12isro4hu73; rx_uatype=rE1qamI9vminnwqB1gBh6Q%3A0; rx_sesskey1=nrtR9A9tk4J21aGWkUl7lZFE; rx_sesskey2=XBtWzJITQmAaVIiLRbkZkIOO; arp_scroll_position=0
dnt: 1
origin: https://studyforus.com
referer: https://studyforus.com/index.php?mid=humor&act=dispBoardWrite
sec-fetch-mode: cors
sec-fetch-site: same-origin
user-agent: Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.79 Safari/537.36
[Form data]
vid: null
mid: humor
act: procFileUpload
upload_target_srl: false
editor_sequence: 1
Filedata: (binary)
다른 것은 그대로 복붙해서 headers에 넣어주면 될 것 같은데요.
(1) cookie는 requests.Session()을 이용하면 headers에서는 굳이 작성할 필요가 없는 것 맞는지요?
(2) content-length는 str(os.path.getsize('파일명')) 이런 식으로 처리하는데 적절하지 모르겠네요.
(3) content-type이 가장 문제가 되는 것 같네요 ㅠㅠ
https://indesire.tistory.com/42
https://stackoverflow.com/questions/12385179/how-to-send-a-multipart-form-data-with-requests-in-python
위 글을 참고하니 MultipartEncoder라는 것을 사용하면 되는 것 같은데요.
제가 이해한 바로는 다음과 같이 Form data에 있는 것을 그대로 긁고 Content-type을 추가하여 MultipartEncoder에 넣은 값을 data 값에 넣고,
headers에는 위 값을 복붙하여 'Content-Type': m.content_type을 추가하면 되는 것 같은데요.
m = MultipartEncoder(
fields={
'vid': 'null',
'mid': 'humor',
'act': 'procFileUpload',
'upload_target_srl': 'false',
'editor_sequence': '1',
'Content-Type': ('filename', open('파일명', 'rb'))
}
)
upload = s.post(URL, data=m, headers=headers)
제가 어디에서 실수를 했는지 모르겠지만 파일전송이 안 되는 것 같은데요.
대략적인 방법이나 다른 방법을 알려주시면 감사하겠습니다!
그럼 즐겁고 뜻깊은 연말 되시고 감기 조심하세요 ^^
작성자
댓글 4
연말이라 바쁘실텐데 답변해주셔서 감사합니다 ^^
우리가 웹 서핑을 할 때 브라우저가 엄청난 일들을 하고 있는 것이었군요!
브라우저가 수행하는 GET, POST 요청을 저같은 초보가 구현하려고 하니 잘 안 되네요 ㅠㅠ
말씀해주신 (3)번 방법대로 테스트해보려고 with requests.Session() as s: 으로 로그인하여 로그인 된 것은 확인한 후에
upload = s.post('https://studyforus.com/index.php', data={'vid':'null', 'mid':'help', 'act':'procFileUpload', 'upload_target_srl': 'false', 'editor_sequence':'1'}, files={'Filedata':open('파일명', 'rb')}).content
XE/RXE 계열의 몇몇 사이트에서 이런 방식으로 시도해봤는데 에러를 반환하거나 빈 문자열을 반환하네요 ㅠㅠ
세션이 유지되고 있으니 쿠키는 따로 헤더에 넣어줄 필요는 없을 것 같은데, 제가 어디를 잘못 처리했는지 모르겠네요.
content-type: multipart/form-data; boundary=----WebKitFormBoundaryKUMwOuSfPKanezmz
그런데 헤더의 content-type에서 "KUMwOuSfPKanezmz" 이 부분은 파일 데이터의 구분자로 기능하기 때문에 MultipartEncoder 등을 이용하여 제가 직접 붙여줘야 되는 것 아닌가요?
그럼 남은 휴일 즐겁게 보내시고, 뜻깊은 연말 되세요!!
번번이 웹 공부에 큰 도움을 주셔서 진심으로 감사드립니다~ ^^
1. content-type 부분의 경우 requests 부분에서 알아서 처리를 해주므로 따로 신경쓸 필요가 없습니다.
2. 빈 문자열이 리턴되는 이유는 모르겠네요.... 일단 스포어 홈페이지에서는 PHPSESSID 만 있더라도 잘 동작하는 것 같더라고요.. 혹시 한번 로그인 요청을 보낸 다음 글쓰기 페이지로 이동하는 코드를 추가해보시는 건 어떨까요?
앗 그렇군요!! humit 님 덕분에 많은 것을 배웠네요 :)
requests는 정말 엄청난 라이브러리이군요 ㅎㄷㄷ
말씀해주신 방법대로 계속 시도하다보니 POST 전송이 되네요~
다만 같은 스크립트를 반복해서 실행해보니 editor_sequence 값 때문인지 잘 될 때가 있고, 안 될 때가 있네요.
그럼 저녁식사 맛있게 드세요~
감사합니다 ^-^
(1) Session으로 로그인 요청을 보낸 적이 있다면 따로 cookie를 명시해주지 않아도 될 것 같네요.
(2) Content-Length 부분의 경우 requests가 알아서 계산을 해주기 때문에 명시해주지 않아도 됩니다.
(3) requests 에서는 파일 업로드가 쉽습니다. 아래와 같이 사용하면 됩니다.
requests.post('https://studyforus.com/index.php', headers={'Cookie': cookie}, data={'vid':'null', 'mid':'help', 'act':'procFileUpload','upload_target_srl': 'false', 'editor_sequence':1}, files={'Filedata':open(파일경로, 'rb')}).content