• 목록
  • 아래로
  • 위로

토이 프로젝트로 쿠팡에 대한 camelcamelcamel과 유사한 사이트를 구축할 예정입니다.

 

개발 도중에 알게 된 소소한 팁을 적어봅니다 ^^

 

 

1. Headers

 

https://coupang.com의 상품 관련 정보를 크롤링할 때

 

requests 모듈을 이용한 요청에 문제가 발생한다면

 

headers에 'User-Agent' 이외에도 'Accept-Language'를 추가하면 해결되는 경우가 많습니다.

 

 

2. 가격 정보

 

개별 상품 페이지에서의 가격 정보는 동적 크롤링를 통해 얻어올 수 있습니다.

 

해당 URL은 아래와 같습니다.

 

https://www.coupang.com/vp/products/제품ID/vendoritems/벤더아이템ID/quantity-info?quantity=1

 

위 URL에 get 요청을 하여 response.text를 json으로 파싱한 후

 

'price' -> 'finalPrice'에서 할인이 적용된 가격 정보를 얻을 수 있습니다.

 

 

여담이지만 쿠팡은 기본가격 자체가 할인이 적용된 가격인 경우도 많아서

 

할인 여부를 떠나서 금액 자체를 놓고 구매 타이밍을 판단하시는 것을 추천 드립니다 ^^

 

작성자
이니스프리 119 Lv. (2%) 4161690/115200000EXP

Make StudyForUs Great Again!

 

CSVpuymXAAAVVpd.jpg

댓글 0

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 시스템 점검 작업 완료 안내 10 마스터 마스터 24.09.05.16:25 2190
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 마스터 23.01.14.02:23 9046
20 [Python] 정규식을 사용하지 않고 웹페이지의 자바스크립트를 파싱 이니스프리 이니스프리 24.04.17.21:12 486
19 [Python] Table을 쉽게 만들어주는 모듈x2 이니스프리 이니스프리 24.04.18.22:04 217
18 [Python] 변수의 이름을 반환하는 함수 이니스프리 이니스프리 24.04.20.23:29 327
17 [Python] Tabulate 모듈로 작성한 테이블을 파일로 저장할 때 에러가 발생하는 경우 이니스프리 이니스프리 24.04.20.23:45 291
16 [Python] 독일어, 스페인어, 체코어 등 철자를 영문 알파벳으로 전환하기 이니스프리 이니스프리 24.04.21.17:15 256
15 [Python] dictionary 2개의 평균을 구하여 내림차순 정렬하기 이니스프리 이니스프리 24.04.21.17:29 303
[Python] 쿠팡 크롤링할 때 소소한 팁 이니스프리 이니스프리 24.05.02.21:50 415
13 [KT] 오피스넷 가정 설치 관련 이니스프리 이니스프리 24.05.05.00:28 411
12 [Python] SSL: CERTIFICATE_VERIFY_FAILED에 대한 대처 방법 (2) 이니스프리 이니스프리 24.05.05.21:04 438
11 트래픽 절감 관련 모 커뮤니티 사이트의 회의 결과 이니스프리 이니스프리 24.05.15.16:51 423
10 [Python] random 함수가 계속하여 동일한 결과를 출력할 때 해결방법 이니스프리 이니스프리 24.05.15.19:32 505
9 [Python] 리스트에 중복된 원소가 있는지 확인하는 함수 이니스프리 이니스프리 24.05.22.20:21 379
8 [VSCode] 1개의 OS에 VSCode 여러 개를 설치 및 구동하기 이니스프리 이니스프리 24.05.26.05:09 258
7 [Python] cannot import name 'TypeAliasType' from 'typing_extensions' 에러 대응방법 이니스프리 이니스프리 24.06.01.23:54 234
6 HDMI 단자의 QHD 출력을 정식으로 지원하지 않는 NVIDIA 그래픽 카드로 QHD 60 Hz 해상도 출력하기 2 image 제르엘 제르엘 24.06.09.17:45 426
5 [Python] Youtube API를 사용하지 않고 특정 채널의 모든 비디오 URL을 가져오기 이니스프리 이니스프리 24.06.09.22:12 239
4 [Python] PDF 파일을 특정 페이지를 기준으로 두 개로 나누기 이니스프리 이니스프리 24.08.11.20:27 640
3 [펌] Contabo VPS 관련 최근 정보글 image 이니스프리 이니스프리 24.09.29.21:11 116
2 [Nextcloud] 프로세스가 kill 되는 문제에 관한 Troubleshooting 3 이니스프리 이니스프리 24.09.30.19:53 105
1 [Python] installing Geopandas in Windows (Trouble shooting) 이니스프리 이니스프리 24.10.25.20:10 72