코드
2020.01.23 17:47

[Python] 네이버 실시간 검색어

조회 수 1310 추천 수 0 댓글 3
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 댓글로 가기 인쇄
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 댓글로 가기 인쇄
Extra Form
라이선스 MIT

네이버가 이제 실시간 검색어 부분을 동적으로 불러오도록 정책이 바뀌었네요.

덕분에 불필요한 리소스를 가져올 필요가 없어서 트래픽도 엄청 줄어들고 파싱을 할 때 HTML 파싱이 아닌 json 파싱이 가능해졌습니다.


import requests
import json

url = 'https://www.naver.com/srchrank?frm=main&ag=20s&gr=0&ma=0&si=0&en=0&sp=0'
res = json.loads(requests.get(url).content)
rank = [*map(lambda item: item['keyword'], res['data'])]
print(rank)


여기서 ag부분은 나이를 의미하고, 나머지 파라미터의 경우에도 검색어 설정 부분에서 주어진 값을 -2에서 2까지 값으로 가중치를 주는 방식입니다. 해당 코드는 20대이면서 모든 가중치를 보통으로 준 경우에 사용하는 코드입니다.


해당 방식으로 바뀌면서 검색어의 차이를 나이 대별이나 관심사의 차이에 따라 어떻게 되는지 알아보는 실험을 하는 등의 작업이 가능하겠습니다.

Who's humit

profile

Study For Us Hosting 1기 모니터링 관리자 (16.12.01 ~ 17.01.08.)

C++, Python, PHP를 주로 사용하며 알고리즘, DL, 해킹 쪽에 관심이 있습니다.

휴학생입니다.

티스토리 블로그 : http://humit.tistory.com/

카카오톡 봇 : http://pf.kakao.com/_Efrbu/chat

지식인 프로필 : https://kin.naver.com/profile/jhjang1005

  • profile
    이니스프리 2020.01.23 21:52
    오오~ 좋은 정보 감사드립니다!
    그렇지 않아도 어제 네이버 드라마 검색 결과를 크롤링해보려고 했는데 동적으로 불러오더군요 ^^
    그럼 humit 님께서도 즐겁고 뜻깊은 설 연휴 되세요!
    덕분에 늘 많이 배워서 항상 감사드립니다 :)
  • profile
    Meme 2020.02.06 17:30
    혹시 url의 json 주소는 어떻게 구할수 있는지 알 수 있을까요?
  • profile
    title: 황금 서버 (30일)humit 2020.02.06 21:29
    무슨 의미인지 잘 모르겠네요...

List of Articles
번호 분류 제목 글쓴이 날짜 조회 수
78 코드 세린서버에서 시도중인 백업 스크립트 입니다. 4 NoYeah 2017.06.27 834
77 자료 소셜XE / 기존 통합 로그인 스킨 V2.2 2 file NoYeah 2017.06.28 1061
76 자료 경험치 현황 위젯 6 file NoYeah 2017.06.28 864
75 자료 Gentelella 3 file NoYeah 2017.06.29 1043
74 자료 Gentelella 레이아웃에 사용가능한 가격 테이블 위젯입니다. 3 file NoYeah 2017.07.03 688
73 자료 AdminLTE용 에디터 스타일 4 file title: 은메달도다 2017.07.07 825
72 코드 엑셀파일 불러서 히스토그램 그려주는 함수 국내산라이츄 2017.08.03 873
71 코드 엑셀 읽어서 그래프 그려주는 함수 1 국내산라이츄 2017.08.03 1551
70 자료 RBGE - 이쁘고 깔끔한 에러페이지 4 file title: 열려라 맛스타의 자물쇠TVJ 2017.08.08 766
69 자료 even_move - 감성적인 에러 페이지 7 file title: 열려라 맛스타의 자물쇠TVJ 2017.08.08 890
68 자료 [XE / Rhymix] Bootstrap 패널 위젯 스타일 file title: 은메달도다 2017.08.09 698
67 자료 [1.8a] Bootstrap 'Panel' 위젯 스타일 1 file title: 은메달도다 2017.08.09 670
66 코드 Git 저장소에서 자동으로 받아 업데이트하는 쉘 스크립트 5 NoYeah 2017.09.16 750
65 자료 [Bootstrap] xeACE 레이아웃 3 title: 은메달도다 2017.09.17 723
64 자료 링크 파싱 애드온용 스킨 (트위터 스타일) 3 file SNAX 2017.10.03 580
63 자료 이게 팔릴까 - Xe/라이믹스 에러페이지 [2017-10-04] 3 file title: 열려라 맛스타의 자물쇠TVJ 2017.10.04 750
62 자료 AdBlock 접근 방지 애드온 v0.1 3 file 네모 2017.10.05 739
61 코드 브라우저 언어에 따라 다른 폴더를 사용하는 PHP 코드 4 file 네모 2017.10.10 867
60 코드 파이썬을 이용한 텔레그램 새 글 알림 (허접합니다) 4 이니스프리 2017.11.19 2516
59 코드 새 글 자동 댓글 스크립트 (AutoHotkey) 9 이니스프리 2017.11.26 3561
Board Pagination Prev 1 2 3 4 Next
/ 4