- 2
- 이니스프리
- 조회 수 569
안녕하세요?
크롤링 용도로 사용하는 미니PC를 새로 마련하여 세팅하려고 하는데요.
시스템 트레이딩 및 토렌트 머신으로도 활용하려고 합니다.
(토렌트는 아주 가끔 사용합니다.)
우분투로 구축을 하면 좋겠지만 제가 알아본 바로는 키움 API는 윈도우 7~10에서만 작동한다고 하네요 ㅠㅠ
제 경험상 Selenium(특히 파폭)도 우분투보다 윈도우에서 안정적인 것 같구요.
그래서 기본적으로 설치된 윈도우 10 환경에서 VPN을 이용하여 크롤링(+토렌트)을 하고
가상머신에서 윈도우 10 환경에서 크롤링 및 시스템 트레이딩을 하려고 합니다.
(국내 IP로만 크롤링을 할 수 있는 사이트가 있기 때문에 이렇게 배분하여 사용하려고 합니다.)
현재 판매 중인 미니PC 중에서 저전력 모델로는 셀러론 J4005을 사용한 제품들이 있던데 패스마크에서 1544점 나오더군요.
제가 여쭤보고 싶은 점은 다음과 같습니다.
1. J4005의 퍼포먼스로 윈도우 10을 가상머신으로 원활하게 구동할 수 있을까요? 혹시 i3 정도가 필요할까요?
2. VirtualBox와 VMware 중에서 낮은 사양의 PC에서도 안정적으로 구동되는 것은 무엇일까요?
3. 본래 설치된 OS에서 VPN을 사용해도 가상머신의 네트워크에는 영향을 미치지 않고, 그 반대의 경우에도 그러한 것이 맞는지요?
질문 이외에도 제가 잘못 생각하고 있는 부분이 있다면 말씀해주시면 감사하겠습니다!
그럼 편안한 저녁 되시고 내일과 모레 쌀쌀해진다는데 감기 조심하세요~ ^^
작성자
댓글 2
humit 
신고
"humit님의 댓글"
이 댓글을 신고 하시겠습니까?
번번이 상세히 답변해주셔서 감사합니다!
1.
가상머신을 사용하려고 한 것은 하나의 PC에서 VPN을 사용하지 않은 접속과 VPN을 사용한 접속을 한꺼번에 처리하기 위해서였어요.
그리고 부차적으로 토렌트를 통해 받은 파일이 보안상 위험할 수 있으니
카스퍼스키나 비트디펜더 같은 강력한(?) 백신을 설치하고, 아울러 가상화를 통해 일종의 샌드박스로써 활용하기 위해서였어요.
(본문에 토렌트를 가상머신에서 돌린다고 적었어야 했는데 반대로 적었네요 ㅠㅠ)
2.
말씀해주신대로 퍼포먼스 측면에서 Vmware를 택해야겠네요.
제가 크롤링할 때에는 대체로 Selenium 설정에서 이미지는 끄고 텍스트 위주로 수집해서 CPU 점유율이 높지는 않을 것 같네요.
그리고 비교적 최근에 출시된 intel i3 U 모델들은 전력소모가 크지 않으니 이를 사용한 제품군도 더 알아봐야겠네요~
3.
설명해주신 덕분에 NAT vs Bridged mode에 대해 구글링해서 찾아봤네요! 감사합니다 :)
이미 Vultr 도쿄리전에 Squid를 사용해놓은 상태여서 프록시를 사용할 수도 있는데 말씀해주신대로 프록시도 활용해보겠습니다.
다만 Selenium webdriver에서 어떻게 설정해야 하는지에 대해서는 좀 더 공부해야겠네요!
https://stackoverflow.com/questions/2887978/webdriver-and-proxy-server-for-firefox
그럼 날씨가 쌀쌀해졌는데 감기 조심하시고 좋은 하루 되세요!
다시 한 번 감사드립니다 :)
신고
"이니스프리님의 댓글"
이 댓글을 신고 하시겠습니까?
1. 굳이 가상 머신을 사용하시려는 이유가 있을까요??? 다른 운영체제인 리눅스를 돌리시는 것도 아니라서 굳이 가상머신은 필요하지 않을 것 같습니다.
2. Virtualbox보다 Vmware가 저사양 컴퓨터에서는 더 좋은 것으로 알고 있습니다. 다만 vmware player는 스냅샷 기능이라던지 그런 기능은 사용할 수 없기 때문에 선택을 하시는 것이 필요할 것 같습니다. 그리고 크롤링 작업이 해당 페이지가 동영상 페이지나 이미지가 많이 있거나 에니메이션 기능이 많이 있는게 아닌 이상 크게 상관이 없는 부분이라 크게 지장은 없을 것 같기는 하네요.. 다만 제가 하드웨어 쪽은 잘 알지 못해서 해당 CPU로 가상 머신을 돌렸을 때 잘 동작할지는 잘 모르겠네요.
3. NAT 모드인 경우에는 Host 인터넷 연결을 Guest가 그대로 사용하는 형태라서 VPN을 사용하면 영향을 받습니다. NAT의 경우 Host OS가 공유기와 같은 역할을 하기 때문에 그렇습니다.
VPN 모드 말고 Proxy를 사용한다면 Firefox에만 해당 Proxy를 설정하면 나머지 토렌트나 크롬, IE, 트레이딩 프로그램에는 해당 프록시가 적용이 되지 않으므로 해당 방식으로 관리하는 방법도 있습니다.