• 목록
  • 아래로
  • 위로

안녕하세요?


크롤링 용도로 사용하는 미니PC를 새로 마련하여 세팅하려고 하는데요.


시스템 트레이딩 및 토렌트 머신으로도 활용하려고 합니다.

(토렌트는 아주 가끔 사용합니다.)



우분투로 구축을 하면 좋겠지만 제가 알아본 바로는 키움 API는 윈도우 7~10에서만 작동한다고 하네요 ㅠㅠ


제 경험상 Selenium(특히 파폭)도 우분투보다 윈도우에서 안정적인 것 같구요.



그래서 기본적으로 설치된 윈도우 10 환경에서 VPN을 이용하여 크롤링(+토렌트)을 하고


가상머신에서 윈도우 10 환경에서 크롤링 및 시스템 트레이딩을 하려고 합니다.

(국내 IP로만 크롤링을 할 수 있는 사이트가 있기 때문에 이렇게 배분하여 사용하려고 합니다.)



현재 판매 중인 미니PC 중에서 저전력 모델로는 셀러론 J4005을 사용한 제품들이 있던데 패스마크에서 1544점 나오더군요.


제가 여쭤보고 싶은 점은 다음과 같습니다.



1. J4005의 퍼포먼스로 윈도우 10을 가상머신으로 원활하게 구동할 수 있을까요? 혹시 i3 정도가 필요할까요?


2. VirtualBox와 VMware 중에서 낮은 사양의 PC에서도 안정적으로 구동되는 것은 무엇일까요?


3. 본래 설치된 OS에서 VPN을 사용해도 가상머신의 네트워크에는 영향을 미치지 않고, 그 반대의 경우에도 그러한 것이 맞는지요?



질문 이외에도 제가 잘못 생각하고 있는 부분이 있다면 말씀해주시면 감사하겠습니다!


그럼 편안한 저녁 되시고 내일과 모레 쌀쌀해진다는데 감기 조심하세요~ ^^


작성자
이니스프리 119 Lv. (0%) 1876250/115200000EXP

당분간 일신상의 사정으로 쪽지나 댓글로 답변을 드리기 어렵습니다. 죄송합니다.

 

CSVpuymXAAAVVpd.jpg

댓글 2

title: 황금 서버 (30일)humit
profile image

1. 굳이 가상 머신을 사용하시려는 이유가 있을까요??? 다른 운영체제인 리눅스를 돌리시는 것도 아니라서 굳이 가상머신은 필요하지 않을 것 같습니다.

2. Virtualbox보다 Vmware가 저사양 컴퓨터에서는 더 좋은 것으로 알고 있습니다. 다만 vmware player는 스냅샷 기능이라던지 그런 기능은 사용할 수 없기 때문에 선택을 하시는 것이 필요할 것 같습니다. 그리고 크롤링 작업이 해당 페이지가 동영상 페이지나 이미지가 많이 있거나 에니메이션 기능이 많이 있는게 아닌 이상 크게 상관이 없는 부분이라 크게 지장은 없을 것 같기는 하네요.. 다만 제가 하드웨어 쪽은 잘 알지 못해서 해당 CPU로 가상 머신을 돌렸을 때 잘 동작할지는 잘 모르겠네요.

3. NAT 모드인 경우에는 Host 인터넷 연결을 Guest가 그대로 사용하는 형태라서 VPN을 사용하면 영향을 받습니다. NAT의 경우 Host OS가 공유기와 같은 역할을 하기 때문에 그렇습니다.

 

VPN 모드 말고 Proxy를 사용한다면 Firefox에만 해당 Proxy를 설정하면 나머지 토렌트나 크롬, IE, 트레이딩 프로그램에는 해당 프록시가 적용이 되지 않으므로 해당 방식으로 관리하는 방법도 있습니다.

comment menu
2019.10.16. 01:29

신고

"humit님의 댓글"

이 댓글을 신고 하시겠습니까?

이니스프리 작성자 → humit
profile image

번번이 상세히 답변해주셔서 감사합니다!

 

1.

가상머신을 사용하려고 한 것은 하나의 PC에서 VPN을 사용하지 않은 접속과 VPN을 사용한 접속을 한꺼번에 처리하기 위해서였어요.

그리고 부차적으로 토렌트를 통해 받은 파일이 보안상 위험할 수 있으니

카스퍼스키나 비트디펜더 같은 강력한(?) 백신을 설치하고, 아울러 가상화를 통해 일종의 샌드박스로써 활용하기 위해서였어요.

(본문에 토렌트를 가상머신에서 돌린다고 적었어야 했는데 반대로 적었네요 ㅠㅠ)

 

2.

말씀해주신대로 퍼포먼스 측면에서 Vmware를 택해야겠네요.

제가 크롤링할 때에는 대체로 Selenium 설정에서 이미지는 끄고 텍스트 위주로 수집해서 CPU 점유율이 높지는 않을 것 같네요.

그리고 비교적 최근에 출시된 intel i3 U 모델들은 전력소모가 크지 않으니 이를 사용한 제품군도 더 알아봐야겠네요~

 

3.

설명해주신 덕분에 NAT vs Bridged mode에 대해 구글링해서 찾아봤네요! 감사합니다 :)

 

이미 Vultr 도쿄리전에 Squid를 사용해놓은 상태여서 프록시를 사용할 수도 있는데 말씀해주신대로 프록시도 활용해보겠습니다.

다만 Selenium webdriver에서 어떻게 설정해야 하는지에 대해서는 좀 더 공부해야겠네요!

https://stackoverflow.com/questions/2887978/webdriver-and-proxy-server-for-firefox

 

그럼 날씨가 쌀쌀해졌는데 감기 조심하시고 좋은 하루 되세요!

다시 한 번 감사드립니다 :)

comment menu
2019.10.16. 10:20

신고

"이니스프리님의 댓글"

이 댓글을 신고 하시겠습니까?

권한이 없습니다.
번호 제목 글쓴이 날짜 조회 수
공지 [작업 완료] 설 명절 맞이 서버 업데이트 안내 3 마스터 24.02.11.17:21 380
공지 [중요] 호스팅 만료와 관련하여 일부 수칙이 변경됩니다. 4 마스터 23.01.14.02:23 4063
공지 [필독] 질문하는 방법 17 마스터 18.02.23.03:09 4464
622 파이썬에서 requests.Session()에 대한 간단한 질문을 드립니다 ^^ 2 이니스프리 19.11.09.21:45 1965
621 리눅스에서 랜섬웨어 감염 원인이 무엇일까요? 14 NoYeah 19.11.08.17:33 246
620 명함 제작 업체 추천 부탁드립니다! 2 갱생협스 19.11.08.16:57 244
619 피규어샵 방문과 관련하여 질문 드립니다 6 이니스프리 19.11.06.21:32 205
618 싸이월드 미니홈피 크롤링 과정에서 swf 파일 다운로드와 관련하여 질문 드립니다 ㅠㅠ 6 이니스프리 19.11.05.00:45 891
617 갤럭시노트10+ 구매해도 괜찮을까요?? 2 이니스프리 19.11.03.16:03 185
616 PC 원격접속을 위한 스마트폰 앱 추천을 부탁드립니다. 14 이니스프리 19.11.02.22:21 294
615 히어로 무비 추천 부탁드립니다! 30 이니스프리 19.10.29.13:48 307
614 크롤링한 어절 또는 문장의 유사성을 구하는 방법에 대해 질문 드립니다 9 이니스프리 19.10.26.22:22 401
613 무접점 방식의 키보드의 윤활과 관련하여 질문 드려요~! 이니스프리 19.10.25.22:57 198
612 스마트폰 지문인식 과정에서 에러가 덜 발생하는 방법을 질문 드립니다 6 이니스프리 19.10.25.20:08 439
611 JS 반복 처리에 대한 로컬저장문제와 PHP의 Request의 비동기처리 2 Hanam09 19.10.20.23:10 220
610 VPS에서 홈서버의 네트워크 접속 이상 여부를 확인하는 방법이 있을까요? 6 이니스프리 19.10.15.01:26 255
크롤링 머신(미니PC) 세팅과 관련하여 질문 드립니다 2 이니스프리 19.10.14.20:23 504
608 파이썬에서 유니코드 문자열 처리와 관련하여 질문 드립니다 6 image 이니스프리 19.10.12.21:10 1106
607 유튜브 페이지 가져오는 방법이 뭐가있을까요? 9 image 슬기 19.10.11.16:52 887
606 워드프레스 백업 툴 추천 부탁드려요! 10 갱생협스 19.10.04.19:53 227
605 일본어 시험 초급(?)을 따야되는데 조언을 부탁드립니다 ㅠㅠ 6 이니스프리 19.10.04.12:06 433
604 리눅스에서.. 무선랜카드 활성화?켜기? 3 홀민 19.09.10.02:26 369
603 [미디어위키] 시각편집기 no vrs 260578 19.09.03.19:49 231