Python/파이썬 웹 크롤러
-
2. 크롤러 제작 시 최고(?)의 개발환경, 주피터 노트북Python/파이썬 웹 크롤러 2019. 5. 16. 17:12
1. jupyter notebook 주피터라고 읽는 경우가 흔하겠지만, '파이'썬의 느낌을 살려서 주'파이'터라고 읽는 경우도 있는 것 같습니다. 저는 주파이터로 읽는 게 재미있네요. 일반적인 용도의 파이썬 개발환경이라면 파이참(PyCharm)을 선택하겠지만, 크롤러 제작이 목표라면 주피터가 훨씬 좋은 것 같습니다. 주파이터는 블럭 단위로 프로그래밍을 할 수 있는 장점이 있습니다. 복잡한 사이트를 크롤링할 때는 단계별로 쪼개면서 코딩과 테스트를 병행하는데, 이때 주파이터의 블럭이 많은 도움이 됩니다. https://jupyter.org/ 2. 주피터 노트북의 설치 공식 홈페이지의 설치 항목이 가장 정확합니다. !!! 하지만 제 맘데로 설치를 했네요. https://jupyter.org/install.ht..
-
1. 파이썬 설치 / 파워쉘 탐색기에서 실행하기Python/파이썬 웹 크롤러 2019. 5. 16. 16:49
파이썬 설치 파이썬 설치 관련해서는 인터넷에 좋은 한글 문서들이 많습니다. 그래서 넘어가려다가 넘어가기도 섭섭한 것 같아서, 윈도우 환경 설치만 간략히 정리합니다. 먼저 파이썬 공식 홈페이지로 갑니다. https://www.python.org/downloads/ 최신 버전을 다운로드 받습니다. 자신의 OS 가 64비트라면 64비트를 잘 모르시겠다면 32비트를 선택하시면 됩니다. * 이 문서는 3.7.3 버전을 기준으로 작성되었습니다. 설치가 완료되면 리부팅한 뒤에 쉘(커맨드라인)에서 python을 입력해서 파이썬이 정상적으로 실행되면 됩니다. 너무 허전한 느낌이라.. 팁을 하나 남기겠습니다. TIP) 윈도우 탐색기에서 파워쉘 실행 1. 탐색기의 여백에서 'shift + 마우스 우클릭'을 하면 '여기에 P..
-
0. 파이썬을 배우자. 파이썬 무료 강의, 이북 추천.Python/파이썬 웹 크롤러 2019. 5. 16. 16:32
크롤러를 만들기 전에 파이썬의 기본적인 부분은 알아둬야 할 것 같습니다. 파이썬은 책 없이 인터넷으로 공부를 해도 충분할 정도로, 퀄리티 높은 한글 공개 문서들이 많습니다. 몇 가지를 소개해 보겠습니다. 1. 점프 투 파이썬 https://wikidocs.net/book/1 오프라인 책으로도 출판되었고, 국내 파이썬 입문서 중에 가장 많이 팔린 책으로 알고 있습니다. 입문자라면 점프 투 파이썬이 좋을 것 같네요. 2. 예제로 배우는 Python 프로그래밍 http://pythonstudy.xyz/Python/Basics 제가 가장 많이 방문한 사이트입니다. 다양한 부분을 '가볍게' 다루고 있습니다. 빠른 시간 내에 파이썬을 파악할 수 있도록 구성되어 있네요. 다른 프로그래밍 언어를 경험해 본 분들께 추천..