세상사즐겁고행복하게

웹크롤러 추천 - [오픈소스] Scrapy : 파이썬 웹크롤러 웹크롤러를 만들기 위해 자료를 찾다가 발견한 파이썬 공개 패키지이다. * 설명 http://www.itworld.co.kr/slideshow/87408?slide=3#stage_slide Scrapy 스크래피(Scrapy)는 웹 사이트를 돌아다니면서 구조화된 데이터를 추출하기 위해 파이썬(Python)으로 작성한 애플리케이션 프레임워크이다. 그리고 나서 이 데이터를 데이터 마이닝, 정보 처리, 이력 기록 등 일련의 유용한 애플리케이션에 활용할 수 있다. 본래 화면 스크랩(좀 더 정확히 말하자면 웹 스크랩)용으로 개발된 스크래피는 API를 이용한 데이터 추출(아마존 어소시에이츠 웹 서비스(Amazon Associates Web Services)..

* 파이썬 requests모듈로 웹크롤링 http://itissmart.tistory.com/52

아래의 출처에서도 보세요.. http://flowarc.tistory.com/entry/%ED%8C%8C%EC%9D%B4%EC%8D%ACPython-343-%EC%9C%88%EB%8F%84%EC%9A%B0%EC%97%90-%EC%84%A4%EC%B9%98-%EB%AC%B4%EC%9E%91%EC%A0%95-%EB%94%B0%EB%9D%BC%ED%95%98%EA%B8%B0 링크 : https://www.lucypark.kr/blog/2013/02/06/python-and-ipython-on-windows/ 윈도우에 파이썬, IPython 설치하기 완벽 가이드 파이썬 다운로드 페이지에서 윈도우용 설치 파일을 다운로드 받아 실행한다. (32비트용, 64비트용) 설치가 완료되면 C:\Python27이라는 새로운 ..

출처 : http://ssse.tistory.com/36 윈도우에서 파이썬 설치하기 (virtualenv, pip 사용법)