우리집앞마당

파이썬 의존성들을 설치할때 pip 패키지 관리자를 사용하게된다. 이때 python2.x, python3.x 버전이 모두 있을경우 pip로 설치시 python2 버전에 해당하는 의존성들을 받게된다. 애초에 왜 python 버전을 2개 다 갖고있나생각할 수도있지만 Mac의 경우 기본적으로 python2.x 를 내장하고있기때문에 나중에 3를 설치한다면 이런 문제에 맞딱뜨릴수밖에 없다.(python2 지워버릴까 고민중..) 이럴땐 pip3 명령어로 python3 용 의존성을 받을 수 있다. 예) pip3 install scrapy

요즘 '파이썬으로 웹크롤러 만들기' 라는 책을 보고있다. 파이썬은 생전 처음쓰는 언어라 간단한것도 꽤나 시간을 소모하며 진행하고있는데, https 사이트를 파싱하는 예제가있다. 정확히말하면 예제에는 http로 나와있는데 그 사이에 이 사이트가 https를 적용한건지.. 지금은 https다. 별 생각없이 https 경로를 적어주면 '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed' 이런 메세지와 함께 정상적으로 작동하지않는다. 이럴땐 아래처럼 의존성을 추가해주면 된다. import ssl context = ssl._create_unverified_context() 뭐 어차피 별거없는 풀 예제코드는 이렇다. from urllib.request impo..