icrawler 쓰기 넘나 편하다

크롤러 만드려고 보다가 google은 따로 api를 써야 하는 것 같길래 좀 찾아봤는데

icrawler라고 하는 파이썬 크롤링 라이브러리를 이미 누가 만들어놨더라.

https://pypi.python.org/pypi/icrawler/0.1.5

이런거 한번 제대로 만들어보고 싶다는 생각이 들었다.

미친 짓일지도 모르지만 나중에 C++ 소켓으로 한번 해볼까...