gitmyhub

pyspider

HTML ★ 68 updated 8y ago

知乎爬虫和v2ex爬虫的实现。使用python的pyspider爬虫进行开发,主要爬取知乎的问题和评论,以及v2ex的帖子。数据转储到mysql数据库,用于zhihu项目的使用。

No plain-English explanation yet — one is being written right now. Check back in a minute.