分布式微博爬虫


ResolveWang/WeiboSpider

分布式微博爬虫,部署简单,接口丰富,文档详细,演示视频支持,可灵活定制满足自己的需求。已实现内容包括微博用户资料、微博信息、评论信息和转发信息抓取。

GitHub 上发现的一个分布式微博爬虫程序,看上去很不错的样子(虽然我对爬虫不怎么熟悉)。但重要的,作者对如何构建这个程序写了一系列详尽的文章:WeiboSpider Wiki,文章被各大知名 Python 公众号转载。对深入学习爬虫的朋友应该有很大帮助。

  • 目前还没有回复
添加一条新回复
登录 或者 注册 后发表回复