MediaCrawler 开源爬虫项目
这是一个开源的爬虫项目,它支持国内的 7 大社交平台,
支持自动搜索、爬取指定的帖子视频、爬取评论区、爬取指定博主等等,
爬取完数据,可以保存到数据库,导出成 Excel 文件、JSON 文件,
也可以进行简单的处理,生成词云图。
各大社交平台的数据,还是非常有价值的,
所以这个项目也多次登上 GitHub 榜首,短时间内就拿到了接近 30 k Star。
MediaCrawler:https://github.com/NanmiCoder/MediaCrawler