MediaCrawler – 开源免费支持国内主流自媒体平台爬虫,支持公开信息抓取

开源免费,支持国内主流社媒平台公开信息抓取 支持小红书、抖音、快手、B站、微博、贴吧、知乎等,基于 Playwright 自动化。

技术原理

  • 核心技术:基于 Playwright 浏览器自动化框架登录保存登录态
  • 无需JS逆向:利用保留登录态的浏览器上下文环境,通过 JS 表达式获取签名参数
  • 优势特点:无需逆向复杂的加密算法,大幅降低技术门槛

功能特性

平台关键词搜索指定帖子ID爬取二级评论指定创作者主页登录态缓存IP代理池生成评论词云图
小红书
抖音
快手
B 站
微博
贴吧
知乎

安装使用说明

https://github.com/NanmiCoder/MediaCrawler

© 版权声明
THE END
喜欢就支持一下吧
点赞33 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容