数据采集

做竞品分析、舆情监控、用户研究，最头疼的就是手动复制粘贴数据，一条条从平台搬运既费时间又容易出错。自己写爬虫？每个平台结构不一样，反爬机制各不相同，光是绕过加密签名就劝退一大半人。今天分享一款 GitHub 上 Star 数极高的开源多平台自媒体数据采集工具 MediaCrawler，一行命令批量抓取小红书、抖音、快手、B站、微博、贴吧、知乎七大平台的公开数据，无需懂 JS 逆向，本地部署即可使用。 一、项目基础档案 项目名称：MediaCrawler 开源地址：https://github.com/NanmiCoder/MediaCrawler 开源协议：MIT（可修改、可私有化，保留版权声明即可） 作者：NanmiCoder（独立开发者） 开发语言 & 技术栈：Python + Playwright + Node.js 支持平台：小红书、抖音、快手、B站、微博、贴吧、知乎七大平台 数据输出：CSV / JSON / JSONL / Excel / SQLite / MySQL 核心适用人群：数据分析师、竞品监控团队、学术研究者、爬虫学习...