Mindket

MediaCrawler

新上架第 1 版 · 更新于
GitHub 热门
星标70.7k

概览

一款自动化数据采集工具,可抓取小红书、抖音和 Bilibili 等主流社交媒体平台的帖子内容及评论。它通过浏览器自动化技术,支持关键词搜索、个人主页抓取以及多媒体下载。

MediaCrawler 是一款 GitHub 上的开源项目,属于开发类,由 Mindket 上架。可免费获取。当前为第 1 版,最近更新于 。按它的 README 从 GitHub 安装。Mindket 的设置说明可在你的 Mindket 账户获取,以 zip 压缩包下载。

速览

先运行
uv sync
uv run playwright install

关于

它是什么

MediaCrawler 是一款用于采集社交媒体平台公开信息的工具。它通过调用浏览器实例来保持你的登录状态,从而避免了处理复杂的安全逆向逻辑。

适合谁

适合从事社交媒体数据研究的学者和学生。

用在哪里

你可以在本地计算机上通过 Python 环境或 Web 界面运行此工具。

如何设置

  1. 克隆项目代码。
  2. 安装包管理器。
  3. 使用包管理器安装相关依赖。
  4. 在 Chrome 浏览器设置中启用远程调试功能。
uv sync
uv run playwright install

如何使用

你可以通过命令行选择平台和数据类型来运行该工具。

uv run main.py --platform xhs --lt qrcode --type search

示例

你可以采集特定关键词的帖子信息及评论。工具会利用你的会话浏览平台,搜集数据并将其保存到本地。

新手与专家

对于新手来说,该工具就像是一个自动化的助手,通过模拟你在网页上的操作来收集你所看到的内容。对于经验丰富的数据采集者,该工具利用浏览器自动化框架来维持会话活跃,以更易于维护的方式应对平台安全机制的更新,无需直接调用 API。

注意事项

  • 并非所有平台都支持多媒体下载。
  • 该工具会与本地文件、浏览器会话及网络进行交互。
  • 在初始登录阶段,你必须提供明确的授权。

README 和文件

README

MediaCrawler

一款自动化数据采集工具,可抓取小红书、抖音和 Bilibili 等主流社交媒体平台的帖子内容及评论。它通过浏览器自动化技术,支持关键词搜索、个人主页抓取以及多媒体下载。

由 GitHub 上的 NanmiCoder 制作。这些说明由 Minda 根据其 README 整理编写;项目原文件及许可协议请查看其代码仓库。

About

What it is: MediaCrawler 是一款用于采集社交媒体平台公开信息的工具。它通过调用浏览器实例来保持你的登录状态,从而避免了处理复杂的安全逆向逻辑。

Who it suits: 适合从事社交媒体数据研究的学者和学生。

Where to use it: 你可以在本地计算机上通过 Python 环境或 Web 界面运行此工具。

How to set it up:

  1. 克隆项目代码。
  2. 安装包管理器。
  3. 使用包管理器安装相关依赖。
  4. 在 Chrome 浏览器设置中启用远程调试功能。
uv sync
uv run playwright install

How to use it: 你可以通过命令行选择平台和数据类型来运行该工具。

uv run main.py --platform xhs --lt qrcode --type search

Example: 你可以采集特定关键词的帖子信息及评论。工具会利用你的会话浏览平台,搜集数据并将其保存到本地。

For newcomers and experts: 对于新手来说,该工具就像是一个自动化的助手,通过模拟你在网页上的操作来收集你所看到的内容。对于经验丰富的数据采集者,该工具利用浏览器自动化框架来维持会话活跃,以更易于维护的方式应对平台安全机制的更新,无需直接调用 API。

Good to know:

  • 并非所有平台都支持多媒体下载。
  • 该工具会与本地文件、浏览器会话及网络进行交互。
  • 在初始登录阶段,你必须提供明确的授权。

On GitHub, 5 November 2026

  • Stars: 70,198
  • Forks: 13,307
  • Watching: 260
  • Open issues and pull requests: 222
  • Language: Python
  • License: 见代码仓库
  • Trending: GitHub 趋势榜日榜第 2 名(2026 年 11 月 5 日)

Links

Get the code

git clone https://github.com/NanmiCoder/MediaCrawler.git

然后按照其 README 中的说明进行设置。此工具包中的内容无法直接独立运行。

文件
README.md  3 KB

1 个文件,共 3 KB,以 zip 压缩包下载。

更新内容

  • 第 1 版 · 2026-11-05

评价

还没有评分

写评价

还没有评价。

大家怎么说

Hacker News、Bluesky、X、Reddit、Facebook 和 YouTube 上提到这个项目的帖子和评论,来自每周一次的搜索和 Trendshift。它们不是 Mindket 写的,也未经核实,点开即可在原帖处阅读。

GitHub Trending8. https://github.com/hugohe3/ppt-master - Python, 589 stars today 9. https://github.com/JCodesMore/ai-website-cloner-template - TypeScript, 750 stars today 10. https://github.com/garrytan/gstack - TypeScript, 674 stars today 11. https://github.com/NanmiCoder/MediaCrawler - Python, 394 stars […]1 赞 · 1 条回复@renyang5201研究爆款还在一条条刷?MediaCrawler 能把小红书、抖音的数据批量扒下来! GitHub 接近 7 万 Star,开源。笔记、视频、评论,连 B 站弹幕都能采集。 做选题、挖评论区需求的,先收藏。 项目链接:https://t.co/Wqy37NQfav https://t.co/2kuqPfSaVkGitHub Trending🚀 Skyrocketing! 🚀 (200+ new stars) 📦 NanmiCoder / MediaCrawler ⭐ 60,729 (+215) 🗒 Python 小红书笔记 | 评论爬虫、抖音视频 | 评论爬虫、快手视频 | 评论爬虫、B 站视频 | 评论爬虫、微博帖子 | 评论爬虫、百度贴吧帖子 | 百度贴吧评论回复爬虫 | 知乎问答文章|评论爬虫1 条回复@lin_xiao_xia想看懂全网内容风向?这个开源项目值得收藏 MediaCrawler 可以抓取小红书、抖音、快手、B站、微博、百度贴吧、知乎等平台的公开内容与评论,方便做数据分析、舆情研究和内容趋势观察 项目地址:https://t.co/beWSr3dvbK https://t.co/TNBRTEC85XGitHub Trending📈 Today's GitHub Trending: 1. https://github.com/semantica-agi/semantica - Python, 967 stars today 2. https://github.com/msitarzewski/agency-agents - Shell, 1352 stars today 3. https://github.com/NanmiCoder/MediaCrawler - Python, 215 stars today 4. https://github.com/addyosmani/agent-skills - […]1 条回复@AsWill11Top 10 Open Agent Web & Browser Tools: 1. Firecrawl - https://t.co/OYCOZDLcJb 2. Browser Use - https://t.co/qlhT9zukHT 3. Agent-Reach - https://t.co/MI5Lmd1Zs2 4. Scrapling - https://t.co/3sgM5hxe5o 5. Crawl4AI - https://t.co/JAUrQLebA0 6. MediaCrawler - https://t.co/gZtcRQYhxW 7. Agent Browser -…デイリーGitHubトレンド今日のGitHubトレンド NanmiCoder/MediaCrawler 小紅書、抖音、快手、Bilibili、微博、貼吧、知乎などの中国主要SNSプラットフォームから公開情報を収集するためのデータ収集ツールです。 キーワード検索、指定投稿の取得、クリエイターページの収集などの機能を備えています。@denziideng6.8 万 Star 的开源神器,一键抓取小红书、抖音、B 站等 7 个平台的公开数据!🔥 MediaCrawler - 自媒体平台爬虫 🕷️ 一个功能强大的多平台自媒体数据采集工具,支持小红书、抖音、快手、B站、微博、贴吧、知乎等主流平台的公开信息抓取。👇 🔗 https://t.co/uGfxnaO8nV https://t.co/aoNhrwmROQGitHub Trending9. https://github.com/different-ai/openwork - TypeScript, 58 stars today 10. https://github.com/obra/superpowers - Shell, 634 stars today 11. https://github.com/MoonshotAI/FlashKDA - Cuda, 216 stars today 12. https://github.com/NanmiCoder/MediaCrawler - Python, 794 stars today 13 […]@laoanbest🔥开源神器 MediaCrawler|一个工具搞定 7 大平台公开数据 还在挨个平台手动扒素材、整理数据? MediaCrawler 直接一站式搞定 抖音|小红书|B 站|快手|知乎|微博|贴吧 内容调研|竞品分析|行业数据复盘都能用 省去自己写脚本的痛苦,工作效率直接翻倍 https://t.co/XqL64EpPzDデイリーGitHubトレンド今日のGitHubトレンド NanmiCoder/MediaCrawler 中国の主要なSNSプラットフォーム(小紅書、抖音、快手、Bilibili、微博、貼吧、知乎など)から公開情報を収集するための多機能データ収集ツールです。 キーワード検索や指定投稿の取得、コメント収集などの機能を備えています。@lanmeiflying这个爬虫项目不错,值得收藏 https://t.co/2sXpQy3RG7

搜索日期

Mindket 的更多商品

查看 Mindket 的全部商品

Bonsai-27B-GGUF

lmstudio-community · 工具包

面向 LM Studio 的 27B Bonsai 模型 GGUF 转换版,含 3.80 GB 的 Q1_0 语言文件和 0.93 GB 的 BF16 视觉投影器。已测试文本、视觉和并行工具调用。

新上架

以每权重 2.9 位的 EXL3 量化运行 DeepSeek-V4.1-Flash-1017,这是一份 196 GiB 的副本,适合在自己硬件上部署大模型的人。困惑度与原模型相差不大。

新上架

MusicGen Small

facebook · 工具包

根据文字描述或音频提示生成短音乐片段,是 facebook MusicGen 的 small 检查点。适合想在自己电脑上试用文字生成音乐的开发者和音乐爱好者。

新上架

开发类的相似商品

查看开发类的全部商品

Lexnet

alpindale · 工具包

用一个只有约 984 个权重的小型神经网络,为 C 源代码的每个字符打上语法高亮标签,通过一个小小的 C 程序运行。适合对手工设计的网络好奇的开发者和研究者。

新上架

FLUX.2 Klein LoRA Studio

prithivMLmods · 工具包

在浏览器或你自己的电脑上,用一个 Gradio 应用试用 FLUX.2 Klein 图像模型的一组 LoRA。适合制作或测试 AI 图片的人。

新上架

anaksor-ocr

Sokheng · 工具包

这个模型从文档、收据和路牌照片里读取高棉语和英语文字,用一个检测器找文本行,再用识别器读每一行。适合需要在 Python 里做高棉语 OCR 的开发者。

新上架