scrapling-fetch-pro
SKILL.md
Scrapling Fetch Pro
专业版网页抓取工具,完整支持微信公众号文章爬取,智能模式检测,噪音清理。
主要功能
🌐 网页内容抓取
- 智能正文提取:自动识别并提取网页正文内容,无需手动指定选择器
- Markdown 输出:将 HTML 自动转换为干净的 Markdown 格式
- 字符数控制:支持自定义最大输出字符数(默认 30000)
🔓 反爬绕过
- Cloudflare Turnstile:自动绕过 Cloudflare 反爬验证
- 浏览器指纹伪装:隐身模式下模拟真实浏览器,避免被检测
📱 微信公众号支持 ⭐
- 完整爬取:支持微信公众号文章完整内容抓取
- 噪音清理:自动移除底部广告、工具栏等无用内容
- 标题提取:支持微信公众号专用标题选择器