爬虫 相关 Skills

通过 Python SDK 使用 Scrapfly API 爬取网站，支持结构化数据提取与批量下载。

根据URL自动生成Python爬虫脚本，支持动态页面与反爬绕过。

企业级网页数据采集与反爬处理，支持动态渲染和分布式爬取。

定向抓取Webnovel与ReelShorts内容，支持分级与钉钉播报。

爬取妈妈网育儿文章并保存为Markdown文件，支持分类与关键词搜索。

提供专业级Python爬虫系统设计与数据采集解决方案，支持反爬策略与断点续传。

基于 Python 的无浏览器、可复现网页爬虫，支持预设任务与断点续传。

基于 Node.js 的生产级批量网页爬取工具，支持代理轮换与自动重试。

综合房产中介网站爬虫技能，支持安居客、贝壳找房、链家、搜房网的数据抓取，包含反爬虫绕过策略和数据提取功能。

使用 red-crawler CLI 工具发现小红书联系人，需安装 red-crawler 命令行工具及 Playwright 浏览器运行时。