软件下载帮助文档新闻资讯

Skill UI

浏览并发现 16597+ 精选技能

全部编程开发人工智能设计创意产品商业数据科学市场营销职场通用效率工具硬件工程语言学习

搜索网页抓取，共找到 14 条记录

默认排序最新上传最多下载

Firecrawl 网页自动采集

firecrawl-automation

ComposioHQ/awesome-claude-skills

通过 Composio Firecrawl 集成，可在 Claude Code 中直接爬取页面、批量采集链接、提取结构化数据并监控抓取任务，适合终端驱动的 Web 数据流工作。

结构化数据提取与批量网页抓取

firecrawl-core-workflow-b

jeremylongshore/claude-code-plugins-plus-skills

这是一个高级工作流，用于执行复杂的网页数据采集任务。它支持三大功能：使用JSON Schema或自然语言提示进行LLM驱动的结构化数据提取；高效批量抓取多个已知URL；以及快速生成网站地图，发现目标站点所有可访问的URL。适用于需要结构化、可编程类型数据而非原始文本内容的场景。

Firecrawl爬虫配置与认证

firecrawl-install-auth

jeremylongshore/claude-code-plugins-plus-skills

本指南提供Firecrawl SDK的完整配置教程，涵盖Node.js和Python两种环境。它详细介绍了如何使用npm或pip安装SDK，并指导用户如何通过设置环境变量来安全配置API密钥。适用于需要将网页内容结构化抓取、提取Markdown或构建新爬虫项目的开发场景。

网页抓取管道可观测性

firecrawl-observability

jeremylongshore/claude-code-plugins-plus-skills

本技能提供了Firecrawl网络爬取操作的全面可观测性模式。它覆盖了抓取成功率、积分消耗追踪、内容质量评估和延迟监控等关键指标。适用于构建健壮的监控仪表盘、设置主动故障警报，确保爬取工作流的稳定与高效。

深度网页抓取与内容提取

firecrawl-scraper

sickn33/antigravity-awesome-skills

使用Firecrawl API进行深度网页抓取，支持内容提取、截图捕获和PDF解析。它能处理复杂的页面交互（如点击和滚动），适用于需要从网页获取结构化、深度信息，或进行批量数据爬取的高级数据分析场景。

PhantomBuster 自动化工具

phantombuster-automation

ComposioHQ/awesome-claude-skills

通过 Composio MCP 统一管理 PhantomBuster 云端代理，自动完成潜在客户挖掘、网页数据抓取、组织资源监控、容器历史审查、运行统计导出与 hCaptcha 验证，提升自动化控制效率。

智能多策略网页抓取器

sickn33/antigravity-awesome-skills

智能多策略网页抓取工具，能在静态抓取、浏览器自动化、API 及搜索等路径之间切换，提取表格、列表、价格等结构化数据，自动翻页、验证、清洗、去重并输出 CSV/JSON，适合监控、重复采集与差异分析。

Apify：运行爬虫和数据提取

apify-hello-world

jeremylongshore/claude-code-plugins-plus-skills

本指南详细介绍了如何使用Apify Client SDK。学习执行远程爬虫任务（如内容爬取和网页抓取），掌握处理异步运行状态，并从爬取结果的数据集和键值存储中提取结构化数据。是实现网页抓取功能的关键技能。

网页访问自动化

用于搜索、抓取网页、登录后操作和动态页面交互的浏览器技能，适合访问真实网站、提取内容并在 Chrome 环境中完成网页任务。

简单HTTP数据抓取工具

opensquilla/opensquilla

本工具是一个用于通过HTTP/HTTPS抓取单个URL内容的轻量级实用程序。它支持GET、POST、PUT和DELETE等多种请求方法，并配置了超时和最大字节数限制。它非常适合在工作流（DAG）中执行简单的数据获取步骤，相比复杂的LLM代理调用速度更快。不适用于复杂的网页爬取或JS渲染。

Puppeteer 浏览器自动化与爬取

puppeteer-skill

sickn33/antigravity-awesome-skills

该技能用于生成Puppeteer脚本，实现强大的浏览器自动化、数据爬取和PDF生成功能。适用于模拟用户在网页上的复杂行为，进行全流程的网页测试，以及从动态网站中抓取数据和生成报告。

浏览器自动化与AI优化快照

本技能提供全面的网页浏览器自动化能力，专为智能体（Agents）设计。它采用AI优化的快照机制，通过元素引用而非完整DOM，将上下文信息减少高达93%。支持导航、元素抓取、表单填写、数据爬取和多会话管理，适用于复杂的网络测试和数据提取流程。

语言