软件下载帮助文档新闻资讯

Skill UI

浏览并发现 16597+ 精选技能

全部编程开发人工智能设计创意产品商业数据科学市场营销职场通用效率工具硬件工程语言学习

搜索网络爬取，共找到 20 条记录

默认排序最新上传最多下载

Firecrawl错误诊断与修复指南

firecrawl-common-errors

jeremylongshore/claude-code-plugins-plus-skills

这是一份全面的Firecrawl API快速诊断手册，用于解决常见的API错误和响应码。内容涵盖了API密钥验证、速率限制、配额用尽、单页应用（SPA）内容渲染失败等关键问题。无论您是在调试失败的网络爬取任务，还是在解决爬取作业故障，本指南都提供了具体的修复步骤和代码示例。

Firecrawl成本优化指南

firecrawl-cost-tuning

jeremylongshore/claude-code-plugins-plus-skills

本技能指南详细介绍了如何在使用 Firecrawl 进行网络爬取时，最大程度地优化 API 成本和信用点消耗。通过设置爬取限制、采用批量抓取、实现本地缓存和预算监控等方法，可以显著降低 API 调用成本，确保数据提取流程既高效又经济。

Web数据采集与结构化提取

firecrawl-hello-world

jeremylongshore/claude-code-plugins-plus-skills

Firecrawl是一个强大的网络数据采集API，用于从网站中获取和处理信息。它支持单页抓取、多页爬取、站点地图生成和利用LLM进行结构化数据提取。适用于构建数据管道、自动化内容监控或进行市场数据分析。

Firecrawl陷阱与最佳实践指南

firecrawl-known-pitfalls

jeremylongshore/claude-code-plugins-plus-skills

本指南汇总了使用Firecrawl进行网络爬取和内容提取时常见的误区和反模式。它提供了一个实用的代码审查清单，帮助开发者避免无限爬取、格式缺失、过度轮询等陷阱，确保数据管道的稳定性和高效性。

网络爬虫负载测试与扩容

firecrawl-load-scale

jeremylongshore/claude-code-plugins-plus-skills

该技能用于对Firecrawl抓取流程进行全面的负载测试和性能扩展。它通过实现并发控制、批处理和队列管理，帮助用户在遵循API限流的前提下，最大化爬取吞吐量。适用于进行容量规划、进行大规模数据抓取效率优化等专业场景。

网页抓取管道可观测性

firecrawl-observability

jeremylongshore/claude-code-plugins-plus-skills

本技能提供了Firecrawl网络爬取操作的全面可观测性模式。它覆盖了抓取成功率、积分消耗追踪、内容质量评估和延迟监控等关键指标。适用于构建健壮的监控仪表盘、设置主动故障警报，确保爬取工作流的稳定与高效。

网络爬虫策略与合规防护

firecrawl-policy-guardrails

jeremylongshore/claude-code-plugins-plus-skills

这是一个用于Web爬虫管道的自动化策略防护系统。它能强制执行复杂的爬取规则，包括禁止爬取的域列表、API配额预算控制、内容质量检测（过滤错误页面、内容过少等）以及按域名限速。确保爬取过程合法合规，系统运行稳定，并优化资源消耗。

Firecrawl网络爬取事件处理指南

firecrawl-webhooks-events

jeremylongshore/claude-code-plugins-plus-skills

本指南详细介绍了如何使用Firecrawl Webhook处理异步爬取和批量抓取任务的事件。用户无需通过轮询API来获取状态，而是通过配置Webhook端点，实时接收关键事件（如页面抓取、任务完成等）的推送通知。内容涵盖了事件类型、签名验证机制和实时数据流的处理方法，适用于构建高性能的数据爬取管道。

网页搜索与内容提取

sickn33/antigravity-awesome-skills

该技能利用Tavily API，提供全面的网络搜索、内容提取和网站爬取能力。适用于需要获取实时信息、从特定URL抓取内容或进行深度网站研究等场景，是强大的信息检索增强工具。

Apify 演员开发与部署指南

apify-actor-development

sickn33/antigravity-awesome-skills

本指南详细介绍了Apify Actors的开发和部署流程。学习如何创建、修改和部署无服务器应用（Actors），用于执行网络爬取、数据处理和自动化任务。内容涵盖了CLI环境配置、开发工作流全流程以及数据安全和代码最佳实践。

Apify核心存储与工作流管理

apify-core-workflow-b

jeremylongshore/claude-code-plugins-plus-skills

本工具提供对Apify核心存储（数据集、键值存储和请求队列）的全面编程管理能力。它可以执行CRUD操作，实现数据持久化和复杂、多阶段的数据管道编排（例如：爬取→转换→导出）。适用于构建健壮的端到端网络爬取和数据处理自动化工作流。

Bright Data爬虫成本优化与管理

brightdata-cost-tuning

jeremylongshore/claude-code-plugins-plus-skills

本技能旨在帮助用户优化 Bright Data 的爬取服务成本。提供了详细的成本估算模型、缓存策略和使用量监控代码，指导用户在进行大规模网络数据采集时，选择最合适的产品和最佳的预算管理方案。

语言