登录
下载
Skill UI
浏览并发现
9688+
精选技能
全部
编程开发
人工智能
设计创意
产品商业
数据科学
市场营销
职场通用
效率工具
硬件工程
语言学习
搜索
网络爬取
,共找到
13
条记录
默认排序
最新上传
最多下载
Firecrawl错误诊断与修复指南
firecrawl-common-errors
jeremylongshore/claude-code-plugins-plus-skills
396
这是一份全面的Firecrawl API快速诊断手册,用于解决常见的API错误和响应码。内容涵盖了API密钥验证、速率限制、配额用尽、单页应用(SPA)内容渲染失败等关键问题。无论您是在调试失败的网络爬取任务,还是在解决爬取作业故障,本指南都提供了具体的修复步骤和代码示例。
查看详情
Firecrawl成本优化指南
firecrawl-cost-tuning
jeremylongshore/claude-code-plugins-plus-skills
200
本技能指南详细介绍了如何在使用 Firecrawl 进行网络爬取时,最大程度地优化 API 成本和信用点消耗。通过设置爬取限制、采用批量抓取、实现本地缓存和预算监控等方法,可以显著降低 API 调用成本,确保数据提取流程既高效又经济。
查看详情
Web数据采集与结构化提取
firecrawl-hello-world
jeremylongshore/claude-code-plugins-plus-skills
164
Firecrawl是一个强大的网络数据采集API,用于从网站中获取和处理信息。它支持单页抓取、多页爬取、站点地图生成和利用LLM进行结构化数据提取。适用于构建数据管道、自动化内容监控或进行市场数据分析。
查看详情
Firecrawl陷阱与最佳实践指南
firecrawl-known-pitfalls
jeremylongshore/claude-code-plugins-plus-skills
494
本指南汇总了使用Firecrawl进行网络爬取和内容提取时常见的误区和反模式。它提供了一个实用的代码审查清单,帮助开发者避免无限爬取、格式缺失、过度轮询等陷阱,确保数据管道的稳定性和高效性。
查看详情
网络爬虫负载测试与扩容
firecrawl-load-scale
jeremylongshore/claude-code-plugins-plus-skills
425
该技能用于对Firecrawl抓取流程进行全面的负载测试和性能扩展。它通过实现并发控制、批处理和队列管理,帮助用户在遵循API限流的前提下,最大化爬取吞吐量。适用于进行容量规划、进行大规模数据抓取效率优化等专业场景。
查看详情
网页抓取管道可观测性
firecrawl-observability
jeremylongshore/claude-code-plugins-plus-skills
260
本技能提供了Firecrawl网络爬取操作的全面可观测性模式。它覆盖了抓取成功率、积分消耗追踪、内容质量评估和延迟监控等关键指标。适用于构建健壮的监控仪表盘、设置主动故障警报,确保爬取工作流的稳定与高效。
查看详情
网络爬虫策略与合规防护
firecrawl-policy-guardrails
jeremylongshore/claude-code-plugins-plus-skills
251
这是一个用于Web爬虫管道的自动化策略防护系统。它能强制执行复杂的爬取规则,包括禁止爬取的域列表、API配额预算控制、内容质量检测(过滤错误页面、内容过少等)以及按域名限速。确保爬取过程合法合规,系统运行稳定,并优化资源消耗。
查看详情
Firecrawl网络爬取事件处理指南
firecrawl-webhooks-events
jeremylongshore/claude-code-plugins-plus-skills
185
本指南详细介绍了如何使用Firecrawl Webhook处理异步爬取和批量抓取任务的事件。用户无需通过轮询API来获取状态,而是通过配置Webhook端点,实时接收关键事件(如页面抓取、任务完成等)的推送通知。内容涵盖了事件类型、签名验证机制和实时数据流的处理方法,适用于构建高性能的数据爬取管道。
查看详情
网页搜索与内容提取
tavily-web
sickn33/antigravity-awesome-skills
341
该技能利用Tavily API,提供全面的网络搜索、内容提取和网站爬取能力。适用于需要获取实时信息、从特定URL抓取内容或进行深度网站研究等场景,是强大的信息检索增强工具。
查看详情
Apify 演员开发与部署指南
apify-actor-development
sickn33/antigravity-awesome-skills
442
本指南详细介绍了Apify Actors的开发和部署流程。学习如何创建、修改和部署无服务器应用(Actors),用于执行网络爬取、数据处理和自动化任务。内容涵盖了CLI环境配置、开发工作流全流程以及数据安全和代码最佳实践。
查看详情
Apify核心存储与工作流管理
apify-core-workflow-b
jeremylongshore/claude-code-plugins-plus-skills
433
本工具提供对Apify核心存储(数据集、键值存储和请求队列)的全面编程管理能力。它可以执行CRUD操作,实现数据持久化和复杂、多阶段的数据管道编排(例如:爬取→转换→导出)。适用于构建健壮的端到端网络爬取和数据处理自动化工作流。
查看详情
Bright Data爬虫成本优化与管理
brightdata-cost-tuning
jeremylongshore/claude-code-plugins-plus-skills
221
本技能旨在帮助用户优化 Bright Data 的爬取服务成本。提供了详细的成本估算模型、缓存策略和使用量监控代码,指导用户在进行大规模网络数据采集时,选择最合适的产品和最佳的预算管理方案。
查看详情
1
2
下一页
语言
简体中文
English