登录
下载

Skill UI

浏览并发现 9908+ 精选技能
全部 编程开发 人工智能 设计创意 产品商业 数据科学 市场营销 职场通用 效率工具 硬件工程 语言学习
搜索 内容管道 ，共找到 44 条记录
默认排序 最新上传 最多下载

Firecrawl陷阱与最佳实践指南

firecrawl-known-pitfalls
jeremylongshore/claude-code-plugins-plus-skills
494
本指南汇总了使用Firecrawl进行网络爬取和内容提取时常见的误区和反模式。它提供了一个实用的代码审查清单，帮助开发者避免无限爬取、格式缺失、过度轮询等陷阱，确保数据管道的稳定性和高效性。
查看详情

网页抓取管道可观测性

firecrawl-observability
jeremylongshore/claude-code-plugins-plus-skills
260
本技能提供了Firecrawl网络爬取操作的全面可观测性模式。它覆盖了抓取成功率、积分消耗追踪、内容质量评估和延迟监控等关键指标。适用于构建健壮的监控仪表盘、设置主动故障警报，确保爬取工作流的稳定与高效。
查看详情

Firecrawl抓取性能优化指南

firecrawl-performance-tuning
jeremylongshore/claude-code-plugins-plus-skills
272
本指南深入介绍了优化Firecrawl爬取性能的高级技巧，旨在提升爬取效率并降低API成本。核心内容包括：选择最精简的输出格式（如Markdown）、实现URL缓存、使用批量处理（Batch Scrape）和针对动态SPA页面调整等待时间。掌握这些方法，能帮助构建稳定、高效的高吞吐量爬取管道。
查看详情

网络爬虫策略与合规防护

firecrawl-policy-guardrails
jeremylongshore/claude-code-plugins-plus-skills
251
这是一个用于Web爬虫管道的自动化策略防护系统。它能强制执行复杂的爬取规则，包括禁止爬取的域列表、API配额预算控制、内容质量检测（过滤错误页面、内容过少等）以及按域名限速。确保爬取过程合法合规，系统运行稳定，并优化资源消耗。
查看详情

Firecrawl内容爬取与摄取架构

firecrawl-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
262
本参考架构提供了一套完整的Web内容爬取和摄取流程。它集成了单页抓取、全站爬行、URL映射和结构化数据提取功能。后续的清洗、去重和分块处理，使其非常适合构建企业级的知识库、RAG系统以及复杂的AI数据管道。
查看详情

爬虫可靠性和容错设计

firecrawl-reliability-patterns
jeremylongshore/claude-code-plugins-plus-skills
287
本技能集提供了在生产环境中构建稳定、高可靠性爬虫管道的模式。涵盖了电路断路器、内容验证、爬取回退机制和指数退避等高级设计，旨在解决爬取超时、内容缺失或API调用失败等常见问题，确保数据提取的连续性和完整性。
查看详情

Firecrawl网络爬取事件处理指南

firecrawl-webhooks-events
jeremylongshore/claude-code-plugins-plus-skills
185
本指南详细介绍了如何使用Firecrawl Webhook处理异步爬取和批量抓取任务的事件。用户无需通过轮询API来获取状态，而是通过配置Webhook端点，实时接收关键事件（如页面抓取、任务完成等）的推送通知。内容涵盖了事件类型、签名验证机制和实时数据流的处理方法，适用于构建高性能的数据爬取管道。
查看详情

LangChain版本升级与迁移指南

langchain-upgrade-migration
jeremylongshore/claude-code-plugins-plus-skills
227
本指南提供了一份全面的LangChain版本升级路径图，指导开发者如何安全地从旧版本迁移到新版本。内容涵盖了关键的破坏性变更，包括导入路径变更、将旧版链式调用（LLMChain）转换为LCEL管道语法、更新Agent API以及内存存储的最佳实践，确保项目平稳过渡和功能现代化。
查看详情

MaintainX企业级集成架构

maintainx-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
67
本指南提供了一系列生产级的架构模式，用于将MaintainX系统与大型企业级系统（如ERP、SCADA、数据仓库）进行集成。内容涵盖了基于事件流的实时同步、双向数据同步网关的构建，以及构建可扩展的数据分析管道，帮助用户设计出高可靠性的企业级解决方案。
查看详情

MLOps流程自动化与基础设施

mlops-engineer
sickn33/antigravity-awesome-skills
89
本技能旨在构建完整的MLOps（机器学习运维）流程，覆盖从实验跟踪、模型管理到生产部署的全生命周期。掌握利用Kubeflow、Airflow等工具进行复杂管道编排，并深入了解主流云平台（AWS、Azure、GCP）的ML服务栈。内容涵盖模型注册、版本控制、基础设施即代码（IaC）和Kubernetes部署，帮助工程师将实验模型可靠地部署到生产环境。
查看详情

高级数据工程与架构设计

senior-data-engineer
alirezarezvani/claude-skills
378
本指南详细介绍了高级数据工程师所需的专业技能，涵盖构建、优化和治理可扩展的数据管道和强大的ETL/ELT系统。内容包括使用Spark、Kafka、Airflow和dbt等现代工具构建企业级数据架构，并提供了批处理与流式、湖仓一体等关键架构决策框架。
查看详情

Apache Spark性能优化与调优

spark-optimization
sickn33/antigravity-awesome-skills
81
详细介绍了Apache Spark作业的生产级优化模式和最佳实践。内容涵盖分区策略、内存管理、数据倾斜处理、连接优化（如广播连接和桶连接）以及资源调优，帮助用户解决大规模数据处理中的性能瓶颈，提升数据管道的运行效率。
查看详情
上一页1234下一页
语言
简体中文
English