登录
下载

Skill UI

浏览并发现 9979+ 精选技能
全部 编程开发 人工智能 设计创意 产品商业 数据科学 市场营销 职场通用 效率工具 硬件工程 语言学习
搜索 数据管道 ，共找到 161 条记录
默认排序 最新上传 最多下载

Firecrawl架构模式与设计

firecrawl-architecture-variants
jeremylongshore/claude-code-plugins-plus-skills
417
本指南详细介绍了Firecrawl的三种核心架构模式：按需爬取、定时爬取和实时数据管道。帮助用户根据项目的数据量、延迟要求和业务复杂度，选择最合适的爬虫架构。适用于构建高可扩展、生产级的爬虫基础设施，支持知识库和RAG系统构建。
查看详情

火爬数据处理与知识库构建

firecrawl-data-handling
jeremylongshore/claude-code-plugins-plus-skills
248
这是一个全面的数据管道，用于处理、验证和优化来自Firecrawl爬取的网页内容。它支持Markdown清洗、使用Zod进行结构化数据提取、内容去重和为LLM/RAG系统定制的文本分块（Chunking）。旨在确保爬取的数据是标准化、干净、结构化的，可直接用于构建知识库或进行下游AI应用。
查看详情

Web数据采集与结构化提取

firecrawl-hello-world
jeremylongshore/claude-code-plugins-plus-skills
164
Firecrawl是一个强大的网络数据采集API，用于从网站中获取和处理信息。它支持单页抓取、多页爬取、站点地图生成和利用LLM进行结构化数据提取。适用于构建数据管道、自动化内容监控或进行市场数据分析。
查看详情

Firecrawl陷阱与最佳实践指南

firecrawl-known-pitfalls
jeremylongshore/claude-code-plugins-plus-skills
494
本指南汇总了使用Firecrawl进行网络爬取和内容提取时常见的误区和反模式。它提供了一个实用的代码审查清单，帮助开发者避免无限爬取、格式缺失、过度轮询等陷阱，确保数据管道的稳定性和高效性。
查看详情

Firecrawl内容爬取与摄取架构

firecrawl-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
262
本参考架构提供了一套完整的Web内容爬取和摄取流程。它集成了单页抓取、全站爬行、URL映射和结构化数据提取功能。后续的清洗、去重和分块处理，使其非常适合构建企业级的知识库、RAG系统以及复杂的AI数据管道。
查看详情

爬虫可靠性和容错设计

firecrawl-reliability-patterns
jeremylongshore/claude-code-plugins-plus-skills
287
本技能集提供了在生产环境中构建稳定、高可靠性爬虫管道的模式。涵盖了电路断路器、内容验证、爬取回退机制和指数退避等高级设计，旨在解决爬取超时、内容缺失或API调用失败等常见问题，确保数据提取的连续性和完整性。
查看详情

Firecrawl网络爬取事件处理指南

firecrawl-webhooks-events
jeremylongshore/claude-code-plugins-plus-skills
185
本指南详细介绍了如何使用Firecrawl Webhook处理异步爬取和批量抓取任务的事件。用户无需通过轮询API来获取状态，而是通过配置Webhook端点，实时接收关键事件（如页面抓取、任务完成等）的推送通知。内容涵盖了事件类型、签名验证机制和实时数据流的处理方法，适用于构建高性能的数据爬取管道。
查看详情

Fireflies AI 可观测性监控

fireflies-observability
jeremylongshore/claude-code-plugins-plus-skills
131
这是一个用于监控Fireflies.ai集成健康状态和性能的工具包。它跟踪关键指标，包括API连接性、Webhook交付状态、转录处理延迟和席位利用率。本工具适合与Prometheus/Grafana等监控系统结合使用，确保数据管道的稳定性和可靠性。
查看详情

会议智能数据管道架构

fireflies-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
146
这是一个基于事件驱动的会议智能系统架构参考，用于构建企业级的会议分析平台。该流程详细描述了从多源会议（如Zoom, Teams）录制，到通过Webhook接收转录数据，再到异步处理出结构化行动项、关键指标和分析报告，并与CRM系统同步的完整技术流程。
查看详情

Flink作业创建助手

flink-job-creator
jeremylongshore/claude-code-plugins-plus-skills
235
自动响应 Flink Job Creator 请求，覆盖 ETL、流式和工作流编排，生成规范代码与配置并校验输出，帮助构建数据管道。
查看详情

Granola会议数据分析与监控

granola-observability
jeremylongshore/claude-code-plugins-plus-skills
129
用于全面监控Granola的使用情况和会议流程，帮助用户构建深度分析仪表板。本指南指导如何定义关键业务指标（如采用率、效率得分）并搭建数据管道，将会议元数据同步至BigQuery等数据仓库，从而实现定制化的报告生成和业务运营洞察。
查看详情

Groq应用参考架构设计

groq-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
278
本指南提供了一套基于Groq LPU推理API的生产级参考架构蓝图。它系统地展示了如何根据延迟、质量或成本需求实现模型路由、流式数据管道，并构建了多提供商故障转移机制（如Groq到OpenAI备份）。适用于设计和优化复杂的、高弹性的AI应用系统。
查看详情
上一页12345678...121314下一页
语言
简体中文
English