登录
下载
Skill UI
浏览并发现
10029+
精选技能
全部
编程开发
人工智能
设计创意
产品商业
数据科学
市场营销
职场通用
效率工具
硬件工程
语言学习
搜索
内容管道
,共找到
29
条记录
默认排序
最新上传
最多下载
Azure Event Hubs TypeScript 流处理
azure-eventhub-ts
sickn33/antigravity-awesome-skills
431
本指南提供了使用TypeScript和Azure Event Hubs SDK进行高性能事件流处理的完整实践。内容涵盖事件的批量发送、分区控制,以及稳健的事件消费机制。深入讲解了检查点(Checkpointing)、从指定偏移量开始消费和处理事件属性等高级功能,适用于构建高吞吐量的实时数据管道和数据摄取系统。
查看详情
Azure Event Hubs TypeScript 流处理
azure-eventhub-ts
sickn33/antigravity-awesome-skills
431
本指南提供了使用TypeScript和Azure Event Hubs SDK进行高性能事件流处理的完整实践。内容涵盖事件的批量发送、分区控制,以及稳健的事件消费机制。深入讲解了检查点(Checkpointing)、从指定偏移量开始消费和处理事件属性等高级功能,适用于构建高吞吐量的实时数据管道和数据摄取系统。
查看详情
大规模数据处理与架构扩展
clay-load-scale
jeremylongshore/claude-code-plugins-plus-skills
337
本指南提供了一套完整的解决方案,用于指导用户如何扩展数据富集管道,以处理每月1万到10万以上的海量数据。内容涵盖了容量规划、使用队列系统进行批量处理优化、处理速率限制以及设计多表架构,确保数据摄取过程的稳定性和高可扩展性。
查看详情
Clay数据集成最佳实践
clay-sdk-patterns
jeremylongshore/claude-code-plugins-plus-skills
470
本指南提供了一套生产级别的模式,用于构建与Clay平台稳定的集成。内容涵盖了通过Webhook(接收数据)、HTTP API(数据富集)和企业级API与Clay的交互。提供了TypeScript和Python的实现示例,确保数据管道构建的可靠性和可扩展性。
查看详情
Clay数据增强管道架构
clay-reference-architecture
jeremylongshore/claude-code-plugins-plus-skills
350
本指南详细阐述了如何在Clay平台构建生产级的潜在客户数据增强管道。内容涵盖了从三种集成模式(Webhook、API)的选择,到完整的表结构设计、数据瀑布流配置、基于复杂逻辑的ICP评分模型构建,直至最终的CRM同步流程,适用于构建全自动化的市场营销和数据运营工作流。
查看详情
数据库全生命周期管理
database
sickn33/antigravity-awesome-skills
314
本工作流为数据库的完整生命周期管理提供了全面指导。内容涵盖从初始架构设计(支持SQL和NoSQL)、模式构建、到高级查询优化、数据迁移,以及使用Airflow和dbt等工具构建鲁棒的数据管道。适用于设计、优化和维护复杂的企业级数据系统。
查看详情
德尔塔湖数据治理与合规
databricks-data-handling
jeremylongshore/claude-code-plugins-plus-skills
83
本技能提供了关于在Delta Lake中实现稳健数据治理和合规流程的指南,核心利用了Unity Catalog。内容涵盖了数据分类标记、处理GDPR“被遗忘权”的PII数据删除流程,以及设置基于标签的自动化数据保留策略。适用于需要构建安全、合规且可审计的数据湖管道。
查看详情
Firecrawl陷阱与最佳实践指南
firecrawl-known-pitfalls
jeremylongshore/claude-code-plugins-plus-skills
494
本指南汇总了使用Firecrawl进行网络爬取和内容提取时常见的误区和反模式。它提供了一个实用的代码审查清单,帮助开发者避免无限爬取、格式缺失、过度轮询等陷阱,确保数据管道的稳定性和高效性。
查看详情
网页抓取管道可观测性
firecrawl-observability
jeremylongshore/claude-code-plugins-plus-skills
260
本技能提供了Firecrawl网络爬取操作的全面可观测性模式。它覆盖了抓取成功率、积分消耗追踪、内容质量评估和延迟监控等关键指标。适用于构建健壮的监控仪表盘、设置主动故障警报,确保爬取工作流的稳定与高效。
查看详情
Firecrawl抓取性能优化指南
firecrawl-performance-tuning
jeremylongshore/claude-code-plugins-plus-skills
272
本指南深入介绍了优化Firecrawl爬取性能的高级技巧,旨在提升爬取效率并降低API成本。核心内容包括:选择最精简的输出格式(如Markdown)、实现URL缓存、使用批量处理(Batch Scrape)和针对动态SPA页面调整等待时间。掌握这些方法,能帮助构建稳定、高效的高吞吐量爬取管道。
查看详情
网络爬虫策略与合规防护
firecrawl-policy-guardrails
jeremylongshore/claude-code-plugins-plus-skills
251
这是一个用于Web爬虫管道的自动化策略防护系统。它能强制执行复杂的爬取规则,包括禁止爬取的域列表、API配额预算控制、内容质量检测(过滤错误页面、内容过少等)以及按域名限速。确保爬取过程合法合规,系统运行稳定,并优化资源消耗。
查看详情
爬虫可靠性和容错设计
firecrawl-reliability-patterns
jeremylongshore/claude-code-plugins-plus-skills
287
本技能集提供了在生产环境中构建稳定、高可靠性爬虫管道的模式。涵盖了电路断路器、内容验证、爬取回退机制和指数退避等高级设计,旨在解决爬取超时、内容缺失或API调用失败等常见问题,确保数据提取的连续性和完整性。
查看详情
1
2
3
下一页
语言
简体中文
English