软件下载帮助文档新闻资讯

Skill UI

浏览并发现 15857+ 精选技能

全部编程开发人工智能设计创意产品商业数据科学市场营销职场通用效率工具硬件工程语言学习

搜索 Apache ，共找到 5 条记录

默认排序最新上传最多下载

Apache Airflow DAG最佳实践

airflow-dag-patterns

sickn33/antigravity-awesome-skills

本技能提供构建生产级Apache Airflow DAG（有向无环图）的综合指南。它涵盖了操作符、传感器、测试、部署的最佳实践，用于设计健壮的数据管道。当您需要编排复杂的业务流程、管理ETL流程，或确保在生产环境中可靠地执行批处理任务时使用。

Apache Spark性能优化与调优

spark-optimization

sickn33/antigravity-awesome-skills

详细介绍了Apache Spark作业的生产级优化模式和最佳实践。内容涵盖分区策略、内存管理、数据倾斜处理、连接优化（如广播连接和桶连接）以及资源调优，帮助用户解决大规模数据处理中的性能瓶颈，提升数据管道的运行效率。

Polars：高性能数据处理框架

K-Dense-AI/scientific-agent-skills

Polars是一个基于Apache Arrow的高性能数据帧库，专为Python和Rust设计。它提供了表达式式API和惰性求值机制，能够高效处理复杂的数据管道和大规模ETL任务。适用于需要高性能、并行计算，或从Pandas迁移到更优数据处理方案的专业数据分析和工程场景。

数据库表数据比对与校验

sql-server-table-reconciliation

github/awesome-copilot

本工具用于比较两个不同SQL Server实例（如生产与测试环境）中的同名表。它能高效检测出缺失的行、多余的行、表结构漂移（Schema Drift）和数据不匹配项。利用Python和Apache Arrow进行快速列式数据传输，生成详细的核对报告，是数据迁移和ETL流程验证的必备工具。

Polars：高性能数据分析框架

sickn33/antigravity-awesome-skills

Polars是一个专为Python和Rust构建的超高性能DataFrame库。它基于Apache Arrow，支持惰性求值（Lazy Evaluation）和并行计算，非常适合构建数据抽取、转换和加载（ETL）管道。它能够高效处理大型数据集，是需要超越Pandas性能瓶颈的数据分析和转换的最佳选择。

1

语言