Data Pipelines

Data Pipelines taxonomy generated by the site skill importer.

3 skills
W
spark-optimization

by wshobson

spark-optimization es una guía práctica para diagnosticar trabajos lentos de Apache Spark mediante particionado, shuffle, skew, caché y ajuste de memoria. Úsala para instalar la skill desde wshobson/agents, revisar SKILL.md y aplicar correcciones basadas en evidencia a partir de síntomas en Spark UI, configuración del clúster y patrones de consulta.

Performance Optimization
Favorites 0GitHub 32.6k
W
dbt-transformation-patterns

by wshobson

dbt-transformation-patterns ayuda a los agentes a estructurar proyectos de dbt con capas de staging, intermediate y marts, además de pautas para testing, documentación y modelos incrementales. Úsalo para evaluar la instalación, preparar nuevos repositorios o refactorizar SQL hacia patrones más limpios de analytics engineering para equipos de Database Engineering.

Database Engineering
Favorites 0GitHub 32.6k
W
airflow-dag-patterns

by wshobson

airflow-dag-patterns ayuda a diseñar DAGs de Apache Airflow listos para producción, con mejores patrones de tareas, dependencias, operators, sensors, testing y pautas de despliegue para trabajos programados.

Scheduled Jobs
Favorites 0GitHub 32.6k