Articles par tag: spark

Pipeline de Données Déclarative dans Spark | Classes et Décorateurs

Comment Construire une Pipeline de Données Maintenable en Utilisant des Classes et des Décorateurs en Python. Implémentation sur Spark pour les Projets d'Ingénierie des Données. Lisez le Guide.

Optimisation Iceberg : tri et vecteurs de suppression

Configuration de l'ordre d'écriture, des statistiques et de la suppression vectorisée dans Apache Iceberg. Accélérez les requêtes, réduisez la charge sur le stockage. Pour les ingénieurs de données.

Architecture ETL : asapBI, Trino, Spark, Airflow pour les ingénieurs de données

Comment asapBI combine Trino, Spark et Airflow en une seule interface pour les processus ETL. Autogénération de code, orchestration et solutions Open Source pour les ingénieurs de données.