Dagster

Les développeurs définissent des assets en Python et Dagster suit la lignée et la fraîcheur. Une interface montre les exécutions et les dépendances, et les tests tournent en local. Dagster Cloud propose un service hébergé.

Le cœur open source est gratuit. Il diffère d’Airflow dans sa structure, donc les équipes qui migrent doivent s’ajuster.

Airflow et Prefect sont des alternatives. Dagster convient aux data engineers qui veulent des pipelines fondés sur les assets.