PRENDRE RENDEZ-VOUS EN Extrayez, transformez, chargez à l’aide d’une programmation visuelle capable d’exécuter des tâches Spark dans n’importe quel environnement Créez et déboguez depuis votre navigateur et exportez en code python pur ! Caractéristiques Opérationnel aussi simple que Docker Pull Créez des pipelines et des flux complexes par glisser-déposer Déboguer et prévisualiser étape par étape …
MLOP Category Archives:
Azkaban
PRENDRE RENDEZ-VOUS EN Azkaban est un planificateur de tâches de flux de travail par lots créé sur LinkedIn pour exécuter des tâches Hadoop. Azkaban résout le classement via les dépendances des tâches et fournit une interface utilisateur Web facile à utiliser pour maintenir et suivre vos flux de travail. Caractéristiques Compatible avec n’importe quelle version …
Argo Workflows
PRENDRE RENDEZ-VOUS EN Argo Workflows est un moteur de workflow open source natif de conteneur pour orchestrer des tâches parallèles sur Kubernetes. Argo Workflows est implémenté en tant que Kubernetes CRD (Custom Resource Definition). Caractéristiques Workflow : une ressource Kubernetes définissant l’exécution d’un ou plusieurs templates. Les flux de travail sont nommés. Modèle : une …
Apache Nifi
PRENDRE RENDEZ-VOUS EN En termes simples, NiFi a été conçu pour automatiser le flux de données entre les systèmes. Bien que le terme « flux de données » soit utilisé dans divers contextes, nous l’utilisons ici pour désigner le flux d’informations automatisé et géré entre les systèmes. Cet espace problématique existe depuis que les entreprises …
Airflow
PRENDRE RENDEZ-VOUS EN Airflow est une plateforme qui vous permet de créer et d’exécuter des flux de travail. Un flux de travail est représenté sous la forme d’un DAG (a Directed Acyclic Graph) et contient des éléments de travail individuels appelés tâches, organisés avec des dépendances et des flux de données pris en compte. Caractéristiques …