Industrialisez vos projets grâce à l’orchestration et au DevOps

En plus d’intégrer le meilleur des technologies commerciales et open source via Kubernetes et Docker, la Plateforme DataOps de Saagie offre un espace de travail fait pour la production. Vous pourrez ainsi automatiser et superviser le cycle complet de la donnée tout en donnant la possibilité à vos équipes de collaborer tout au long des projets.

Orchestrez des technologies et exécutez des pipelines

Sélectionnez vos technologies

Démarrez immédiatement en assemblant des frameworks prêts à l’emploi et leurs différentes versions venant du monde commercial, open source et cloud.

Rendez vos travaux reproductibles

Remplissez des critères de production grâce à nos capacités de conteneurisation et exécutez vos jobs de processing de l’exploration à la production.

Lancez vos jobs en pipelines

Construisez des flux pour exécuter vos jobs d’ETL, de pré-processing et de processing et gérez le cycle de vie de la donnée grâce au versioning et aux logs. 

Implémentez les pratiques DevOps

Devops

Déployez en continu

Utilisez nos APIs et plugins pour connecter vos outils d’IDE et d’intégration continue et automatisez la chaîne de déploiement en continu.

Versionnez vos traitements

Documentez vos versions de jobs, supervisez leurs logs pour chaque instance de lancement et effectuez des rollbacks si nécessaire.

Passez d’un environnement à l’autre

Automatisez la promotion de vos jobs entre environnements (Lab, Développement, QA, Staging, Production) grâce au plugin DataOps Gradle. 

Industrialisez les projets data

Isolez les projets

Créez un projet pour chaque cas d’usage, associez-y des équipes et technologies, connectez-les à vos groupes AD/LDAP et automatisez l’isolation réseau.

 

Améliorez la traçabilité

Centralisez et stockez vos logs pour un partage et un debugging aisés entre équipes Data et Ops, configurez votre Kubernetes pour les transférer vers un gestionnaire de logs (ELK, Splunk, CloudWatch) et conservez un audit des usages.

 

Ordonnancez et supervisez vos traitements

Les opérations liées aux technologies sont harmonisées au sein de l’interface Saagie pour une orchestration facilitée et interopérable. Ordonnancez vos jobs dans Saagie ou au travers d’un ordonnanceur externe ($U, Control-M, Tivoli/Websphere Workload Scheduler), supervisez leurs statuts (via UI ou API) et obtenez un aperçu de l’activité pour améliorer vos processus de production.