Industrialisez vos projets
grâce à l’orchestration et au DevOps
En plus d’intégrer le meilleur des technologies commerciales et open source via Kubernetes, Docker et des appels d’APIs vers des solutions externes, la Plateforme DataOps de Saagie offre un espace de travail fait pour la production. Vous pourrez ainsi automatiser et superviser le cycle complet de la donnée tout en donnant la possibilité à vos équipes de collaborer tout au long des projets.
Orchestrez des technologies et exécutez des pipelines
Sélectionnez vos technologies
Démarrez immédiatement en assemblant des technologies hébergées par Saagie ou dans votre propre infrastructure et leurs différentes versions venant du monde commercial, open source et cloud.
Rendez vos travaux reproductibles
Remplissez des critères de production grâce à nos capacités de conteneurisation et exécutez vos jobs de processing de l’exploration à la production.
Lancez vos jobs en pipelines
Construisez des flux pour exécuter vos jobs d’ETL, de pré-processing et de processing et gérez le cycle de vie de la donnée grâce au versioning et aux logs.
Implémentez les pratiques DevOps
Déployez en continu
Utilisez nos APIs et plugins pour connecter vos outils d’IDE et d’intégration continue et automatisez la chaîne de déploiement en continu.
Versionnez vos traitements
Documentez vos versions de jobs, supervisez leurs logs pour chaque instance de lancement et effectuez des rollbacks si nécessaire.
Passez d’un environnement à l’autre
Automatisez la promotion de vos jobs entre environnements (Lab, Développement, QA, Staging, Production) grâce au plugin DataOps Gradle.
Industrialisez les projets data
Isolez les projets
Créez un projet pour chaque cas d’usage, associez-y des équipes et technologies, connectez-les à vos groupes AD/LDAP et automatisez l’isolation réseau.
Améliorez la traçabilité
Centralisez et stockez vos logs pour un partage et un debugging aisés entre équipes Data et Ops, configurez votre Kubernetes pour les transférer vers un gestionnaire de logs (ELK, Splunk, CloudWatch) et conservez un audit des usages.
Ordonnancez et supervisez vos traitements
Les opérations liées aux technologies sont harmonisées au sein de l’interface Saagie pour une orchestration facilitée et interopérable. Ordonnancez vos jobs dans Saagie ou au travers d’un ordonnanceur externe ($U, Control-M, Tivoli/Websphere Workload Scheduler), supervisez leurs statuts (via UI ou API) et obtenez un aperçu de l’activité pour améliorer vos processus de production.
