DevOps / Usecase Intégration Continue - Pipeline de streaming avec SPARK / KAFKA

Logo
Presented by

Bertrand Ounanian – Ingénieur Expert - Architectures de données non-structurées

About this talk

Comment assurer une intégration continue en dédiant uniquement 5% de l’équipe de développement à l'assurance qualité (QA) ? Face au développement de produits toujours plus complexes, le nombre de tests explose nécessitant une augmentation du nombre de développeurs affectés aux fonctions de QA. Pour faire face à cette problématique, Pure Storage a développé une solution automatisée qui traite plus de 50 milliards d'événements par jour, tout en fournissant des résultats en temps réel. Bertrand Ounanian présente ce cas d'utilisation des technologies d'analyse de Big Data, ainsi que les leçons apprises. On y découvre une vue d'ensemble du pipeline d'analyse utilisant des technologies open source telles que Spark et Kafka. Ce pipeline s’appuie sur la solution de stockage partagé Flashblade qui permet une évolution non disruptive de l’architecture applicative sans remise en cause de l’infrastructure sous-jacente.
Related topics:

More from this channel

Upcoming talks (0)
On-demand talks (282)
Subscribers (10436)
Pure is redefining the storage experience and empowering innovators by simplifying how people consume and interact with data.