Développeur Cloud Big Data

Position Description :

En tant qu'expert en cloud Big Data, vous vous joindrez à une équipe centrale mondiale, responsable de notre plateforme Data Lake sur Microsoft Azure.

Notre plateforme Data Lake exploite un mélange de technologies Open Source comme Spark et Kafka, en plus d'outils spécifiques à Azure tels que Azure Storage, HDI, AKS, etc. Cette plateforme est conçue pour le libre-service, donnant la priorité à l'automatisation pour assurer la conformité de la sécurité dans notre environnement réglementé tout en maintenant la stabilité pour les opérations commerciales cruciales.

Votre rôle englobe les contributions à la conception, à la mise en œuvre et au soutien continu de la production de la plateforme. De plus, vous apporterez votre expertise à des projets d'intégration à la plateforme. Dans ce contexte, votre maîtrise des technologies Big Data et Azure, associée à une solide maîtrise des principes de performance et de sécurité, est essentielle.

Your future duties and responsibilities :

JAVA | AZURE | KAFKA | AIRFLOW | HADOOP | SPARK | KUBERNETES

QUEL SERA VOTRE QUOTIDIEN ?

• Identifier les besoins futurs et les ameliorations de la plateforme, concevoir des solutions pour validation avec l'équipe.
• Tester et évaluer les nouvelles technologies Azure, en collaborant avec les équipes de sécurité et Microsoft pour assurer la disponibilité dans notre environnement sécurisé.
• Contribuer à la mise en œuvre de la solution, en établissant l'automatisation et la surveillance pour une offre en libre-service stable.
• Fournir une formation aux membres de l'équipe et offrir des conseils aux autres équipes dans la mise en œuvre de leurs projets Big Data.
• Participer au support de production, y compris les heures supplémentaires si nécessaire, et communiquer les incidents avec nos utilisateurs.
• Ce rôle couvre un large éventail de responsabilités, offrant une opportunité précieuse pour l'apprentissage continu et la croissance.

Required qualifications to be successful in this role :

Vous avez plus de 7 ans d'expérience dans le développement et l'architecture avec Java, la création d'applications, d'API et de services multithread dans un environnement Agile.

Vous avez une bonne expérience de l'utilisation des technologies Big Data, telles que Hadoop, Kafka et / ou Apache Oozie.

Vous avez une bonne expérience sur les technologies cloud Microsoft Azure, telles que Azure Storage ou AKS.

Vous avez une bonne expérience de l'utilisation d'Apache Spark.

Vous avez une bonne expérience sur les scripts Linux bash.

Vous avez plus de 2 ans d'expérience avec l'intégration continue / livraison continue en utilisant des outils DevOps modernes et des flux de travail tels que git, GitHub, Jira, Docker et Jenkins.

Vous avez plus de 3 ans d'expérience avec le développement agile (Scrum, Kanban, etc.) l'automatisation des tests (comportement, unité, tests d'intégration).

Vous avez une expérience antérieure avec Oracle SQL ou PostgreSQL ou un arrière-plan SGBDR similaire.

Vous avez une bonne connaissance pratique de Terraform et PowerShell

Baccalauréat en informatique, DEC, ou certifications techniques équivalentes

Langues : Le français et l'anglais sont obligatoires.

Le bilinguisme (français et anglais) est requis pour ce poste en raison de la nature de la fonction qui nécessite des interactions avec des clients nationaux et internationaux.

LI-AB2

Skills :

Oracle

PowerShell

PowerShell

Terraform