Consultant(e) en ingénierie de données - Unity Catalog
Contexte :
Dans ce mandat, vous serez appelé(e) à jouer le rôle de développeur en ingénierie des données au sein de l'équipe Plateforme BI & Analytique.
Vous travaillerez en étroite collaboration avec nos experts analytiques, notre partenaire Databricks, et aussi avec les architectes et experts d'autres plateformes technologiques internes, afin de guider activement à la mise en place de Unity Catalog dans notre solution Databricks, en respectant les meilleurs pratiques de développement.
À quoi ressemblera vos journées en tant que consultant(e) en ingénierie de données - Unity Catalog :
Les responsabilités du mandat incluent :
- Réaliser l'audit complet de l'environnement actuel de Databricks, documentant les workflows de données, les schémas et les contrôles d'accès
- Concevoir la stratégie de segmentation des environnements, des catalogues, ainsi que les conventions de nommage et de stockage
- Piloter les activités nécessaires pour la mise en place de Unity Catalog dans notre solution Databricks
- Plus précisément pour la migration d’Unity Catalog :
o Développer une matrice des rôles et permissions détaillée, incluant une liste de contrôle d'accès (ACL) et les définitions des groupes d'utilisateurs
o Configurer les ressources Azure et les espaces de travail Databricks, assigner les utilisateurs administrateurs et créer le Metastore de Unity Catalog
o Créer et migrer les schémas et tables vers Unity Catalog, incluant le transfert des tables externes d’Azure Storage vers des tables gérées
o Mettre à niveau les clusters et les runtimes Databricks vers la dernière version LTS supportant Unity Catalog
- Vous réaliserez les tests techniques et fonctionnels pour s’assurer du bon fonctionnement des éléments développés
- Vous serez également en charge de réaliser la documentation technique des développements à travers nos outils collaboratifs
Requirements
Savoir-faire :
Voici les habiletés techniques que vous aurez à appliquer au quotidien dans notre cadre professionnel :
- Une solide expérience de travail sur les principaux composants Databricks premium, et vous avez obtenu des certifications Databricks (un atout)
- Connaissance de l'outil de validation UCX pour Unity Catalog (un atout majeur)
- Vous avez une expérience réussie dans l’implémentation de Unity Catalog (impératif)
- Vous apporterez de la rigueur et les bonnes pratiques sur les développements dans Databricks à notre équipe
- Contribuer efficacement au maintien d'une documentation complète des processus, des schémas de données et des flux de données
- Connaissance des principes de la méthode Agile, Jira et Confluence
Savoir-être :
Voici les qualités personnelles et comportementales que vous aurez à démontrer au quotidien dans notre cadre professionnel :
- Grande capacité de proposer des solutions technologiques optimales dans le contexte de grands volumes de données
- Écoute et capacité de comprendre les enjeux techniques
- Excellentes aptitudes pour la gestion du temps et l’organisation, et capacité à gérer des priorités concurrentes pour respecter les échéanciers
- Grand souci du détail et du travail / service de qualité
- Faire preuve d'autonomie, d’initiative et d’innovation
- Fortes aptitudes pour le travail d’équipe
- Habiletés pour les relations interpersonnelles, la communication et la pédagogie
Consultant(e) en ingénierie de données - Unity Catalog
Savoir-faire: Voici les habiletés techniques que vous aurez à appliquer au quotidien dans notre cadre professionnel: · Une solide expérience de travail sur les principaux composants Databricks premium, et vous avez obtenu des certifications Databricks (un atout) · Connaissance de l'outil de validati...
Consultant en gestion de projet - Aéronautique
Et contribuer à l’innovation des méthodes et des outils du conseil de projet et être un acteur majeur de la conduite du changement (méthode Agile, digitalisation…). Dans le cadre du développement de son agence Montréalaise, MIGSO-PCUBED recrute ses futurs consultants en Gestion de Projet dans le sec...
Conseiller principal en matière de gouvernance des données
Développer une vision globale des activités de gouvernance des données au sein de l’organisation et rendre compte périodiquement de l’état d’avancement à la direction générale. Expérience solide et reconnue en matière de leadership dans de grandes organisations comparables à notre client. Expertise ...
Conseiller - Ingénierie de données
Cofomo, c’est beaucoup de choses, et nous travaillons sans relâche à nous assurer que nos talents aient le sentiment d’être appréciés, d’être motivés et de faire partie d’une entreprise dynamique, en pleine croissance, qui se préoccupe autant de l’avenir de ses employés que de l’avenir de la technol...
Stage - Automne - Stagiaire en Ingénierie de fabrication / Internship - Fall - Manufacturing Engineer Intern
Nous examinerons les candidatures de tous les candidats qualifiés, indépendamment de leur race, de leur couleur, de leur religion, de leur orientation sexuelle, de leur sexe, de leur nationalité, de leur âge, de leur handicap, de leur statut d'ancien combattant ou de tout autre statut protégé par la...
SpÉcialiste En IngÉnierie De Logiciels - Mulesoft Et .net
Le Spécialiste doit participer au cycle de développement complet, en commençant par la planification et les estimations; ensuite par l’implémentation et le déploiement des services et enfin par l’orchestration et les intégrations complexes en suivant les requis dans un contexte d’intégration et de d...
Développeur en Ingénierie de la fiabilité des sites (SRE)
Tout ce que vous mettez en production est monitoré de façon à pouvoir réagir automatiquement en cas de problème (patterns de blue-green et/ou de canary deployments);. Connaissances des outils de développement logiciel en mode agile, de gestion du code source et plateformes DevOps (Jenkins, git-Bitbu...
Consultant.e en recrutement (VL)
En instaurant des relations simples, de confiance et en favorisant l’épanouissement des individus, TOTEM a créé un environnement motivant et engageant pour l’ensemble de ses collaborateurs, qui rejaillit sur les relations créées avec les candidats et les clients. Rechercher et sélectionner des candi...
Analyste de données en jeux vidéo senior - Senior game data analyst
Servir de leader et de mentor à une petite équipe en charge des données, influencer directement le succès du jeu et encourager une culture d'idées basées sur des hypothèses, en associant des compétences analytiques à une intuition créative. En tant que membre de l'équipe de production de jeux et sou...
Conseiller intermédiaire en architecture de données
Possède un minimum de cinq années d'expérience professionnelle dans les technologies de l'information, dont un minimum de trois années d'expérience en architecture de données dans un environnement web. TEHORA est présentement à la recherche d’un(e) conseiller intermédiaire en architecture de données...