Consultant(e) en ingénierie de données - Unity Catalog
Contexte :
Dans ce mandat, vous serez appelé(e) à jouer le rôle de développeur en ingénierie des données au sein de l'équipe Plateforme BI & Analytique.
Vous travaillerez en étroite collaboration avec nos experts analytiques, notre partenaire Databricks, et aussi avec les architectes et experts d'autres plateformes technologiques internes, afin de guider activement à la mise en place de Unity Catalog dans notre solution Databricks, en respectant les meilleurs pratiques de développement.
À quoi ressemblera vos journées en tant que consultant(e) en ingénierie de données - Unity Catalog :
Les responsabilités du mandat incluent :
- Réaliser l'audit complet de l'environnement actuel de Databricks, documentant les workflows de données, les schémas et les contrôles d'accès
- Concevoir la stratégie de segmentation des environnements, des catalogues, ainsi que les conventions de nommage et de stockage
- Piloter les activités nécessaires pour la mise en place de Unity Catalog dans notre solution Databricks
- Plus précisément pour la migration d’Unity Catalog :
o Développer une matrice des rôles et permissions détaillée, incluant une liste de contrôle d'accès (ACL) et les définitions des groupes d'utilisateurs
o Configurer les ressources Azure et les espaces de travail Databricks, assigner les utilisateurs administrateurs et créer le Metastore de Unity Catalog
o Créer et migrer les schémas et tables vers Unity Catalog, incluant le transfert des tables externes d’Azure Storage vers des tables gérées
o Mettre à niveau les clusters et les runtimes Databricks vers la dernière version LTS supportant Unity Catalog
- Vous réaliserez les tests techniques et fonctionnels pour s’assurer du bon fonctionnement des éléments développés
- Vous serez également en charge de réaliser la documentation technique des développements à travers nos outils collaboratifs
Requirements
Savoir-faire :
Voici les habiletés techniques que vous aurez à appliquer au quotidien dans notre cadre professionnel :
- Une solide expérience de travail sur les principaux composants Databricks premium, et vous avez obtenu des certifications Databricks (un atout)
- Connaissance de l'outil de validation UCX pour Unity Catalog (un atout majeur)
- Vous avez une expérience réussie dans l’implémentation de Unity Catalog (impératif)
- Vous apporterez de la rigueur et les bonnes pratiques sur les développements dans Databricks à notre équipe
- Contribuer efficacement au maintien d'une documentation complète des processus, des schémas de données et des flux de données
- Connaissance des principes de la méthode Agile, Jira et Confluence
Savoir-être :
Voici les qualités personnelles et comportementales que vous aurez à démontrer au quotidien dans notre cadre professionnel :
- Grande capacité de proposer des solutions technologiques optimales dans le contexte de grands volumes de données
- Écoute et capacité de comprendre les enjeux techniques
- Excellentes aptitudes pour la gestion du temps et l’organisation, et capacité à gérer des priorités concurrentes pour respecter les échéanciers
- Grand souci du détail et du travail / service de qualité
- Faire preuve d'autonomie, d’initiative et d’innovation
- Fortes aptitudes pour le travail d’équipe
- Habiletés pour les relations interpersonnelles, la communication et la pédagogie
Technicien.ne en surveillance de chantier - Mécanique/Électrique
Interpréter correctement les plans, les dessins et les devis techniques fournis en référence ou ceux préparés par les autres professionnels pour fins de coordination et/ou d’intégration;. Effectuer la surveillance des travaux sur les chantiers et effectuer les suivis des échéanciers des entrepreneur...
Ingénieur(e) en gestion de projets d'ingénierie
Tu ne t'ennuieras jamais ici! Cela dit, c'est ton équipe qui te donnera le plus de satisfaction, car chez Canam, nous sommes un alliage solide de bien-être et d'opportunités de carrière! Les avantages Canam Salaire variant entre 32,20 $ et 41,30 $ de l'heure accordé en fonction de ton expérience d...
Expert en science de données / intelligence artificielle appliquée
Description des travaux ou des biens livrables : - Appliquer des outils d'apprentissage automatique et des techniques statistiques pour développer des modèles d'apprentissage machine et prendre en charge la gestion des modèles tout au long du cycle de vie du modèle; - Développer, surveiller e...
Consultant(e) en recrutement spécialisé(e) industrie Ingénierie Logistique (JG)
Le Consultant 360 en Recrutement Spécialisé sera responsable de mener des activités de recrutement spécialisé dans le domaine technique, avec un accent particulier sur les secteurs de l'industrie, de l'ingénierie et de la logistique. Ce rôle implique de gérer l'intégralité du processus de recrutemen...
Développeur(euse) en intégration de données
Cependant, la maitrise de l’anglais est requise pour ce poste en raison des interactions avec nos clients, partenaires et/ou fournisseurs anglophones. Tu contribueras à la mise en place de solutions d’affaires variées tout en assurant la maintenance des intégrations existantes. Expérience significat...
Ingénieur(e) - Chargé(e) de projet en mécanique - Centre de données
Au Canada uniquement, nous sommes plus de 12 000 personnes impliquées dans tous les domaines; de l'assainissement de l'environnement à la planification urbaine, de l'ingénierie de bâtiments emblématiques à la réalisation de réseaux de transport durables. Nous offrons à nos employés des salaires conc...
Conseiller en données – Structure de Gouvernance
Proposer des contenus pertinents et attirants, prévoir les présentateurs, assurer que les éléments devant être présentés soient préparés à temps et faire les comptes-rendus;. Travailler en collaboration avec la personne responsable de la conformité et gestion des risques donnée afin de mettre en pla...
Consultant.e en recrutement (VL)
En instaurant des relations simples, de confiance et en favorisant l’épanouissement des individus, TOTEM a créé un environnement motivant et engageant pour l’ensemble de ses collaborateurs, qui rejaillit sur les relations créées avec les candidats et les clients. Rechercher et sélectionner des candi...
Spécialiste en Modélisation de Données
Le Spécialiste en Modélisation de Données sera responsable de s’assurer que les solutions proposées et développées par l’entreprise correspondent parfaitement aux besoins et aux enjeux des clients. Expérience en priorisation de projets et en gestion des attentes des clients. Expérience professionnel...
Assistant·e chargé·e de projet en ingénierie des matériaux
Assister les chargés de projets pour assurer la qualité des travaux d’une grande variété de projets d’infrastructures routières et municipales, de transport, de ressources industrielles, d’aménagement de sites, de terrains commerciaux et industriels, de développements commerciaux et résidentiels, de...