Ingénieur De Donnée Intermédiaire - Spécialiste Azure Data Lake

Dans le cadre de ses ententes avec ses différents clients, Procom est actuellement à la recherche d’un Ingénieur de donnée Intermédiaire - Spécialiste Azure Data Lake pour une entreprise dans le domaine bancaire. Notre client est situé à Montréal.

Description des tâches et responsabilités – Ingénieur de donnée Intermédiaire - Spécialiste Azure Data Lake

Les responsabilités du poste incluent :

• Participer à l’évolution des librairies développées pour le chargement du data lake;
• Développer les meilleures pratiques de validation de la qualité des données chargées;
• Utilisation de Databricks pour le chargement, transformation et stockage des données en format parquet/delta tables;
• Utilisation de spark/scala/python pour le développement des librairies de chargement;
• Utilisation de Azure Data Factory pour l’ingestion des données dans le Data lake;
• Analyse des historiques de données pour changer le modèle, documentation des mappings;
• Collaborer avec l’équipe en place pour assurer une cohérence de la plateforme ainsi que les transitions.

Exigences du poste – Ingénieur de donnée Intermédiaire - Spécialiste Azure Data Lake

• Expérience sur Azure Data lake et Azure data factory;
• ATOUT - Expérience avec le langage scala;
• Excellent sens de l’organisation, et capacité à travailler sous pression et à gérer plusieurs priorités et demandes qui se font concurrence;
• ATOUT - Expérience en streaming;
• Excellentes compétences en matière de communication, de documentation, de mise en récit, de créativité et de présentation;
• ATOUT - Bilingue (Français / Anglais).
• Expérience avec les pipelines Azure DevOps;
• 3 années d’expérience sur databricks;
• 3 années d’expérience dans le développement spark/python;
• Excellentes habiletés de relations interpersonnelles, de travail d’équipe, de coordination et de recherche de consensus;

Type de poste

Contractuel 12 mois avec de fortes possibilités de renouvellement.

Date de début

Immédiatement

Numéro de référence

BH363758