Ingénieur de données bilingue

À propos du rôle

Joignez-vous à l’équipe des Technologies de l’information de la SCHL, au poste d’ingénieur(e) de données bilingue. Vous jouerez un rôle clé dans la conception, le développement et le soutien de pipelines de données robustes et d’actifs de données réutilisables sur Azure et Databricks. En mettant à la disposition des équipes des données fiables et de grande qualité, vous contribuerez directement à la mission de la SCHL visant à améliorer l'accessibilité au logement pour les Canadiens. À titre d’ingénieur(e) de données, vous allierez expertise technique, mentorat et amélioration continue afin de faire évoluer les pratiques d’ingénierie des données et de favoriser l’excellence opérationnelle.

Ce que vous ferez :

• concevoir, développer, tester et documenter des pipelines de données évolutifs à l’aide de Python, PySpark, SQL, Azure Databricks, Azure Data Factory et Azure SQL, en intégrant des sources de données infonuagiques et hérités, y compris DB2;
• développer des ensembles de données réutilisables et organisés ainsi que des modèles dimensionnels destinés à l’analytique et à la production d’information;
• surveiller la santé des pipelines, la fraîcheur et la qualité des données; fournir un soutien technique de deuxième niveau et résoudre les incidents. Effectuer des analyses de causes fondamentales, mettre en œuvre des correctifs durables et maintenir la documentation opérationnelle, y compris les procédures sécuritaires de redémarrage et de retraitement;
• exercer un leadership technique par la réalisation de revues de conception et de code, le mentorat des collègues et la promotion de pratiques et de modèles d’ingénierie réutilisables. Au besoin, évaluer les livrables des fournisseurs en fonction de leur qualité, maintenabilité et préparation au soutien, tout en expliquant les compromis techniques aux parties prenantes;
• optimiser la performance et l’évolutivité des pipelines et des requêtes, ainsi que les coûts liés aux ressources infonuagiques. Identifier les risques techniques et améliorer les pratiques d’ingénierie dans le respect des normes approuvées en matière d’architecture, de sécurité et d’exploitation;
• développer du code et des configurations réutilisables, maintenables et de haute qualité en utilisant Git, la revue par les pairs, les tests automatisés et les pratiques CI/CD. Appliquer des processus de déploiement contrôlés dans les environnements de développement, d’essai et de production;
• comprendre les besoins d’affaires des parties prenantes ainsi que l’architecture d’entreprise, les politiques et les normes organisationnelles afin de concevoir des pipelines de données compatibles, évolutifs et maintenables à long terme;
• collaborer étroitement avec les secteurs d’affaires de la SCHL et avec des intervenants multidisciplinaires, notamment les architectes de données, les intendants de données, les scientifiques des données et les architectes d’entreprise, afin de livrer des pipelines et des produits de données évolutifs qui soutiennent les objectifs d’affaires.

Les compétences que vous devriez posséder :

• un diplôme de premier cycle ou un baccalauréat en informatique, en génie logiciel, ou dans un domaine connexe;
• un minimum de sept (7) années d’expérience en technologies de l’information dans les domaines de l’ingénierie des données, de l’ingénierie analytique ou dans des domaines connexes;
• une solide capacité de programmation en Python, PySpark et SQL, démontrée par la livraison de multiples solutions de traitement de données en environnement de production. Expérience dans le développement de code maintenable à l’aide de Git, de la revue par les pairs, des tests automatisés et des pratiques CI/CD, ainsi que dans la gestion de déploiements contrôlés à travers différents environnements;
• l'expérience de travail dans un environnement TI sécurisé, structuré et contrôlé, avec séparation des responsabilités, respect des politiques, des normes et de l’architecture d’entreprise;
• un expérience approfondie du traitement de grands volumes de données provenant de sources multiples, ainsi que de l’ingestion de données dans des lacs de données (data lakes) et des entrepôts de données (data warehouses);
• un expérience pratique dans la conception, le développement et l’exploitation de pipelines de données sur les plateformes Azure et Databricks, y compris l’orchestration des flux de données et l’intégration avec des sources de données relationnelles. Une certification pertinente constitue un atout;
• de solides capacités d’analyse et de résolution de problèmes, avec une aptitude démontrée à comprendre et préciser les besoins d’affaires, à expliquer les choix de conception à des auditoires techniques et non techniques, à collaborer efficacement avec des équipes multidisciplinaires et à guider des collègues ainsi que des partenaires de livraison.

Ce serait formidable que vous possédiez aussi ces compétences :

• une maîtrise dans un domaine connexe;
• une expérience dans la conception et la livraison d’actifs de données partagés, de couches sémantiques et de modèles de données reposant sur des définitions d’affaires cohérentes et des mesures réutilisables;
• une expérience des pratiques CI/CD et de l’automatisation des environnements infonuagiques au moyen de l’infrastructure en tant que code;
• une expérience dans le développement et l’exploitation de pipelines de données alimentant des solutions analytiques, d’intelligence artificielle et d’apprentissage automatique, y compris les architectures de génération augmentée par récupération (RAG).