Jobs
>
Montréal

    Data Engineer - Montreal, Canada - Intelli5

    Intelli5
    Intelli5 Montreal, Canada

    5 days ago

    Default job background
    Description
    du mandat - Data Engineer

    Un de nos clients dans le secteur de l'énergie est à la recherche d'un.e Data Engineer expérimenté pour rejoindre son équipe et contribuer à la mise en place de Unity Catalog dans Databricks pour notre client. Le candidat idéal aura une expérience significative avec Databricks et Unity Catalog, et sera capable de gérer des projets de migration de données et de jobs spark scala vers SQL.

    Responsabilités principales

    - Conduire l'audit complet de l'environnement actuel de Databricks, documentant les workflows de données, les schémas et les contrôles d'accès.
    - Concevoir la stratégie de segmentation des environnements, des catalogues, ainsi que les conventions de nommage et de stockage.
    - Développer une matrice des rôles et permissions détaillée, incluant une liste de contrôle d'accès (ACL) et les définitions des groupes d'utilisateurs.
    - Configurer les ressources Azure et les espaces de travail Databricks, assigner les utilisateurs administrateurs et créer le Metastore de Unity Catalog.
    - Mettre en place la provision SCIM.
    - Créer et migrer les schémas et tables vers Unity Catalog, incluant le transfert des tables externes d'Azure Storage vers des tables gérées.
    - Migrer les jobs Scala Spark vers des notebooks SQL.
    - Mettre à niveau les clusters et les runtimes Databricks vers la dernière version LTS supportant Unity Catalog.
    - Refactoriser les scripts et codes pour éliminer les chemins de données et les identifiants codés en dur, les remplaçant par des mécanismes d'accès sécurisés fournis par Unity Catalog.
    - Tester l'intégrité et la sécurité des données dans les environnements de développement et de QA.
    - Conduire des tests d'acceptation utilisateur (UAT) avec les ingénieurs et analystes de données, collecter leurs retours et ajuster les systèmes en conséquence.

    Profil recherché

    - Plus de 4 ans d'expérience avec Databricks.
    - Minimum 1 an d'expérience avec Unity Catalog, avec au moins une implémentation réussie.
    - Connaissance de l'outil de validation UCX pour Unity Catalog, un atout majeur.
    - Certifications Databricks, un plus significatif.
    - Capacité à travailler de manière autonome et en équipe, avec de solides compétences en communication et en résolution de problèmes.
  • Asklocala

    Data Engineer

    5 days ago

    Asklocala Montreal, Canada

    Founded in 2011, Locala is a leading omnichannel advertising platform that leverages consumer insights and machine learning AI to help marketers efficiently plan, buy, and measure multi-location campaigns on a global scale. Our proprietary technology enables local advertising and ...

  • CGI

    Data Engineer

    2 weeks ago

    CGI Montreal, Canada Full time

    Position Description: · Du willst die digitale Zukunft von Bund, Ländern und Kommunen mitgestalten? Dann bist du bei uns genau richtig Wir bei CGI arbeiten in gemischten Teams aus erfahrenen Mitarbeiter:innen und Berufseinsteiger:innen in agilen Projekten an der Entwicklung von ...

  • CGI

    Data Enginer

    3 weeks ago

    CGI Montréal, Canada

    Insights you can act on · While technology is at the heart of our clients' digital transformation, we understand that people are at the heart of business success. · When you join CGI, you become a trusted advisor, collaborating with colleagues and clients to bring forward actiona ...

  • Intelli5

    Data Engineer

    1 week ago

    Intelli5 Montreal, Canada

    du mandat - Data Engineer Un de nos clients dans le secteur de l'énergie est à la recherche d'un.e Data Engineer expérimenté pour rejoindre son équipe et contribuer à la mise en place de Unity Catalog dans Databricks pour notre client. Le candidat idéal aura une expérience signif ...

  • DELAN - Chasseurs de Talents en TI

    Data Engineer

    6 days ago

    DELAN - Chasseurs de Talents en TI Montréal, QC, Canada

    Le Data Engineer sera responsable de maximiser la performance et l'efficience dans l'utilisation des données dans tous les départements de l'entreprise en pleine transformation numérique et qui a récemment implanté Microsoft Dynamics 365. · PLUS PRÉCISÉMENT · • Jouer un rôle cl ...

  • DELAN - Chasseurs de Talents en TI

    Data Engineer

    6 days ago

    DELAN - Chasseurs de Talents en TI Montréal, QC, Canada

    Le Data Engineer sera responsable de maximiser la performance et l'efficience dans l'utilisation des données dans tous les départements de l'entreprise en pleine transformation numérique et qui a récemment implanté Microsoft Dynamics 365. · PLUS PRÉCISÉMENT · Jouer un rôle clé da ...

  • Delan

    Data Engineer

    5 days ago

    Delan Montreal, Canada

    LeData Engineer sera responsable de maximiser la performance et l'efficience dansl'utilisation des données dans tous les départements de l'entreprise en pleinetransformation numérique et qui a récemment implanté Microsoft Dynamics 365. · • Jouer un rôle clé dans l'organisation e ...

  • DELAN

    Data Engineer

    1 week ago

    DELAN Montreal, Canada

    Job Description · Le Data Engineer sera responsable de maximiser la performance et l'efficience dans l'utilisation des données dans tous les départements de l'entreprise en pleine transformation numérique et qui a récemment implanté Microsoft Dynamics 365. · PLUS PRÉCISÉMENT · • ...

  • Synechron

    Data Engineer

    1 week ago

    Synechron Montreal, Canada

    Nous cherchons un ingénieur de données au sein de l'équipe MongoDB et Kafka. Nous sommes un groupe hautement technique qui réalise en parallèle plusieurs projets pour plusieurs domaines d'activité. Les propriétaires d'entreprise et les experts en la matière sont répartis dans le ...

  • TEKsystems

    Data Engineer

    5 days ago

    TEKsystems Montreal, Canada Contract

    Description : · Le client souhaite recruter un ingénieur de données et un spécialiste du lac de données azure. · Ce consultant fera partie de l'équipe de la plateforme de données et participera à de nombreux projets visant à transformer les données et à répondre à de multiples ...

  • Synechron

    Data Engineer

    1 week ago

    Synechron Montréal, QC, Canada

    Nous cherchons un ingénieur de données au sein de l'équipe MongoDB et Kafka. Nous sommes un groupe hautement technique qui réalise en parallèle plusieurs projets pour plusieurs domaines d'activité. Les propriétaires d'entreprise et les experts en la matière sont répartis dans le ...

  • DELAN - Chasseurs de Talents en TI

    Data Engineer

    1 week ago

    DELAN - Chasseurs de Talents en TI Montreal, Canada Full time

    Tâches/Responsabilités · Le Data Engineer sera responsable de maximiser la performance et l'efficience dans l'utilisation des données dans tous les départements de l'entreprise en pleine transformation numérique et qui a récemment implanté Microsoft Dynamics 365. · PLUS PRÉCISÉM ...

  • Lerer Hippeau Ventures

    Data Engineer

    5 days ago

    Lerer Hippeau Ventures Montreal, Canada

    Create documentation · (version française) · WorkJam est le premier lieu de travail numérique de première ligne au monde, connectant l'ensemble de la main-d'œuvre sur le terrain pour travailler en parfaite harmonie. WorkJam est une superbe application entièrement modulaire qui ré ...

  • Synechron

    Data Engineer

    1 week ago

    Synechron Montreal, Canada

    Nous cherchons un ingénieur de données au sein de l'équipe MongoDB et Kafka. Nous sommes un groupe hautement technique qui réalise en parallèle plusieurs projets pour plusieurs domaines d'activité. Les propriétaires d'entreprise et les experts en la matière sont répartis dans le ...

  • Lerer Hippeau Ventures

    Data Engineer

    6 days ago

    Lerer Hippeau Ventures Montréal, QC, Canada

    Create documentation (version française) WorkJam est le premier lieu de travail numérique de première ligne au monde, connectant l'ensemble de la main-d'œuvre sur le terrain pour travailler en parfaite harmonie. WorkJam est une superbe application entièrement modulaire qui résout ...

  • Lerer Hippeau Ventures

    Data Engineer

    6 days ago

    Lerer Hippeau Ventures Montréal, QC, Canada

    Create documentation · (version française) · WorkJam est le premier lieu de travail numérique de première ligne au monde, connectant l'ensemble de la main-d'œuvre sur le terrain pour travailler en parfaite harmonie. WorkJam est une superbe application entièrement modulaire qui r ...

  • DELAN - Chasseurs de Talents en TI

    Data Engineer Data Analytics

    6 days ago

    DELAN - Chasseurs de Talents en TI Montréal, QC, Canada

    Le Data Engineer sera responsable de maximiser la performance et l'efficience dans l'utilisation des données dans tous les départements de l'entreprise en pleine transformation numérique et qui a récemment implanté Microsoft Dynamics 365. · Jouer un rôle clé dans l'organisation e ...

  • Intelli5

    Data Engineer Data Analytics

    6 days ago

    Intelli5 Montréal, QC, Canada

    du mandat - Data Engineer Un de nos clients dans le secteur de l'énergie est à la recherche d'un.e Data Engineer expérimenté pour rejoindre son équipe et contribuer à la mise en place de Unity Catalog dans Databricks pour notre client. Le candidat idéal aura une expérience signif ...

  • Intelli5

    Data Engineer Data Analytics

    6 days ago

    Intelli5 Montréal, QC, Canada

    du mandat - Data EngineerUn de nos clients dans le secteur de l'énergie est à la recherche d'un.e Data Engineer expérimenté pour rejoindre son équipe et contribuer à la mise en place de Unity Catalog dans Databricks pour notre client. Le candidat idéal aura une expérience signifi ...

  • Groupe SII

    Data Engineer

    3 weeks ago

    Groupe SII Montreal, Canada CDI

    Partenaire technologique des grandes entreprises depuis 9, le Groupe SII est au cœur de l'économie de l'innovation avec collaborateurs, une présence internationale dans pays, et un chiffre d'affaires supérieur à millions de dollars canadiens. SII Canada, installée à Montréal et T ...