Principal Engineer (Senior Data Engineer)

TD Bank; Old Toronto; On-site; CAD 108,000 - 164,000; Full time

Job summary

Une entreprise innovante recherche un spécialiste des données pour diriger des initiatives critiques en gestion des données. Dans ce rôle, vous serez responsable de la conception et de l'optimisation de solutions de données qui influencent les décisions commerciales. Vous dirigerez une équipe d'ingénieurs en données, fournissant des conseils techniques et des mentorats. Ce poste offre une occasion unique de travailler avec des technologies de pointe dans un environnement Agile, permettant vos contributions à avoir un impact significatif. Si vous êtes passionné par l'analyse des données et la mise en œuvre de solutions innovantes, cette opportunité est faite pour vous.

Benefits

Assurance santé

Plan de retraite

Congés payés

Formation continue

Horaires flexibles

Qualifications

• 7-10 ans d'expérience en ingénierie des données avec un accent sur le développement d'ETL.
• Expérience approfondie des concepts de data warehousing et mise en œuvre.

Responsibilities

• Diriger des initiatives clés de données pour assurer leur succès dans le modèle Agile.
• Développer et gérer l'infrastructure de données dans Azure, y compris les pipelines ETL.

Skills

ETL

Azure Data Factory

PySpark/Spark

Python (Pandas, Numpy, Scikit-learn)

Data Warehousing

Git/Jenkins

Agile Methodologies

Data Governance

Education

Diplôme ou certificat technique en gestion des données

Diplôme de troisième cycle souhaité

Tools

Azure DataBricks

SQL Server

Azure Synapse

JIRA

Confluence

Job description

Spécialiste princ. des données, TI

Lieu de travail : Toronto, Ontario, Canada

Horaire : 37.5 heures par semaine

Secteur d’activité : Solutions technologiques

Détails de la rémunération : $108,800 - $163,200 CAD

En tant que candidat, nous vous encourageons à poser des questions sur la rémunération et à avoir une conversation franche avec votre recruteur, qui pourra vous fournir des détails plus précis sur ce poste.

Description du poste :

About This Role: We are looking for a senior technical lead to provide technical leadership and expertise within data management. In this role, you'll architect and optimize data solutions that drive critical business decisions and to provide thought leadership and insights on emerging data management solutions.

Key Responsibilities:

• Provide end to end leadership on key data initiatives to ensure the success of these initiatives within TD's scaled Agile delivery model
• Lead design reviews, code reviews across PODs and to ensure that all activities support a secure and stable solution
• Lead a team of data engineers, providing technical guidance and mentoring to enhance their skills.
• When needed develop code to implement complex solution frameworks, or address issues/challenges with an implementation
• Define detailed system design for data integration processes or data marts/warehouse builds or extensions
• Work across PODs, roles and stakeholders to remove blockers and enable PODs to deliver optimally.
• Lead the design and implementation of scalable ETL pipelines on Azure, ensuring data quality, reliability and performance
• Develop and manage data infrastructure in Azure, including Azure Data Factory, Databricks, Data Lake and SQL Data Warehouse
• Automate ETL processes and optimize data workflows to reduce processing time and operational costs
• Implement data governance best practices, including data lineage, metadata management and data quality controls to ensure compliance with industry regulations
• Manage and coordinate delivery efforts across pods. Support data warehouse, Big Data environments by guiding stakeholders on requirements and implementation approaches
• Review and approve business and system specification requirements, author system design specifications, create or review estimates, contribute to and review system deployment plans
• Work with architecture experts to create solutions that meet data management standards
• Lead triage activities and drive immediate and long-term resolutions
• Actively contribute to our knowledge management system
• Stay updated with the latest advancements in Azure services and data engineering best practices, and introduce new technologies and methodologies to the team

Qualifications:

• Degree, Postgraduate Degree, or Technical Certificate in Data Management or related discipline (e.g. Computer Science, Engineering), or equivalent practical experience
• Graduate degree nice to have
• 7-10 years of relevant experience in data engineering with a focus on ETL pipeline development and at least 2 years working with Azure Cloud
• Extensive experience in data warehousing concepts and implementation
• Excellent, executive level, communication skills with the ability to build positive relationships across teams
• Expertise in ETL and data movement, including relational and big data
• Experience working in large scale Enterprise Data Lake ingestion and curation projects
• Strong analytical and problem-solving skills; Experience with Production Support to investigate issues and resolution
• Ability to analyze, organize and prioritize work while meeting multiple deadlines
• Ability to work cooperatively and independently as part of a Scaled Agile pod
• Act as a brand champion for our business area / function and TD, both internally and externally
• Strong expertise in one or more of the following:
• PySpark/Spark.
• Python (Pandas, Numpy, Scikit-learn)
• Scala/Java
• Azure, including: Azure DataBricks, Azure Synapse/SQL Server, Azure Data Factory (ADF) and Orchestration
• Full working experience in Source-code versioning/promotion tools, e.g. Git/Jenkins. Nexus
• Experience with Agile concepts and the Atlassian stack (JIRA, Confluence, Stash, GIT) and Jenkins/Nexus

Good to have:

• Microsoft Azure/Databricks certified preferred
• Insurance, Banking and finance domain knowledge and working experience preferred
• Bilingual a benefit

À propos de nous
La TD est un chef de file mondial dans le secteur des institutions financières. Elle représente la cinquième banque en Amérique du Nord de par son nombre de succursales. Chaque jour, nous offrons une expérience client légendaire à plus de 27 millions de ménages et d’entreprises au Canada, aux États-Unis et partout dans le monde.

Notre programme de rémunération globale
Notre programme de rémunération globale reflète les investissements que nous faisons pour aider nos collègues et leur famille à atteindre leurs objectifs en matière de bien-être mental, physique et financier. La rémunération globale à la TD inclut le salaire de base, la rémunération variable et bien d’autres régimes clés.

Renseignements supplémentaires :
Nous sommes ravis que vous envisagiez une carrière à la TD. Sachez que nous avons à cœur d’aider nos collègues à réussir dans leur vie tant personnelle que professionnelle.

Mesures d’adaptation
L’accessibilité est importante pour nous. N’hésitez pas à nous faire part de toute mesure d’adaptation dont vous pourriez avoir besoin pour participer sans entraves au processus d’entrevue.

Exigences linguistiques (Québec seulement) : Sans Objet