Expert Data Engineer

Solid Company; Polska; Hybrid; PLN 180,000 - 280,000; Full time

Job summary

Solid Company poszukuje inżyniera danych do projektów AML w sektorze Capital Markets. Będziesz projektować i implementować potoki danych oraz wspierać end-to-end scenariusze detekcji nadużyć finansowych.

Wymagane umiejętności to Python i Java, Spark/PySpark, Spark SQL, SQL, a także doświadczenie z klastrami on-prem i narzędziami CI/CD (Bamboo/Jenkins, Bitbucket). Praca w Agile, dobra znajomość angielskiego.

Qualifications

• Solidne umiejętności programowania w Pythonie i Javie.
• Zaawansowane doświadczenie z Apache Spark, PySpark, Spark SQL i SQL.
• Doświadczenie z rozproszonymi platformami obliczeniowymi i klastrami on-prem.
• Znajomość narzędzi CI/CD (Bamboo/Jenkins) i Bitbucket.
• Praca w zespołach Agile i samodzielnie w szybkim tempie.
• Dobra znajomość języka angielskiego w mowie i piśmie.

Responsibilities

• Projektowanie, implementacja i optymalizacja potoków danych wspierających end-to-end scenariusze AML w Capital Markets.
• Implementacja logiki detekcji, frameworków reguł i komponentów scoringowych do zastosowań financial-crime.
• Zapewnienie wysokiej jakości inżynierii w kodzie, potokach danych i rozwiązaniach operacyjnych.

Skills

Python

Java

Apache Spark

PySpark

Spark SQL

SQL

CI/CD

Bamboo

Jenkins

Bitbucket

Agile

In English

Tools

Bamboo

Jenkins

Bitbucket

Job description

• Design, implement and optimise data pipelines supporting end-to-end Capital Markets AML detection scenarios
• Implement detection logic, rule frameworks and scoring components for financial-crime use cases
• Ensure high-quality engineering across code, data pipelines and operational solutions

Kogo poszukujemy?

• Strong programming skills in Python and Java
• Advanced experience with Apache Spark, PySpark, Spark SQL and SQL for large-scale distributed data processing
• Proven experience with distributed compute platforms and on-premise cluster environments
• Proficiency with CI/CD tools such as Bamboo/Jenkins and Bitbucket
• Experience working in Agile teams and independently in fast-paced, evolving environments
• Strong analytical and problem-solving skills with the ability to adapt quickly
• Very good command of English, both spoken and written

Nice to have:

• Understanding of Capital Markets products, including FX, Equities, Derivatives and Bonds
• Previous experience in Financial Crime, AML or surveillance use cases
• Experience implementing rule-based detection systems, scorecards or alerting frameworks
• Experience delivering NFRs covering performance, scalability, observability, data quality, resiliency and security
• Experience with automation, including automated pipeline deployment, data validation, testing frameworks and workflow orchestration
• Experience integrating solutions with third-party systems, including case management systems
• Ability to collaborate effectively within cross-functional teams with a strong can-do attitude