Technologies & tools
We are looking for an experienced Senior ETL Developer to join our team building a financial market data platform. You will be responsible for designing, developing, and maintaining high-performance data platforms that support analysis processes for FX. Working with large volumes of data, you will process up to 40 million messages daily in a real-time architecture based on PostgreSQL and Python. This position offers you the opportunity to contribute to an enterprise-class platform that handles numerous currency pairs and ensures high availability and scalability of solutions. If you are passionate about data engineering and optimizing data workflows, this opportunity may be the right fit for you.
Your tasks
- Designing and developing high-performance data platforms using PostgreSQL and Python
- Maintaining and optimizing database performance for large data volumes
- Implementing ETL processes to ensure efficient data integration and transformation
- Collaborating with cross-functional teams to support real-time data access and processing
- Monitoring system performance and implementing necessary adjustments for scalability
- Creating and managing database models, including normalization and denormalization
- Utilizing PL/pgSQL for writing procedures, functions, and triggers
- Ensuring data integrity and implementing archiving strategies for data retention
Requirements
- Minimum 5 years of experience working with PostgreSQL
- Strong command of SQL and data modeling techniques
- Hands-on mastery of PL/pgSQL, including procedures and triggers
- Practical experience with database performance tuning and optimization
- Experience in ETL integration and working with large data volumes
- Familiarity with the Linux environment
- Advanced level of Polish and English
- Residency in Poland
Nice to have
- Experience with Apache Kafka or RabbitMQ
- Knowledge of Apache Airflow and CI/CD practices
- Background in the banking or financial sector
Job no. JOB-FPNBZ
Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.
Technologie i narzędzia
Szukamy doświadczonego Senior ETL Developer (f/m/x), który dołączy do naszego zespołu budującego platformę danych rynków finansowych. Będziesz odpowiedzialny za projektowanie, rozwijanie i utrzymywanie platform danych o wysokiej wydajności, które wspierają procesy analizy dla FX. Pracując z dużymi wolumenami danych, będziesz przetwarzać do 40 milionów wiadomości dziennie w architekturze czasu rzeczywistego opartej na PostgreSQL i Pythonie. To stanowisko daje Ci możliwość wniesienia wkładu w platformę klasy enterprise, która obsługuje liczne pary walutowe i zapewnia wysoką dostępność oraz skalowalność rozwiązań. Jeśli pasjonujesz się inżynierią danych i optymalizacją przepływów danych, ta oferta może być odpowiednia dla Ciebie.
Twoje zadania
- Projektowanie i rozwijanie platform danych o wysokiej wydajności z wykorzystaniem PostgreSQL i Pythona
- Utrzymywanie i optymalizacja wydajności baz danych dla dużych wolumenów danych
- Implementacja procesów ETL w celu zapewnienia efektywnej integracji i transformacji danych
- Współpraca z zespołami międzyfunkcyjnymi w celu wsparcia dostępu do danych w czasie rzeczywistym i przetwarzania
- Monitorowanie wydajności systemu i wprowadzanie niezbędnych dostosowań w celu skalowalności
- Tworzenie i zarządzanie modelami baz danych, w tym normalizacja i denormalizacja
- Wykorzystanie PL/pgSQL do pisania procedur, funkcji i wyzwalaczy
- Zapewnienie integralności danych i wdrażanie strategii archiwizacji dla przechowywania danych
Wymagania
- Minimum 5-letnie doświadczenie w pracy z PostgreSQL
- Silna znajomość SQL i technik modelowania danych
- Praktyczna znajomość PL/pgSQL, w tym procedur i wyzwalaczy
- Praktyczne doświadczenie w tuningowaniu i optymalizacji wydajności baz danych
- Doświadczenie w integracji ETL i pracy z dużymi wolumenami danych
- Znajomość środowiska Linux
- Zaawansowany poziom języka polskiego i angielskiego
- Rezydencja w Polsce
Mile widziane
- Doświadczenie z Apache Kafka lub RabbitMQ
- Znajomość Apache Airflow i praktyk CI/CD
- Doświadczenie w sektorze bankowym lub finansowym
Nr oferty JOB-FPNBZ
Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.
Quick apply
Senior ETL Developer (f/m/x)
Your application has been submitted
We will contact you as soon as we review your CV
Processing...
Sorry, something went wrong and your message was not delivered
Refresh the page and try again. Contact us, if problem occurs again
We’re sorry, but the selected file appears to be damaged and we can't process it.
Please try uploading a different copy or a new version of the file. Contact us, if problem occurs again.
Benefits for you
- Great Place to Work
- Solid financial situation
- Contracts with the biggest brands
- Centre of internal trainings
- Many experts you can learn from
- Open and accessible management team
- Profit sharing
- Passion Sponsorship program
- Regular integration events and trips
- Comfortable and well-equipped offices
- MySii app
- Medical care
ARE YOU LOOKING FOR SOMETHING ELSE?
We have more offers