Sii Poland

SII UKRAINE

SII SWEDEN

  • Trainings
  • Career
Join us Contact us
Back

Sii Poland

SII UKRAINE

SII SWEDEN

Back

Data Engineer – Data Lake (f/m/x)

  • Senior
  • Remote, 
  • Hybrid, 
  • Office
  • Multiple locations Show all
This offer base language is English. Translate into Polish.
This translation is generic and may include errors. Show original text

Technologies & tools

You will join an international project within the healthcare and life sciences industry, focused on building and evolving a modern Data Lake platform supporting large-scale data processing and analytics. The solution enables data-driven decision-making in a highly regulated environment, with a strong emphasis on data quality, security, and compliance. The environment is cloud-based and leverages modern big data technologies and best engineering practices.

As a Data Engineer, you will be responsible for designing, developing, and maintaining data pipelines and Data Lake architecture. You will work closely with cross-functional teams, including data scientists and business stakeholders, to deliver reliable and efficient data solutions.

Your tasks

  • Designing and developing scalable data pipelines for batch and real-time data processing
  • Building and optimizing Data Lake architecture for analytical use cases
  • Integrating multiple data sources and ensuring seamless data flow across systems
  • Ensuring data quality, consistency, and governance (data lineage, access control)
  • Optimizing storage and processing performance using modern data formats and partitioning strategies
  • Monitoring, troubleshooting, and improving data pipeline performance
  • Collaborating with stakeholders to translate business needs into technical solutions
  • Following best practices in data engineering and continuously improving the platform

Requirements

  • At least 5 years of experience in Data Engineering or Big Data-related roles
  • Proficiency in Python, Scala, or Java
  • Hands-on experience with tools such as Apache Spark, PySpark, or similar frameworks
  • Previous work with Data Lake technologies, e.g., AWS S3, Azure Data Lake, Databricks, BigQuery
  • Knowledge of ETL/ELT processes and orchestration tools, e.g., Airflow, Data Factory
  • Good understanding of SQL and data modelling
  • Experience with distributed systems and large-scale data processing
  • Familiarity with Docker and Kubernetes
  • Strong analytical and problem-solving skills
  • Fluent in Polish and English required
  • Residing in Poland required

Nice to have

  • Experience with streaming technologies (e.g., Kafka)
  • Knowledge of data governance tools
  • Familiarity with CI/CD processes in data projects

Job no. 260424-8EHKD

Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.

Technologie i narzędzia

Dołączysz do międzynarodowego projektu w branży opieki zdrowotnej i nauk przyrodniczych, koncentrującego się na budowaniu i rozwijaniu nowoczesnej platformy Data Lake wspierającej przetwarzanie i analizę danych na dużą skalę. Rozwiązanie umożliwia podejmowanie decyzji w oparciu o dane w ściśle regulowanym środowisku, z silnym naciskiem na jakość danych, bezpieczeństwo i zgodność z przepisami. Środowisko jest oparte na chmurze i wykorzystuje nowoczesne technologie Big Data oraz najlepsze praktyki inżynieryjne.

Jako Data Engineer będziesz odpowiedzialny za projektowanie, rozwój i utrzymanie pipeline'ów danych oraz architektury Data Lake. Będziesz ściśle współpracować z wielofunkcyjnymi zespołami, w tym z Data Scientist i interesariuszami biznesowymi, aby dostarczać niezawodne i wydajne rozwiązania w zakresie danych.

Twoje zadania

  • Projektowanie i rozwijanie skalowalnych pipeline'ów danych do przetwarzania wsadowego i w czasie rzeczywistym
  • Budowanie i optymalizacja architektury Data Lake dla analitycznych przypadków użycia
  • Integracja wielu źródeł danych i zapewnienie płynnego przepływu danych między systemami
  • Zapewnienie jakości, spójności i zarządzania danymi (pochodzenie danych, kontrola dostępu)
  • Optymalizacja wydajności przechowywania i przetwarzania przy użyciu nowoczesnych formatów danych i strategii partycjonowania
  • Monitorowanie, rozwiązywanie problemów i poprawa wydajności potoku danych
  • Współpraca z interesariuszami w celu przełożenia potrzeb biznesowych na rozwiązania techniczne
  • Przestrzeganie najlepszych praktyk w zakresie inżynierii danych i ciągłe ulepszanie platformy

Wymagania

  • Co najmniej 5 lat doświadczenia na stanowiskach związanych z Data Engineer lub Big Data
  • Biegła znajomość języka Python, Scala lub Java
  • Praktyczne doświadczenie z narzędziami takimi jak Apache Spark, PySpark lub podobnymi frameworkami
  • Wcześniejsza praca z technologiami Data Lake, np. AWS S3, Azure Data Lake, Databricks, BigQuery
  • Znajomość procesów ETL/ELT i narzędzi do orkiestracji, np. Airflow, Data Factory
  • Dobre zrozumienie SQL i modelowania danych
  • Doświadczenie z systemami rozproszonymi i przetwarzaniem danych na dużą skalę
  • Znajomość narzędzi Docker i Kubernetes
  • Silne umiejętności analityczne i rozwiązywania problemów
  • Wymagana biegła znajomość języka polskiego i angielskiego
  • Wymagane miejsce zamieszkania w Polsce

Mile widziane

  • Doświadczenie z technologiami przesyłania strumieniowego (np. Kafka)
  • Znajomość narzędzi do zarządzania danymi
  • Znajomość procesów CI/CD w projektach związanych z danymi

Nr oferty 260424-8EHKD

Sii ensures that all hiring decisions are made solely on the basis of qualifications and competence. We are committed to equal and fair treatment of all, regardless of legally protected characteristics. At Sii, we promote a diverse and inclusive work environment, in full compliance with applicable anti-discrimination laws.

Quick apply

Data Engineer – Data Lake (f/m/x)

Work mode*

Choose at least one option

Option was not selected

angle-down

Option was not selected

Attach CV*

Uploaded file:
  • file_icon Created with Sketch.

Acceptable files: doc, docx, pdf. (max 5MB)
Please submit your file in DOC, DOCX or PDF format
The upload size is limited to 5 MB
File is empty
File was not uploaded

At any time, you may withdraw your consent to the processing of personal data, but such withdrawal shall not affect the legal compliance of any processing of such data, which had occurred before you withdrew your consent. Detailed information on the processing of your personal data is specified in the Privacy Policy.

Sii Poland follows the Procedure for reporting law violations.

Create MySii account to follow your application's status
success

Your application has been submitted

We will contact you as soon as we review your CV

Processing...

Sorry, something went wrong and your message was not delivered

Refresh the page and try again. Contact us, if problem occurs again

We’re sorry, but the selected file appears to be damaged and we can't process it.

Please try uploading a different copy or a new version of the file. Contact us, if problem occurs again.

Benefits for you

Apply now Recommend a friend

Änderungen im Gange

Wir aktualisieren unsere deutsche Website. Wenn Sie die Sprache wechseln, wird Ihnen die vorherige Version angezeigt.

Ta treść jest dostępna tylko w jednej wersji językowej.
Nastąpi przekierowanie do strony głównej.

Czy chcesz opuścić tę stronę?

Einige Inhalte sind nicht in deutscher Sprache verfügbar.
Sie werden zur englischen Version der ausgewählten Seite weitergeleitet.

Möchten Sie fortfahren?

Einige Inhalte sind nicht in deutscher Sprache verfügbar.
Sie werden auf die deutsche Homepage weitergeleitet.

Möchten Sie fortsetzen?