Sii Polska

SII UKRAINE

SII SWEDEN

  • Szkolenia
  • Kariera
Dołącz do nas Kontakt
Wstecz

Sii Polska

SII UKRAINE

SII SWEDEN

Wstecz

Data Engineer – Data Lake (f/m/x)

  • Senior
  • Zdalna, 
  • Hybrydowa, 
  • Stacjonarna
  • Wiele lokalizacji Pokaż wszystkie
This translation is generic and may include errors. Show original text
This offer base language is English. Translate into Polish.

Technologie i narzędzia

Dołączysz do międzynarodowego projektu w branży opieki zdrowotnej i nauk przyrodniczych, koncentrującego się na budowaniu i rozwijaniu nowoczesnej platformy Data Lake wspierającej przetwarzanie i analizę danych na dużą skalę. Rozwiązanie umożliwia podejmowanie decyzji w oparciu o dane w ściśle regulowanym środowisku, z silnym naciskiem na jakość danych, bezpieczeństwo i zgodność z przepisami. Środowisko jest oparte na chmurze i wykorzystuje nowoczesne technologie Big Data oraz najlepsze praktyki inżynieryjne.

Jako Data Engineer będziesz odpowiedzialny za projektowanie, rozwój i utrzymanie pipeline'ów danych oraz architektury Data Lake. Będziesz ściśle współpracować z wielofunkcyjnymi zespołami, w tym z Data Scientist i interesariuszami biznesowymi, aby dostarczać niezawodne i wydajne rozwiązania w zakresie danych.

Twoje zadania

  • Projektowanie i rozwijanie skalowalnych pipeline'ów danych do przetwarzania wsadowego i w czasie rzeczywistym
  • Budowanie i optymalizacja architektury Data Lake dla analitycznych przypadków użycia
  • Integracja wielu źródeł danych i zapewnienie płynnego przepływu danych między systemami
  • Zapewnienie jakości, spójności i zarządzania danymi (pochodzenie danych, kontrola dostępu)
  • Optymalizacja wydajności przechowywania i przetwarzania przy użyciu nowoczesnych formatów danych i strategii partycjonowania
  • Monitorowanie, rozwiązywanie problemów i poprawa wydajności potoku danych
  • Współpraca z interesariuszami w celu przełożenia potrzeb biznesowych na rozwiązania techniczne
  • Przestrzeganie najlepszych praktyk w zakresie inżynierii danych i ciągłe ulepszanie platformy

Wymagania

  • Co najmniej 5 lat doświadczenia na stanowiskach związanych z Data Engineer lub Big Data
  • Biegła znajomość języka Python, Scala lub Java
  • Praktyczne doświadczenie z narzędziami takimi jak Apache Spark, PySpark lub podobnymi frameworkami
  • Wcześniejsza praca z technologiami Data Lake, np. AWS S3, Azure Data Lake, Databricks, BigQuery
  • Znajomość procesów ETL/ELT i narzędzi do orkiestracji, np. Airflow, Data Factory
  • Dobre zrozumienie SQL i modelowania danych
  • Doświadczenie z systemami rozproszonymi i przetwarzaniem danych na dużą skalę
  • Znajomość narzędzi Docker i Kubernetes
  • Silne umiejętności analityczne i rozwiązywania problemów
  • Wymagana biegła znajomość języka polskiego i angielskiego
  • Wymagane miejsce zamieszkania w Polsce

Mile widziane

  • Doświadczenie z technologiami przesyłania strumieniowego (np. Kafka)
  • Znajomość narzędzi do zarządzania danymi
  • Znajomość procesów CI/CD w projektach związanych z danymi

Nr oferty 260424-8EHKD

Sii zapewnia, że wszystkie decyzje związane z zatrudnieniem są podejmowane wyłącznie na podstawie kwalifikacji i kompetencji. Zobowiązujemy się do równego traktowania wszystkich osób, niezależnie od cech chronionych, oraz promowania zróżnicowanego i integracyjnego środowiska pracy.

Technologies & tools

You will join an international project within the healthcare and life sciences industry, focused on building and evolving a modern Data Lake platform supporting large-scale data processing and analytics. The solution enables data-driven decision-making in a highly regulated environment, with a strong emphasis on data quality, security, and compliance. The environment is cloud-based and leverages modern big data technologies and best engineering practices.

As a Data Engineer, you will be responsible for designing, developing, and maintaining data pipelines and Data Lake architecture. You will work closely with cross-functional teams, including data scientists and business stakeholders, to deliver reliable and efficient data solutions.

Your tasks

  • Designing and developing scalable data pipelines for batch and real-time data processing
  • Building and optimizing Data Lake architecture for analytical use cases
  • Integrating multiple data sources and ensuring seamless data flow across systems
  • Ensuring data quality, consistency, and governance (data lineage, access control)
  • Optimizing storage and processing performance using modern data formats and partitioning strategies
  • Monitoring, troubleshooting, and improving data pipeline performance
  • Collaborating with stakeholders to translate business needs into technical solutions
  • Following best practices in data engineering and continuously improving the platform

Requirements

  • At least 5 years of experience in Data Engineering or Big Data-related roles
  • Proficiency in Python, Scala, or Java
  • Hands-on experience with tools such as Apache Spark, PySpark, or similar frameworks
  • Previous work with Data Lake technologies, e.g., AWS S3, Azure Data Lake, Databricks, BigQuery
  • Knowledge of ETL/ELT processes and orchestration tools, e.g., Airflow, Data Factory
  • Good understanding of SQL and data modelling
  • Experience with distributed systems and large-scale data processing
  • Familiarity with Docker and Kubernetes
  • Strong analytical and problem-solving skills
  • Fluent in Polish and English required
  • Residing in Poland required

Nice to have

  • Experience with streaming technologies (e.g., Kafka)
  • Knowledge of data governance tools
  • Familiarity with CI/CD processes in data projects

Job no. 260424-8EHKD

Sii zapewnia, że wszystkie decyzje związane z zatrudnieniem są podejmowane wyłącznie na podstawie kwalifikacji i kompetencji. Zobowiązujemy się do równego traktowania wszystkich osób, niezależnie od cech chronionych, oraz promowania zróżnicowanego i integracyjnego środowiska pracy.

Aplikuj szybko

Data Engineer – Data Lake (f/m/x)

Tryb pracy*

Wybierz minimum jedno pole

Opcja nie została wybrana

angle-down

Opcja nie została wybrana

Załącz CV*

Załączony plik:
  • file_icon Created with Sketch.

Dopuszczalne pliki: doc, docx, pdf. (maks. 5MB)
Prześlij plik w formacie DOC, DOCX lub PDF
Maksymalny rozmiar przesłanego pliku to 5 MB
Plik jest pusty
Załącznik nie został dodany

W dowolnym momencie możesz wycofać zgodę na przetwarzanie danych osobowych, ale nie wpłynie to na zgodność z prawem wszelkich przypadków przetwarzania danych, które miały miejsce przed wycofaniem zgody. Szczegółowe informacje na temat przetwarzania danych osobowych znajdują się w Polityce Prywatności .

W Sii Polska obowiązuje Procedura dotycząca zgłoszeń naruszeń prawa.

Załóż konto w MySii, żeby śledzić status Twojej aplikacji
success

Twoja aplikacja została przesłana

Skontaktujemy się z Tobą, gdy tylko sprawdzimy Twoje CV

Przetwarzanie...

Przepraszamy, coś poszło nie tak i Twoja wiadomość nie została dostarczona

Odśwież stronę i spróbuj ponownie. Skontaktuj się z nami, jeśli problem się powtórzy

Przepraszamy, ale wybrany plik wygląda na uszkodzony i nie możemy go przetworzyć.

Spróbuj przesłać inną kopię lub nową wersję pliku. Skontaktuj się z nami, jeśli problem wystąpi ponownie.

Benefity dla Ciebie

Aplikuj teraz Poleć znajomego

Änderungen im Gange

Wir aktualisieren unsere deutsche Website. Wenn Sie die Sprache wechseln, wird Ihnen die vorherige Version angezeigt.

This content is available only in one language version.
You will be redirected to home page.

Are you sure you want to leave this page?

Einige Inhalte sind nicht in deutscher Sprache verfügbar.
Sie werden zur englischen Version der ausgewählten Seite weitergeleitet.

Möchten Sie fortfahren?

Einige Inhalte sind nicht in deutscher Sprache verfügbar.
Sie werden auf die deutsche Homepage weitergeleitet.

Möchten Sie fortsetzen?