Wyszukaj spośród 23890 ogłoszeń o pracę

Data Engineer w/ Databricks (Mid i Senior) IT LeasingTeam Sp. z o.o.

  • Warszawa, mazowieckie
  • 26-12-2024 , do końca 328 dni

Rodzaj pracy: Kontrakt

IT LeasingTeam realizuje usługi w zakresie pozyskiwania dla organizacji wysokiej klasy specjalistów i kadry zarządzającej z obszaru IT a także rozwija i wdraża nowoczesne rozwiązania IT w ramach outsourcingu procesów. IT LeasingTeam wspiera procesy biznesowe firm, umożliwiając im zwiększenie elastyczności i budowanie przewagi konkurencyjnej.

Aktualnie dla jednego z naszych klientów poszukujemy kandydatów na stanowisko:

Zadania:

Dla Kogo: Dołączysz do innowacyjnej firmy biotechnologicznej. Będziesz częścią zespołu, który rozwija zaawansowane rozwiązania związane z analizą danych w branży medycznej i life sciences. Pracuj w dynamicznym środowisku, w którym technologie mają realny wpływ na zdrowie milionów ludzi na świecie.
Zatrudnienie: Umowa o współpracy B2B, pełen wymiar godzin, długofalowa współpraca.
Stawka: Twoja stawka netto (faktura VAT).
Typ Pracy: Zdalnie z Polski, z możliwością wizyt w biurze w Warszawie na prośbę pracodawcy.

Zakres Obowiązków:

  • Projektowanie, rozwój i automatyzacja wydajnych procesów przetwarzania danych (ETL), oczyszczania danych oraz ich przygotowania do analiz, z wykorzystaniem Apache Spark i Pythona.
  • Tworzenie, optymalizacja i utrzymywanie pipeline'ów danych w środowisku Databricks - kluczowa technologia, której znajomość jest niezbędna.
  • Programowanie w Pythonie jako głównym języku do tworzenia skryptów i pipeline'ów danych, w tym przetwarzania danych strumieniowych i batchowych.
  • Udział w pełnym cyklu rozwoju oprogramowania: od zbierania wymagań biznesowych, przez projektowanie i implementację, aż po wdrożenie i wsparcie.
  • Współpraca z analitykami, architektami i innymi zespołami w celu optymalizacji dostarczanych rozwiązań oraz zapewnienia ich zgodności z potrzebami biznesu.
  • Monitorowanie wydajności systemów danych, analiza i rozwiązywanie problemów technicznych, w tym tuning zapytań Spark i optymalizacja pipeline'ów Databricks.
  • Udział w tworzeniu standardów i najlepszych praktyk w zakresie zarządzania danymi, z naciskiem na architekturę lakehouse (Delta Lake).

Wymagania:

Dla Mid Data Engineer:

  • Posiadasz min. 5 lat doświadczenia w inżynierii danych, w tym praktyczną znajomość Databricks oraz Apache Spark.
  • Biegła znajomość Pythona do tworzenia pipeline'ów danych, skryptów automatyzujących oraz analizy danych.
  • Znasz SQL na poziomie umożliwiającym tworzenie, optymalizację i debugowanie zapytań, a także pracę z dużymi zbiorami danych w środowisku big data.
  • Masz doświadczenie w pracy z procesami ETL, zarządzaniem pipeline'ami danych oraz ich automatyzacją w środowisku chmurowym (AWS).
  • Doświadczenie w integracji danych z różnych źródeł, w tym z API oraz przetwarzania danych strumieniowych (real-time processing).
  • Pracowałeś/aś w środowisku Agile, znasz narzędzia takie jak JIRA, Confluence.
  • Mile widziana znajomość Terraform oraz narzędzi do zarządzania metadanymi (np. Collibra).

Dla Senior Data Engineer:

  • Posiadasz min. 8 lat doświadczenia w inżynierii danych, w tym zaawansowaną znajomość Databricks, Apache Spark oraz architektury lakehouse (Delta Lake).
  • Jesteś ekspertem w programowaniu w Pythonie, potrafisz tworzyć zaawansowane skrypty oraz optymalizować procesy przetwarzania danych przy użyciu Spark API.
  • Masz doświadczenie w pracy z narzędziami big data, przetwarzaniem danych strumieniowych oraz integracją z różnymi systemami (RESTful API, CRM).
  • Ekspert w zakresie SQL, w tym optymalizacji zapytań i pracy z wielowymiarowymi modelami danych.
  • Posiadasz doświadczenie w tworzeniu zaawansowanych raportów i dashboardów (Tableau) oraz ich optymalizacji pod kątem wydajności.
  • Pracowałeś/aś w środowisku Agile, prowadząc projekty na dużą skalę i koordynując zespoły cross-funkcjonalne.
  • Znajomość AWS, Terraform, oraz doświadczenie z CI/CD (np. GitLab CI/CD) będą istotnymi atutami.

Oferujemy:

  • Stabilna współpraca B2B z perspektywą długoterminowego zaangażowania.
  • Praca zdalna z elastycznymi godzinami, możliwość pracy hybrydowej w biurze w Warszawie.
  • Atrakcyjne wynagrodzenie zależne od doświadczenia.
  • Praca nad nowoczesnymi rozwiązaniami w branży biotechnologicznej, mającymi realny wpływ na życie ludzi.
  • Zatrudnienie w zespole specjalistów, w którym możesz liczyć na wymianę wiedzy i dalszy rozwój zawodowy.


Zgodnie z obowiązującym prawem IT LeasingTeam nie pobiera opłat od kandydatów za udział w procesach rekrutacyjnych. Uprzejmie informujemy, że skontaktujemy się jedynie z wybranymi Kandydatami.

Agencja zatrudnienia - nr certyfikatu 14181.

Prosimy o zamieszczenie na dokumentach aplikacyjnych następującej klauzuli: „Wyrażam zgodę na przetwarzanie moich danych osobowych dla potrzeb niezbędnych do prawidłowej realizacji procesów rekrutacji zgodnie z ustawą o ochronie danych osobowych z dn. 29.08.1979 (Dz.U. nr 133, poz. 883).


Szukasz pracy jako Data Engineer w/ Databricks (Mid i Senior)

Przeglądasz ofertę pracy na stanowisku: Data Engineer w/ Databricks (Mid i Senior) w miejscowości: Warszawa. Śmiało Aplikuj! Sprawdź również inne dostepne ogłoszenia o pracę z firmy IT LeasingTeam Sp. z o.o. lub Aplikuj na oferte pracy Data Engineer w/ Databricks (Mid i Senior) Możesz także skorzystać z naszej darmowej wyszukiwarki ofert pracy dla programistów

Zachęcamy do złożenia Aplikacji na stanowisko Data Engineer w/ Databricks (Mid i Senior), praca w Warszawa dopasowana do Twoich wymagań.IT LeasingTeam Sp. z o.o. praca.

Informacje o pracodawcy


IT LeasingTeam Sp. z o.o.


Praca Data Engineer w/ Databricks (Mid i Senior), Warszawa


Oferta jest ważna jeszcze 328 dni

Aplikuj teraz

Inne ogłoszenia pracodawcy

ETL Developer (IPC)

Warszawa, mazowieckie


Tester Automatyzujący (Python)

Warszawa, mazowieckie


React Native Developer

Warszawa, mazowieckie

Praca w mieście

Warszawa 1261
Kraków 1060
Wrocław 474
Poznań 391
Gdańsk 369
Szczecin 353
Zobacz więcej