Wyszukaj spośród 23275 ogłoszeń o pracę

Data Engineer w/ Databricks (Mid i Senior) IT LeasingTeam Sp. z o.o.

  • Warszawa, mazowieckie
  • 26-12-2024 , do końca 171 dni

Rodzaj pracy: Kontrakt

IT LeasingTeam realizuje usługi w zakresie pozyskiwania dla organizacji wysokiej klasy specjalistów i kadry zarządzającej z obszaru IT a także rozwija i wdraża nowoczesne rozwiązania IT w ramach outsourcingu procesów. IT LeasingTeam wspiera procesy biznesowe firm, umożliwiając im zwiększenie elastyczności i budowanie przewagi konkurencyjnej.

Aktualnie dla jednego z naszych klientów poszukujemy kandydatów na stanowisko:

Zadania:

Dla Kogo: Dołączysz do innowacyjnej firmy biotechnologicznej. Będziesz częścią zespołu, który rozwija zaawansowane rozwiązania związane z analizą danych w branży medycznej i life sciences. Pracuj w dynamicznym środowisku, w którym technologie mają realny wpływ na zdrowie milionów ludzi na świecie.
Zatrudnienie: Umowa o współpracy B2B, pełen wymiar godzin, długofalowa współpraca.
Stawka: Twoja stawka netto (faktura VAT).
Typ Pracy: Zdalnie z Polski, z możliwością wizyt w biurze w Warszawie na prośbę pracodawcy.

Zakres Obowiązków:

  • Projektowanie, rozwój i automatyzacja wydajnych procesów przetwarzania danych (ETL), oczyszczania danych oraz ich przygotowania do analiz, z wykorzystaniem Apache Spark i Pythona.
  • Tworzenie, optymalizacja i utrzymywanie pipeline'ów danych w środowisku Databricks - kluczowa technologia, której znajomość jest niezbędna.
  • Programowanie w Pythonie jako głównym języku do tworzenia skryptów i pipeline'ów danych, w tym przetwarzania danych strumieniowych i batchowych.
  • Udział w pełnym cyklu rozwoju oprogramowania: od zbierania wymagań biznesowych, przez projektowanie i implementację, aż po wdrożenie i wsparcie.
  • Współpraca z analitykami, architektami i innymi zespołami w celu optymalizacji dostarczanych rozwiązań oraz zapewnienia ich zgodności z potrzebami biznesu.
  • Monitorowanie wydajności systemów danych, analiza i rozwiązywanie problemów technicznych, w tym tuning zapytań Spark i optymalizacja pipeline'ów Databricks.
  • Udział w tworzeniu standardów i najlepszych praktyk w zakresie zarządzania danymi, z naciskiem na architekturę lakehouse (Delta Lake).

Wymagania:

Dla Mid Data Engineer:

  • Posiadasz min. 5 lat doświadczenia w inżynierii danych, w tym praktyczną znajomość Databricks oraz Apache Spark.
  • Biegła znajomość Pythona do tworzenia pipeline'ów danych, skryptów automatyzujących oraz analizy danych.
  • Znasz SQL na poziomie umożliwiającym tworzenie, optymalizację i debugowanie zapytań, a także pracę z dużymi zbiorami danych w środowisku big data.
  • Masz doświadczenie w pracy z procesami ETL, zarządzaniem pipeline'ami danych oraz ich automatyzacją w środowisku chmurowym (AWS).
  • Doświadczenie w integracji danych z różnych źródeł, w tym z API oraz przetwarzania danych strumieniowych (real-time processing).
  • Pracowałeś/aś w środowisku Agile, znasz narzędzia takie jak JIRA, Confluence.
  • Mile widziana znajomość Terraform oraz narzędzi do zarządzania metadanymi (np. Collibra).

Dla Senior Data Engineer:

  • Posiadasz min. 8 lat doświadczenia w inżynierii danych, w tym zaawansowaną znajomość Databricks, Apache Spark oraz architektury lakehouse (Delta Lake).
  • Jesteś ekspertem w programowaniu w Pythonie, potrafisz tworzyć zaawansowane skrypty oraz optymalizować procesy przetwarzania danych przy użyciu Spark API.
  • Masz doświadczenie w pracy z narzędziami big data, przetwarzaniem danych strumieniowych oraz integracją z różnymi systemami (RESTful API, CRM).
  • Ekspert w zakresie SQL, w tym optymalizacji zapytań i pracy z wielowymiarowymi modelami danych.
  • Posiadasz doświadczenie w tworzeniu zaawansowanych raportów i dashboardów (Tableau) oraz ich optymalizacji pod kątem wydajności.
  • Pracowałeś/aś w środowisku Agile, prowadząc projekty na dużą skalę i koordynując zespoły cross-funkcjonalne.
  • Znajomość AWS, Terraform, oraz doświadczenie z CI/CD (np. GitLab CI/CD) będą istotnymi atutami.

Oferujemy:

  • Stabilna współpraca B2B z perspektywą długoterminowego zaangażowania.
  • Praca zdalna z elastycznymi godzinami, możliwość pracy hybrydowej w biurze w Warszawie.
  • Atrakcyjne wynagrodzenie zależne od doświadczenia.
  • Praca nad nowoczesnymi rozwiązaniami w branży biotechnologicznej, mającymi realny wpływ na życie ludzi.
  • Zatrudnienie w zespole specjalistów, w którym możesz liczyć na wymianę wiedzy i dalszy rozwój zawodowy.


Zgodnie z obowiązującym prawem IT LeasingTeam nie pobiera opłat od kandydatów za udział w procesach rekrutacyjnych. Uprzejmie informujemy, że skontaktujemy się jedynie z wybranymi Kandydatami.

Agencja zatrudnienia - nr certyfikatu 14181.

Prosimy o zamieszczenie na dokumentach aplikacyjnych następującej klauzuli: „Wyrażam zgodę na przetwarzanie moich danych osobowych dla potrzeb niezbędnych do prawidłowej realizacji procesów rekrutacji zgodnie z ustawą o ochronie danych osobowych z dn. 29.08.1979 (Dz.U. nr 133, poz. 883).


Szukasz pracy jako Data Engineer w/ Databricks (Mid i Senior)

Przeglądasz ofertę pracy na stanowisku: Data Engineer w/ Databricks (Mid i Senior) w miejscowości: Warszawa. Śmiało Aplikuj! Sprawdź również inne dostepne ogłoszenia o pracę z firmy IT LeasingTeam Sp. z o.o. lub Aplikuj na oferte pracy Data Engineer w/ Databricks (Mid i Senior) Możesz także skorzystać z naszej darmowej wyszukiwarki ofert pracy dla programistów

Zachęcamy do złożenia Aplikacji na stanowisko Data Engineer w/ Databricks (Mid i Senior), praca w Warszawa dopasowana do Twoich wymagań.IT LeasingTeam Sp. z o.o. praca.

Informacje o pracodawcy


IT LeasingTeam Sp. z o.o.


Praca Data Engineer w/ Databricks (Mid i Senior), Warszawa


Oferta jest ważna jeszcze 171 dni

Aplikuj teraz

Inne ogłoszenia pracodawcy

Senior IT Business Analysts

Warszawa, mazowieckie


Manual Tester

Warszawa, mazowieckie


Test Coordinator

Warszawa, mazowieckie


Network Administrator

Warszawa, mazowieckie


Senior UX/UI Designer

Warszawa, mazowieckie

Praca w mieście

Warszawa 1245
Kraków 1047
Wrocław 459
Poznań 377
Gdańsk 359
Łódź 342
Zobacz więcej