Opis projektu
Dla naszego wieloletniego Klienta, europejskiego lidera w produkcji AGD poszukujemy Kandydata na stanowisko: Data Engineer ze znajomością platformy Databricks.
Wymagane umiejętności i doświadczenie:
- Platforma Databricks: Biegłe korzystanie z usług Azure Databricks (klastry, notebooki, pipeline’y danych, Delta Lake itp.). Minimum 3+ lata doświadczenia z Azure Databricks w środowiskach enterprise.
- Pozyskiwanie i transformacja danych: Doświadczenie w zakresie ingestii danych, ich czyszczenia, transformacji oraz zapewniania jakości danych z wykorzystaniem narzędzi takich jak dbt.
- Rozwój ETL: Umiejętność tworzenia i implementacji procesów ETL przy użyciu Azure Databricks oraz Azure Data Factory. Praktyczne doświadczenie w orkiestracji dużych przepływów danych.
- Wdrażanie platformy i monitorowanie: Doświadczenie we wdrażaniu i monitorowaniu platform opartych na Databricks w Azure, w tym monitorowanie wydajności i rozwiązywanie problemów z wykorzystaniem Azure Monitor.
- Pipeline’y danych: Doświadczenie w budowaniu i zarządzaniu pipeline’ami danych w Azure Databricks.
- Infrastructure as Code: Zaawansowana znajomość Terraform, w tym doświadczenie w tworzeniu wielokrotnego użytku modułów.
- Języki programowania i frameworki: Biegłość w Pythonie, SQL oraz Spark. Dobra znajomość koncepcji CI/CD.
- Jakość danych i governance: Solidne zrozumienie frameworków jakości danych oraz standardów zarządzania danymi (data governance).
- Kontrola wersji i CI/CD: Doświadczenie w pracy z Git oraz Azure DevOps w zakresie kontroli wersji oraz wdrażania pipeline’ów CI/CD.
- Infrastruktura chmurowa: Znajomość komponentów infrastruktury Azure istotnych dla wdrożeń Databricks.
Warunki współpracy / co oferujemy:
Oferujemy kontrakt B2B do 31.12.2026 z możliwością przedłużenia.
Szczegóły projektu:
- Kontrakt: B2B
- Stawka: do negocjacji
- Wymiar czasu pracy: full-time
- Tryb pracy: zdalny
W razie zainteresowania pozostałymi szczegółami projektu oraz chęci wzięcia udziału w procesie rekrutacyjnym zapraszamy do kontaktu z Magdaleną Krzyżaniak: magdalena.krzyzaniak@lukardi.com
Aplikuj na stanowisko
Lukardi Talents Team Manager
Marcin Buszewicz
Cześć, nazywam się Marcin Buszewcz. W Lukardi Talents jestem Team Managerem. Chętnie odpowiem na wszystkie Twoje pytania związane z tym projektem lub porozmawiamy o innych możliwościach współpracy.
marcin.buszewicz@lukardi.com
+48 733 123 478