Kto szuka:
HAYS
Stanowisko:
Senior Data Engineer
Lokalizacja:
Polska
mazowieckie
Opis stanowiska podany przez pracodawcę:
Senior Data Engineer
Polska
NR REF.: 1190152
Hays IT Contracting to współpraca oparta na zasadach B2B. Nasza firma dopasowuje specjalistów IT do najciekawszych projektów technologicznych na rynku. Dołącz do grona 500 zadowolonych Kontraktorów i pracuj dla Klientów Hays!
Obecnie dla naszego Klienta poszukujemy Kandydatów na stanowisko:Senior Data Engineer
Branża: farmaceutycznaLokalizacja: 100% zdalnieRodzaj pracy: umowa B2B pełen etatGodziny pracy: godziny standardowe 40 godzin/tygodniowoCzas trwania projektu: długofalowa współpraca; kontrakt minimum na rokZespół: międzynarodowe rozproszone zespoły, wstępnie 5 osób na zespół polski;Start Date: ASAPTechnologie: Microsoft Azure (platforma chmurowa), Databricks, Delta Tables, Lakehouse, ETL i ELT (narzędzia i techniki integracji danych), Git, Jira, Confluence, Azure DevOps, Python, SQL czy inne skrypty, Power BI;
Business Intelligence - dodawanie insightów do szerszej strategii BI.Integracja transformacji danych w Pythonie z Power BI oraz ich przenoszenie do chmury.
Doświadczenie i umiejętności:
- Znajomość platformy Microsoft Azure i usług chmurowych.
- Doświadczenie w projektowaniu, budowaniu i wdrażaniu potoków danych w chmurze, w celu pobierania danych z różnych źródeł, takich jak bazy danych, API lub platformy strumieniowe.
- Biegłość w systemach zarządzania bazami danych. Kandydat powinien być w stanie projektować, konfigurować i zarządzać strukturami danych.
- Umiejętności programowania (Python, SQL, inne skrypty).
- Biegłość w optymalizacji ETL danych. Znajomość optymalizacji zapytań, indeksowania i strojenia wydajności jest niezbędna do efektywnego pobierania i przetwarzania danych.
- Znajomość co najmniej jednego narzędzia do orkiestracji i harmonogramowania (Airflow lub ADF).
Obowiązki:
- Pisanie wydajnego i skalowalnego kodu do przetwarzania, transformacji i czyszczenia dużych ilości danych strukturalnych i niestrukturalnych.
- Budowanie potoków danych do pobierania danych z różnych źródeł, takich jak bazy danych, API lub platformy strumieniowe (Databricks, Delta Tables, Lakehouse).
- Integracja i transformacja danych w celu zapewnienia ich zgodności z docelowym modelem danych lub formatem.
- Modelowanie danych z różnych źródeł i technologii. Rozwiązywanie i wspieranie najbardziej złożonych i mających największy wpływ problemów, aby dostarczać nowe funkcje i funkcjonalności.
- Projektowanie i optymalizacja architektury przechowywania danych, w tym jezior danych, hurtowni danych lub rozproszonych systemów plików.
- Identyfikowanie i rozwiązywanie problemów związanych z przetwarzaniem danych, przechowywaniem lub infrastrukturą. Monitorowanie wydajności systemu, identyfikowanie anomalii i przeprowadzanie analizy przyczyn źródłowych w celu zapewnienia płynnych i nieprzerwanych operacji danych.
- Kandydat powinien być w stanie integrować dane z wielu źródeł i przekształcać je w format odpowiedni do analizy.
- Dzielenie się wiedzą, udzielanie wsparcia i mentoring członkom zespołu.
- Doświadczenie w pracy w metodykach zwinnych – narzędzia wspierające (JIRA, Azure DevOps).
Co otrzymasz:
- Błyskawiczny proces rekrutacyjny;
- Standardowe benefity – preferencyjne stawki pakietów LuxMed i Multisport;
- Decydując się na współpracę via Hays, otrzymujesz również możliwość pracy w przyszłości dla wielu innych wiodących klientów Hays;
Jak będzie wyglądał proces rekrutacyjny:
- Rozmowa techniczna z Klientem – spotkanie online (1h); max 2 spotkania;
- Oferta;
- Witamy w projekcie !
Jeśli oferta jest dla Ciebie interesująca — aplikuj!
Hays Poland sp. z o.o. jest agencją zatrudnienia zarejestrowaną w rejestrze prowadzonym przez Marszałka Województwa Mazowieckiego pod numerem 361.
Kontakt do pracodawcy:
Kliknij tutaj, aby skontaktować się z pracodawcą lub wysłać swoje CV »