Senior Databricks Engineer (he/she) – Praca zdalna

O Grupie Astek

Założona w 1988 roku we Francji Grupa Astek jest światowym partnerem w obszarze doradztwa inżynieryjnego oraz IT. Dzięki swojej wiedzy specjalistycznej w wielu sektorach przemysłowych i technologicznych, Astek wspiera międzynarodowych Klientów w rozwijaniu i wdrażaniu produktów oraz usług, jednocześnie uczestnicząc w ich transformacji cyfrowej.

Grupa Astek od momentu powstania opiera swój rozwój na kulturze przedsiębiorczości i innowacyjności oraz na budowaniu umiejętności swoich ponad 10 000 pracowników, którzy codziennie uczestniczą w zróżnicowanych projektach technologicznych i inżynieryjnych.

Dołącz do silnie rozwijającej się we Francji i na całym świecie Grupy, której obroty w 2024 r. wyniosły 705 milionów euro.

Zapraszamy na https://astek.net po więcej szczegółów. 

Stanowisko

Obecnie dla naszego klienta z branży commerce poszukujemy kandydata/kandydatki na stanowisko Senior Databricks Engineera/-ki. 

Dodatkowe informacje

Model pracy :

100% zdalnie – najlepiej, gdybyś pracował z terytorium PL. 

Oferowane wynagrodzenie

Wynagrodzenie: od 1200 – 1360 PLN netto/dzień, w zależności od posiadanego doświadczenia i kompetencji. 

Sprawdzisz się w tej roli, jeżeli:

• Posiadasz ekspercką znajomość PySpark
• Zaawansowana znajomość Spark SQL.
• Praktyczna znajomość Delta Lake (Delta tables, Z-Ordering, OPTIMIZE, VACUUM, Time Travel).

Dodatkowo:

• Doświadczenie z Azure DevOps, pipelines CI/CD.
• Bardzo dobra znajomość Git, w tym branching strategies.
• Praktyczna praca z Databricks Repos.
• Umiejętność przygotowywania zestawów danych i modeli na potrzeby raportowania.
• Bardzo zaawansowana znajomość Azure Databricks oraz Azure Data Lake Storage (ADLS Gen2).
• Doświadczenie w budowaniu architektury medallion (bronze/silver/gold).
• Bardzo dobra znajomość Azure Synapse Analytics LUB
• Doświadczenie z Azure SQL Database / SQL Server (modelowanie, optymalizacja zapytań, performance tuning).
• Doświadczenie w Azure Data Factory – pipelines, mapping data flows, triggerowanie procesów. 

Mile widziane:

• Znajomość Pythona w kontekście skryptów i integracji poza Sparkiem.
• Znajomość REST API – implementacja i konsumpcja.
• Znajomość Terraform – provisioning infrastruktury (ADF, Databricks, storage, networking). 

Zadania, które na Ciebie czekają:

• Projektowanie, implementacja i optymalizacja rozwiązań data engineeringowych w oparciu o Azure Databricks, ADLS Gen2 oraz format Delta Lake.
• Tworzenie i utrzymywanie pipeline’ów przetwarzania danych z wykorzystaniem PySpark, Spark SQL oraz architektury medallion.
• Projektowanie wydajnych i niezawodnych procesów ETL/ELT oraz ich orkiestracja w Azure Data Factory.
• Implementacja modeli danych i warstw servingowych w oparciu o Azure Synapse Analytics lub Azure SQL Database/SQL Server.
• Budowa i utrzymanie środowiska deweloperskiego z użyciem Git, Azure DevOps oraz Databricks Repos (branching, code review, standardy kodowania).
• Dbałość o jakość i optymalizację kosztową pipeline’ów – cluster sizing, autoscaling, tuning Spark.
• Tworzenie integracji z systemami zewnętrznymi z wykorzystaniem REST API.
• Współtworzenie infrastruktury jako kod przy użyciu Terraform (IaC).
• Przygotowywanie danych na potrzeby raportowania i analityki, w tym integracja z Power BI.
• Udział w projektowaniu architektury platformy danych i rekomendowanie najlepszych praktyk.
• Pełnienie roli technicznego autorytetu w zespole (benchmark), mentoring, wsparcie merytoryczne, wprowadzanie standardów i dobrych praktyk.
• Współpraca z analitykami, data scientistami i zespołem biznesowym w celu dostarczenia skalowalnych i odpornych rozwiązań. 

Nasz proces rekrutacji

Rozmowa z naszym Rekruterem -> Rozmowa z naszym Business Managerem -> Spotkanie z Klientem

W uzasadnionych przypadkach po rozmowie z Rekruterem wprowadzamy dodatkowy etap weryfikacji technicznej

Potrzebujesz więcej informacji? Skontaktuj się ze mną: [anna.jarecka@astek.net]

Co oferujemy

• Długoterminowa współpraca
• Szkolenia techniczne, certyfikaty i podnoszenie kwalifikacji
• Mentoring Competence Center – bycie członkiem społeczności CC od pierwszego dnia pracy jest szansą na rozwijanie swoich umiejętności, uczestniczenie w różnych konferencjach oraz dzielenie się wiedzą i doświadczeniem z ludźmi, którzy na co dzień mierzą się z tymi samymi wyzwaniami
• Jasna ścieżka kariery
• Pakiet benefitów pracowniczych (Multisport, prywatna opieka medyczna, ubezpieczenie na życie)
• Przyjazną atmosferę pracy, imprezy integracyjne i spotkania team-buildingowe

System rekomendacji

Znasz kogoś, kogo zainteresuje ta oferta? Skorzystaj z naszego systemu rekomendacji i zgarnij bonus do 7000 zl!

Link: https://astek.pl/system-rekomendacji/

Klauzula informacyjna

Administratorem Pana/Pani danych osobowych jest ASTEK Polska sp. z o.o. z siedziba w Warszawie (00-133) przy Al. Jana Pawla II 22. Przysługuje Pani/Panu prawo do wglądu do danych, prawo żądania usunięcia danych itp. Szczegółowe informacje dotyczace przetwarzania:
https://astek.pl/polityka-prywatnosci

W dowolnym momencie przysługuje Panu/Pani prawo do wycofania wyrażonych zgód. W razie wycofania zgód prosimy o kontakt e-mailowy na adres privacy@astek.net lub pisemnie na adres administratora.

Procedura dokonywania zgłoszeń przez sygnalistów w ASTEK Polska sp. z o. o.: https://astek.pl/sygnalisci/

Nr ref

AO225421