Senior Databricks adatmérnök

Stack

Feladatok

• ▹Komplex ETL/ELT adatfolyamatok tervezése és megvalósítása Apache Spark (PySpark, Spark SQL, Scala) használatával
• ▹A Data Lakehouse kezelése: Delta Lake táblák optimalizálása, particionálási és indexelési logika kialakítása az olvasási/írási teljesítmény maximalizálásához
• ▹Adatkormányzás és biztonság: hozzáférés-kezelés és biztonsági beállítások konfigurálása Unity Catalog segítségével, a vállalati szabályzatoknak megfelelően
• ▹Együttműködés Data Scientistekkel gépi tanulási modellek (MLflow) integrálásában, valamint Power BI fejlesztőkkel az optimalizált adathalmazok (Gold Layer) publikálásában
• ▹Munkafolyamatok automatizálása Databricks Jobs segítségével, CI/CD-integráció és adatminőség-ellenőrzés
• ▹Adatfeldolgozási munkaterhelések optimalizálásának koordinálása Data Scientistekkel és Data Architectekkel együttműködve
• ▹Összetett esetekben a Medallion architektúra (Bronze, Silver, Gold) tervezésének és a Delta Lake kezelésének vezetése, technikai szűk keresztmetszetek megoldása

Elvárások

• ▹Apache Spark ismerete
• ▹Hadoop-ökoszisztéma ismerete
• ▹Scala és Python programozási ismeretek
• ▹Legalább 2 év tapasztalat Microsoft Azure felhőszolgáltatásokkal és technológiákkal, felhő-natív adatarchitektúrák tervezésében és kezelésében
• ▹Tapasztalt szakértő a batch és streaming adatbeolvasási folyamatokban, teljesítmény- és minőségorientáltan

Amit kínálunk

• ▹Dinamikus munkakörnyezet, nemzeti és nemzetközi projektekkel
• ▹Folyamatos tanulási és készségfejlesztési lehetőség
• ▹Munkalehetőség Európa vezető, folyamatosan növekvő IT-szolgáltató vállalatánál
• ▹Smart working lehetőség a vállalati szabályzat szerint

A munkáltatóról

A Sopra Steria Európa egyik vezető technológiai vállalata, 51 000 munkatárssal mintegy 30 országban, tanácsadási, digitális szolgáltatási és IT-megoldásokkal segíti ügyfelei digitális transzformációját. 2025-ös árbevétele 5,6 milliárd euró volt. Olaszországban mintegy 1200 munkatársa dolgozik (2025-ös árbevétel: 107,35 millió euró) Assago, Róma, Collecchio, Padova, Ariano Irpino és Pozzuoli telephelyein. A vállalat az Euronext Paris tőzsdén jegyzett.