Data engineer (Databricks, PySpark, SQL)

Stack

Feladatok

• ▹Squad-specifikus adatarchitektúrák és adatfolyamok tervezése, fejlesztése, optimalizálása és karbantartása az ETL- és data lake-elvek szerint
• ▹Az adatarchitektúra- és pipeline-elemek előkészítése és átadása a platformcsapatnak, hogy más squadok is újra felhasználhassák őket
• ▹Összetett technikai adatproblémák megoldása az üzleti célok támogatására
• ▹Adattermékek fejlesztése elemzők, adattudósok és ML-mérnökök számára
• ▹Adat- és analitikai szakemberek tanácsadása, mentorálása az adatstandardokról és a bevált gyakorlatokról
• ▹Részvétel az adatmérnöki és adattudományi eszközök értékelésében, a standardok és munkamódszerek fejlesztésében
• ▹Folyamatos fejlesztés a képzések, a kompetenciafejlesztés, valamint az analitikai adatmérnöki gyakorlatok és folyamatok javításával

Elvárások

• ▹Informatikai vagy rokon szakterületű diploma
• ▹Legalább 10 év szoftver- vagy infrastruktúra-fejlesztési tapasztalat, ebből legalább 4 év adatmérnöki munka elosztott számítási, big data vagy fejlett analitikai környezetben
• ▹Erős SQL- és adatelemzési tudás, legalább egy programozási nyelv (például Python vagy Scala) ismerete
• ▹Adatbázis-fejlesztési és adatmodellezési tapasztalat, lehetőleg Databricks/Spark és SQL Server környezetben; relációs, NoSQL és felhős adatbázisok ismerete
• ▹Az elosztott számítás alapos ismerete, lehetőleg Spark vagy MapReduce
• ▹Gyakorlati tapasztalat Azure-eszközökkel: Azure Data Factory, Azure Databricks, Event Hub, Synapse, ML-szolgáltatások
• ▹Adat- és analitikai alapfogalmak ismerete: dimenzionális modellezés, ETL, adattárház, riportálás, adatgovernance, strukturált és strukturálatlan adatok kezelése
• ▹Unix-rendszerek, különösen shell scripting ismerete
• ▹Hálózati alapismeretek, kapcsolódás és hibaelhárítás
• ▹Gépi tanulás, adattudomány, AI, statisztika vagy alkalmazott matematika alapismeretei
• ▹Erős kommunikációs készség és folyékony angol nyelvtudás

Előny

• ▹Német nyelvtudás

Soft skillek

Amit kínálunk

• ▹Saját termék fejlesztése és karbantartása, nagy hangsúllyal a minőségen és a hosszú távú stabilitáson
• ▹Kódminőség: Clean Code és SOLID elvek, alapos tesztelés
• ▹Rugalmas munkaidő és távmunka lehetősége
• ▹Versenyképes fizetés, az inflációt és a hűséget követő rendszeres emeléssel
• ▹Folyamatos tanulás belső tanulási platformon és szakértői közösségekben