Középszintű data engineer

Stack

Feladatok

• ▹ETL/ELT pipeline-ok tervezése, építése és optimalizálása, amelyek az ügyfél- és belső adatokból használható adatkészleteket állítanak elő
• ▹Együttműködés a Markets és Product csapatokkal az üzleti stratégiát és az ügyféligényeket támogató riportoló eszközök és dashboardok fejlesztésében
• ▹Data lake-ek és feature store-ok építése és karbantartása, amelyeket az ML-mérnökcsapat használ a regressz (subrogation) ML-megoldásaihoz

Elvárások

• ▹Python és SQL ismerete
• ▹Tapasztalat Sparkkal vagy hasonló elosztott feldolgozási technológiával
• ▹Tapasztalat AWS adatszolgáltatásokkal (Glue, S3, Step Functions, Athena, EMR, DynamoDB, SQS)
• ▹Tapasztalat adatfolyam-technológiákkal (Kafka, Spark Streaming stb.)
• ▹MongoDB és dokumentumalapú adatforrások ismerete
• ▹Tapasztalat data lake mintákkal: medallion architektúra (bronze/silver/gold), sémakezelés, inkrementális feldolgozás
• ▹Jártasság az IaC-ben (CloudFormation vagy Terraform)
• ▹Képesség az adatminőségi hibák felderítésére elosztott rendszerekben
• ▹Tapasztalat adatminőségi keretrendszerek (pl. Great Expectations) bevezetésében

Előny

• ▹Tapasztalat regressz (subrogation), kárkezelés, biztosítás vagy fintech területen

Amit kínálunk

• ▹Nemzetközi projektek
• ▹Irodai, hibrid vagy távmunka rugalmasság
• ▹Egészségbiztosítás
• ▹Elismerési program
• ▹Folyamatos tanulás és költségtérítés
• ▹Jóléti program
• ▹Csapatrendezvények és helyi juttatások
• ▹Sporttámogatás
• ▹Ajánlási bónusz
• ▹Csúcskategóriás eszközök

A munkáltatóról

Az Exadel AI-first globális technológiai cég, több mint 25 éves mérnöki múlttal, 2000+ munkatárssal és 500+ aktív projekttel; ügyfelei között Fortune 500 cégek is vannak (pl. HBO, Microsoft, Google, Starbucks). A konkrét ügyfél egy chicagói székhelyű járműélettani megoldásszolgáltató, amely biztosítók, javítóműhelyek és alkatrész-beszállítók hálózatát köti össze.