Adatmérnök

Stack

Feladatok

• ▹Skálázható data mesh platform tervezése és építése AWS-en
• ▹Stream-feldolgozó backend fejlesztése Spark (Scala/Python) és Kafka használatával
• ▹Új adatforrások integrálása (REST API, fájlmegosztás)
• ▹Változó sémák kezelése, hibatűrő adatfeldolgozás
• ▹Konzultánsi szerepkör ügyfelekkel és csapattal

Elvárások

• ▹Erős Scala és/vagy Python tudás, nyelvi belső ismeretek
• ▹2+ év tapasztalat AWS szolgáltatásokkal (Lambda, EMR, Glue, Lake Formation)
• ▹Pub-sub és aszinkron rendszerek (Kafka, SQS, Kinesis, RabbitMQ)
• ▹Algoritmuskomplexitás és adatszerkezetek ismerete
• ▹3+ év Linux/macOS, Docker és git tapasztalat csapatmunkában
• ▹Kiváló kommunikációs készség konzultánsi szerepkörhöz

Előny

• ▹ZIO tapasztalat
• ▹5+ év éles, magas rendelkezésre állású környezetben szerzett tapasztalat
• ▹Great Expectations vagy Deequ ismerete
• ▹Tesztelhető, karbantartható, tiszta kód írása

Soft skillek

A munkáltatóról

A DataChef adatmérnöki tanácsadó cég, amely nyílt forráskódú projektekhez (ZIO, Great Expectations) is hozzájárul.