Technikai Vezető, Spark

Stack

Feladatok

• ▹Új funkciók tervezése a Cloudera adatmérnöki élményéhez, prototípustól az éles, nagy léptékű szállításig csapatvezetéssel
• ▹Hozzájárulás az Apache Sparkhoz és a Livyhez
• ▹Új funkciók fejlesztése Scala/Java/Python nyelven modern platformokon
• ▹Elosztott adatfeldolgozási szakértelem megszerzése: SQL tervezők és optimalizálók, adatelrendezés, táblaformátumok (Apache Parquet, Iceberg), hibatűrés elosztott rendszerekben
• ▹Mély technikai ismeretek megszerzése a Cloudera Data Engineering Experience stack egészéről, elsősorban az Iceberg és a Spark területén
• ▹Munka nagy léptékű elosztott rendszereken, 100-1000 node-os éles klasztereken
• ▹Rendszerszintű telepítési problémák hibakeresése, gyökérok-elemzés, rendszertesztek elemzése és hibák elhárítása
• ▹A belső infrastruktúra fejlesztése
• ▹Együttműködés a csapattagokkal és az érintettekkel

Elvárások

• ▹BSc/MSc kapcsolódó területen, vagy ezzel egyenértékű tapasztalat
• ▹Legalább 6 év professzionális szoftverfejlesztési tapasztalat
• ▹Tapasztalat komplex termékfejlesztések vezetésében és szállításában
• ▹Erős ismeretek legalább egy nyelvben: Java, Scala vagy Python, nyitottság a többi elsajátítására
• ▹Tapasztalat rendszertervezésben és -fejlesztésben
• ▹Elkötelezettség a programozás iránt, tiszta kódolási szokások, precizitás, minőségre való fókusz
• ▹Erős szóbeli és írásbeli kommunikációs készségek
• ▹Erős képesség önálló problémakutatásra és -megoldásra
• ▹Nyitottság, tanulási vágy, kiváló termékek iránti elköteleződés
• ▹Tapasztalat elosztott rendszerekkel
• ▹A pozíció nem jár bevándorlási támogatással vagy relokációval

Előny

• ▹Tapasztalat SQL tervezőkkel
• ▹Tapasztalat az Apache Spark, Livy vagy kapcsolódó technológiák használatában vagy fejlesztésében
• ▹Tapasztalat nagy léptékű, elosztott rendszerek tervezésében és fejlesztésében, skálázási, teljesítmény- és ütemezési ismeretekkel
• ▹Tapasztalat legalább egy felhőplatformmal

Soft skillek

A munkáltatóról

A Cloudera segít a vállalatoknak komplex adatokat érthető, cselekvésre alkalmas információvá alakítani, akkora adatmennyiséget kezelve, mint a hyperscalerek. A nyílt forráskódú közösség folyamatos innovációja hajtja a világ legnagyobb vállalatainak digitális transzformációját. A csapat az Egyesült Államok és Magyarország között oszlik meg, több Apache Spark committerrel.