Senior data engineer

Stack

Feladatok

• ▹Infrastruktúrák fejlesztése, karbantartása és tesztelése adatgeneráláshoz, strukturált és strukturálatlan adatforrásokból származó adatok átalakításához
• ▹Összetett lekérdezések fejlesztése a NoSQL és/vagy big data infrastruktúra elérhetőségének és teljesítményének optimalizálására
• ▹Optimális adatpipeline-architektúra létrehozása és karbantartása
• ▹Az adatok kinyeréséhez, átalakításához és betöltéséhez (ETL) szükséges infrastruktúra kiépítése és karbantartása sokféle adatforrásból
• ▹Adatok kinyerése több forrásból (relációs SQL és NoSQL adatbázisok, más platformok API-jai) betöltés és integráció céljából
• ▹Adatanalitikai keretrendszerek és pipeline-ok konfigurálása és kezelése olyan adatbázisokkal és eszközökkel, mint a NoSQL, SQL, HDInsight, MongoDB, Cassandra, Neo4j, GraphDB, OrientDB, Spark, Hadoop, Kafka, Hive és Pig
• ▹Elosztott rendszerek elveinek alkalmazása (konzisztencia és rendelkezésre állás, liveness és safety, tartósság, megbízhatóság, hibatűrés, konszenzus-algoritmusok)
• ▹Felhőalapú számítási környezetek és CI/CD pipeline-ok üzemeltetése (Azure, Google, AWS)
• ▹Egyeztetés a termék-, adat- és dizájncsapatokkal az adatokkal kapcsolatos technikai kérdésekben és az adatinfrastruktúra-igények támogatásában

Elvárások

• ▹Legalább 3 év tapasztalat
• ▹STEM területen szerzett alapdiploma, előnyben az informatika és a szoftverfejlesztés
• ▹Igazolható tapasztalat adatszerkezetekkel, adatbázis-kezeléssel, elosztott számítással és API-alapú architektúrákkal SQL és NoSQL motorokon
• ▹Jártasság a modellezési keretrendszerekben, például az UML-ben, az agilis fejlesztésben és a Git-műveletekben
• ▹Secret szintű biztonsági átvilágítás (clearance) a kezdéshez

Előny

• ▹Palantir és/vagy MSS ismerete
• ▹A védelmi minisztérium (DoD) ismerete
• ▹Top Secret szintű átvilágítás SCI jogosultsággal

Soft skillek

Amit kínálunk

• ▹Teljesítményalapú bónuszok
• ▹Kiterjedt orvosi, fogászati és látásbiztosítás
• ▹401(k) nyugdíjprogram cégi hozzájárulással
• ▹Jelentős fizetett szabadság és ünnepnapok
• ▹Rugalmas munkavégzés, ahol lehetséges
• ▹Jövedelemvédelmi juttatások

A munkáltatóról

A Clarity Innovations megbízható nemzetbiztonsági partner, amely az amerikai hírszerző közösséget és a védelmi minisztériumot segíti abban, hogy az adatokat használható hírszerzési információvá alakítsa. Küldetésközpontú szoftver- és adatmérnöki platformja modernizálja az adatműveleteket.