Senior data platform engineer

Stack

Feladatok

• ▹A Sword streaming lakehouse-ának tervezése és fejlesztése, amelyre a cég minden adatfelhasználója épít
• ▹Elosztott streaming pipeline-ok építése és üzemeltetése alacsony késleltetéssel és nagy megbízhatósággal
• ▹A rendszerek közötti összetett adatmozgást koordináló tartós munkafolyamatok gondozása
• ▹A platform API-felületének alakítása, hogy a producerek és a fogyasztók soha ne érjenek az infrastruktúrához
• ▹Külső adatplatformokkal kapcsolatos értékelések és integrációk vezetése, az architekturális kompromisszumok közepén
• ▹Hozzájárulás az önkiszolgáló és ügynöki réteghez: olyan felületekhez, amelyeket emberek, rendszerek és AI-ügynökök egyaránt használhatnak
• ▹Együttműködés az adatmérnökökkel és elemzőkkel az adatszerződések, a governance és a lineage kérdésében
• ▹AI-kész adatinfrastruktúra építése és karbantartása a Sword ML- és AI-alapú termékeihez
• ▹AI kódolási asszisztensek és LLM-ek használata a fejlesztés gyorsítására, a dokumentáció automatizálására és a kódminőség javítására
• ▹Munka szabályozott környezetben, ahol az audit, a megfelelőség és a governance minden terv része

Elvárások

• ▹Bizonyított tapasztalat nagy léptékű adatplatformok tervezésében és üzemeltetésében: raktár-, data lake- vagy lakehouse-architektúrák produkcióban
• ▹Gyakorlati tapasztalat modern lakehouse táblaformátummal (az Iceberg erősen előnyben, a Delta Lake vagy a Hudi is szóba jön); a formátum belső működésének ismerete: metaadat-elrendezés, snapshotok, manifestek, compaction, copy-on-write és merge-on-read
• ▹Világos elképzelés a katalógusokról (REST, Polaris, Glue, Unity, Hive), azok kompromisszumairól és arról, hogyan válik el a számítás a tárolástól
• ▹Jártasság legalább egy vendor lakehouse- vagy lekérdezőplatformban (Snowflake, Starburst vagy Databricks) olyan szinten, hogy az architektúráját is értsd, ne csak a felületét használd
• ▹Erős tapasztalat elosztott feldolgozómotorral (a Flink erősen előnyben, a Spark is megfelel): a belső működés értése, futó job finomhangolása, csendben romló pipeline hibakeresése
• ▹Ismeret a tartós végrehajtásról (Temporal, Restate vagy hasonló), vagy legalább szilárd elképzelés arról, mit jelent és miért fontos az adatmunkafolyamatokban
• ▹Produkciós tapasztalat nagy léptékű API-k (REST vagy gRPC) építésében és üzemeltetésében: jó érzék a szerződések, verziózás, újrapróbálkozások, sebességkorlátozás és megfigyelhetőség terén
• ▹Szilárd Kafka- és eseményvezérelt architektúra-ismeret (producerek/consumerek, particionálás, kézbesítési szemantika)
• ▹Komfortérzet szabályozott környezetben (egészségügy, fintech, közigazgatás), ahol az audit, a megfelelőség és az adatgovernance minden terv része
• ▹Platformszemlélet: önkiszolgálásra és API-first módon tervezel, és a rendszereket és ügynököket is teljes értékű fogyasztóként kezeled, nem csak az embereket

Előny

• ▹Mélyebb ismeret a nyílt/REST katalógusokról (Polaris, Nessie, Unity) az alapvető használaton túl
• ▹Megfigyelhetőségi stack ismerete (Prometheus, Grafana, OpenTelemetry)
• ▹Korábbi munka ügynöki vagy AI-felé néző API-felületeken, illetve MCP-jellegű interfészeken
• ▹Tapasztalat HIPAA, FedRAMP vagy SOC 2 környezetben
• ▹dbt, DataHub vagy adatszerződés-eszközök ismerete

Soft skillek

Amit kínálunk

• ▹Teljes éves kompenzáció (alap, változó rész és részvény): 52 500-82 500 EUR
• ▹Az összjuttatáson túli további juttatások (országonként eltérhetnek)

A munkáltatóról

A Sword Health az AI Care úttörője: klinikai szemléletű AI-laboratórium és alkalmazott AI-platform, amely 24/7, AI-alapú gondozási programot épít. A data platform csapat célja, hogy az adat klinikai, működési, AI- és termékcsapatok számára egyaránt használhatóvá váljon.