Senior adatplatform-fejlesztő (Python)

Stack

Feladatok

• ▹Skálázható, biztonságos Python adatpipeline-ok tervezése, építése és karbantartása Apache Airflow-val, az adatok tiszta betöltésével az AWS data lake-be (S3) és a data warehouse-ba (Postgres/Redshift)
• ▹A betöltési és átalakítási réteg gazdája: az áteresztőképesség javítása, a késleltetés csökkentése, az új adatforrások technikai adósság nélküli bekötése
• ▹Tiszta, tesztelhető, jól dokumentált Python kód írása, amelyből a junior mérnökök tanulhatnak
• ▹CI/CD bevált gyakorlatok és Terraform (IaC) alkalmazása a pipeline-telepítések megismételhetővé, auditálhatóvá és környezetek között egységessé tételéhez
• ▹Értelmes monitorozás és riasztás kialakítása, hogy a problémák korán kiderüljenek
• ▹Docker használata a munkaterhelések konténerizálására és a környezetek közötti hordozhatóság biztosítására
• ▹Adatkormányzási alapok érvényesítése: hozzáférés-szabályozás, sémaellenőrzés, adatminőségi ellenőrzések és GDPR-megfelelés a pipeline-rétegbe építve
• ▹Az adatbetöltés, -validálás és a platformon való előléptetés standardjainak meghatározása és karbantartása
• ▹Aktív részvétel a modern Lakehouse architektúrára való áttérésben: gyakorlati munka Icebergrel, Sparkkal, Kafkával és dbt-vel, fokozatos bevezetéssel
• ▹Pragmatikus szemlélet az eszközválasztásban: tudni, mikor érdemes újat bevezetni és mikor maradni az egyszerűnél
• ▹Junior mérnökök mentorálása kódreview-kkal, páros munkával és szakmai útmutatással
• ▹Érdemi hozzászólás az architekturális és eszközdöntésekhez

Elvárások

• ▹Legalább 5 év tapasztalat éles Python adatpipeline-ok építésében és üzemeltetésében nagy léptékben
• ▹Gyakorlati AWS-tapasztalat: S3, Redshift, Postgres és a környező ökoszisztéma
• ▹Apache Airflow használata élesben: DAG-tervezés, ütemezés, backfill-kezelés, megbízhatóság
• ▹Terraform, Docker és CI/CD valós szállítási környezetben
• ▹Erős SQL és az adatmodellezési alapelvek szilárd ismerete

Előny

• ▹Spark, Apache Iceberg, Kafka és dbt ismerete, vagyis a Lakehouse minták és az eszközök, amelyek felé a csapat halad (az ismeret előny, az első naptól nem követelmény)
• ▹Kubernetes adatmunkaterhelésekhez
• ▹Observability eszközök (Grafana vagy hasonló) a pipeline monitorozására és riasztására
• ▹Tapasztalat online szerencsejáték, fogadás vagy fintech területen
• ▹ML vagy csalásfelderítési háttér

Soft skillek

Amit kínálunk

• ▹Konzultánsi megbízás valódi felelősséggel és befolyással
• ▹Gyorsan skálázódó adatplatformon való munka, a mérnöki minőséget komolyan vevő csapattal
• ▹Betekintés a modern Lakehouse stackbe
• ▹Versenyképes napidíj
• ▹Együttműködő, nagy egók nélküli csapat
• ▹Hibrid munkamodell önszervezéssel

A munkáltatóról

Az FDJ UNITED Európa egyik vezető fogadási és játékszolgáltatója, számos márkával és mintegy tizenöt szabályozott piaci jelenléttel. Több mint 5000 munkatársat foglalkoztat, és a szórakozás és a biztonság összeegyeztetését tűzi ki célul.