Data Engineer / Apache Airflow Specialista

Stack

Feladatok

• ▹Komplex Apache Airflow DAG-ok fejlesztése, orkesztrálása és karbantartása ETL és adatfeldolgozási folyamatokhoz
• ▹Python alapú ETL szkriptek építése és optimalizálása, Flask API-kkal integrálva
• ▹Elasticsearch indexelés és teljesítmény-hangolási folyamatok tervezése és kezelése
• ▹Unix/Linux szkriptelés és üzemeltetés automatizáláshoz és monitorozáshoz
• ▹Munka Oracle és PostgreSQL adatbázisokkal nagy léptékű adatfeldolgozáshoz
• ▹GitLab CI/CD pipeline-ok megvalósítása és karbantartása build, teszt és deploy fázisokhoz
• ▹Együttműködés a projektcsapattal a skálázhatóság, megbízhatóság és minőség biztosítása érdekében

Elvárások

• ▹≥3 év Apache Airflow DAG orkesztrációs tapasztalat
• ▹≥5 év Python (ETL fókusz) tapasztalat, Flask API tapasztalat előny
• ▹≥3 év Elasticsearch (adatindexelés és optimalizálás) tapasztalat
• ▹≥3 év Unix/Linux szkriptelési és üzemeltetési tapasztalat
• ▹≥3 év Oracle vagy PostgreSQL tapasztalat (ideálisan mindkettő)
• ▹≥3 év GitLab pipeline (build/teszt/deploy) tapasztalat
• ▹Felsőfokú angol nyelvtudás és technikai diploma

Előny

• ▹Tapasztalat Great Expectations vagy hasonló adatminőségi eszközökkel
• ▹Airflow Kubernetesen
• ▹Igazolt teljesítmény-hangolási tapasztalat

A munkáltatóról

Az Intetics globális technológiai vállalat, amely a Remote In-Sourcing® üzleti modellje, a TETRA™ technikai adósság-csökkentő platform és a Predictive Software Engineering minőségirányítási platform alapján mérhető üzleti eredményeket biztosít ügyfeleinek.