Adatmérnöki szerep a Betsson adatplatformjának tervezésében és fejlesztésében, batch és valós idejű adat-pipeline-okkal és valós idejű vizualizációkkal.
Stack
Feladatok
- ▹A meglévő adatplatform karbantartása és fejlesztése
- ▹Adatbeolvasási folyamatok építése Kafkából, API-kból és adatbázisokból AWS MSK Connect használatával
- ▹Valós idejű adatfeldolgozó alkalmazások fejlesztése és karbantartása Spark Structured Streaming és Kafka Streams típusú keretrendszerekkel
- ▹Transzformációk alkalmazása az adatfolyamokra
- ▹Közreműködés az adatmodellezésben olyan szabványok szerint, mint az Inmon, Kimball, Data Vault
- ▹Adatminőség biztosítása az adatok konzisztenciájának és pontosságának ellenőrzésével
- ▹Naprakész tudás az új technológiákról és technikákról az adatplatform fejlesztéséhez
- ▹Hibaelhárítás és incidenskezelés támogatása vizsgálódó szemlélettel
- ▹Teljes felelősségvállalás a rábízott projektekért és feladatokért, csapatban dolgozva
- ▹Folyamatok alapos dokumentálása és tudásmegosztó alkalmak tartása
Elvárások
- ▹Tapasztalat modern felhő-adatbázis technológiákkal, például Snowflake
- ▹Tapasztalat adat-pipeline-ok orkesztrálásában Airflow-val
- ▹Tapasztalat AWS Glue-val
- ▹Tapasztalat Apache Iceberggel
- ▹Tapasztalat SQL-lel és adatintegrációs eszközökkel
- ▹Tapasztalat egy programozási nyelvvel, például Python vagy Scala
- ▹AWS szolgáltatások ismerete (S3/Lambda/API Gateway/DMS/RDS)
- ▹Fejlesztői tapasztalat mind Microsoft, mind Linux/felhő környezetben
Előny
- ▹Adattárházazási koncepciók és modellezési technikák ismerete (Inmon, Kimball, Data Vault)
- ▹AWS szolgáltatások ismerete, például MSK és EMR
- ▹Konténerizációs és orkesztrációs technológiák ismerete, például Docker és Kubernetes
- ▹Idősoros vagy analitikai adatbázisok ismerete, például Elasticsearch
- ▹Adatstreamelés ismerete, például Kafka
- ▹GIT ismerete
- ▹Infrastruktúra-szkriptelés ismerete, például Terraform
- ▹Adatmonitorozó és -vizualizációs eszközök ismerete, például Prometheus, Grafana, CloudWatch
- ▹Szkriptelés — PowerShell, Unix scripting
- ▹Legalább 2 év tapasztalat adatmérnöki területen
Soft skillek
Erős analitikus és problémamegoldó képességJó tanulási attitűdKépesség a prioritások meghatározására és a multitaskingraVizsgálódó, dobozon kívüli gondolkodású hibaelhárítási szemlélet
Nyelvtudás: Angol: Felsőfok
Hasonló állások
Állás
Adatmérnök (REF5482T)
Deutsche Telekom IT Solutions
+6
💰 Bér: nincs megadva
🏢 Helyszíni
📍 Budapest
Állás
Szoftvermérnök – adat (REF5581S)
Deutsche Telekom IT Solutions
+3
💰 Bér: nincs megadva
🏢 Helyszíni
📍 Budapest
Állás
Senior Java szoftvermérnök, adatdúsítás
SEON
+7
💰 Bér: nincs megadva
🌍 Remote
📍 Budapest
Állás
Databricks adatmérnök
Hiflylabs
AI/ML
+6
💰 Bér: nincs megadva
🏢 Helyszíni
📍 Budapest
Állás
Adatmérnök
Lensa
AI/MLSQL
+1
💰 Bér: nincs megadva
🏢 Helyszíni
📍 Budapest
Állás
Data Engineer
Deutsche Telekom IT Solutions
+6
💰 Bér: nincs megadva
🏢 Helyszíni
📍 Budapest +3