
Állás
· Senior
Big data mérnök
Data Engineer
• Senior
• Remote
• Teljes munkaidő
•
Spanyolország
Az SDG Group Data Technologies csapatához keresnek Big Data mérnököt, aki nagy adatmennyiségek feldolgozására tervez és fejleszt end-to-end megoldásokat felhős környezetekben.
Stack
Feladatok
- ▹End-to-end megoldások tervezése és fejlesztése nagy adatmennyiségek feldolgozására, az üzleti problémától a skálázható ETL/ELT pipeline-okig
- ▹Munka olyan technológiákkal, mint az Apache Spark, Python, Scala, Apache Beam, valamint orchesztráció Airflow-val vagy Databricks Workflows-szal
- ▹Adatok feldolgozása és tárolása Parquet, Delta Lake és Apache Iceberg formátumokban, felhős környezetben (AWS, Azure, GCP)
- ▹Fejlett architektúrák (Data Lakehouse, Data Mesh, adattárházak) meghatározása az adatok kezelésének és kiaknázásának javítására
- ▹Együttműködés multidiszciplináris csapatokkal és érdekeltekkel, komplex igények hatékony technikai megoldássá alakítása
- ▹Új technológiák (Databricks, Delta Live Tables, dbt Cloud, Apache Iceberg, Snowflake) feltárása és értékelése
- ▹Adatminőség és megfigyelhetőség fejlesztése DataOps, Data Quality és CI/CD alkalmazásával
Elvárások
- ▹Informatika, távközlés, matematika, fizika vagy hasonló területen szerzett végzettség
- ▹5-6 év Big Data tapasztalat elosztott feldolgozással és ETL/ELT pipeline-okkal komplex környezetekben, Python vagy Scala nyelven, Apache Spark keretrendszerrel, Airflow, Databricks vagy Snowflake platformokon
- ▹Adatarchitektúrák (Data Lakehouse, felhő) és formátumok/tárolás (Parquet, Delta Lake, Iceberg, Hudi) ismerete
- ▹Jó gyakorlatok és kódkezelés: Git, CI/CD, DataOps, pipeline-monitorozás, adatminőség-ellenőrzés és adatverziózás
- ▹Innovációs szemlélet, nyitottság új technológiák kipróbálására
- ▹Kommunikációképes angol nyelvtudás nemzetközi csapatokkal való együttműködéshez
Előny
- ▹Valós idejű streaming projektekben szerzett tapasztalat (Kafka, Kinesis, Flink, Spark Structured Streaming)
- ▹Fejlett orchesztrációs, adat-DevOps, governance, minőségi és biztonsági ismeretek, Data Mesh és elosztott architektúrák tapasztalata
- ▹Tapasztalat ML pipeline-okban és Big Data-ba integrált MLOps-ban
Soft skillek
Innovációs, kísérletező szemléletEgyüttműködés multidiszciplináris, nemzetközi csapatokban
A munkáltatóról
Az SDG Group globális vezető a Big Data, Business Intelligence, Analytics és Mesterséges Intelligencia terén; 1994 óta segíti digitális átalakulásban az IBEX-35 fél tucat vállalatát és nemzetközi cégeket, stratégiai partnerségben a Microsofttal, a Google-lal és az AWS-szel.
Nyelvtudás: Angol: kommunikációképes (nemzetközi csapatokhoz)
Végzettség: Informatika, távközlés, matematika, fizika vagy hasonló területen szerzett felsőfokú végzettség
Hasonló állások

Állás
· Senior
Senior Data Platform Engineer - Databricks & Azure
Allianz
AI/MLBicepDatabricks
+6
💰 Bér: nincs megadva
🏢 Helyszíni
BARCELONA
🗣️ EN

Állás
· Senior
Data Engineer Sr dbt
Logicalis Spain
DatabricksDbt
+2
💰 Bér: nincs megadva
🔀 Hibrid
Madrid

Állás
· Senior
Lead Data Engineer (Dataiku)
Keyrus
BigqueryDatabricksDbt
+11
45 000–55 000 EUR/év
bruttó
🌍 Remote
csak Spanyolország
🗣️ EN
Himalayas

Állás
· Senior
Senior Data Engineer
DKB Code Factory
+3
💰 Bér: nincs megadva
🏢 Helyszíni
Valencia
🗣️ EN
Állás
· Senior
Senior Internal Audit Manager - Big Data and AI Strategy for Internal Audit
Ebury
AI/MLDatabricksData Science
+9
💰 Bér: nincs megadva
🏢 Helyszíni
Madrid
🗣️ EN
Állás
· Senior
Senior Data Engineer - Platform
Ebury
BigqueryDbt
+3
💰 Bér: nincs megadva
🏢 Helyszíni
Madrid
🗣️ EN