Senior szoftverfejlesztő – adatplatform

Stack

Feladatok

• ▹Nagy teljesítményű adatbetöltő és replikációs rendszerek tervezése, építése és üzemeltetése az éles adattárakból (RDS, DynamoDB, belső API-k, eseményvezérelt rendszerek) az adattóba
• ▹Megbízható, skálázható adatplatform-infrastruktúra építése és karbantartása petabájtnyi adathoz
• ▹A Spark és Databricks alapú adatfeldolgozó platform megbízhatóságának, megfigyelhetőségének, skálázhatóságának, biztonságának és fejlesztői élményének javítása
• ▹Belső könyvtárak, API-k, keretrendszerek és eszközök fejlesztése Go és Python nyelven
• ▹Adattó- és lakehouse-technológiák kezelése: Delta Lake S3-on, adatkatalógusok, metaadat-szolgáltatások, orkesztrációs rendszerek, platformautomatizálás
• ▹Együttműködés az infrastruktúra-, termékfejlesztő-, adattudós-, analitikai-, biztonsági és adatmérnöki csapatokkal
• ▹A hosszú távú adatinfrastruktúra-terv alakítása, az MI, az adatvédelem, a biztonság és az ügyfeleknek szóló adattermékek támogatásával

Elvárások

• ▹4+ év professzionális szoftverfejlesztési tapasztalat éles környezetben
• ▹4+ év nagy léptékű éles adatinfrastruktúra, adatplatform, elosztott rendszer vagy adattó építésében vagy karbantartásában
• ▹Erős Apache Spark vagy hasonló elosztott adatfeldolgozó rendszer tapasztalat
• ▹Éles AWS-infrastruktúra üzemeltetése (S3, RDS, DynamoDB, SQS, Kinesis, Lambda vagy hasonló)
• ▹Megbízható rendszerek tervezése és üzemeltetése a skálázhatóság, megfigyelhetőség, biztonság felelősségével
• ▹Legalább egy éles programozási nyelv ismerete: Go, Python, Scala vagy Java
• ▹Együttműködési készség szoftvermérnökökkel, adattudósokkal, elemzőkkel, biztonsági csapatokkal és termékes partnerekkel

Előny

• ▹Databricks, Delta Lake vagy hasonló lakehouse-technológia (Iceberg, Hudi) ismerete
• ▹OLTP-adattárakból adattóba töltő replikációs vagy betöltő rendszerek építése
• ▹Infrastructure-as-Code eszközök: Terraform, CloudFormation
• ▹Adatkatalógus- és metaadat-eszközök: Unity Catalog, Hive Metastore, DataHub, Amundsen
• ▹Orkesztrációs rendszerek: Airflow, Dagster, Prefect
• ▹Streaming adatok, eseményvezérelt architektúrák, későn érkező vagy módosítható adatok kezelése
• ▹Konténerizációs és orkesztrációs technológiák: Docker, Kubernetes, ECS, Fargate
• ▹Más mérnöki csapatok által használt belső platformok, könyvtárak vagy fejlesztői eszközök építése
• ▹Részvétel adatinfrastruktúra-tervek kialakításában, új technológiák értékelésében

Soft skillek

Amit kínálunk

• ▹Induló RSU-juttatás várakozási küszöb nélkül, teljesítményhez kötött folyamatos kiegészítéssel

A munkáltatóról

A Samsara (NYSE: IOT) a Connected Operations Cloud úttörője: IoT-adatokkal segíti a fizikai műveleteken alapuló iparágakat, hogy biztonságosabban, hatékonyabban és fenntarthatóbban működjenek.