Állás · Senior

Senior adatmérnök

Data Engineer • Senior • Remote • Teljes munkaidő • Európai Unió EU/EMEA

A Capital Technology Group senior adatmérnököt keres szövetségi ügyfelek AWS-alapú adatplatformjainak fejlesztésére. A pozícióhoz amerikai állampolgárság és Public Trust biztonsági átvilágítás szükséges.

Feladatok

  • ▹Skálázható adatfolyamok, ETL/ELT munkafolyamatok és adatmodellek tervezése, építése és karbantartása Python, Apache Spark (PySpark), Databricks, dbt, SQL (PostgreSQL) és AWS Glue segítségével
  • ▹AWS-natív adatplatformok fejlesztése és optimalizálása (Glue, EMR, MWAA, Lambda, Step Functions, S3, Redshift, RDS, DMS, CloudWatch)
  • ▹Nagy teljesítményű betöltési, átalakítási és orchestrációs folyamatok építése strukturált és félig strukturált adatokhoz (Apache Iceberg, Parquet, ORC, Avro)
  • ▹Analitikai adatplatformok tervezése és optimalizálása (Athena, Trino, Hive, OpenSearch, adatkatalógus-technológiák)
  • ▹Vállalati és külső adatforrások integrálása relációs és NoSQL rendszerekből (PostgreSQL, Oracle, Redshift, GraphDB)
  • ▹AI-alapú adatmegoldások építése Amazon Bedrock, RAG-folyamatok és vektorkeresés (Amazon S3 Vector, OpenSearch vektorindexek) segítségével
  • ▹Felhőinfrastruktúra fejlesztése CloudFormationnel (Infrastructure as Code), GitHubbal, Harnessszel és vállalati CI/CD folyamatokkal; eseményvezérelt architektúrák SNS, SQS és EventBridge használatával
  • ▹A vállalati adatplatformok megbízhatóságának, skálázhatóságának, teljesítményének és karbantarthatóságának javítása monitorozással, hibaelhárítással és automatizálással
  • ▹Kritikus fontosságú analitikai és riportoló megoldások támogatása nagy szövetségi AWS-környezetekben, FedRAMP és NIST 800-53 megfelelőséggel
  • ▹Régi platformok (IBM DataStage, Hadoop, RunDeck, shell-alapú munkafolyamatok) felhő-natív AWS-szolgáltatásokra migrálásának vezetése
  • ▹Junior mérnökök mentorálása műszaki tanácsadással, architektúra-megbeszélésekkel és code review-kkal
  • ▹Együttműködés több területet átfogó csapatokkal agilis környezetben

Elvárások

  • ▹Amerikai állampolgárság és Public Trust biztonsági átvilágítás megszerzésének lehetősége
  • ▹Informatikai, mérnöki vagy rokon műszaki alapdiploma
  • ▹Legalább 9 év szakmai tapasztalat adatmérnökség vagy rokon területen
  • ▹Erős gyakorlati tapasztalat: Databricks, Apache Spark (PySpark), Python, SQL (PostgreSQL) és dbt
  • ▹AWS-natív adatplatformok tervezése, építése és karbantartása (Glue, EMR, MWAA, Lambda, Step Functions, S3, Redshift, RDS, DMS, CloudWatch)
  • ▹Skálázható adatfolyamok, munkafolyamat-orchestráció és adatintegráció vállalati környezetben
  • ▹Modern data lake technológiák (Apache Iceberg) és adatformátumok (Parquet, ORC, Avro) ismerete
  • ▹Relációs és NoSQL adatbázisok (PostgreSQL, Redshift, Oracle, GraphDB) ismerete
  • ▹Teljesítményhangolás és nagy léptékű ETL/ELT architektúrák
  • ▹Java fejlesztés és modern CI/CD gyakorlatok Harness használatával
  • ▹Erős elemzői és problémamegoldó készség
  • ▹Tapasztalat agilis, iteratív fejlesztési környezetben
  • ▹Gyors tanulási képesség új technológiák és szakterületek terén
  • ▹Kiváló írásbeli és szóbeli kommunikáció

Előny

  • ▹Pénzügyi szabályozók, tőkepiacok vagy más erősen szabályozott környezetek analitikai, adatmérnöki vagy modernizációs projektjeinek támogatása
  • ▹Kafka (streaming/adatfolyamok) tapasztalat
  • ▹Docker és Kubernetes a konténerizációhoz és orkestrációhoz
  • ▹Splunk használata naplógyűjtéshez és rendszerfigyeléshez
  • ▹Terraform az infrastruktúra automatizálásához
  • ▹Erős SQL-tudás, teljesítményhangolással és összetett lekérdezések tervezésével

Soft skillek

Stratégiai gondolkodásKommunikációEgyüttműködésProaktivitásMentorálás

Amit kínálunk

  • ▹Távmunka
  • ▹Becsült éves fizetés: 130 000–165 000 USD
  • ▹Orvosi, fogászati és látásbiztosítás
  • ▹Életbiztosítás, rövid és hosszú távú rokkantsági biztosítás
  • ▹Munkavállalói segítő program
  • ▹401(k) nyugdíjprogram 4%-os céges hozzájárulással
  • ▹Liberális szabadságpolitika
  • ▹Éves szakmai továbbképzési keret
  • ▹Éves wellness-keret
  • ▹Bónuszprogramok (ajánlási és teljesítményalapú jutalmak)

A munkáltatóról

A Capital Technology Group szoftverfejlesztési, digitális átalakítási, emberközpontú tervezési, adatanalitikai és kiberbiztonsági tanácsadást nyújt szövetségi és kereskedelmi ügyfeleknek agilis módszertannal.

Végzettség: Informatikai, mérnöki vagy rokon műszaki alapdiploma

Hasonló állások