Auf einen Blick
Senior Data Engineer für Large-Scale Batch Data Pipelines mit Apache Spark. Fokus auf Performance-Tuning, Data Modelling und Lakehouse-Organisation für Analytics.
💰 $70.000–120.000/Jahr
📊 Senior
🕒 Vollzeit
🌍 Remote
🗺️ EMEA
- Apache Spark Praktische Expertise
- Performance Tuning Kenntnisse
- Data Modelling für Analytics
- Lakehouse Organization
Apache Spark
Data Modelling
Performance Tuning
Data Quality
Lakehouse
✅ Geeignet für
- Spark Spezialisten mit Performance-Fokus
- Data Engineers mit Batch-Background
- Large-Scale Data Processing Experten
🚫 Weniger geeignet
- Streaming-Only Engineers ohne Batch-Erfahrung
- Anfänger ohne Spark oder Big Data Background
- Notebook-Only Data Scientists ohne Production-Scale
💡 Gut zu wissen
- Apache Spark Praktische (nicht nur Notebook) Erfahrung essentiell
- Performance Tuning ist kritisch für große Datenvolumen
- Lakehouse-Konzepte sind zentral
- Remote Position von Kairo
Über das Unternehmen
SSC HR rekrutiert für einen Senior Data Engineer mit Fokus auf Large-Scale Batch Data Pipelines. Die Position ist Remote mit Basis in Ägypten (Kairo).
Deine Aufgaben
- Aufbau und Betrieb von großskaligen Batch Data Pipelines
- Arbeit mit Apache Spark zur Verwaltung großskaliger Data Processing Jobs
- Performance Tuning für effiziente und zuverlässige Pipeline-Ausführung
- Support von Data Modelling für Analytics und Lakehouse Organization
- Automatisierte Scheduling, Monitoring und Data Quality Checks
- Zusammenarbeit mit Platform und Product Teams auf End-to-End Data Flows
Deine Voraussetzungen
- Starke praktische Erfahrung mit Apache Spark (nicht nur Notebook-Nutzung)
- Performance Tuning für große Datenvolumen
- Data Modelling für Analytics und Lakehouse Organization
- Automatisierte Scheduling, Monitoring und Data Quality Checks
- Zusammenarbeit mit Platform und Product Teams
- Apache Iceberg oder andere Open Table Formats (Plus)
- Trino oder ähnliche Query Engines (Plus)
- On-Premises oder Self-Managed Cluster Experience (Plus)
Benefits
- Remote Position mit Basis in Kairo
