Auf einen Blick
Baue und optimiere Pipelines für globale Straßennetzwerk-Datenverarbeitung. Skaliere Spark und Airflow Workflows auf Exabyte-Datenmengen.
💰 $95.000–140.000/Jahr
📊 Senior
🕒 Vollzeit
🌍 Remote
🗺️ EMEA
- Eine Programmiersprache (C++, Python, Scala, Java)
- AWS Services (S3, EMR, Glue, Athena, Kinesis)
- SQL und Distributed Systems
Python/Scala/Java
Spark
Airflow
SQL
AWS Data Stack
✅ Geeignet für
- Data Engineers mit Spark/Airflow-Expertise
- AWS Data Stack Spezialisten
- Mapping/Geospatial Interessierte
🚫 Weniger geeignet
- Nur SQL/BI-Background ohne Pipelines
- Keine Distributed-Systems-Erfahrung
- Schwache AWS-Kenntnisse
💡 Gut zu wissen
- Mapping/Navigation-Domain ist Spezialnische
- Minsk-Location ermöglicht Remote mit Kosten-Vorteilen
- Spark und Airflow sind Standard-Stack
Über das Unternehmen
Mapbox ist die führende Echtzeit-Standort-Plattform. Das Roads Team konstruiert umfassende globale Straßennetzwerke für visuelle und navigationale Zwecke.
Deine Aufgaben
- Übernahme, Verbesserung, Skalierung und Iteration vorhandener Datenverarbeitungs-Pipelines
- Design und Implementierung neuer Datenverarbeitungs-Pipelines
- Erfassung und Überwachung von Performance-Metriken
- Diskussion und Implementierung von Security Best Practices
Deine Voraussetzungen
- Gute Kenntnisse in mindestens einer Programmiersprache (C++, Python, Scala, Java)
- Erfahrung mit AWS Services (S3, EC2, IAM, EMR, Glue, Athena, Kinesis)
- Komfort mit SQL und tiefes Verständnis von SQL-Engine-Basics
- Kenntnisse von Distributed-Computing-Prinzipien
- Erfahrung mit Workflow-Management-Tools (Airflow, Oozie, Luigi)
- Starke analytische Fähigkeit und Justifizierung von technischen Entscheidungen
- Ausgezeichnete Kommunikationsfähigkeiten auf Englisch
