Auf einen Blick
AWS Glue Python Developer mit 8+ Jahren Data Engineering Erfahrung für Cloudbasierte ETL und Datenintegration Lösungen auf AWS Infrastruktur.
💰 ~$65.000–100.000/Jahr (geschätzt)
📊 Senior
🕒 Vollzeit
🌍 Remote
🗺️ APAC
- 8+ Jahre Python Development und Data Engineering
- AWS Glue und PySpark Proficiency
- ETL Pipeline und Framework Design
- Amazon S3, Lambda, SNS, SQS, CloudWatch
Python
AWS Glue
PySpark
AWS Lambda
Amazon S3
ETL
Data Engineering
Data Integration
Gehalt geschätzt anhand Senior Data Engineer mit 8+ Jahren AWS Glue und Python - Chennai Rate. Kein Gehalt in der Anzeige angegeben.
✅ Geeignet für
- Senior Data Engineer aus AWS-Umgebung
- Python Developer mit ETL Erfahrung, der zu AWS Glue migriert
🚫 Weniger geeignet
- Unter 8 Jahren Data Engineering Erfahrung
- Ohne AWS Glue oder PySpark Kenntnisse
- Eher für Junior oder Mid-Level Developer
💡 Gut zu wissen
- Standort Chennai, Indien - Remote möglich
- AWS-native Development bedeutet kontinuierliche Technologie-Updates
- Fokus auf Cloud-native ETL Patterns und AWS Best Practices
Über das Unternehmen
Proarch 3 sucht einen AWS Glue Python Developer für Cloudbasierte Datenintegration und Processing Lösungen im Inbound und Outbound Bereich.
Deine Aufgaben
- Design und Entwicklung von Inbound und Outbound File Processing mit AWS Glue, Python und PySpark
- Entwicklung von wiederverwendbaren Python Modulen, Utilities und Frameworks
- Aufbau von Batch Inbound/Outbound File Processing mit Amazon S3 und AWS Glue
- Konfiguration von Amazon EventBridge Rules für Scheduling und Event-Based Processing
- Entwicklung von AWS Lambda Funktionen für Lightweight Processing und Automation
- Implementierung von Messaging und Notification Solutions mit Amazon SNS und SQS
- Konfiguration von Amazon CloudWatch Logs, Metrics, Dashboards und Alarms
- Entwicklung von Workflows mit AWS Glue Workflows, AWS Step Functions oder äquivalenten Services
- Integration von AWS Services mit Relational Databases, APIs und Externen Anwendungen
- Implementierung von Data Ingestion aus verschiedenen Dateiformaten (CSV, JSON, XML, Excel, etc.)
- Entwicklung von Data Validation, Reconciliation, Audit und Exception-Handling Prozessen
- Optimierung von AWS Glue Jobs für Performance, Scalability und Cost Efficiency
- Implementierung von Secure Access mit AWS IAM, Encryption und Secrets Management
- Support von Production Deployments, Incident Resolution und Performance Tuning
- Collaboration mit DevOps Teams für CI/CD Pipelines
Deine Voraussetzungen
- 8+ Jahre Erfahrung in Python Development und Data Engineering
- Starke Hands-On Erfahrung mit AWS Glue und PySpark
- Exzellentes Python Programming und Object-Oriented Programming Verständnis
- Erfahrung beim Design von ETL Pipelines und Data Processing Frameworks
- Starke Erfahrung mit Amazon S3, einschließlich Bucket Structures, Lifecycle Policies und Partitioning
- Erfahrung mit Amazon EventBridge für Scheduled und Event-Driven Execution
- Erfahrung beim Entwickeln und Deployen von AWS Lambda Functions
- Erfahrung mit Amazon SNS und SQS für Messaging und Asynchronous Processing
- Erfahrung mit Amazon CloudWatch für Logging, Monitoring und Troubleshooting
- Verständnis von AWS IAM, Security Policies und Least-Privilege Access
- Erfahrung mit Relational Databases (Oracle, PostgreSQL, MySQL, Amazon RDS)
- Starkes SQL Verständnis und Database Connectivity aus Python
- Erfahrung mit REST/SOAP APIs und Externen System Integrations
- Verständnis von JSON, XML, CSV und verschiedenen Dateiformaten
- Erfahrung mit Git und Software Development Best Practices
- Bevorzugt: AWS Step Functions, CI/CD Tools, Data Quality und Lineage Erfahrung
