Data Architekt – BigData (m/w/d)
- Remote
- Start: 01.01.2026
- vor 4 Tagen
- Job Typ:
- Projekt
- Dauer:
- 01.01.2026 - 31.12.2026
- Arbeitsumfang:
- Vollzeit - 220 PT - davon 20 vor Ort
- Sprachen:
- Deutsch
ID: 175737
Westhouse ist eines der führenden internationalen Recruitment Unternehmen für die Vermittlung von hochqualifizierten Fachexperten in Bereichen wie IT Life Cycle, SAP, Engineering, Kaufmännischem und Fachberatung.
Für unseren Kunden suchen wir aktuell eine/n Data Architekt – BigData (m/w/d) - Remote.
Ihre Aufgaben
- Erstellung von Big Data Prototypen für die Datenintegration, Datenhaltung, Daten-Aufbereitung Datenanalyse und Datennutzung im Projekt
- Technische Data Lake / DWH Architektur mit dem Schwerpunkt: Analyse großerDatenmengen mit Hilfe von Spark
- Erarbeitung der Mehrschicht-Architektur des Data Lakes (landing, structured, export, usecase-Zonen)
- Entwicklung und Optimierung von ETL-Routinen im Amazon Redshift und Postsgres Umfeld. Entwicklung komplexer SQL-Statements.
- Umgang mit AWS Services: S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS…
- Softwareentwicklung mit Scala, Python
Interessiert?
Sven Schäfer
Tel.: +49-21-120053120
Fax.: +49-211-54591990
Email: s.schaefer@westhouse-group.com
Stellenanzeige teilen
Ihre Qualifikationen
- (Muss) 6 Jahre Architekturverantwortung im Bereich Data-Lake
- (Muss) 6 Jahre Erfahrung mit energiewirtschaftlichen Daten in Unternehmen der Energiewirtschaft
- (Muss) 6 Jahre Erfahrung in der Umsetzung von Anforderungen in den Sprachen: Scala, Python, SQL, Java
- (Muss) 3 Jahre Erfahrung mit AWS-Services rund um Datenhaltung und Datenmanagement (S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS)
- (Muss) 6 Jahre Erfahrung in der Datenbankentwicklung mit großen Datenmengen (BigData)
- (Soll) 3 Jahre Erfahrung in der Modellierung- und Entwicklung für ETL Strecken
- (Soll) 3 Jahre Erfahrung im Aufbau von Data-Lake Architekturen
- (Soll) 3 Jahre Erfahrung mit Problemlösungs-Know-How
- (Soll) 3 Jahre Erfahrung in der Entwicklung von Infrastructure as Code: Terraform, AWS CDK, CloudFormation
- (Soll) 3 Jahre Erfahrung in der Testautomation mit PyTest und ScalaTest