Data Platform Lead (m/w/d)

Westhouse ist eines der führenden internationalen Recruitment Unternehmen für die Vermittlung von hochqualifizierten Fachexperten in Bereichen wie IT Life Cycle, SAP, Engineering, Kaufmännischem und Fachberatung.

Für unseren Kunden suchen wir aktuell eine/n

Data Platform Lead (m/w/d) - Remote + Berlin

Rahmeninformationen

• Referenz: 172164
• Start: 2025-01-06
• Dauer: 3 Monate + Option
• Standort: Remote + Berlin
• Arbeitsumfang: full-time
• Sprachen: Deutsch + Englisch

Ihre Qualifikationen

• Nachweisliche Erfahrung in technischer Führung mit der Sicherstellung moderner Entwicklungsmethoden, agiler Praktiken und wertorientierter Lieferung sowie der Bereitstellung qualitativ hochwertiger, gut getesteter Software.
• Sicherstellen der Wissensverteilung innerhalb des Teams, Übernahme der Verantwortung für die Lieferung sowie Identifizierung und Kommunikation von Lieferungsrisiken.
• Nachgewiesene praktische Erfahrung in der Softwareentwicklung.
• Beherrschung von Datenverarbeitungssprachen wie SQL, Java, Python oder Scala.
• Kenntnisse und Erfahrungen mit mindestens einigen der folgenden Daten-Technologien/Frameworks:
• RDBMS (PostgreSQL/MySQL usw.)
• NoSQL-Speicher (MongoDB, Cassandra, Neo4j usw.)
• Zeitreihen-Datenbanken (InfluxDB, OpenTSDB, TimescaleDB, Prometheus usw.)
• Workflow-Orchestrierung (AirFlow/Oozie usw.)
• Datenintegration/-aufnahme (Flume usw.)
• Messaging/Data Streaming (Kafka/RabbitMQ usw.)
• Datenverarbeitung (Spark, Flink usw.) Und/oder mit ihren cloudbasierten Alternativen, z. B. Cloud-Daten-/Analyse-Dienste (GCP, Azure, AWS).
• Vertrautheit mit Referenzarchitekturen für Big Data (Data Warehouse, Data Lake, Data Lakehouse) und deren Implementierung.
• Erfahrung in der Implementierung und im Betrieb datenintensiver Anwendungen.
• Starker Fokus auf DataOps/DevOps.
• Gute Kenntnisse und Erfahrung mit Kubernetes (k8s).

Ihre Aufgaben

• Daten/Data Mesh-Fähigkeitenentwicklung:
• Entwerfen, entwickeln und pflegen skalierbarer Datenarchitekturen, einschließlich Datenbanken, Data Lakes und Data Warehouses.
• Implementieren von Best Practices für Datenspeicherung, -abruf und -verarbeitung.
• Fördern der Einführung von Data Mesh-Prinzipien, einschließlich der Förderung dezentraler Datenverantwortung und -architektur.
• Konzeptualisieren, entwerfen und implementieren von Proof of Concepts (PoCs) für Data Mesh, um dezentrale Datenarchitekturen zu validieren.
• Implementieren eines umfassenden Datenkatalogs zur Dokumentation von Metadaten, Datenherkunft und Datenwörterbüchern für alle Datenressourcen. Sicherstellen, dass Daten leicht auffindbar und zugänglich im gesamten Unternehmen sind.
• Datenprodukte:
• Entwickeln und pflegen wiederverwendbarer Datenprodukte, die verschiedene Geschäftseinheiten bedienen. Diese Datenprodukte sollen qualitativ hochwertige, zuverlässige Daten liefern, die einfach integriert und über verschiedene Plattformen und Anwendungen genutzt werden können.
• Entwerfen und implementieren von Datenmodellen zur Unterstützung geschäftlicher Anforderungen.
• Enge Zusammenarbeit mit Data Scientists und Analysten, um Datenbedarfe zu verstehen und zu strukturieren.
• Entwickeln und pflegen von ETL-Prozessen (Extract, Transform, Load), um Daten aus verschiedenen Quellen in die Dateninfrastruktur zu verschieben und zu transformieren, entsprechend den Data Mesh-Prinzipien.
• Datenqualität und -Governance:
• Implementieren und Durchsetzen von Standards für Datenqualität und Governance-Richtlinien.
• Entwickeln und pflegen von Dokumentationen zu Metadaten, Datenherkunft und Datenwörterbüchern.
• EDP-Plattform-Anpassung:
• Entwerfen und Implementieren Kubernetes-basierter Bereitstellungsstrategien für skalierbare, zuverlässige und verwaltbare Datentechnologien.
• Zusammenarbeit mit DevOps- und Infrastrukturteams, um Prozesse zur Bereitstellung von Datentechnologien in einer Kubernetes-Umgebung zu optimieren.
• Dokumentation:
• Dokumentieren von Data Mesh-Implementierungen, PoC-Ergebnissen und Best Practices für Wissensaustausch und zukünftige Referenzen.

Interessiert?

Wir freuen uns auf Ihre aussagekräftigen Bewerbungsunterlagen in elektronischer Form.

Ihre Ansprechpartner

Mandy Granz
P: +49-89-383772411
E: m.granz@westhouse-consulting.com