Senior Data Architect – Data Lake
vor 1 Woche
Projektarbeit (extern) Frankfurt am Main, Remote. Start Januar
Python
Spark
Java
PostgreSQL
Terraform
Big Data
SQL
Confluence
Jira
Scala
ETL
Agile
CloudFormation
CloudFormation
Data Lake
Amazon Redshift
AWS-Services (S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS)
AWS CDK
PyTest
ScalaTest
Senior Data Architect – Data Lake & AWS (m/w/d) ID02259
...für die Weiterentwicklung einer zentralen Daten- und Analyseplattform
Start:
Ende:
Einsatzort: Frankfurt am Main, 95% Remote
Projektbeschreibung:
Das Projekt Weiterentwicklung Daten- und Analyseplattform umfasst die Pflege und den Ausbau einer bestehenden Daten- und Analyseplattform (Data Lake) zur Sammlung, Verarbeitung und Aufbereitung von Analyse-, Reporting- und Machine-Learning-Daten. Gesucht wird ein erfahrener Data Architect, der die Architektur weiterentwickelt, komplexe fachliche Anforderungen umsetzt und Big-Data-Technologien in einem agilen Umfeld einsetzt.
Aufgaben:
– Erstellung von Big-Data-Prototypen für Datenintegration, -haltung, -aufbereitung und -analyse
– Entwicklung einer technischen Data-Lake-/DWH-Architektur mit Schwerpunkt auf der Analyse großer Datenmengen mit Spark
– Erarbeitung der Mehrschichtarchitektur (Landing-, Structured-, Export-, Use-Case-Zonen)
– Entwicklung und Optimierung von ETL-Routinen in Amazon Redshift und PostgreSQL
– Nutzung von AWS-Services wie S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS
– Softwareentwicklung in Scala und Python
– Dokumentation in Confluence, Aufgabensteuerung in Jira
Anforderungen (Muss-Kriterien):
– Mindestens 6 Jahre Architekturverantwortung im Bereich Data Lake
– Mindestens 6 Jahre Erfahrung mit energiewirtschaftlichen Daten
– Mindestens 6 Jahre Erfahrung in der Umsetzung von Anforderungen mit Scala, Python, SQL, Java
– Mindestens 3 Jahre tiefgehende Kenntnisse der AWS-Services (S3, DynamoDB, Step Functions, EMR, AWS Glue, Athena, Lambda, RDS)
– Mindestens 6 Jahre Erfahrung in Datenbankentwicklung mit großen Datenmengen (Big Data)
Bewertungskriterien (Soll):
– Mindestens 3 Jahre Erfahrung in der Modellierung und Entwicklung von ETL-Strecken – 20 %
– Erfahrung im Aufbau von Data-Lake-Architekturen – 20 %
– Ausgeprägtes Problemlösungs-Know-how zur aktiven Mitgestaltung komplexer Prozesse – 20 %
– Erfahrung in Infrastructure-as-Code (Terraform, AWS CDK, CloudFormation) – 20 %
– Erfahrung in Testautomatisierung mit PyTest und ScalaTest – 20 %
Das Team von der mund consulting freut sich auf Ihre Bewerbung – bitte mit aktuellem CV, Verfügbarkeit, Stundensatz und Projektreferenzen.
Herzliche Grüße
Thomas Mund
-
Bearbeitet
-
Senior BPO Solution Architect
Vor 6 Tagen
Frankfurt am Main, Hessen, Deutschland NTT DATA Vollzeit 80.000 € - 120.000 € pro JahrReq ID: Competitive salary | Germany: Remote + travel to clients (up to 40%) At NTT DATA, we know that with the right people on board, anything is possible. The quality, integrity, and commitment of our employees are key factors in our company's growth, market presence and our ability to help our clients stay a step ahead of the competition. By hiring the...
-
Senior Data Engineer
vor 2 Wochen
Frankfurt am Main, Hessen, Deutschland DZ BANK AG Vollzeit 80.000 € - 120.000 € pro JahrDas erwartet SieAls Senior Data Engineerb(m/w/d) für die Data-Lake-Entwicklung begleiten Sie die gesamte Prozesskette - von der Anforderungsermittlung über die Konzeption bis hin zum Programmieren, Testen und 3rd-Level-Support.Sie entwickeln die Data-Lake-Komponenten auf der Google Cloud Platform (GCP), optimieren die Big-Data-Infrastruktur inkl....
-
Senior BPO Solution Architect
Vor 7 Tagen
Frankfurt am Main, Hessen, Deutschland NTT DATA North America Vollzeit 84.000 € - 173.000 € pro JahrReq ID: 337575Competitive salary | Germany: Remote + travel to clients (up to 40%)At NTT DATA, we know that with the right people on board, anything is possible. The quality, integrity, and commitment of our employees are key factors in our company's growth, market presence and our ability to help our clients stay a step ahead of the competition. By hiring...
-
Data Architect – Realtime Data
Vor 7 Tagen
Frankfurt am Main, Hessen, Deutschland mund consulting AG Vollzeit 80.000 € - 120.000 € pro JahrProjektarbeit (extern) Frankfurt am Main, Remote. Start App.October SparkAWSBig DataAzureConfluenceJiraSharePointSharePointScrumSAFeSAFeGCPKIData ScienceMachine LearningCloud-ArchitekturenRealtime-ProcessingData Architects – Realtime Data & Infrastructure (Junior / Senior) (m/w/d) 98% remote ID02242...für den Aufbau und die Weiterentwicklung einer...
-
Senior Data Architect AWS
Vor 7 Tagen
Frankfurt am Main, Hessen, Deutschland Capgemini Vollzeit 60.000 € - 85.000 € pro JahrWenn du dich für Capgemini entscheidest, wählst du ein Unternehmen, in dem du die Möglichkeit hast, deinen Karriereweg selbst zu gestalten. Du wirst von einem kollaborativen Netzwerk von Kolleg*innen auf der ganzen Welt unterstützt und inspiriert und kannst neu definieren, was möglich ist. Schließe dich uns an und unterstütze die führenden...
-
Senior BPO Solution Architect
Vor 7 Tagen
Frankfurt am Main, Hessen, Deutschland NTT DATA Vollzeit 60.000 € - 120.000 € pro JahrUnderstand client workflows (e.g. claims, lending, KYC) and pain points Architect AI-native solutions leveraging modular agentic platforms Define data and process models in collaboration with ontology and ML teams Drive roadmap alignment between domain priorities and tech capabilities Present solutions to C-level stakeholders and drive adoption Work closely...
-
Senior Data Engineer m/w/d
vor 2 Wochen
Frankfurt am Main, Hessen, Deutschland DZ BANK AG Vollzeit 100.000 € - 120.000 € pro JahrDas erwartet SieAls Senior Data Engineer (m/w/d) für die Data-Lake-Entwicklung begleiten Sie die gesamte Prozesskette - von der Anforderungsermittlung über die Konzeption bis hin zum Programmieren, Testen und 3rd-Level-Support.Sie entwickeln die Data-Lake-Komponenten auf der Google Cloud Platform (GCP), optimieren die Big-Data-Infrastruktur inkl....
-
Senior Data Architect
vor 2 Stunden
Frankfurt am Main, Hessen, Deutschland STATWORX GmbH Vollzeit 80.000 € - 120.000 € pro Jahrstatworx ist ein führendes Beratungs- und Entwicklungsunternehmen für Daten und KI mit Sitz in Frankfurt am Main. Wir bieten strategische Beratung für mittelständische Unternehmen und globale Konzerne. Wir entwickeln innovative Daten- & KI-Lösungen für alle Unternehmensbereiche und Tätigkeitsfelder. Wir befähigen Menschen auf allen Kompetenzniveaus...
-
Data Engineer
Vor 6 Tagen
Frankfurt Niederrad, Hessen, Deutschland Axiom Software Solutions Limited Vollzeit 80.000 € - 120.000 € pro JahrJob Role: Data EngineerLocation: Frankfurt Germany (Remote with Occasional travel to Frankfurt)Job Type: Permanent/ContractLanguage : Must be a Fluent German and English speakerCandidate must be based in GermanyJob Description:• 4-6 years of experience in various data architecture and engineering roles within data & analytics • Collaborate with...
-
Principal BPO Solution Architect
Vor 2 Tagen
Frankfurt am Main, Hessen, Deutschland NTT DATA Vollzeit 80.000 € - 150.000 € pro JahrUnderstand client workflows (e.g. claims, lending, KYC) and pain points Architect AI-native solutions leveraging modular agentic platforms Define data and process models in collaboration with ontology and ML teams Drive roadmap alignment between domain priorities and tech capabilities Present solutions to C-level stakeholders and drive adoption Work closely...
