Data Engineer

vor 3 Wochen


Frankfurt am Main, Hessen, Deutschland DFB Vollzeit
Aufgaben für den Dateninfrastructuren-Experten

Wir suchen einen Dateninfrastructuren-Experten, der die Dateninfrastruktur im Produkt-Cluster Sport weiterentwickelt und optimiert. Der Dateninfrastructuren-Experte ist für die Entwicklung, Implementierung und Verwaltung der Dateninfrastruktur zuständig, die für die Erfassung, Speicherung und Verarbeitung großer Datenmengen notwendig ist.



Aufgaben
  • Entwickeln, Implementieren und Skalieren von Datenbanken und Data Warehouses
  • Aufbauen und Managen von Datenpipelines und ETL-Prozessen zur Datenintegration und -aufbereitung
  • Automatisieren von Datentransfer- und Transformationsprozessen zur Steigerung der Effizienz
  • Überwachen und Optimieren der Dateninfrastruktur zur Sicherstellung der Performance und Skalierbarkeit
  • Sicherstellen der Datenqualität und -integrität durch Implementierung von Datenvalidierungsprozessen
  • Warten und Weiterentwickeln der Cloud-Infrastruktur zur Unterstützung der Datenverarbeitungsanforderungen
  • Zusammenarbeit mit Data Scientist*innen und BI-Expert*innen zur Erfüllung datenbezogener Anforderungen
  • Implementieren von Sicherheits- und Compliance-Richtlinien zum Schutz sensibler Daten
  • Weiterentwicklung und Betrieb von DFB-Datenprodukten, insbesondere Sportdatenbank
  • Unterstützung bei der Weiterentwicklung sowie beim Betrieb unserer Cloud-Infrastruktur
  • Requirements Engineering, Konzeption sowie Kommunikation mit fachlichen Stakeholdern und Management


Voraussetzungen
  • Abgeschlossenes Studium der Informatik, Wirtschaftsinformatik, Data Science oder einem verwandten Fachgebiet (mind. Bachelorabschluss)
  • Einschlägige Erfahrung im Umgang mit Datenpipelines strukturierter Daten
  • Einschlägige Erfahrung in der Datenmodellierung (Data Vault, 3NF, etc.) sowie der Automatisierung von ETL-Prozessen
  • Praktische Erfahrung in cloudbasierter Architektur (Object Storage, Virtual Machines, Serverless, Datenbanken)
  • Starke Kommunikationsfähigkeit, um Sachverhalte technischen und nicht-technischen Stakeholdern näher zu bringen
  • Praktische Erfahrung in folgenden Tools vorausgesetzt:
    • Git (GitHub, GitLab, Bitbucket) und CI/CD-Tooling (inkl. automatisiertem Testen und Deployen)
    • Python (oder R)
    • SQL
    • Databricks (Clusters, Jobs, Medallion Architecture, Delta Tables)
    • Infrastructure as Code (Terraform o. ä.)
    • AWS (S3, Lambda, EC2, RDS, etc.)
  • Erste Erfahrungen im Umgang mit Sportdaten (insbesondere Positions- und Ereignisdaten) sind wünschenswert
  • Kenntnisse in IT-Security und Data Governance
  • Erfahrungen im professionellen Fußball wünschenswert

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland The chapter Technology & Engineering - Data & A Vollzeit

    About the roleThe chapter Technology & Engineering - Data & AI Engineering is seeking a highly skilled Data Engineer to join our team. As a Data Engineer, you will be responsible for designing, building, and maintaining large-scale data pipelines using cloud-based technologies.Key ResponsibilitiesDesign and implement data sharing interfaces and connectors to...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland The chapter Technology & Engineering - Data & A Vollzeit

    About the roleThe chapter Technology & Engineering - Data & AI Engineering is seeking a skilled Data Engineer to join their team. As a Data Engineer, you will be responsible for designing, building, and maintaining large-scale data pipelines using cloud-based technologies such as AWS and Azure.Key responsibilitiesDesign and implement data sharing interfaces...

  • Senior Data Engineer

    vor 3 Wochen


    Frankfurt am Main, Hessen, Deutschland Alexander Thamm GmbH Vollzeit

    Ihre AufgabenAls Data Engineer bei der Alexander Thamm GmbH werden Sie verantwortlich sein für die Konzeption und Umsetzung von Big Data und Analytics Plattformen. Dies umfasst die Auswahl von geeigneten Technologien, die Entwicklung und Skalierung von Daten-Pipelines auf Cluster-Architekturen sowie die Bereitstellung von Daten in geeigneten...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland 0010 Deutsche Bank Aktiengesellschaft Vollzeit

    About the RoleWe are seeking a highly skilled Data Engineer to join our team at Deutsche Bank Aktiengesellschaft. As a Data Engineer, you will be responsible for designing, developing, and maintaining large-scale data processing systems and data warehouses.Key ResponsibilitiesDesign and develop data pipelines to extract, transform, and load data from various...

  • Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland Alexander Thamm GmbH Vollzeit

    ÜberblickWir suchen einen erfahrenen Data Engineer, der sich auf die Konzeptionierung und den Aufbau von Big Data/Analytics Plattformen spezialisiert hat. Der Kandidat sollte eine starke Kenntnis der Programmiersprachen Python, Java oder Scala besitzen und Erfahrung im Umgang mit Hadoop-Ecosystemen haben.AufgabenDie Hauptaufgaben des Data Engineers...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland 0010 Deutsche Bank Aktiengesellschaft Vollzeit

    Die RolleDer Senior Engineer für Data and Reporting ist ein wichtiger Teil des Private Bank Data & Analytics Tribe Domains. Wir sind ein Team von Experten, die qualitativ hochwertige Daten und Anwendungen zur Datenaufbereitung für die Privatbank und verschiedene Bereiche der Gruppe liefern.HauptaufgabenAls Senior Engineer für Data and Reporting sind Sie...

  • Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland Osirius GmbH Vollzeit

    Senior Data Engineer für NachhaltigkeitWir suchen einen erfahrenen Data Engineer, der sich auf die Dekarbonisierung von Immobilien spezialisiert hat. Als Teil der Westbridge Gruppe arbeitest du an der Digitalisierung der Immobilienwirtschaft und der Reduzierung des CO2-Ausstoßes.Deine Aufgaben:Die Verantwortung für den Aufbau, die Pflege und die...

  • Cloud Data Engineer

    vor 3 Wochen


    Frankfurt am Main, Hessen, Deutschland Infoplus Technologies UK Limited Vollzeit

    At Infoplus Technologies UK Limited, we are seeking a skilled Cloud Data Engineer to join our team of experts in providing cutting-edge data warehousing solutions.The RoleAs a Cloud Data Engineer, you will be responsible for designing and implementing efficient data warehousing solutions using Snowflake's data warehousing capabilities.Key...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland Alexander Thamm GmbH Vollzeit

    Deine RolleWir suchen einen erfahrenen Dateningenieur, der sich auf die Konzeptionierung und Umsetzung von Big Data-Analysenplattformen spezialisiert hat.Deine AufgabenKonzeptionierung und Aufbau von Big Data-AnalysenplattformenAuswahl von geeigneten Technologien für die Umsetzung von Data-Analytics-Use-CasesEntwicklung, Ausführung und Skalierung von...

  • Cloud Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland Infoplus Technologies UK Limited Vollzeit

    At Infoplus Technologies UK Limited, we are seeking a highly skilled Cloud Data Engineer to join our team. As a Cloud Data Engineer, you will be responsible for designing and implementing data warehousing solutions using Snowflake.Key Responsibilities:Design and implement data warehousing solutions using SnowflakeOptimize performance and cost of Snowflake...


  • Frankfurt am Main, Hessen, Deutschland DZ BANK AG Vollzeit

    Rollen und AufgabenAls Data Engineer (m/w/d) bei der DZ BANK AG sind Sie verantwortlich für die fachliche und technische Erstellung zentraler Risikoreports. Dazu gehören unter anderem der Gesamtrisikobericht und der ökonomische Stresstestbericht.Projektarbeit und TeamfähigkeitWir arbeiten an verschiedenen Projekten mit und sind fachliche Ansprechperson...

  • Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland DöhlerGroup Vollzeit

    Job Title: Data Engineer - Process Mining ExpertWe are seeking a highly skilled Data Engineer to join our team at DöhlerGroup. As a Data Engineer - Process Mining Expert, you will be responsible for designing and implementing data-driven solutions to improve business processes.Key Responsibilities:Develop and maintain data pipelines to support process...

  • Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland A&W Holding GmbH Vollzeit

    Über unsWir sind die führende Beratung im Bereich der Dekarbonisierung von Immobilien. Unsere Mission ist es, die Immobilienwirtschaft zu digitalisieren und nachhaltig zu gestalten. Wir suchen daher einen erfahrenen Data Engineer, der unsere Datenarchitektur aufbauen, pflegen und kontinuierlich verbessern kann.AufgabenVerantwortung für den Aufbau, die...

  • Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland 360T Vollzeit

    Data Engineering RoleWe are seeking a skilled Data Engineer to join our team at 360T. As a Data Engineer, you will be responsible for the development and maintenance of our data pipelines, ensuring seamless data flow and high-quality data warehousing infrastructure.Key ResponsibilitiesDesign, implement, and maintain data pipelines to support our data...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland 0010 Deutsche Bank Aktiengesellschaft Vollzeit

    JobbeschreibungWir suchen einen erfahrenen Senior Data Engineer, der unsere Datenplattform weiterentwickeln und verbessern möchte. Als Teil unseres Data Engineering Teams werden Sie verantwortlich für die Planung, Entwicklung und Implementierung von Datenlösungen, die unsere Geschäftsziele unterstützen.HauptverantwortlichkeitenPlanung und Entwicklung...


  • Frankfurt am Main, Hessen, Deutschland Amazon Web Services Development Center Germany GmbH - R28 Vollzeit

    About the RoleWe are seeking a highly skilled Regional Data Center Engineer to join our team at Amazon Web Services Development Center Germany GmbH - R28. As a key member of our Data Center Operations team, you will be responsible for driving Mechanical/Electrical Engineering services, construction, and implementation of enterprise data centers that meet...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland 0010 Deutsche Bank Aktiengesellschaft Vollzeit

    JobbeschreibungWir suchen einen erfahrenen Data Engineer, der unsere Datenplattform weiterentwickeln und verbessern kann. Als Teil unseres Data Engineering Teams werden Sie an der Entwicklung und Implementierung von Datenlösungen für unsere Privatbank und Gruppe beteiligt sein.Ihre HauptverantwortlichkeitenDie Planung und Entwicklung von Datenlösungen,...

  • Cloud Data Engineer

    vor 1 Woche


    Frankfurt am Main, Hessen, Deutschland msg systems Vollzeit

    Unser Team bei msg Systems sucht einen erfahrenen Cloud Data Engineer zur Unterstützung unserer Kunden im Bereich Datenintegrations-Experte.Sie werden Teil eines agilen Teams sein, das sich auf die Entwicklung von innovativen Datenmanagement-Lösungen spezialisiert hat. Wir suchen nach einer Person, die Erfahrung in der Implementierung von...


  • Frankfurt am Main, Hessen, Deutschland Winthrop Technologies Vollzeit

    Winthrop Technologies is a dedicated data centre delivery partner providing turnkey solutions to our clients, headquartered in Dublin and delivering throughout Europe.We specialise in providing turnkey data centre solutions, offering services from design, through to construction across the full range of civil, structural, architectural, mechanical and...

  • Senior Data Engineer

    vor 4 Wochen


    Frankfurt am Main, Hessen, Deutschland Alexander Thamm GmbH Vollzeit

    Deine RolleWir suchen einen erfahrenen Data Engineer, der sich auf die Konzeption und Umsetzung von Big Data und Analytics-Projekten spezialisiert hat. Du wirst Teil unseres Teams sein und mit uns zusammenarbeiten, um komplexe Datenanalysen durchzuführen und Datenmodelle zu entwickeln.Deine AufgabenKonzeptionierung und Aufbau von Datenplattformen für die...