Cloud Native Data Engineer

vor 3 Wochen

Dortmund, Deutschland SNI Vollzeit

We are currently looking for Cloud Native Data Engineers for one of our international clients based in Germany.



About the Role:


Title: Cloud Native Data Engineer / Application Engineer

Duration: 12 month contract + extension

Workload: Full time

Mainly remote with travels to Berlin once per month

Industry: Utilities




Responsibilities:


Data Architecture:

  • Design, develop, and maintain scalable data architectures, including databases, data lakes, and data warehouses that are capable of handling mass-data within defined processing times.
  • Implement best practices for data storage, retrieval and processing.
  • Drive the adoption of cloud native principles, promoting decentralized data ownership and architecture.
  • Conceptualize, design, and implement Proof of Concepts (POCs) to validate decentralized data architectures.


Data Modeling:

  • Design and implement data models supporting business requirements.
  • Collaborate closely with data scientists and analysts to understand and structure data needs.


Data Integration:

  • Develop and maintain ETL (Extract, Transform, Load) processes for moving and transforming data from various sources into the data infrastructure.
  • Establish and maintain ETL processes to integrate data into decentralized data products.


Data Quality and Governance:

  • Implement and enforce data quality standards and governance policies.
  • Develop and maintain data documentation for metadata, lineage, and data dictionaries.


Application Migration: Assist in the migration of existing applications from OpenShift to EDP Kubernetes (based on RKE2) environments.

Documentation: Document POC results, architecture decisions and lessons learned for knowledge sharing and future Reference


Qualifications:


  • 5+ years as a Cloud Native application engineer.
  • Language: Proficiency in German and English is a must.
  • Experience with rearchitecting existing monolithic architecture to micro-services based Cloud Native architectures.
  • Strong understanding of Cloud Native architectures (loosely coupled services, containers, horizontal scalability, application resilience patterns).
  • Proficiency in at least one programming language – Java or Scala
  • Knowledge and experience with at least some of the (Big) Data technologies/frameworks:
  • Workflow orchestration (AirFlow/Oozie etc.)
  • Data integration/Ingestion (Nifi, Flume etc)
  • Messaging/Data Streaming (Kafka/RabbitMQ etc.)
  • Data Processing (Spark, Flink etc.)
  • RDBMS (PostgreSQL/MySql etc.)
  • NoSQL Storages (MongoDB, Cassandra, Neo4j etc.)
  • Timeseries (InfluxDB, OpenTSDB, TimescaleDB, Prometheus etc.)
  • And/Or with their Cloud provided counterparts, i.e., Cloud Data/Analytics services (GCP, Azure, AWS)
  • Familiarity with reference Big Data architectures (Warehouse, Data Lake, Data Lakehouse) and their implementation.


Proficiency in the following Tech Stack:

  • Deployment & Containerization: Docker/JIB, Kubernetes, Helm, OpenShift.
  • CI/CD & DevOps Tools: Azure DevOps, GitHub Actions, GitOps, Gitlab, Bash/Shell scripting, Linux
  • Familiarity with agile development methodologies and tools (e.g., Scrum, SAFE, JIRA, Confluence).

  • Cloud Native Data Architect

    vor 2 Wochen

    Dortmund, Nordrhein-Westfalen, Deutschland SNI Vollzeit

    SNI is seeking a talented Cloud Native Data Engineer to join our team and contribute to cutting-edge data solutions for a leading Utilities client based in Germany.This role offers the opportunity to design, develop, and maintain scalable data architectures within a dynamic and innovative environment.Responsibilities:Architect and implement robust data...

  • Cloud Data Engineer

    vor 2 Wochen

    Dortmund, Nordrhein-Westfalen, Deutschland Visser & Van Baars Vollzeit

    Cloud Data EngineerWir suchen einen erfahrenen Cloud Data Engineer, der unsere Dateninfrastruktur auf ein höheres Niveau bringt. Sie werden skalierbare Datenpipelines entwickeln, ETL-Workflows optimieren und Cloud-Plattformen wie AWS, Azure oder Google Cloud verwalten.Ihre Aufgaben:Entwurf und Implementierung von Datenpipelines und ETL-ProzessenDesign und...

  • Cloud Data Engineer

    Vor 6 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland Visser & Van Baars Vollzeit

    Cloud Data EngineerWir suchen einen erfahrenen Cloud Data Engineer, der unsere Dateninfrastruktur auf ein höheres Niveau bringt. Sie werden skalierbare Datenpipelines entwickeln, ETL-Workflows optimieren und Cloud-Plattformen wie AWS, Azure oder Google Cloud verwalten.Ihre Aufgaben:Entwurf und Implementierung von Datenpipelines und ETL-ProzessenDesign und...

  • Cloud Data Engineer

    Vor 2 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland Visser & Van Baars Vollzeit

    Stellenbeschreibung:Für unser Unternehmen Visser & Van Baars suchen wir einen Cloud Data Engineer, der die Dateninfrastruktur auf ein höheres Niveau bringt. Sie entwickeln skalierbare Datenpipelines, optimieren ETL-Workflows und managen Cloud-Plattformen wie AWS, Azure oder Google Cloud.Ihre Aufgaben:Entwerfen und Implementieren von Datenpipelines und...

  • Cloud Data Engineer

    Vor 3 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland Visser & Van Baars Vollzeit

    Stellenbeschreibung:Für unser Unternehmen Visser & Van Baars suchen wir einen Cloud Data Engineer, der die Dateninfrastruktur auf ein höheres Niveau bringt. Sie entwickeln skalierbare Datenpipelines, optimieren ETL-Workflows und managen Cloud-Plattformen wie AWS, Azure oder Google Cloud.Ihre Aufgaben:Entwerfen und Implementieren von Datenpipelines und...

  • Data Engineer

    Vor 5 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    About adesso SEadesso SE is a leading provider of IT services and solutions, with a strong focus on data-driven innovation. Our team of experts is dedicated to helping clients like you unlock the full potential of their data.Your RoleAs a Data Engineer at adesso SE, you will play a key role in designing and implementing complex data pipelines, data...

  • Data Engineer

    vor 1 Woche

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    About adesso SEadesso SE is a leading provider of IT services and solutions, with a strong focus on data-driven innovation. Our team of experts is dedicated to helping clients like you unlock the full potential of their data.Your RoleAs a Data Engineer at adesso SE, you will play a key role in designing and implementing complex data pipelines, data...

  • Lead Cloud Architect

    vor 3 Monaten

    Dortmund, Deutschland vacantum Personalberatung Vollzeit

    Der Arbeitgeber:Unser Kunde, ein angesehener IT-Dienstleister, setzt Maßstäbe in der Entwicklung nativer Cloud-Anwendungen. Wir arbeiten im Auftrag unseres Kunden, um Fachleute zu finden, die ihre Fähigkeiten in der Entwicklung von nativen Cloud-Anwendungen und ihre Führungskompetenzen einbringen möchten.Die Position:Als Lead Cloud Architect - Native...

  • Cloud Data Engineer AWS

    Vor 2 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    Über unsWir sind adesso SE, ein führender Anbieter von IT-Lösungen und Consulting-Dienstleistungen. Unsere Mission ist es, unsere Kunden bei der Optimierung ihrer Kerngeschäftsprozesse zu unterstützen und ihnen dabei zu helfen, das Beste aus ihren Daten und Technologien herauszuholen.Deine RolleAls Cloud Data Engineer bei adesso SE wirst du Teil eines...

  • Cloud Data Engineer AWS

    Vor 2 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    Über unsWir sind adesso SE, ein führender Anbieter von IT-Lösungen und Consulting-Dienstleistungen. Unsere Mission ist es, unsere Kunden bei der Optimierung ihrer Kerngeschäftsprozesse zu unterstützen und ihnen dabei zu helfen, das Beste aus ihren Daten und Technologien herauszuholen.Deine RolleAls Cloud Data Engineer bei adesso SE wirst du Teil eines...

  • Cloud Data Engineer AWS

    Vor 3 Tagen

    Dortmund, Deutschland adesso SE Vollzeit

    Über unsWir sind adesso SE, ein führender Anbieter von IT-Lösungen und Consulting-Dienstleistungen. Unsere Mission ist es, unsere Kunden bei der Optimierung ihrer Kerngeschäftsprozesse zu unterstützen und ihnen dabei zu helfen, das Beste aus ihren Daten und Technologien herauszuholen.Deine RolleAls Cloud Data Engineer bei adesso SE wirst du Teil eines...

  • Cloud Data Engineer AWS

    Vor 3 Tagen

    Dortmund, Deutschland adesso SE Vollzeit

    Über unsWir sind adesso SE, ein führender Anbieter von IT-Lösungen und Consulting-Dienstleistungen. Unsere Mission ist es, unsere Kunden bei der Optimierung ihrer Kerngeschäftsprozesse zu unterstützen und ihnen dabei zu helfen, das Beste aus ihren Daten und Technologien herauszuholen.Deine RolleAls Cloud Data Engineer bei adesso SE wirst du Teil eines...

  • Cloud Data Engineer

    vor 2 Wochen

    Dortmund, Deutschland Visser & Van Baars Vollzeit

    Für ein renommiertes Handelsunternehmen suchen wir einen Cloud Data Engineer, der die Dateninfrastruktur auf das nächste Level hebt. Sie entwickeln skalierbare Datenpipelines, optimieren ETL-Workflows und managen Cloud-Plattformen wie AWS, Azure oder Google Cloud.Ihre Aufgaben:Entwerfen und Implementieren von Datenpipelines und ETL-Prozessen.Design und...

  • Cloud Data Engineer AWS

    vor 4 Wochen

    Dortmund, Deutschland adesso SE Vollzeit

    Wir gehören zu den Top-Adressen in der IT-Welt und fokussieren uns auf die Optimierung der Kerngeschäftsprozesse unserer Kunden. Durch den smarten Einsatz maßgeschneiderter IT-Lösungen unterstützen wir unsere Kunden dabei, das Beste aus ihrem Business und aktuellen Technologien herauszuholen. Unseren Erfolg aber erreichen wir nur durch eins: die...

  • Cloud Data Engineer AWS

    vor 1 Monat

    Dortmund, Deutschland adesso SE Vollzeit

    Wir gehören zu den Top-Adressen in der IT-Welt und fokussieren uns auf die Optimierung der Kerngeschäftsprozesse unserer Kunden. Durch den smarten Einsatz maßgeschneiderter IT-Lösungen unterstützen wir unsere Kunden dabei, das Beste aus ihrem Business und aktuellen Technologien herauszuholen. Unseren Erfolg aber erreichen wir nur durch eins: die...

  • Cloud Data Engineer AWS

    Vor 7 Tagen

    Dortmund, Deutschland adesso SE Vollzeit

    Wir gehören zu den Top-Adressen in der IT-Welt und fokussieren uns auf die Optimierung der Kerngeschäftsprozesse unserer Kunden. Durch den smarten Einsatz maßgeschneiderter IT-Lösungen unterstützen wir unsere Kunden dabei, das Beste aus ihrem Business und aktuellen Technologien herauszuholen. Unseren Erfolg aber erreichen wir nur durch eins: die...

  • Cloud Data Engineer AWS

    Vor 6 Tagen

    Dortmund, Deutschland adesso SE Vollzeit

    Wir gehören zu den Top-Adressen in der IT-Welt und fokussieren uns auf die Optimierung der Kerngeschäftsprozesse unserer Kunden. Durch den smarten Einsatz maßgeschneiderter IT-Lösungen unterstützen wir unsere Kunden dabei, das Beste aus ihrem Business und aktuellen Technologien herauszuholen. Unseren Erfolg aber erreichen wir nur durch eins: die...

  • Cloud Data Engineer

    Vor 5 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    Über unsWir sind ein führender Anbieter von IT-Lösungen und fokussieren uns auf die Optimierung von Kerngeschäftsprozessen unserer Kunden. Durch den smarten Einsatz maßgeschneiderter IT-Lösungen unterstützen wir unsere Kunden dabei, das Beste aus ihrem Business und aktuellen Technologien herauszuholen.Die RolleAls Cloud Data Engineer (m/w/d) bei...

  • Cloud Data Engineer

    Vor 5 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    Über unsWir sind ein führender Anbieter von IT-Lösungen und fokussieren uns auf die Optimierung von Kerngeschäftsprozessen unserer Kunden. Durch den smarten Einsatz maßgeschneiderter IT-Lösungen unterstützen wir unsere Kunden dabei, das Beste aus ihrem Business und aktuellen Technologien herauszuholen.Die RolleAls Cloud Data Engineer (m/w/d) bei...

  • Data Engineer

    Vor 6 Tagen

    Dortmund, Nordrhein-Westfalen, Deutschland adesso SE Vollzeit

    About adesso SEadesso SE is a leading provider of IT services and solutions, with a strong focus on data-driven innovation. Our team of experts is dedicated to helping clients like you unlock the full potential of their data.Your RoleAs a Data Engineer at adesso SE, you will play a key role in designing and implementing complex data pipelines, data...