Senior Data Engineer – AWS Cloud

vor 1 Woche


Berlin, Berlin, Deutschland mund consulting AG Vollzeit

Projektarbeit (extern) Berlin, Remote. Start Januar

Python

Tableau

Power BI

SQL

Datenmodellierung

Softwareentwicklung

REST

Git

Apache Spark

AWS-Cloud

Pandas

SQS

PySpark

QuickSight

Boto3 API

SNS

Dashboard-Entwicklung

Docker-Containern

Data Exploration

ETL-Entwicklung

AWS Managed Services

CI/CD-Prozesse

Data Quality

Agile Scrum-Teams

Data Science-Methoden

Senior Data Engineer – AWS Cloud & Big Data Pipelines (m/w/d) ID2394S

...für die Entwicklung und Automatisierung von Datenpipelines in einer cloudnativen Analyseumgebung

Start:

Ende:

Einsatzort: Berlin & 98% Remote (Onshore, ca. 8 PT Onsite)

Projektbeschreibung:

Für eine cloudbasierte Analyseplattform im Bereich Big Data und Machine Learning wird ein erfahrener Data Engineer gesucht.

Die Rolle umfasst die Entwicklung und Optimierung von Datenpipelines, die Integration neuer Datenquellen sowie die Unterstützung datengetriebener Use-Cases in agilen Teams.

Aufgaben:

– Beratung und Umsetzung bei der Weiterentwicklung des Backends (Konzeption, Implementierung, Dokumentation neuer Features)

– Erstellung und Automatisierung von Datenpipelines nach dem Zonenmodell (raw – trusted – refined)

– Analyse und Bewertung neuer Datenquellen, Aufbau geeigneter Datenstrukturen

– Visualisierung und Reporting von Daten (Power BI, QuickSight, Tableau)

– Implementierung von AWS-Managed-Services (Glue, Airflow, Batch, S3, Athena, Glue Data Quality)

– Entwicklung mit Python, SQL, Apache Spark, PySpark, Pandas, Boto3 API, SNS, SQS, REST

– Mitarbeit in agilen Scrum-Teams (Refinement, Planning, Review, Retro)

Anforderungen (Must-have):

– Mind. 5 Jahre Erfahrung in Datenmodellierung und ETL-Entwicklung mit Python und SQL

– Gute Kenntnisse in der AWS-Cloud und Erfahrung mit Managed Services (Glue, Athena, S3 u. a.)

– Nachweisbare Projekterfahrung in der Dashboard-Entwicklung (Power BI, QuickSight oder Tableau)

– Erfahrung in Softwareentwicklung mit Git und CI/CD-Prozessen

– Kenntnisse in Data Exploration, Analyse, Modellierung und Data Quality

– Sehr gute Deutschkenntnisse (C1) und gute Englischkenntnisse (C1)

Wünschenswert (Nice-to-have):

– Erfahrung im Aufbau von serverlosen Cloud-Datenplattformen

– Kenntnisse in Data Science-Methoden (Prognose, Klassifikation, Clustering)

– Praxis mit Docker-Containern

– Projekterfahrung im Bereich Transport / Logistik und Datenintegration

Das Team von der mund consulting freut sich auf Ihre Bewerbung – bitte mit aktuellem CV, Verfügbarkeit und Stundensatz.

Herzliche Grüße

Thomas Mund

-

Bearbeitet



  • Berlin, Berlin, Deutschland mund consulting AG Vollzeit

    Projektarbeit (extern) Berlin, Remote. Start Januar PythonAWSPower BISQLConfluenceScrumETLGitLabLambdaLambdaData GovernanceData EngineeringData ScienceMachine LearningApache SparkagileMLOpsAWS GluePTV VisumOpenStreetMapAWS SagemakerData-EngineeringGeodatenData Engineer – AWS Cloud & Data Pipelines (m/w/d) 98% remote ID2398S...für die Entwicklung und...


  • Berlin, Berlin, Deutschland emnify Vollzeit

    Your RoleAre you passionate about observability and resiliency? Is ensuring we know about issues before our customers second nature to you? Is being at the front and orchestrating processes sounds fun to you? emnify is seeking a talented Reliability Engineer & Incident Management Operator to drive the company I...

  • Senior Data Engineer

    Vor 4 Tagen


    Berlin, Berlin, Deutschland Monda Labs Vollzeit

    We build data product sharing software which fuels AI.Monda believes that any company should be able to share and access the data they need to fuel AI. Therefore we create a borderless data sharing ecosystem to fuel the AI revolution and accelerate human progress. We encourage and empower any company in the world to share and monetize their data safely.Our...

  • Cloud Support Engineer

    vor 2 Wochen


    Berlin, Berlin, Deutschland Amazon Web Services (AWS) Vollzeit

    DescriptionAWS is set to introduce the inaugural European Sovereign Cloud (ESC), to spearhead this initiative, we are actively seeking support engineers in this space.Amazon Web Services is the market leader and technology forerunner in the Cloud business.As a member of the AWS Support team for ESC you will be at the forefront of this transformational...


  • Berlin, Berlin, Deutschland Amazon Web Services (AWS) Vollzeit

    DescriptionAmazon Web Services (AWS) is the pioneer and recognized leader in Cloud Computing. Millions of businesses in 150+ countries, from start-ups to Fortune 500 enterprises, across all industries including public sector, run their operations and applications on AWS to create new revenue streams, improve operational efficiency, and reduce business...


  • Berlin, Berlin, Deutschland Nordcloud Vollzeit

    Werde Teil von Nordcloud und hinterlasse deine Spuren in der europäischen IT-Branche. Unterstütze unsere Kunden auf ihrem Weg in die Cloud in den Bereichen Infrastruktur, Migration, Data und Sicherheit.Derzeit suchen wir einen Senior AWS Cloud Architect (m/w) für unser Team in Deutschland. Als Senior AWS Cloud Architect verfügst Du über solide Erfahrung...

  • Junior Data Engineer

    vor 2 Wochen


    Berlin, Berlin, Deutschland Blue Horizon Quantum Ventures Vollzeit

    Role DescriptionWe are looking for a passionate and detail-oriented Junior Data Engineer to join our team. In this entry-level role, you will support the design, development, and maintenance of data pipelines and databases. You will collaborate with senior engineers to collect, process, and store data efficiently while ensuring its quality and accessibility...


  • Berlin, Berlin, Deutschland mund consulting AG Vollzeit

    Projektarbeit (extern) Berlin, Remote. Start Januar PythonTableauGITPower BISQLDatenmodellierungCI/CDScrumETLRESTGlueGlueAthenaS3Data ScienceApache SparkPandasSQSTestingPySparkDatenpipelinesVisualisierungenReportsQuickSightAWS BatchMWAABoto3 APISNSDashboard-EntwicklungAWS...


  • Berlin, Berlin, Deutschland eBiz Consulting GmbH Vollzeit

    Du brennst für skalierbare Datenplattformen, Cloud-Technologien und moderne DataOps-Ansätze? Du möchtest datengetriebene Lösungen gestalten, die Unternehmen befähigen, ihr volles Potenzial im Zeitalter von KI und Cloud auszuschöpfen?Dann bist Du bei eBiz Consulting GmbH genau richtig AlsSenior Consultant Cloud Data Engineer (m/w/d)konzipierst und...

  • Senior Data Engineer

    vor 1 Woche


    Berlin, Berlin, Deutschland unybrands Vollzeit

    unybrands was established in 2020 by a group of partners united by a shared vision: to build the leading next-generation e-commerce platform for micro-brands. Headquartered in Miami, the company has a global presence with teams in Berlin, London, New York, and China.unybrands acquires e-commerce businesses that sell both on and off Amazon. Once acquired,...