Senior Data Engineer – AWS Cloud
vor 1 Woche
Projektarbeit (extern) Berlin, Remote. Start Januar
Python
Tableau
Power BI
SQL
Datenmodellierung
Softwareentwicklung
REST
Git
Apache Spark
AWS-Cloud
Pandas
SQS
PySpark
QuickSight
Boto3 API
SNS
Dashboard-Entwicklung
Docker-Containern
Data Exploration
ETL-Entwicklung
AWS Managed Services
CI/CD-Prozesse
Data Quality
Agile Scrum-Teams
Data Science-Methoden
Senior Data Engineer – AWS Cloud & Big Data Pipelines (m/w/d) ID2394S
...für die Entwicklung und Automatisierung von Datenpipelines in einer cloudnativen Analyseumgebung
Start:
Ende:
Einsatzort: Berlin & 98% Remote (Onshore, ca. 8 PT Onsite)
Projektbeschreibung:
Für eine cloudbasierte Analyseplattform im Bereich Big Data und Machine Learning wird ein erfahrener Data Engineer gesucht.
Die Rolle umfasst die Entwicklung und Optimierung von Datenpipelines, die Integration neuer Datenquellen sowie die Unterstützung datengetriebener Use-Cases in agilen Teams.
Aufgaben:
– Beratung und Umsetzung bei der Weiterentwicklung des Backends (Konzeption, Implementierung, Dokumentation neuer Features)
– Erstellung und Automatisierung von Datenpipelines nach dem Zonenmodell (raw – trusted – refined)
– Analyse und Bewertung neuer Datenquellen, Aufbau geeigneter Datenstrukturen
– Visualisierung und Reporting von Daten (Power BI, QuickSight, Tableau)
– Implementierung von AWS-Managed-Services (Glue, Airflow, Batch, S3, Athena, Glue Data Quality)
– Entwicklung mit Python, SQL, Apache Spark, PySpark, Pandas, Boto3 API, SNS, SQS, REST
– Mitarbeit in agilen Scrum-Teams (Refinement, Planning, Review, Retro)
Anforderungen (Must-have):
– Mind. 5 Jahre Erfahrung in Datenmodellierung und ETL-Entwicklung mit Python und SQL
– Gute Kenntnisse in der AWS-Cloud und Erfahrung mit Managed Services (Glue, Athena, S3 u. a.)
– Nachweisbare Projekterfahrung in der Dashboard-Entwicklung (Power BI, QuickSight oder Tableau)
– Erfahrung in Softwareentwicklung mit Git und CI/CD-Prozessen
– Kenntnisse in Data Exploration, Analyse, Modellierung und Data Quality
– Sehr gute Deutschkenntnisse (C1) und gute Englischkenntnisse (C1)
Wünschenswert (Nice-to-have):
– Erfahrung im Aufbau von serverlosen Cloud-Datenplattformen
– Kenntnisse in Data Science-Methoden (Prognose, Klassifikation, Clustering)
– Praxis mit Docker-Containern
– Projekterfahrung im Bereich Transport / Logistik und Datenintegration
Das Team von der mund consulting freut sich auf Ihre Bewerbung – bitte mit aktuellem CV, Verfügbarkeit und Stundensatz.
Herzliche Grüße
Thomas Mund
-
Bearbeitet
-
Data Engineer – AWS Cloud
vor 1 Woche
Berlin, Berlin, Deutschland mund consulting AG VollzeitProjektarbeit (extern) Berlin, Remote. Start Januar PythonAWSPower BISQLConfluenceScrumETLGitLabLambdaLambdaData GovernanceData EngineeringData ScienceMachine LearningApache SparkagileMLOpsAWS GluePTV VisumOpenStreetMapAWS SagemakerData-EngineeringGeodatenData Engineer – AWS Cloud & Data Pipelines (m/w/d) 98% remote ID2398S...für die Entwicklung und...
-
Senior AWS Cloud Platform Engineer
vor 1 Woche
Berlin, Berlin, Deutschland emnify VollzeitYour RoleAre you passionate about observability and resiliency? Is ensuring we know about issues before our customers second nature to you? Is being at the front and orchestrating processes sounds fun to you? emnify is seeking a talented Reliability Engineer & Incident Management Operator to drive the company I...
-
Senior Data Engineer
Vor 4 Tagen
Berlin, Berlin, Deutschland Monda Labs VollzeitWe build data product sharing software which fuels AI.Monda believes that any company should be able to share and access the data they need to fuel AI. Therefore we create a borderless data sharing ecosystem to fuel the AI revolution and accelerate human progress. We encourage and empower any company in the world to share and monetize their data safely.Our...
-
Cloud Support Engineer
vor 2 Wochen
Berlin, Berlin, Deutschland Amazon Web Services (AWS) VollzeitDescriptionAWS is set to introduce the inaugural European Sovereign Cloud (ESC), to spearhead this initiative, we are actively seeking support engineers in this space.Amazon Web Services is the market leader and technology forerunner in the Cloud business.As a member of the AWS Support team for ESC you will be at the forefront of this transformational...
-
Berlin, Berlin, Deutschland Amazon Web Services (AWS) VollzeitDescriptionAmazon Web Services (AWS) is the pioneer and recognized leader in Cloud Computing. Millions of businesses in 150+ countries, from start-ups to Fortune 500 enterprises, across all industries including public sector, run their operations and applications on AWS to create new revenue streams, improve operational efficiency, and reduce business...
-
Senior AWS Cloud Architect
vor 2 Wochen
Berlin, Berlin, Deutschland Nordcloud VollzeitWerde Teil von Nordcloud und hinterlasse deine Spuren in der europäischen IT-Branche. Unterstütze unsere Kunden auf ihrem Weg in die Cloud in den Bereichen Infrastruktur, Migration, Data und Sicherheit.Derzeit suchen wir einen Senior AWS Cloud Architect (m/w) für unser Team in Deutschland. Als Senior AWS Cloud Architect verfügst Du über solide Erfahrung...
-
Junior Data Engineer
vor 2 Wochen
Berlin, Berlin, Deutschland Blue Horizon Quantum Ventures VollzeitRole DescriptionWe are looking for a passionate and detail-oriented Junior Data Engineer to join our team. In this entry-level role, you will support the design, development, and maintenance of data pipelines and databases. You will collaborate with senior engineers to collect, process, and store data efficiently while ensuring its quality and accessibility...
-
Junior Data Engineer – AWS
vor 1 Woche
Berlin, Berlin, Deutschland mund consulting AG VollzeitProjektarbeit (extern) Berlin, Remote. Start Januar PythonTableauGITPower BISQLDatenmodellierungCI/CDScrumETLRESTGlueGlueAthenaS3Data ScienceApache SparkPandasSQSTestingPySparkDatenpipelinesVisualisierungenReportsQuickSightAWS BatchMWAABoto3 APISNSDashboard-EntwicklungAWS...
-
Senior Consultant – Cloud Data Engineer
vor 1 Woche
Berlin, Berlin, Deutschland eBiz Consulting GmbH VollzeitDu brennst für skalierbare Datenplattformen, Cloud-Technologien und moderne DataOps-Ansätze? Du möchtest datengetriebene Lösungen gestalten, die Unternehmen befähigen, ihr volles Potenzial im Zeitalter von KI und Cloud auszuschöpfen?Dann bist Du bei eBiz Consulting GmbH genau richtig AlsSenior Consultant Cloud Data Engineer (m/w/d)konzipierst und...
-
Senior Data Engineer
vor 1 Woche
Berlin, Berlin, Deutschland unybrands Vollzeitunybrands was established in 2020 by a group of partners united by a shared vision: to build the leading next-generation e-commerce platform for micro-brands. Headquartered in Miami, the company has a global presence with teams in Berlin, London, New York, and China.unybrands acquires e-commerce businesses that sell both on and off Amazon. Once acquired,...