Senior Data Engineer – AWS Cloud
Vor 2 Tagen
Projektarbeit (extern) Berlin, Remote. Start Januar
Python
Tableau
Power BI
SQL
Datenmodellierung
Softwareentwicklung
REST
Git
Apache Spark
AWS-Cloud
Pandas
SQS
PySpark
QuickSight
Boto3 API
SNS
Dashboard-Entwicklung
Docker-Containern
Data Exploration
ETL-Entwicklung
AWS Managed Services
CI/CD-Prozesse
Data Quality
Agile Scrum-Teams
Data Science-Methoden
Senior Data Engineer – AWS Cloud & Big Data Pipelines (m/w/d) ID2394S
...für die Entwicklung und Automatisierung von Datenpipelines in einer cloudnativen Analyseumgebung
Start:
Ende:
Einsatzort: Berlin & 98% Remote (Onshore, ca. 8 PT Onsite)
Projektbeschreibung:
Für eine cloudbasierte Analyseplattform im Bereich Big Data und Machine Learning wird ein erfahrener Data Engineer gesucht.
Die Rolle umfasst die Entwicklung und Optimierung von Datenpipelines, die Integration neuer Datenquellen sowie die Unterstützung datengetriebener Use-Cases in agilen Teams.
Aufgaben:
– Beratung und Umsetzung bei der Weiterentwicklung des Backends (Konzeption, Implementierung, Dokumentation neuer Features)
– Erstellung und Automatisierung von Datenpipelines nach dem Zonenmodell (raw – trusted – refined)
– Analyse und Bewertung neuer Datenquellen, Aufbau geeigneter Datenstrukturen
– Visualisierung und Reporting von Daten (Power BI, QuickSight, Tableau)
– Implementierung von AWS-Managed-Services (Glue, Airflow, Batch, S3, Athena, Glue Data Quality)
– Entwicklung mit Python, SQL, Apache Spark, PySpark, Pandas, Boto3 API, SNS, SQS, REST
– Mitarbeit in agilen Scrum-Teams (Refinement, Planning, Review, Retro)
Anforderungen (Must-have):
– Mind. 5 Jahre Erfahrung in Datenmodellierung und ETL-Entwicklung mit Python und SQL
– Gute Kenntnisse in der AWS-Cloud und Erfahrung mit Managed Services (Glue, Athena, S3 u. a.)
– Nachweisbare Projekterfahrung in der Dashboard-Entwicklung (Power BI, QuickSight oder Tableau)
– Erfahrung in Softwareentwicklung mit Git und CI/CD-Prozessen
– Kenntnisse in Data Exploration, Analyse, Modellierung und Data Quality
– Sehr gute Deutschkenntnisse (C1) und gute Englischkenntnisse (C1)
Wünschenswert (Nice-to-have):
– Erfahrung im Aufbau von serverlosen Cloud-Datenplattformen
– Kenntnisse in Data Science-Methoden (Prognose, Klassifikation, Clustering)
– Praxis mit Docker-Containern
– Projekterfahrung im Bereich Transport / Logistik und Datenintegration
Das Team von der mund consulting freut sich auf Ihre Bewerbung – bitte mit aktuellem CV, Verfügbarkeit und Stundensatz.
Herzliche Grüße
Thomas Mund
-
Bearbeitet
-
Data Engineer – AWS Cloud
Vor 2 Tagen
Berlin, Berlin, Deutschland mund consulting AG Vollzeit 60.000 € - 80.000 € pro JahrProjektarbeit (extern) Berlin, Remote. Start Januar PythonAWSPower BISQLConfluenceScrumETLGitLabLambdaLambdaData GovernanceData EngineeringData ScienceMachine LearningApache SparkagileMLOpsAWS GluePTV VisumOpenStreetMapAWS SagemakerData-EngineeringGeodatenData Engineer – AWS Cloud & Data Pipelines (m/w/d) 98% remote ID2398S...für die Entwicklung und...
-
Cloud Support Engineer
vor 1 Woche
Berlin, Berlin, Deutschland Amazon Web Services (AWS) Vollzeit 50.000 € - 80.000 € pro JahrDescriptionAWS is set to introduce the inaugural European Sovereign Cloud (ESC), to spearhead this initiative, we are actively seeking support engineers in this space.Amazon Web Services is the market leader and technology forerunner in the Cloud business.As a member of the AWS Support team for ESC you will be at the forefront of this transformational...
-
Berlin, Berlin, Deutschland Amazon Web Services (AWS) Vollzeit 120.000 € - 180.000 € pro JahrDescriptionAmazon Web Services (AWS) is the pioneer and recognized leader in Cloud Computing. Millions of businesses in 150+ countries, from start-ups to Fortune 500 enterprises, across all industries including public sector, run their operations and applications on AWS to create new revenue streams, improve operational efficiency, and reduce business...
-
Senior AWS Cloud Architect
vor 1 Woche
Berlin, Berlin, Deutschland Nordcloud Vollzeit 90.000 € - 120.000 € pro JahrWerde Teil von Nordcloud und hinterlasse deine Spuren in der europäischen IT-Branche. Unterstütze unsere Kunden auf ihrem Weg in die Cloud in den Bereichen Infrastruktur, Migration, Data und Sicherheit.Derzeit suchen wir einen Senior AWS Cloud Architect (m/w) für unser Team in Deutschland. Als Senior AWS Cloud Architect verfügst Du über solide Erfahrung...
-
Junior Data Engineer – AWS
Vor 2 Tagen
Berlin, Berlin, Deutschland mund consulting AG Vollzeit 40.000 € - 60.000 € pro JahrProjektarbeit (extern) Berlin, Remote. Start Januar PythonTableauGITPower BISQLDatenmodellierungCI/CDScrumETLRESTGlueGlueAthenaS3Data ScienceApache SparkPandasSQSTestingPySparkDatenpipelinesVisualisierungenReportsQuickSightAWS BatchMWAABoto3 APISNSDashboard-EntwicklungAWS...
-
Senior Data Engineer
vor 1 Woche
Berlin, Berlin, Deutschland Devop Vollzeit 80.000 € - 120.000 € pro JahrTitle : Senior Data Engineer (f/m/d) Location: Berlin or Stuttgart or Remote Duration: Full time Your role: You own the topics of collection, normalization, and delivery of data You maintain and extend or data pipelines and dashboards You collaborate with numerous stakeholders on the new features and system design What you bring: 3+ years of...
-
Senior Consultant – Cloud Data Engineer
Vor 5 Tagen
Berlin, Berlin, Deutschland eBiz Consulting GmbH Vollzeit 60.000 € - 120.000 € pro JahrDu brennst für skalierbare Datenplattformen, Cloud-Technologien und moderne DataOps-Ansätze? Du möchtest datengetriebene Lösungen gestalten, die Unternehmen befähigen, ihr volles Potenzial im Zeitalter von KI und Cloud auszuschöpfen?Dann bist Du bei eBiz Consulting GmbH genau richtig AlsSenior Consultant Cloud Data Engineer (m/w/d)konzipierst und...
-
Senior Data Engineer
Vor 5 Tagen
Berlin, Berlin, Deutschland unybrands Vollzeit 80.000 € - 120.000 € pro Jahrunybrands was established in 2020 by a group of partners united by a shared vision: to build the leading next-generation e-commerce platform for micro-brands. Headquartered in Miami, the company has a global presence with teams in Berlin, London, New York, and China.unybrands acquires e-commerce businesses that sell both on and off Amazon. Once acquired,...
-
Senior AWS Cloud Architect
vor 1 Woche
Berlin, Berlin, Deutschland Nordcloud Vollzeit 80.000 € - 120.000 € pro JahrBecome part of Nordcloud and leave your mark on the European IT industry. Support our customers on their journey to the cloud in the areas of infrastructure, migration, data, and security.We are currently looking for a Senior AWS Cloud Architect for our team in Germany.As a Senior AWS Cloud Architect, you have solid experience in building, migrating, and...
-
Cloud Engineer
vor 2 Wochen
Berlin, Berlin, Deutschland Horwood-Köhler GmbH Vollzeit 960.000 € - 1.200.000 € pro JahrIm Auftrag einerglobal aufgestellten Großfirmasuchen wir als spezialisierter Berater im Technologierecruiting einenSenior Cloud Engineer (m/w/d) mit Fokus auf Application Architecture und Solution Design.Gesucht wird ein:eSeniorberater:in, die/der End-to-End-Lösungen von der Strategie bis zur Umsetzung verantwortet. Die Firma unterhält Niederlassungen in...