Principal Consultant Apache Kafka

vor 1 Monat

Cologne, Deutschland beON consult Vollzeit

Responsibilities

As Principal Consultant Apache Kafka & Distributed Data Systems you will be responsible for the lead design, architecture, administration, and deployment of customized and advanced event streaming platforms based on Apache Kafka, current industry standards, and using the latest tools and methods. You and your team are in close contact with your customer and are responsible for the preparation, planning, migration, control, monitoring, and implementation of highly scalable Apache Kafka event streaming platforms or distributed data systems projects and for comprehensive customer consulting on the current state of these technologies. As a Principal Consultant for Big Data Management and Stream Processing, you act as trusted advisor to the client at senior management level. With a team of Apache Kafka and DevOps engineers and developers, your goal is to lead the design and implementation of architectures for distributed data systems and streaming platforms and stream processing use cases using open source and cloud tools. You will lead a team of highly skilled Kafka Engineers. In addition to technical leadership responsibility and resource management, you will be responsible for the targeted personal, methodological and technical staff development of the team. Your team of engineers and operators will build, install, configure, test, deploy and monitor the latest enterprise streaming platforms and their complex DevOps solutions in a fast, high-quality, and controlled manner.

Qualifications

Completed studies or comparable training with a technical background Sound experience and knowledge in Java Solid experience with Apache Kafka or similar large-scale distributed data systems Experience in software development and automation to run big data systems Experience with developing and implementing complex solutions for Big Data and Data Analytics applications Experience in system deployment and container technology with building, managing, deploying, and release managing Docker containers and container images based on Docker, OpenShift, and/or Kubernetes Experience in developing resilient scalable distributed systems and microservices architecture Experience with various distributed technologies (e.g. Kafka , Spark, CockroachDB, HDFS, Hive, etc.) Experience with stream processing frameworks (e.g. Kafka Streams , Spark Streaming, Flink, Storm) Experience with Continuous Integration / Continuous Delivery (CI/CD) using Jenkins, Maven, Automake, Make, Grunt, Rake, Ant, GIT, Subversion, Artefactory, and Nexus. Understanding of SDLC processes (Agile, DevOps), Cloud Operations and Support (ITIL) Service Delivery Good knowledge and experience in authentication mechanism with OAuth, knowledge of Vert.x and Spring B oot Experience in SQL Azure and in AWS development Experience with DevOps transformation and cloud migration to one of AWS, Azure, Google Cloud Platform, and/or Hybrid/Private Cloud; as well as cloud-native end-to-end solutions, especially their key building blocks, workload types, migration patterns, and tools Experience with monitoring tools and logging systems such as NewRelic, ELK, Splunk, Prometheus, and Graylag With consulting experience , propose competitive and innovative technical solutions that gain client approval and reliably implement agreements Ability to communicate technical ideas in a business-friendly language Interest in modern organizational structure and an agile working environment (SCRUM) Experience in managing experts and projects, such as “Statement of Work” (SOW) negotiations, project initiation, client management, project execution, and implementation Customer-oriented and enjoy working in an international environment in German and English

  • Senior Principal SAP Consultant FICO

    vor 1 Monat

    Cologne, Deutschland Cavendish Professionals Vollzeit

    Senior Principal SAP Consultant FICOWerden Sie teil eines dynamischen internationalen Teams!Mein Kunde ist ist eines der stärksten Anbieter von passgenauen SAP-Lösungen für Managementberatung. Er unterhält weltweiten Verbindungen zu den größten Konzernen der Welt für die das Team innovative und transformative Lösungen entwirft. Damit stehen Sie am...

  • Technical Consultant Integration

    vor 3 Wochen

    Cologne, Deutschland INTENSE AG Vollzeit

    Technical Consultant Integration (m/w/d) Die INTENSE AG ist ein dynamisches und nachhaltig ausgerichtetes Software- und IT-Beratungsunternehmen. Unsere Kernkompetenzen sind Prozessoptimierung, Entwicklung digitaler Lösungen und Effizienzsteigerungen für die Energiewirtschaft. Als Technical Consultant liegt der Beratungsschwerpunkt auf der...

  • Senior Data Engineer

    vor 15 Stunden

    Cologne, Deutschland Materna Vollzeit

    Advanced Smart Services sind die Zukunft der digitalen Gesellschaft. Moderne Datenökonomien gelten als die wichtigste Basis, um großen Herausforderungen wie Gesundheitsvorsorge, Nachhaltigkeit im Sinne von Energie- und Ressourceneffizienz, Klimawandel sowie Umweltschutz gewachsen zu sein. Daher arbeiten unsere interdisziplinären Teams tagtäglich...

  • (Senior/Principal) SAS Consultant

    vor 1 Monat

    Cologne, Deutschland affinis AG Vollzeit

    Gemeinsam die Zukunft gestalten - werde Teil unserer Unternehmensgruppe und starte bei der Information Works durch! In einer disruptiven und komplexen Welt unterstützen wir als affinis-Gruppe unsere Kunden seit mehr als 20 Jahren dabei, genau die Entscheidungen zu treffen, die sie nach vorne bringen. Das schaffen wir nur mit unserer hochqualifizierten...

  • Data Engineer

    vor 4 Wochen

    Cologne, Deutschland ORDIX Vollzeit

    Ihre AufgabenSie analysieren, konzipieren und entwickeln Data Pipelines auf Basis moderner Big Data und Streaming-Technologien (Hadoop, Hive, Kafka, Spark, Cloud)Sie arbeiten eng mit den Fachabteilungen/Product Ownern unserer Kunden zusammen und planen und realisieren anspruchsvolle Projekte im agilen UmfeldSie verfolgen aktuelle Trends und evaluieren neue...

  • System Engineer Media

    vor 9 Stunden

    Cologne, Deutschland RTL Technology GmbH Vollzeit

    Deine Aufgaben Du startest bei uns im Team Media Engineering und bist dort mit deinem Team verantwortlich für den Betrieb und die Weiterentwicklung der Media Processing Plattform  Deine Hauptaufgabe besteht darin dich um Weiterentwicklung und Betrieb unserer Video-, Audio- und Dataworkflows zu kümmern  Du erarbeitest mit deinem Team Lösungen...

  • (Senior) Java Software Entwickler

    vor 1 Monat

    Cologne, Deutschland SEVEN PRINCIPLES Vollzeit

    Das erwartet dich : Als erfahrene:r Entwickler:in übernimmst du in unseren agilen Projektteams eine tragende Rolle und realisierst moderne Softwarelösungen als Berater:in bei unseren Kund:innen vor Ort, im Homeoffice oder bei uns im Büro Dabei unterstützt du bei der Auswahl geeigneter Vorgehensmodelle, Aufwandsschätzungen und Softwarearchitekturen ...

  • Software Engineer

    Vor 5 Tagen

    Cologne, Deutschland Zurich Insurance Company Vollzeit

    Bist du bereit, Versicherung neu zu denken?   Um die Wünsche unserer Kunden besser und schneller zu erfüllen, gehen wir neue Wege, denken Versicherung neu und arbeiten agil. Nicht nur in den Entwicklerteams. Unsere neue Unternehmenskultur schenkt dafür allen in jeder Hinsicht mehr Flexibilität – und dir viel Freiraum, dich optimal zu entfalten....

  • Executive Interviewer/ Market Researcher-Germany

    Vor 5 Tagen

    Cologne, Deutschland Coalition Greenwich (a division of CRISIL) Vollzeit

    About the jobJob Title: Executive Interviewer/ Market ResearcherLocation: Deutschland/ Oesterreich/Schweiz Position type: Vertragsbasis COALITION GREENWICH:Coalition Greenwich is a leading analytics and business intelligence provider to the financial services industry. Our clients include Corporate and Investment Banks, Asset Managers, and Fintechs. We...

  • (Senior) Full-Stack Engineer

    Vor 5 Tagen

    Cologne, Deutschland Kaufland e-commerce Vollzeit

    Anstellungsdetails Permanent contract, full-time or part-time, Remote or Cologne / Darmstadt / Düsseldorf Info Who we are We operate the international of Kaufland: Several thousand sellers and millions of products make us one of the fastest growing online marketplaces. Ours is a dynamic corporate culture that merges a start-up mentality with the...

  • (Senior) Full-Stack Engineer

    Vor 5 Tagen

    Cologne, Deutschland Kaufland e-commerce Vollzeit

    Anstellungsdetails Permanent contract, full-time or part-time, Remote or Cologne / Darmstadt / Düsseldorf Info Who we are We operate the international of Kaufland: Several thousand sellers and millions of products make us one of the fastest growing online marketplaces. Ours is a dynamic corporate culture that merges a start-up mentality with the...

  • (Senior) Full-Stack Engineer

    Vor 5 Tagen

    Cologne, Deutschland Kaufland e-commerce Vollzeit

    AnstellungsdetailsPermanent contract, full-time or part-time, Remote or Cologne / Darmstadt / DüsseldorfInfoWho we areWe operate the international of Kaufland: Several thousand sellers and millions of products make us one of the fastest growing online marketplaces. Ours is a dynamic corporate culture that merges a start-up mentality with the opportunities...