Data Engineer
vor 24 Stunden
The Apps Engineering team, empowering millions of writers, musicians, filmmakers, photographers, designers and creators worldwide, is seeking a data engineer to fuel our LLM development workflows by working on data curation and building tools and infrastructure to maintain and evaluate datasets. You'll work closely with machine learning engineers, developing deep understanding of data quality, characteristics, and curation needs. You'll also create web-based tools for data collection, evaluation, and visualization systems that enable our team to develop and deploy LLM workflows across diverse environments while maintaining Apple's high standards for quality, performance, and creative ethics.
Description
Make a difference. As a Data Engineer specializing in LLM Workflows on the Apps Engineering team, you'll work directly with large-scale datasets by exploring their characteristics, evaluating their quality, and maintaining them throughout the ML development lifecycle. You'll dive deep into data for LLM workflows to understand what makes datasets effective for model training and fine-tuning adapters. Beyond dataset work, you'll design and build web-based tools that support data collection, model evaluation, and result visualization through intuitive interfaces. You'll develop APIs and data pipelines that connect data collection tools with ML training infrastructure, creating seamless workflows for model development and fine-tuning. This role requires strong Python skills for both data analysis and web development, combined with curiosity about machine learning fundamentals and LLM workflows.
Minimum Qualifications
Experience with data processing and evaluation of LLM workflows.
Experience building data collection and evaluation for LLM-supported systems.
Experience with developing web tools using JavaScript or TypeScript.
Experience deploying web tools or applications on cloud platforms (AWS or GCP).
Preferred Qualifications
Experience with machine learning fundamentals and frameworks (scikit-learn, PyTorch).
BS/MS in Computer Science, Data Engineering, or related technical field, or 3 years of equivalent work experience.
Experience exploring and analyzing large-scale datasets for ML applications.
Experience with dataset curation, quality assessment, and bias detection methodologies.
Experience building data collection tools or working with crowd annotation platforms.
Experience designing data augmentation pipelines.
Experience with data visualization libraries and creating dashboards for dataset analysis and ML metrics.
Experience with model development or LLM fine-tuning pipelines.
Experience working with creators, audio/video production, or creative software applications.
-
Data Engineer
vor 1 Tag
Hamburg, Hamburg, Deutschland Vattenfall VollzeitUnternehmensbeschreibung Wir bei Vattenfall arbeiten an der Fossilfreiheit und brauchen hierfür Menschen, die sich mit ganzer Kraft für unsere Kund:innen und eine nachhaltige Gesellschaft engagieren – Menschen wie Du. Wir sind ein führendes Energieunternehmen in Europa mit rund Mitarbeitenden. Seit mehr als 100 Jahren elektrifizieren wir Industrien,...
-
Data Engineer
Vor 7 Tagen
Hamburg, Hamburg, Deutschland Highberg Vollzeit 60.000 € - 90.000 € pro JahrDeine Aufgaben Als Data Engineer treibst Du gemeinsam mit Deinem Projekt-Team herausfordernde Datenprojekte voran. Du entwickelst Data Infrastrukturen und arbeitest sofort auf realen Daten und kritischen Problemen unserer Kunden. Typische Beispiele sind die Entwicklung von Data Warehouses, Data Pipelines, (Reverse)ETL-Prozessen. Auf Augenhöhe arbeitest Du...
-
Data Engineer
Vor 7 Tagen
Hamburg, Hamburg, Deutschland CTS EVENTIM AG & Co. KGaA Vollzeit 90.000 € - 120.000 € pro JahrAs a Data Engineer, you will play a key part in understanding, structuring, and scaling the data that powers the world's second-largest ticketing and live entertainment company. You'll ensure that critical data is organized, reliable, and accessible to a wide range of consumers. As part of a newly reorganized team committed to agile principles and modern...
-
Senior Data Engineer
vor 1 Woche
Hamburg, Hamburg, Deutschland accantec group Vollzeit 80.000 € - 120.000 € pro JahrBe smart - JOIN USGestalte als Senior Data Engineer (w/m/d) mit uns die technologische Zukunft von Als treibende Kraft hinter modernen Datenplattformen auf Basis des Lakehouse-Ansatzes entwickelst Du robuste, skalierbare Datenpipelines, modellierst komplexe Datenstrukturen und lieferst performante, saubere Datenlösungen, die unsere Kunden echten Mehrwert...
-
Data Engineer
vor 1 Woche
Hamburg, Hamburg, Deutschland Michael Page Vollzeit 60.000 € - 90.000 € pro JahrModerne Arbeitsbedingungen, flexible ArbeitszeitenVielfältige Weiterbildungsmöglichkeiten und KarrierechancenAbout Our ClientDas Unternehmen ist ein moderner Arbeitgeber mit Sitz in Deutschland, der sich durch Innovationskraft, Stabilität und eine klare Zukunftsorientierung auszeichnet. Mit einem starken Fokus auf Digitalisierung und Technologie bietet es...
-
Data Engineer
vor 1 Woche
Hamburg, Hamburg, Deutschland Parship Group Vollzeit 80.000 € - 120.000 € pro JahrInhalte der Stellenbeschreibung Zur Verstärkung unseres Data Engineering Teams suchen wir ab sofort eine:n engagierte:n Data Engineer (all genders) in Vollzeit. Gemeinsam mit Kolleg:innen aus Data Engineering, Business Insights, Data Science/AI/ML und anderen Fachbereichen gestaltest du unser datengetriebenes Geschäftsmodell aktiv mit und treibst die...
-
Data Engineer in Hamburg
vor 2 Wochen
Hamburg, Hamburg, Deutschland Instaffo Vollzeit 80.000 € - 120.000 € pro JahrData Engineer in Hamburg bei PRODYNA SEAnforderungenWohnsitz:Nur für Bewerber aus DeutschlandSprache:Deutsch - Fließend, Englisch - KonversationssicherDu verfügst über mehrjährige Berufserfahrung in der Softwareentwicklung, insbesondere in datengetriebenen Projekten, im Bereich Data Warehousing oder im Aufbau von Datenplattformen.Du besitzt Kenntnisse...
-
Data Engineer
Vor 7 Tagen
Hamburg, Hamburg, Deutschland HanseMerkur Vollzeit 90.000 € - 120.000 € pro JahrDatenprofi gesucht Spannende Position als Data Engineer (m/w/d) - Data Integration, Data Warehouse"Daten sind der Rohstoff der Zukunft" – Unser Team identifiziert und veredelt relevante Daten und stellt diese im Data Warehouse für alle Stakeholder anwendergerecht zur Verfügung. Damit ermöglichen wir den Fachbereichen datengetrieben zu arbeiten. Werde...
-
Data Engineer
Vor 7 Tagen
Hamburg, Hamburg, Deutschland HanseMerkur Versicherungsgruppe Vollzeit 90.000 € - 120.000 € pro JahrDatenprofi gesucht Spannende Position als Data Engineer (m/w/d) - Data Integration, Data Warehouse"Daten sind der Rohstoff der Zukunft" – Unser Team identifiziert und veredelt relevante Daten und stellt diese im Data Warehouse für alle Stakeholder anwendergerecht zur Verfügung. Damit ermöglichen wir den Fachbereichen datengetrieben zu arbeiten. Werde...
-
Azure-Data Engineer
vor 1 Tag
Hamburg, Hamburg, Deutschland valantic Vollzeit 80.000 € - 120.000 € pro JahrDein WirkungsfeldAls Azure-Data Engineer (all genders) bist Du der Architekt, Designer und Umsetzer von Business Intelligence und Analytics-Lösungen innerhalb der Microsoft Cloud Analytics-Plattform für unsere branchenübergreifenden KundenDu berätst und unterstützt unsere Kunden bei der Nutzung der Azure Data Services für die Datenintegration, darunter...