Data Engineer Datenplattform

Beschreibung

Job Zusammenfassung In dieser Position entwickelst du Datenprodukte und -pipelines auf der Azure-/Databricks-Datenplattform, optimierst Datenintegrationsprozesse und gewährleistest die Datenqualität durch regelmäßige Qualitätssicherung. Job Zusammenfassung In dieser Position entwickelst du Datenprodukte und -pipelines auf der Azure-/Databricks-Datenplattform, optimierst Datenintegrationsprozesse und gewährleistest die Datenqualität durch regelmäßige Qualitätssicherung. Deine Rolle im Team In der Produktgruppe "Kundendaten & CRM" der EDEKA IT sind wir für die Datenverarbeitung des EDEKA Verbunds zuständig. Bei uns werden unter anderem die Stammdaten und Kundendaten des EDEKA Verbunds aufbereitet und strukturiert, um sie unseren Fachbereichen zur Verfügung zu stellen. Als Data Engineer für die EDEKA Datenplattform spielst du eine zentrale Rolle bei der Entwicklung unserer Datenprodukte. Du bist verantwortlich für die kontinuierliche Weiterentwicklung unserer kuratierten Datenschichten sowie für die Ingres- und Export-Prozesse. Außerdem sorgst du durch gezielte Qualitätssicherung dafür, dass wir einen möglichst störungsarmen Betrieb gewährleisten können. Dein Beitrag ist entscheidend, um sicherzustellen, dass EDEKA über gut strukturierte Daten mit hoher Datenqualität verfügt. Folgendes gehört dabei zu deinen regelmäßigen Aufgaben: Entwicklung und Optimierung in der Domäne "Kundendaten & Coupons" oder "Transaktions- & Stammdaten" in unserer Azure- / Databricks-Datenplattform: Verantwortlich für die Entwicklung und Wartung von Datenprodukten, -architekturen und -pipelines. Aufbau und Pflege von Datenintegrationsprozessen, um sicherzustellen, dass Daten aus verschiedenen Quellen konsistent und zugänglich sind. Intensive Zusammenarbeit im Entwicklungsteam und mit dem Product Owner, um sicherzustellen, dass technische Anforderungen erfüllt und die Produktziele erreicht werden. Überwachung und Einhaltung von Data-Governance-Standards, sodass die Datenverarbeitungsprozesse den festgelegten Governance- und Sicherheitsstandards entsprechen. Kontinuierliche Evaluierung und Optimierung der Dateninfrastruktur basierend auf Nutzerfeedback und eigenen Datenanalysen, um die Effizienz und Qualität der Datenprozesse zu steigern. Unsere Erwartungen an dich Ausbildung Du hast ein Studium oder eine Ausbildung mit IT-Bezug - (Wirtschafts)informatik, Data Science o.Ä.- erfolgreich abgeschlossen oder verfügst über eine gleichwertige Qualifikation. Qualifikationen Du hast ein umfassendes Verständnis von (Cloud-) Datenbanken, ETL-Prozessen und modernen Cloud-Datenverarbeitungstechnologien. Dich zeichnet ein starkes analytisches Denkvermögen aus sowie die Fähigkeit, komplexe technische Herausforderungen zu analysieren und in klare, umsetzbare Schritte zu zerlegen. Du beweist hohe Kompetenz im Lösen technischer Probleme und die Fähigkeit, fundierte Entscheidungen auf Basis von Daten und Analysen zu treffen. Du bist in der Lage, mit technischen und nicht-technischen Stakeholdern auf verschiedenen Ebenen effektiv zu kommunizieren, um Anforderungen zu klären und Lösungen zu präsentieren. Du verfügst über fließende Deutschkenntnisse in Wort und Schrift (CEFR-Level C1 oder höher). Erfahrung Du verfügst über fundierte praktische Erfahrung in der Entwicklung und Optimierung von Datenarchitekturen und -pipelines. Du besitzt solide Erfahrung in den Microsoft Azure Datenverarbeitungsprodukten und hast idealerweise Erfahrung im Umgang mit Databricks. Du besitzt praktische Erfahrung mit agilen Methoden und Frameworks (z.B. Scrum) und deren Anwendung im technischen Umfeld. Benefits Gesundheit, Fitness & Fun 🚲 Jobrad 🙂 Gesundheitsförderung 🎳 Team Events ♿️ Barrierefreiheit Essen & Trinken 🍏 Frisches Obst 🍽 Kantine/Betriebsrestaurant Work-Life-Integration ⏸ Bildungskarenz/Auszeit 🏠 Home Office ⏰ Flexible Arbeitszeiten Mehr Netto 🛍 Mitarbeitervergünstigungen 👴🏻 Betr. Altersvorsorge 🏝️ Urlaubs- und Weihnachtsgeld Themen mit denen du dich im Job beschäftigst Cloud Computing AI Metadaten Level: Erfahren Job Feld: Data, Database Anstellung: Vollzeit Vertragsart: Unbefristetes Dienstverhältnis Arbeitsmodell: Hybrid, Onsite Unternehmenstyp: Etablierte Firma Branche: Handel Ort: Hamburg | Deutschland

Tech Stack