Data Engineer

Beschreibung

Job Zusammenfassung In dieser Rolle entwickelst du automatisierte ETL-Prozesse für Big Data und MLOps mit Python, SQL und Databricks. Dabei stellst du Datenqualität und Sicherheit sicher und arbeitest in agilen Teams an innovativen Lösungen. Job Zusammenfassung In dieser Rolle entwickelst du automatisierte ETL-Prozesse für Big Data und MLOps mit Python, SQL und Databricks. Dabei stellst du Datenqualität und Sicherheit sicher und arbeitest in agilen Teams an innovativen Lösungen. Deine Rolle im Team Sie arbeiten in Projekten vorwiegend mit Python (z. B. pandas, numpy), SQL, Jupyter, PySpark, sowie Databricks. Zudem beschäftigen Sie sich mit Spark, Data Warehousing, Data Engineering, Big Data und MLOps. Sie arbeiten mit den modernsten Cloud-Technologien (AWS, Azure oder GCP). Sie entwickeln automatisierte Prozesse zur Extraktion, Transformation und zum Laden von Daten (insbesondere auf Databricks). Sie stellen die Datenqualität, Sicherheit und den effizienten Datenfluss (ETL/ELT-Prozesse) im Projekt sicher. Sie entwickeln gemeinsam mit unseren Datenarchitekten innovative Fachthemen für unsere Kunden. Sie übernehmen die eigenverantwortliche (Teil-)Projektleitung und Verantwortung für die Einhaltung von Aufwänden gemäß (Projekt-)vorgaben. Im Rahmen von Pre-Sales Aktivitäten unterstützen Sie bei der Qualifizierung sowie Bearbeitung von Ausschreibungen aus technischer Sicht. Sie arbeiten in agilen Teams (2-5 Personen, z.B. Data Scientist, Analyst sowie Projektmanager) sowohl an langfristigen Projekten als auch an kürzeren Proof-of-Concepts. Sie vertreten unser Unternehmen überzeugend nach außen und arbeiten mit den unterschiedlichsten Branchen zusammen. Sie unterstützen bei der Akquise neuer Projekte und wirken aktiv bei der Durchführung von Workshops mit. Im Projekt arbeiten Sie an der Umsetzung von Lösungskomponenten oder Funktionsbausteinen von Data-Analytics-Architekturen. Sie arbeiten an Konzeption, Design, Implementierung, Test und Beratung mit und setzen Lösungskomponenten oder Funktionsbausteine um. Sie erstellen die jeweils erforderliche Dokumentation nach den geltenden Standards unter Anwendung gängiger Methoden und Verfahren bzw. Regelwerken in einem Aufgabengebiet. Unsere Erwartungen an dich Qualifikationen Bachelor oder vergleichbar Sehr gute Kenntnisse in Python SQL Eine Databricks-Zertifizierung ist von Vorteil Sehr gute Kommunikationsfähigkeiten mindestens in Deutsch und Englisch Wünschenswert wären gute Kenntnisse der MS Office Produkte Excel, Word, PowerPoint, etc. Teamfähigkeit, unternehmerisches Denken, Selbständigkeit und Motivation runden Ihr Profil ab Spaß am Arbeiten im Team und an der eigenständigen Erarbeitung neuer Themen. Erfahrung Mehrjährige Berufserfahrung (mind. 3 Jahre in dem Umfeld) Erfahrung in den Bereichen AI, ML, DWH, BI oder verwandten Gebieten Benefits Gesundheit, Fitness & Fun ♿️ Barrierefreiheit Work-Life-Integration ⏰ Flexible Arbeitszeiten 🏠 Home Office Essen & Trinken 🥘 Essenszulage Themen mit denen du dich im Job beschäftigst Machine Learning Cloud Computing AI Big Data Metadaten Level: Erfahren Job Feld: Data, Back End Anstellung: Vollzeit Vertragsart: Unbefristetes Dienstverhältnis Arbeitsmodell: Onsite Unternehmenstyp: Etablierte Firma Branche: Öffentlicher Dienst, Verbände, Industrie, Produktion, Internet, IT, Telekom Ort: Hamburg, Stuttgart, Tübingen, Berlin, Düsseldorf, München, Fürth, Essen | München | Deutschland | Tübingen | Stuttgart | Fürth | 64658 | Düsseldorf | Essen | Berlin | Hamburg

Tech Stack