Junior Cloud Data Engineer

Beschreibung

Job Zusammenfassung In dieser Position entwickelst du Datenverarbeitungsstrecken in Batch und Realtime, implementierst Azure Functions, erstellst Data Factory Pipelines und optimierst ETL-Prozesse mit PySpark und SQL in einer modernen Cloud-Umgebung. Job Zusammenfassung In dieser Position entwickelst du Datenverarbeitungsstrecken in Batch und Realtime, implementierst Azure Functions, erstellst Data Factory Pipelines und optimierst ETL-Prozesse mit PySpark und SQL in einer modernen Cloud-Umgebung. Deine Rolle im Team In einem interdisziplinären Projektteam übernimmst Du den Part der technischen Umsetzung von Datenverarbeitungsstrecken in Batch und Realtime. Als Experte für das Data Engineering bist Du im Projekt Ansprechpartner für Kollegen und Kunden. Mit modernen cloud-basierten Technologien generierst Du - KI-unterstützt - innovative Lösungen rund um unsere Produkte. Entwicklung von Azure Functions in .NET C# zur Abbildung von Datentransformationen in Realtime. Erstellung und Pflege von Azure Data Factory Pipelines zur Automatisierung von Datentransfers. Entwicklung von Azure Databricks Notebooks, insbesondere zur Implementierung von ETL-Prozessen mit PySpark - dabei sind erste Programmierkenntnisse und ein gutes Verständnis für Datenverarbeitung gefragt. Arbeiten mit SQL, inklusive der Durchführung von Qualitätssicherungen, Datenanalysen und gezielten Performanceoptimierungen auf Speichertechnologien wie Cosmos DB, Azure SQL DB und Data Lake Storage. Optimierung und Feintuning der Prozesse durch Detailanalysen u. a. mit Log Analytics. Unsere Erwartungen an dich Qualifikationen Erste Kenntnisse Programmierkenntnisse (idealerweise in C#, Python und Pyspark). SQL-Kenntnisse zur Datenanalyse und Qualitätssicherung. Verständnis für Cloud-Architekturen und Datenverarbeitungsprozesse. Interesse an konzeptionellen Themen rund um Datenmodellierung und ETL-Design. Bereitschaft zur Weiterentwicklung in Technologien wie Databricks und Data Factory. Benefits Essen & Trinken 🍏 Frisches Obst Themen mit denen du dich im Job beschäftigst Cloud Computing AI Data Economy Metadaten Level: Junior Job Feld: Data, Back End Anstellung: Vollzeit Vertragsart: Unbefristetes Dienstverhältnis Arbeitsmodell: Onsite Unternehmenstyp: Etablierte Firma Branche: Werbung, Marketing, PR, Internet, IT, Telekom Ort: Hamburg, Stuttgart, Karlsruhe, München, Köln | München | Deutschland | Stuttgart | Karlsruhe | Köln | Hamburg

Tech Stack