05.10.2026 aktualisiert
verifiziert
Premiumkunde
100 % verfügbarSenior Data Engineer | Streaming & Batch Pipelines | Kafka, Spark, Hadoop
Hamburg, Deutschland
Deutschland
Master of Science (M.Sc.) in Informatik, Tel Aviv UniversitySkills
Automatic Data Processing EquipmentAutomatisierungDatenbankenData ArchitectureDatenvalidierungDatenqualitätStreamingAutomatisierte DatenverarbeitungMicrosoft Power AutomateDaten-Pipeline
Data Engineering, Automatisierung & Datenvalidierung
Ich bin Software- und Data Engineer mit langjähriger Erfahrung in der Entwicklung produktiver Daten- und Backend-Systeme.
Mein Schwerpunkt liegt auf Datenflüssen, Systemintegration, Datenqualität und Validierungslogik – insbesondere dort, wo Informationen aus unterschiedlichen Quellen zusammengeführt, geprüft und zuverlässig weiterverarbeitet werden müssen.
Ich arbeite technologieoffen und wähle die Lösung passend zur Aufgabe. Neben klassischen Data-Engineering-Technologien setze ich zunehmend auch Power Automate, Microsoft 365 und Azure ein, insbesondere für Automatisierungs- und Integrationsprojekte.
Meine Schwerpunkte:
Data Engineering & Datenpipelines: Batch- und Streaming-Verarbeitung mit Python, Scala, Kafka, Spark und Hadoop
Datenintegration: Verbindung unterschiedlicher Systeme, Datenquellen, APIs und Dokumentenprozesse
Datenvalidierung & Matching: Abgleich von Daten aus verschiedenen Quellen, Erkennung von Abweichungen, Validierungsregeln und Datenqualitätsprüfungen
Automatisierung: Power Automate sowie Integration von SharePoint, OneDrive, Teams, Outlook und Excel
Azure & Backend: Azure Functions, Storage, SQL sowie individuelle Backend-Lösungen
Datenbanken & Datenmodellierung: SQL, MySQL, Hive und NoSQL
Monitoring & Fehleranalyse: Nachvollziehbare Fehlerbehandlung und zuverlässiger Betrieb produktiver Datenprozesse
Besonders interessieren mich klar definierte Projekte mit einem konkreten Daten- oder Prozessproblem – zum Beispiel wenn Daten zwischen mehreren Systemen abgeglichen werden müssen, Dokumente automatisch verarbeitet werden sollen oder bestehende manuelle Abläufe zuverlässiger und effizienter gestaltet werden sollen.
Durch meinen Engineering-Hintergrund bin ich nicht auf ein bestimmtes Tool festgelegt, sondern kann sowohl mit Standardplattformen als auch mit individueller Entwicklung arbeiten.
Erfahrung
Berufserfahrungmehr als 10 Jahre
Freelancer seit2026
Sprachen
DeutschverhandlungssicherEnglischverhandlungssicherHebräischMuttersprache
Projekthistorie
Entwicklung und Betrieb skalierbarer Datenpipelines (Streaming & Batch). Verarbeitung grosser Datenmengen mit Kafka-aehnlichen Systemen, Spark und Hadoop. Design und Pflege von Datenmodellen und ETL-Prozessen. Arbeiten mit SQL, HiveQL, MySQL und NoSQL-Datenbanken. Sicherstellung von Datenqualitaet, Monitoring und Fehlerbehebung. Zusammenarbeit mit Produkt-, Backend- und Analytics-Teams.
Betreuung von Studierenden in Datenbanken und Data-Engineering-Kursen. Unterstuetzung bei Uebungen, Projekten und Pruefungen.
Backend-Entwicklung und Arbeit mit MySQL-Datenbanken.