Beschreibung
Sehr geehrte Damen und Herren,hiermit möchte ich Ihnen gerne eine Position als Data Engineer (m/w/d) für Data Integration und Big Data vorstellen. Sollte diese Position für Sie nicht von Interesse sein, können Sie diese E-Mail gerne wieder löschen.
Sofern Ihre Erwartungswerte die Anforderungen für diese Position überschreiten, würde es mich freuen, wenn Sie auch an Ihre Kollegen (m/w/d) denken, die hier eventuell Interesse haben könnten.
Rahmendaten:
- Startdatum: ab sofort
- Enddatum: (Option auf Verlängerung)
- Umfang: 90 PT
- Einsatzort: remote
Aufgaben:
- Entwurf, Entwicklung, Wartung und Test von Data Ingestion-Lösungen „Bottom-up" von der Quelle (z. B. Legacy / Mainframe / nahezu Echtzeit) bis zum Ziel (Dateien / Schnittstellen / Data Marts) unter Verwendung von Talend Data Fabric, NiFi et al.
- Implementierung von Change Data Capture-Pipelines, die mithilfe von Echtzeit-Datenfeeds (z. B. Kafka).
- Unterstützung des Teams beim Aufbau großer Datenverarbeitungssysteme und komplexer Big-Data-Projekte
- Erstellung von Datenverarbeitungssysteme in Hadoop, Spark und Hive (Cloudera Data Plattform)
- Anwendung von Technologien zur Lösung von Big-Data-Problemen und Gestaltung von Anwendungsfällen für Unternehmensdaten
- Sammeln, Parsen, Verwalten, Analysieren und Visualisieren großer Datenmengen aus heterogenen Domänen
- Datenverwaltung, indem Datenherkunft, Datenkatalogisierung und Datenmodellierung aktiviert werden
- Mitarbeit im Team aus Architekten, Dateningenieuren und Datenwissenschaftlern aus Wirtschaft und IT
Ihr Profil
- Mindestens 3 bis 5 Jahre Java-Entwicklung in Enterprise-Umgebungen
- Erfahrungen in modernen Datenintegration und ETL (z. B. Talend Data Fabric, NiFi) sowie auf Tools für Datenreplikation und Messaging Broker (z. B. Kafka) in Big Data-Hadoop- / Spark- / Hive- / HBase- / Impala- / Kudu-Ökosystemen wie Cloudera / Hortonworks
- FinTech / Versicherungs-Know-how
- Kenntnisse in verschiedenen Programmier- oder Skriptsprachen wie SQL (ANSI und Dialekte), einschließlich Bash-Know-how
- Erfahrung im Software Development Lifecycle und in der Freigabe von Anwendungen über GIT-Workflows und Automatisierung
- Hervorragende mündliche und schriftliche Kommunikationsfähigkeiten in Deutsch und Englisch
Gerne bin ich bereit Ihre Fragen zu dieser Position zu beantworten und freue mich auf Ihre Bewerbungsunterlagen. Bitte senden Sie mir im Vorfeld Ihren CV in Word Format, Ihren Tages- oder Stundensatz für diese Position. Sowie eine kurze Information inwiefern Sie die Anforderungen abdecken.