Profilbild von Anonymes Profil, Technical Project Lead / DataOps Engineer
teilweise verfügbar

Letztes Update: 29.01.2024

Technical Project Lead / DataOps Engineer

Abschluss: B.Sc. Informatik
Stunden-/Tagessatz: anzeigen
Sprachkenntnisse: deutsch (Muttersprache) | englisch (Muttersprache)

Skills

Technologien:
  • Java, Scala, Python, SQL
  • Spring Boot, JDBI, Spring, JPA
  • RabbitMQ, Messaging, Microservices
  • Apache Spark
  • FastAPI, SQLAlchemy, Haystack, Alembic
  • Cloudformation, Terraform, Docker
  • AWS: EC2, ECS, Fargate, RDS, DynamoDB, S3, SQS, SNS, StepFunctions, Lambda, AWS Batch, Athena, Data Pipeline, Serverless, EMR
  • Github Actions, Jenkins, Airflow, Gitlab CI/CD
  • MariaDB, MySQL, PostgreSQL, AWS Redshift

Kernkompetenz:
  • Empathie
  • Stakeholder Management
  • Verbinden bzw. kommunikation zwischen der Tech und non-Tech Welt
  • Schnelles Verständnis für komlexere Datensysteme
Erfahrung:
  • MarTech / AdTech / NLP projects / Data Vault 2.0 / DSGVO / Data Privacy
  • CDP/DMP/DWH
  • GDPR / IAB TCF v2
  • Authentication / Authorization / User Management / IAM
  • StartUp / Fast pace development
  • Scrum / Kanban
  • Data Products

Projekthistorie

03/2023 - bis jetzt
Senior Data Engineer / Marketing Intelligence
(Medien und Verlage, 1000-5000 Mitarbeiter)

Tätigkeit:
  • Einführung von Airflow / Ablösen der custom ETL solution
  • Entwicklung vom Datawarehouse
  • Entwicklung von der Customer Data Platform
  • Entwicklung von ETL Strecken von externen quellen in das Datawarehouse
  • Anbindung von Plenigo, Salesforce, Adobe Marketing Cloud
  • Konzipierung von Reportings und neuen KPIs
Technologien:
  • Python, SQL, SQLAlchemy
  • AWS (EC2, Lambda, Serverless, S3, Redshift, SWF, Sagemaker, ECS Fargate, VPC)
  • Azure
  • Airflow

11/2023 - 02/2024
Senior Backend Engineer - Data Privacy
(Medien und Verlage, 500-1000 Mitarbeiter)

  • Anbindung der Adobe Privacy API
  • Debugging innerhalb des GCP Kubernetes Clusters
  • Exploratives Requirements Engineering
  • Features planen und implementieren
  • Anbindung der internen Azure Blob Storage und Queue

05/2022 - 03/2023
Senior Data Engineer / Architect
(Transport und Logistik, >10.000 Mitarbeiter)

- Cloud service solution design and implementation with AWS
- Data pipeline automation, ETL jobs and artifact storage and versioning for ML jobs
- API design and implementation for data services
- Building CI/CD pipelines
- Experiment tracking as an extension of the data pipeline automation
- Python, Airflow, AWS, Fast_API, Docker, Streamlit

09/2022 - 12/2022
IT Consultant / API Coach
(Banken und Finanzdienstleistungen, 50-250 Mitarbeiter)

- Evaluation of status quo of an API
- Identifying issues in regards of RESTfulness of an API
- Creation of a Styleguide
- Coaching of Best Practices in terms of API/REST development

07/2021 - 03/2022
Head of Software/Product Engineering
Adtriba GmbH (Internet und Informationstechnologie, 10-50 Mitarbeiter)

Product bzw. Project Management (Ticket und Project Management via Github)
Implementierung von Backend features (Spring Boot / Java)
Implementierung von ETL features (Docker, Python, AWS Batch, AWS Step Functions)
Ablösung von server side rendering zu einer single page application (REST APIs)
Bug fixing im Frontend (React)
Sicherstellen des Betriebs der customer facing Produkte (AWS EC2, AWS RDS, Terraform)
Aufsetzen und überwachung des Monitorings (Sentry.io, Papertrail)
Datenanalyse mittels AWS Redshift und Jupyter notebooks

03/2020 - 07/2021
Lead Engineer
Adtriba GmbH (Internet und Informationstechnologie, < 10 Mitarbeiter)

Anfoderungsanalyse für einen Relaunch der customer facing Produkte
Analyse von Bestandsprodukten (PHP Legacy Code)
Re-implementierung der customer facing Produkte (Java, Spring Boot)
Portieren von Data Pipelines (Bash, SQL, Jenkins)
Integrieren von 3rd Party Tools/APIs (Auth0, Google Ads, Sentry, Papertrail, IAB TCF v2)
Datenanalyse mittels AWS Redshift


12/2018 - 02/2020
Senior Software Engineer / Data Engineer
emetriq GmbH (Internet und Informationstechnologie, 50-250 Mitarbeiter)

Implementierung von features im cross device network (Scala, Spark, AWS)
Analyse und technische Umsetzung der DSGVO (teilweise nutzung vom IAB TCF v1 und v2) im cross device network (Java, Spring Boot, Scala, Spark, AWS)
Feststellung und behebung von bottlenecks in den data pipelines (AWS Data Pipelines, AWS EMR, Scala, Spark)
Analyse der Eingangsdaten (AWS Athena, SQL)
Erstellen eines Plans um die Eingangsdaten zu säubern (Scala, Spark, AWS)

09/2017 - 11/2018
Software Engineer
Moovel Group GmbH (Automobil und Fahrzeugbau, 50-250 Mitarbeiter)

- Microservices, Kong, APIs, Rest
- Scala , Play! Framework
- Java, Spring Boot
- SQL, PostgreSQL
- AWS, Cloudformation, Terraform

01/2015 - 08/2017
Software Engineer
InnoGames GmbH (Internet und Informationstechnologie, 250-500 Mitarbeiter)

- Microservices, APIs, RESTful
- Java, Spring Boot, Akka
- PHP, Symfony
- RabbitMQ, Kafka
- Angular
- Scrum, Kanban

Zertifikate

Professional Scrum Product Owner I (PSPO I)
2023

Reisebereitschaft

Verfügbar in den Ländern Deutschland und USA
Zur Zeit nur für Remote-Projekte verfügbar.
Profilbild von Anonymes Profil, Technical Project Lead / DataOps Engineer Technical Project Lead / DataOps Engineer
Registrieren