Senior Data Engineer
- Verfügbarkeit einsehen
- 0 Referenzen
- 100€/Stunde
- 14195 Berlin
- auf Anfrage
- de | en | ru
- 01.01.2024
Kurzvorstellung
Qualifikationen
Projekt‐ & Berufserfahrung
7/2023 – 12/2023
Tätigkeitsbeschreibung
- Weiterentwicklung der Datenlandschaft in einem modernen Data Lakehouse in Azure Databricks mit PySpark und SQL
- Refactoring der Architektur und des Programmcodes im Backend
- Umsetzung neuer Anforderungen in den Datenpipelines
Datawarehouse / DWH, ETL, Apache Spark, Azure Databricks, Git, Microsoft Azure, Python, SQL
10/2022 – 7/2023
Tätigkeitsbeschreibung
- Entwicklung von Datenpipelines mit Python/PySpark in Azure Synapse
- IaaS mit Terraform und CI/CD Pipelines in Azure DevOps
- Erstellung und Umsetzung von Frameworks für Data Warehouses und
dessen ETL Pipelines in SQL Datenbank unter Verwendung von Stored
Procedures und Azure Synapse Pipelines zur Orchestrierung
- Erstellung eines Frameworks zur Beladung eines Data-Vault Warehouses unter Verwendung von Databricks
Apache Spark, Azure Databricks, Azure Synapse Analytics, Datawarehouse / DWH, Microsoft Power BI, Data Vault, ETL, Microsoft SQL-Server (MS SQL), SQL, Python, Microsoft Azure
6/2021 – 7/2022
Tätigkeitsbeschreibung
- Data Engineering mit Python, Docker, Kubernetes, Apache Airflow und SAP Hana
- Erstellung und Weiterentwicklung von Datenpipelines
Apache Spark, Pandas DataFrame, SAP HANA, Docker, Python, Kubernetes
1/2019 – 4/2021
Tätigkeitsbeschreibung
- ETL-Entwicklung mit Informatica Power Center, Oracle DB, SQL
- Data Engineering mit Python, PySpark, Docker, Kubernetes, Argo Workflows
- Implementierung von CICD-Pipelines mit Bitbucket, Artifactory und Bamboo
- Verarbeitung von IoT Streaming-Daten in AWS mit IoT-Greengrass, Kinesis, Lambda, SageMaker, CloudFormation
Apache Spark, Datawarehouse / DWH, ETL, Informatica, Oracle Database, SQL, Python, Amazon Web Services (AWS)
4/2017 – 12/2018
Tätigkeitsbeschreibung
- German-Russian Institute for Advanced Technologies in Kasan
- Stellvertretender deutscher Institutsdirektor
- Durchführung von Praktika (Siemens STEP7, Kawasaki-Roboter, Datenanalyse mit Python)
- Erstellung von Automatisierungs- und Analysetools mit Python und VBA
Statistikauswertung der Bewerber sowie des Lehrbetriebes am Institut mit Python
Pandas DataFrame, Python
8/2014 – 3/2016
Tätigkeitsbeschreibung
- Koordination und Durchführung von lntegrationstest an Hardware-in-the-Loop-Prüfständen (HiL) für Fahrassistenzfunktionen
- Auswertung der Testergebnisse und Fehlerbildanalyse sowie Abstimmung zu erkannten Auffälligkeiten mit internen Fachabteilungen und Zulieferern
Testmanagement / Testkoordination (IT)
2/2013 – 4/2014
Tätigkeitsbeschreibung
- Prozessingenieur im Bereich Aluminium-Kaltwalzen
- Prozessdaten- und Schwingungsanalysen
- Implementierung und Betreuung eines Chatter- und Condition Monitoring Systems
Prozessoptimierung
Ausbildung
Otto-von-Guericke Universität
Magdeburg
Persönliche Daten
- Deutsch (Muttersprache)
- Englisch (Fließend)
- Russisch (Fließend)
- Europäische Union
Kontaktdaten
Nur registrierte PREMIUM-Mitglieder von freelance.de können Kontaktdaten einsehen.
Jetzt Mitglied werden