freiberufler Data-Warehouse und Datenbank Engineering auf freelance.de

Data-Warehouse und Datenbank Engineering

zuletzt online vor 6 Tagen
  • auf Anfrage
  • Deutschland
  • Weltweit
  • de  |  en
  • 21.03.2024

Kurzvorstellung

Cloud-orientierter IT-ler mit mehr als 20 Jahren Erfahrung im Bereich Data Warehouse, Data Platform und Datenbank Engineering sowie Datenbankmigration (Oracle nach Postgres)!

Qualifikationen

  • PL/SQL
  • PostgreSQL
  • Python
  • BigQuery
  • Data Engineering
  • Datawarehouse / DWH
  • Redshift
  • SQL

Projekt‐ & Berufserfahrung

Projekt-Leiter, Analytics Data Platform - (Data Mesh) (Festanstellung)
Kundenname anonymisiert, Berlin
1/2021 – 3/2024 (3 Jahre, 3 Monate)
IT & Entwicklung
Tätigkeitszeitraum

1/2021 – 3/2024

Tätigkeitsbeschreibung

Meine Rolle in dieser Position bestand darin, eine globale Datenplattform basierend auf Data-Mesh-Prinzipien aufzubauen und in Betrieb nehmen. Innerhalb kürzester Zeit wurde diese Self-Service-BI-Plattform zur ultimativen Technologielösung für rund 40 Unternehmen unter dem Dach von einem börsennotierten Unternehmen. Mehr als Tausende von Data Engineers, Analysten und Data-Scientists nutzen bereits diese Plattform in ihrem täglichen Betrieb. Mit einem hochqualifizierten Team von 16 Daten-/Software Ingenieuren, unter meiner Leitung, wurde eine Vision zur Wirklichkeit.

Eingesetzte Qualifikationen

Business Intelligence (BI), Datawarehouse / DWH, Google Cloud, Python, SQL

Projekt-Leiter, Datawarehouse (DWH) (Festanstellung)
Kundenname anonymisiert, Berlin
9/2015 – 12/2020 (5 Jahre, 4 Monate)
IT & Entwicklung
Tätigkeitszeitraum

9/2015 – 12/2020

Tätigkeitsbeschreibung

Meine Aufgabe in dieser Position bestand darin, ein Team aufzubauen und eine Data-Warehouse-Lösung für ein großes börsennotierter Unternehmen. Mehrere tausend Pipelines laden, transformieren und bereiten täglich Petabytes an Daten in hoher Qualität und pünktlich für die Datenanalyse auf.

Eingesetzte Qualifikationen

Amazon Web Services (AWS), Bash (Shell), Datawarehouse / DWH, ETL, Python, SQL

technische Beratung bei der DB Migration von Oracle nach PostgreSQL
Kundenname anonymisiert, Berlin
6/2014 – 7/2014 (2 Monate)
Banken
Tätigkeitszeitraum

6/2014 – 7/2014

Tätigkeitsbeschreibung

Begleitung der Migration von Oracle nach PostgreSQL beim Payment Provider aus Berlin
- Hilfe bei der Ausarbeitung eines Migrationsplanes
- die Schulung der Mitarbeitern in Bezug auf die Umstellung auf PostgreSQL für Entwickler
- die Aufzeichnung der Wege für Backup/Recovery, Point in Time Recovery, Switch und Failover Szenarios für Administratoren

Eingesetzte Qualifikationen

Oracle Database, PostgreSQL

Database Architect (PostgreSQL)
Kundenname anonymisiert, Berlin
6/2009 – 9/2014 (5 Jahre, 4 Monate)
Internetdienstanbieter
Tätigkeitszeitraum

6/2009 – 9/2014

Tätigkeitsbeschreibung

- die Planung, Steuerung und Abstimmung der Datenbankentwicklung mit dem Produktmanagement-Team
- die Konzeption, Aufbau, Entwicklung der folgenden Themenbereiche:
- Datenbankentwicklung(Tabellen, Indexe, Trigger, etc.)
- Einführung der Datenbanktrennung nach Ländern für bessere Skalierung (Datenbank Sharding)
- Datenbankspezifische Applikationsentwicklung(Stored Procedures)
- Konzeption und Aufbau eines Payment-System nach dem Abo-Modell-Prinzip, Preissegmentierung, Ratenzahlung, Inkasso
- Data-Warehouse: ETL, Synchronisation verschiedene Quelldaten, Aggregation (Datenverdichtung)
- Entwicklung des Matchingsalgorithmus
- Entwicklung eines Web Tracking System
- die Konzeption, Aufbau, Administration der
PostgresQL in einer 24/7 Umgebung mit mehr als 70 DB Instanzen
- Ausarbeitung von Failover Strategien, Point in Time Recovery
- die ständige Schulung der Teammitglieder in Praxisorientierten Datenbankthemen
- Datenbank Performance Optimierung sowie SQL Tuning
- Datenbereinigung

Eingesetzte Qualifikationen

Datawarehouse / DWH, SQL, PostgreSQL, Datenbankadministration, Datenbankentwicklung, PL/SQL, Back up / Recovery, Schulung / Training (IT), Konzeption (IT)

Database Engineer (Oracle, PostgreSQL)
Kundenname anonymisiert, Berlin
1/2006 – 5/2009 (3 Jahre, 5 Monate)
Bauwirtschaft, Anlagen- und Schiffbau
Tätigkeitszeitraum

1/2006 – 5/2009

Tätigkeitsbeschreibung

- die Datenbankentwicklung SQL PL/SQL, Tabellennormalisierung, Performance Optimierung (SQL), Datenbankbereinigung
- eine Migration des sehr komplexen Datenbankschemas von mehreren Tausende Dynamisch erstellte Tabellen von PostgresQL nach Oracle. Dabei mussten auch Daten in erheblichem Umfang migriert werden.
- die Datenbankadministration mehrerer Kundeninstallationen hinsichtlich Performance und Datenintegrität. Der Datenbankgrössen lagen dabei teilweise im Terabyte Bereich.
die Implementierung einer Datenbankbasierte rotierende Sessionverwaltungssystem
- die Implementierung und Migration eines GUID global eindeutigen primary-key Verfahrens zum Austausch von Stammdaten zwischen verschiedenen Datenbank-Installationen des Produktes
- die Recherche, Implementierung und Projektleitung einer Volltextfunktion mit speziellen Anforderungen seitens des Kunden. Dabei galt es dynamische Zugriffsberechtigungen auf Dokumente zu berücksichtigen.
- die Erstellung von Shell-Verwaltungsskripten

- Oracle 10G
- PostgreSQL 8.2
- Erstellung von PL/SQL und PG-PLSQL Skripten, Prozeduren, Packages, Tabellen, Views, Snapshots, Indexen, Triggers, Sequenzen
- Tabellen, Views, Snapshots, Indexe, Trigger, Sequenzen
- Dump, Export / Import
- Datenbereinigung

Eingesetzte Qualifikationen

Oracle Database, SQL, PostgreSQL, Datenbankadministration, Datenbankentwicklung, Red Hat Enterprise Linux (RHEL), Perl, PL/SQL, Bash (Shell)

Oracle DBA
Kundenname anonymisiert, Berlin
6/2004 – 12/2005 (1 Jahr, 7 Monate)
Internetanbieter
Tätigkeitszeitraum

6/2004 – 12/2005

Tätigkeitsbeschreibung

- die Erstellung von PL/SQL Skripten, Prozeduren, Packages, Tabellen, Views, Snapshots, Indexen, Triggers, Sequenzen
- die Ausarbeitung der Features in Zusammenarbeit mit anderen Entwicklern
- die Datenmigrationen und Bereinigungen
- die Erstellung eines Reportingsystem
- die Zusammenlegung zwei existierende Paymentsysteme miteinander für bessere Wartbarkeit
- die SQL Performance Optimierung
- Oracle Datenbankadministration
- die Datenbank Optimierung
- Export/Import, Monitoring
- Oracle Datenbankinstallationen, Backup/Recovery
- das Storage Management

Eingesetzte Qualifikationen

Oracle (allg.), SQL, Datenbankadministration, PL/SQL, Storage, Back up / Recovery

PL/ SQL Programmierer
Kundenname anonymisiert, Potsdam
9/2001 – 12/2002 (1 Jahr, 4 Monate)
Telekommunikation
Tätigkeitszeitraum

9/2001 – 12/2002

Tätigkeitsbeschreibung

- Schnittstellenprogrammierung für Oracle Database 8i
- Erstellung von PL/SQL Skripten, Prozeduren, Packages, Tabellen, Views, Snapshots, Indexen, Triggers, Sequenzen
- DB Export / Import
- Datenbereinigung

Eingesetzte Qualifikationen

Oracle Database, SQL, PL/SQL, SQL*Plus, Bash (Shell)

Ausbildung

Informatik-Betriebswirt (VWA)
Ausbildung
2001
Berlin

Über mich

Ich bin ein Cloud-orientierter IT-ler mit mehr als 20 Jahren Erfahrung im Bereich Data -Engineering/Warehouse, Data Platform sowie Datenbankmigration, was auch meine größte Leidenschaft ist.

Mein Fokus liegt bei:

- Unterstützung beim Aufbau eines Data Warehouse: von der Konzepterstellung bis zur Umsetzung und Inbetriebnahme.
- Unterstützung bei der Migration von Oracle nach PostgresQL.
- Praktische Kenntnisse mit Data Warehouse-Lösungen wie BigQuery und Redshift
- Langjährige praktische Erfahrung beim Aufbau der Data Platform in der Cloud, sowie On-Premise, von der ersten Ist-Analyse bis zur Konzepterstellung und Umsetzung.
- Tiefes Verständnis der Data-Warehouse-Konzepten wie Data Mesh.
- Datenbank-/Data-Warehouse: Datenmodellierung/-Design, Programmierung und Performance-Optimierung.
- Expertenwissen in SQL und PL/SQL.
- Tiefes Verständnis des ETL (ELT)-Prozesses und der Umsetzung von Kundenanforderungen mit Python.
- Langjährige praktische Erfahrung mit der PostgresQL-Datenbank unter hoher Betriebslast.

Weitere Kenntnisse

BigQuery, Redshift, Oracle, PostgresQL, SQL, PL/SQL, Python, Bash, Airflow, Jenkins, Git

Persönliche Daten

Sprache
  • Deutsch (Muttersprache)
  • Englisch (Fließend)
Reisebereitschaft
Weltweit
Arbeitserlaubnis
  • Europäische Union
Home-Office
bevorzugt
Profilaufrufe
1697
Berufserfahrung
23 Jahre und 2 Monate (seit 01/2001)
Projektleitung
12 Jahre

Kontaktdaten

Nur registrierte PREMIUM-Mitglieder von freelance.de können Kontaktdaten einsehen.

Jetzt Mitglied werden