Senior Consultant Data Warehouse / BI

freiberufler Senior Consultant Data Warehouse / BI auf freelance.de
Verfügbarkeit einsehen
Umkreis (bis 200 km)
de  |  en
100€/Stunde
22307 Hamburg
14.10.2019

Kurzvorstellung

Ich bin Experte für Datenintegration / BI, ich mag es Prozess zu vereinfachen, zu standardisieren und zu automatisieren. Hierfür setzte ich sehr gerne Open Source Lösungen ein.

Ich biete

IT, Entwicklung
  • Perl
  • Microsoft SQL-Server (MS SQL)
  • Pentaho Open-Source-BI-Suite
  • Transact-SQL (T-SQL)
  • Microsoft SQL Server Integration Services (SSIS)
  • ETL
  • mySQL
  • Datenbankentwicklung
  • SQL
  • Bash (Shell)
  • Business Intelligence (BI)
  • Datawarehouse / DWH
  • Python
  • MariaDB
  • Git

Projekt‐ & Berufserfahrung

Consultant, DWH-Entwickler
Kundenname anonymisiert, Unterföhring
4/2019 – 12/2019 (9 Monate)
Medienbranche
Tätigkeitszeitraum

4/2019 – 12/2019

Tätigkeitsbeschreibung

Aufbau eines DWHs innerhalb einer Hadoop-Umgebung
- Anforderungsanalyse
- ETL-Entwicklung mit einem Spark-Framework und Exasol
- Verbesserung der Deploymentprozesse
- Modellierung mit DataVault 2.0

Eingesetzte Qualifikationen

Apache Hadoop, Big Data, Business Intelligence (BI), Datawarehouse / DWH, Datenbankentwicklung, RDB / RDBMS, SQL, Continuous Delivery (CDE), Ubuntu, Bash (Shell), Python


Consultant, DWH-Entwickler
Kundenname anonymisiert, Hamburg
9/2017 – 10/2018 (1 Jahr, 2 Monate)
Handel
Tätigkeitszeitraum

9/2017 – 10/2018

Tätigkeitsbeschreibung

Aufbau eines KPI-Data-Mart innerhalb eines Streaming Analytics Framework
- Programmierung von ETL-Prozessen auf Basis von Talend und Exasol
- Umsetzung von Anforderungen der EU-DSGVO
- Entwicklung automatischer Robottests
- Entwicklung Metadaten getriebener Datenintegrationsprozesse
- Entwicklung und Optimierung von Exasol spezifischen SQL Skripten
- Modellierung mit DataVault 2.0

Eingesetzte Qualifikationen

Business Intelligence (BI), Datawarehouse / DWH, Datenbankentwicklung, RDB / RDBMS, SQL, Continuous Delivery (CDE), Python


Consultant, DWH-Entwickler
Kundenname anonymisiert, Hamburg
7/2017 – offen (2 Jahre, 4 Monate)
Dienstleistungsbranche
Tätigkeitszeitraum

7/2017 – offen

Tätigkeitsbeschreibung

Weiterentwicklung eines hochperformanten Neartime-DWH-Systems
- Programmierung der Softwareanwendung für die Integration weitere Datenquellen in das DWH
- Weiterentwicklung und Optimierung der bestehenden Software zur Datenverarbeitung
- Beratung zu den Themen Import-Framework und Datafeed Generator

Eingesetzte Qualifikationen

Pentaho Open-Source-BI-Suite, Datenbankentwicklung, ETL, Microsoft SQL-Server (MS SQL), mySQL, SQL, Perl


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Hamburg
5/2014 – 7/2017 (3 Jahre, 3 Monate)
Dienstleistungsbranche
Tätigkeitszeitraum

5/2014 – 7/2017

Tätigkeitsbeschreibung

Aufbau eines hochperformanten Neartime-DWH-Systems einschließlich der Integration von mehreren tausend Datenquellen
- Weiterentwicklung und Optimierung eines über Metadaten konfigurierbaren Import-Frameworks
-Entwicklung eines Generators zur Erzeugung von DDL und Importdefinitionen auf Basis von Templates zur schnellen Integration von neuen Quellen bzw. bei Änderungen der Quellen
- Integration mehrerer tausend Quellen (DBs, CSV, Rest-Apis) in hoher Frequenz (halbstündlich) mit Hilfe des Import-Frameworks und Pentaho Dataintegration (PDI)
- Aufbau eines hochperformanten DWHs auf Basis von Exasol
- Datenbankadminstration einschließlich Rollen-Rechte-Konzept
- Aufbau Datenbasis und Datenexport für das Kampagnenmanagement mehrerer Länder

Eingesetzte Qualifikationen

Pentaho Open-Source-BI-Suite, ETL, Microsoft SQL-Server (MS SQL), mySQL, RDB / RDBMS, Ubuntu, Perl


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Berlin
1/2014 – 6/2017 (3 Jahre, 6 Monate)
Handel
Tätigkeitszeitraum

1/2014 – 6/2017

Tätigkeitsbeschreibung

Aufbau und Erweiterung einer Schnittstelle zwischen Kampagnenmanagement-Tool und verschiedenen Email Providern
- Reverse Engineering der alten Schnittstelle auf Basis von C# mit dem Zweck der Erstellung einer Anforderungsdokumentation
- Schlanke Neuimplementierung auf Basis von Perl und Sqlite mit dem Ziel
- einfacherer Konfiguration durch YAML
- höherer Performance
- schnellerer Anpassung bei Änderungen der fachlichen bzw. technischen Anforderungen
- hohe Robustheit mit geringem Pflegeaufwand • Erweiterungen der Schnittstelle
- Änderung des Ausgabeformats von XML auf CSV
- Anpassung der Kommunikation durch Wahl eines neuen Email-providers
- Leicht konfigurierbare, länderspezifische Validierung und Formatierung von Kundendaten für das Offline-Mailing

Eingesetzte Qualifikationen

Oracle Database, Ubuntu, Perl


Consultant, DWH-Entwickler
Kundenname anonymisiert, München
3/2013 – 10/2019 (6 Jahre, 8 Monate)
Handel
Tätigkeitszeitraum

3/2013 – 10/2019

Tätigkeitsbeschreibung

Support und Erweiterungen eines DWHs für Analyse und Marketing
- Support bei Produktionsproblemen
- Beratung für Weiterentwicklung
- Datenbank und ETL-Migration von SQL-Server 2008 auf 2014
- Implementierung von Change Requests auf Basis von SQL-Server, SSIS und Perl
- Anbindung von Schnittstellen mehrerer Marketingplattformen zur Salesvalierung

Eingesetzte Qualifikationen

Transact-SQL (T-SQL), Microsoft SQL Server Integration Services (SSIS), Microsoft SQL-Server (MS SQL), Perl


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Berlin
3/2013 – 1/2014 (11 Monate)
Handel
Tätigkeitszeitraum

3/2013 – 1/2014

Tätigkeitsbeschreibung

Support und Erweiterungen eines Customer Datamarts Kampagnenmanagement
- Support bei Produktionsproblemen
- Beratung für Weiterentwicklung
- Implementierung von Change Requests auf Basis von SQL-Server und SSIS

Eingesetzte Qualifikationen

Microsoft SQL Server Integration Services (SSIS), Microsoft SQL-Server (MS SQL)


DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Berlin
8/2012 – 11/2012 (4 Monate)
Handel
Tätigkeitszeitraum

8/2012 – 11/2012

Tätigkeitsbeschreibung

Aufbau eines Data Warehouse für ein E-Commerce-Online-Portal
- Aufbau eines wiederverwendbaren, über Metadaten konfigurierbaren Import-Frameworks zur Anbindung verschiedener Quelltypen an das Data Warehouse auf Basis von Perl
- Implementierung eines Google Analytics Plugins für dieses Framework
- Implementierung von ETL-Prozeduren auf Basis von Pentaho Data
Integration und Mysql
- Entwicklung und Umsetzung des Datenbank- und ETL-Deployments

Eingesetzte Qualifikationen

Pentaho Open-Source-BI-Suite, mySQL, Perl, Google Analytics


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Berlin
1/2012 – 8/2012 (8 Monate)
Handel
Tätigkeitszeitraum

1/2012 – 8/2012

Tätigkeitsbeschreibung

Konzeption und Umsetzung von standardisierten Data Warehouse Rollouts für Ventures eines international operierenden E-Commerce- Unternehmens
- Konzeption einer Venture übergreifenden standardisierten DWH Architektur
- Standardisierung von Hardware, Betriebssystem, Software, DWH- Artefakten für alle Ventures
- Konzeption und Umsetzung eines Rolloutverfahrens
- Durchführung des DWH-Rollouts für mehrere Ventures
- Konzeption und Umsetzung des Datenbankbackups für Oracle 11g
- Implementierung von einheitlichen Ladeprozesse auf Basis von Pentaho Data Integration und Oracle 11g

Eingesetzte Qualifikationen

Pentaho Open-Source-BI-Suite, Datenbankentwicklung, ETL, Oracle Database, Perl


Consultant, Projektleitung (Festanstellung)
Kundenname anonymisiert, Hannover
5/2011 – 12/2011 (8 Monate)
Telekommunikation
Tätigkeitszeitraum

5/2011 – 12/2011

Tätigkeitsbeschreibung

Planung und Umsetzung einer operativen Monitoring- und Analyseplattform für ein IVR-System auf Basis einer Open-Source-BI-Suite
- Aufbau einer neuen 3-Tier-Architektur mit virtualisierter BI-Plattform auf Basis von Pentaho und Linux bei Beachtung der strengen Sicherheitsanforderungen der produktiven IVR-Umgebung
- Umbau der bestehenden ETL-Prozesse auf Basis von SQL-Server auf Pentaho Data Integration mit einer Oracle Datenbank

Eingesetzte Qualifikationen

Pentaho Open-Source-BI-Suite, Microsoft SQL-Server (MS SQL), Red Hat Enterprise Linux (RHEL)


Consultant (Festanstellung)
Kundenname anonymisiert, Hannover
5/2010 – 4/2011 (1 Jahr)
Telekommunikation
Tätigkeitszeitraum

5/2010 – 4/2011

Tätigkeitsbeschreibung

Migration einer Systemlandschaft eines IVR-Systems auf eine neue sicherheitskonforme Umgebung
- Untersuchung der Altsysteme nach Sicherheitsrichtlinien, insbesondere der Datenbanken (MySQL und Oracle)
- Identifikation der Sicherheitslücken und Einleiten von Maßnahmen
- Entwicklung und Einführung eines einheitlichen Rollen- und
Rechtekonzept für die Datenbank
- Umsetzung der Software- und Datenbankmigration vom Oracle 9i auf die neue Oracle 11g

Eingesetzte Qualifikationen

Oracle Database


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Bonn
8/2009 – 3/2010 (8 Monate)
Telekommunikation
Tätigkeitszeitraum

8/2009 – 3/2010

Tätigkeitsbeschreibung

Weiterentwicklung eines Kampagnen-Managementsystems
- Implementierung neuer Funktionalitäten auf Basis von PL-SQL / Oracle 10g
- Verbesserung der Softwarequalität durch Einführung folgender Maßnamen:
- Programmierrichtlinien
- Detailliertes Logging
- Einführung einer Versionsverwaltung (Subversion)
- Entwicklung eines zuverlässigen Lieferverfahrens
- Analyse von Betriebsproblemen

Eingesetzte Qualifikationen

Oracle Database, Apache Subversion (SVN), PL/SQL


Consultant / DWH Entwickler (Festanstellung)
Kundenname anonymisiert, Hamburg
7/2009 – 8/2009 (2 Monate)
Medienbranche
Tätigkeitszeitraum

7/2009 – 8/2009

Tätigkeitsbeschreibung

Migration eines Data Warehouse auf ein spaltenorientiertes Datenbanksystems (EXASOL)
- Konsolidierung der Kennzahlen des bestehenden Datamarts
- Analyse der auf Basis von Pentaho Data Integration bestehenden ETL- Prozesse und Neudesign des Datamarts
- Neuimplementierung der ETL-Prozesse auf Basis des EXASOL SQL.

Eingesetzte Qualifikationen

Pentaho Open-Source-BI-Suite, RDB / RDBMS, Perl


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, Hannover
3/2008 – 6/2009 (1 Jahr, 4 Monate)
Telekommunikation
Tätigkeitszeitraum

3/2008 – 6/2009

Tätigkeitsbeschreibung

Betriebsunterstützung von Applikationen und Datenbanken im Rahmen eines IVR-Systems eines Mobilfunkbetreibers
- Betriebsunterstützung diverser Mobilfunkapplikationen
- Betriebsunterstützung der bestehenden Datenbanken (Oracle 9i)
- Planung und Umsetzung eines hochverfügbaren Real-Application-Cluster (RAC) Datenbanksystems auf Basis von Oracle 10g
- Planung der Software- und Datenbankmigration vom Altsystem auf die neue Oracle Plattform
- Second-Level-Support

Eingesetzte Qualifikationen

Oracle Database, Oracle RAC (Real Application Clusters), Bash (Shell)


Consultant, DWH-Entwickler (Festanstellung)
Orange, Lausanne
9/2007 – 2/2008 (6 Monate)
Telekommunikation
Tätigkeitszeitraum

9/2007 – 2/2008

Tätigkeitsbeschreibung

Integration von Rechnung- und Ertragsdaten der Betreibervorauswahl (Carrier Preselection) für Festnetztelefonie und ADSL in das Data Warehouse eines Mobilfunkbetreibers
- Analyse, Konzeptionierung und Spezifikation
- Design des Ziedatenmodells
- Design und Implementierung neuer ETL-Prozesse auf Basis von PL-SQL und Oracle 10g

Eingesetzte Qualifikationen

Oracle Database, Perl, PL/SQL


Consultant, DWH-Entwickler (Festanstellung)
Quelle, Fürth
7/2007 – 8/2007 (2 Monate)
Handel
Tätigkeitszeitraum

7/2007 – 8/2007

Tätigkeitsbeschreibung

Aufbau einer Datenbasis für die Kundenanalyse eines Online-Portals eines Versandhauses
- Analyse und Konzeptionierung
- Implementierung neuer ETL-Prozesse auf Basis von PL-SQL und Oracle 10g
- Konsolidierung und Performanceoptimierung bestehender ETL-Prozesse

Eingesetzte Qualifikationen

Oracle Database, PL/SQL


Consultant, DWH-Entwickler (Festanstellung)
Kundenname anonymisiert, München
9/2006 – 6/2007 (10 Monate)
Telekommunikation
Tätigkeitszeitraum

9/2006 – 6/2007

Tätigkeitsbeschreibung

Anbindung eines Data Warehouse an einen neuen System Stack
- Funktionale und technische Analyse der Quellsysteme des neuen Stacks, insbesondere des Integrationsbackbone (EAI) und des CRM-Systems
- Analyse von Geschäftsprozessen auf dem alten und neuen Stack
- Anforderungsanalyse der aktuell auf das DWH aufsetzenden Prozesse
- Analyse und Bewertung der Informationen, die der neue Stack für das DWH liefert
- Entwicklung von Zieldatenmodellen in Abstimmung mit den Fachabteilungen
- Design prototypischer ETL-Prozesse auf Basis von PL/SQL unter Oracle 9i und Perl

Eingesetzte Qualifikationen

Oracle Database, RDB / RDBMS, Perl, PL/SQL


Consultant, Produktionssteuerer (Festanstellung)
Kundenname anonymisiert, Münster
4/2006 – 9/2006 (6 Monate)
Telekommunikation
Tätigkeitszeitraum

4/2006 – 9/2006

Tätigkeitsbeschreibung

Application Management für ein Billingsystem
- Automatisierung von Installationen
- Prozessoptimierung
- Einführung einer Kommunikationsplattform und Wissensdatenbank auf Basis von TWiki
- Perl-Schulung
- Application Monitoring

Eingesetzte Qualifikationen

Linux Entwicklung, Perl


Consultant, Projektleiter, Entwickler (Festanstellung)
Kundenname anonymisiert, Darmstadt
1/2006 – 3/2006 (3 Monate)
Telekommunikation
Tätigkeitszeitraum

1/2006 – 3/2006

Tätigkeitsbeschreibung

Konzeptionierung und Implementierung einer neuen ETL-Schnittstelle zum Laden von Billingdaten in das DWH-System eine Online-Anbieters
- Projektleitung
- Analyse und Konzeptionierung
- Design des Datenmodells und der ETL-Prozesse
- Realisierung von Modell, Ladeprozessen und der Ablaufsteuerung auf Basis von Informatica PowerCenter, PL-SQL, Perl und Oracle 9i
- DV-Dokumentation

Eingesetzte Qualifikationen

Informatica, Oracle Database, Perl, PL/SQL


Consultant, Technische Leitung, Entwickler (Festanstellung)
Kundenname anonymisiert, Münster
11/2005 – 1/2006 (3 Monate)
Telekommunikation
Tätigkeitszeitraum

11/2005 – 1/2006

Tätigkeitsbeschreibung

Entwicklung eines Steuerungs- und Reporting-Tools zur Prozessoptimierung für den DSL-Resellerwechsel eines Festnetzbetreibers
- Analyse und Konzeptionierung
- Rapid Prototyping
- Technische Beratung
- Realisierung auf Basis von Perl und Oracle

Eingesetzte Qualifikationen

Oracle Database, Perl


Entwickler, Tester (Festanstellung)
Kundenname anonymisiert, Mülheim
11/2004 – 10/2005 (1 Jahr)
Telekommunikation
Tätigkeitszeitraum

11/2004 – 10/2005

Tätigkeitsbeschreibung

Entwicklung von Services im Rahmen einer SO-Architektur für einen zentralen Datenbankserver für die Vertragsdaten eines Festnetzbetreibers
- Erstellung von Fach- und Datenverarbeitungskonzepten
- Design
- Datenmodellierung
- Entwicklung auf Basis von C++, DB2 unter AIX
- Systemtest

Eingesetzte Qualifikationen

DB2, RDB / RDBMS, AIX, C++


Entwickler (Festanstellung)
Kundenname anonymisiert, Mülheim
1/2003 – 11/2004 (1 Jahr, 11 Monate)
Telekommunikation
Tätigkeitszeitraum

1/2003 – 11/2004

Tätigkeitsbeschreibung

Datenmigration aus Altsystemen in einen zentralen Datenbankserver für die Vertragsdaten eines Festnetzbetreibers
- Erstellung von Fach- und Datenverarbeitungskonzepten
- Design
- Entwicklung auf Basis von C++ unter AIX
- Überwachung des Buildprozesses unter MVS/zOS
- Systemtest unter MVS/zOS und DB2

Eingesetzte Qualifikationen

DB2, AIX, C++


Entwickler (Festanstellung)
Kundenname anonymisiert, Münster
10/2000 – 12/2002 (2 Jahre, 3 Monate)
Telekommunikation
Tätigkeitszeitraum

10/2000 – 12/2002

Tätigkeitsbeschreibung

Statistische Aufbereitung von Gesprächsdaten für das Data-Warehouse eines Mobilfunknetzbetreibers
- Spezifikation und Abstimmung der Schnittstelle zum Billingsystem
- Implementierung der ETL-Prozesse auf Basis von C, Oracle, Informatica PowerCenter
- Betreuung des Betriebes und Pflege der Konfiguration
-Testunterstützung bei der Portierung von VMS auf ein UNIX-System
• Erstellung von Fach- und Datenverarbeitungskonzepten

Eingesetzte Qualifikationen

Oracle Database, C


Entwickler
Kundenname anonymisiert, Mülheim
3/2000 – 10/2000 (8 Monate)
Telekommunikation
Tätigkeitszeitraum

3/2000 – 10/2000

Tätigkeitsbeschreibung

Erweiterung und Anpassung eines Billingsystems an den Dienst GPRS eines Mobilfunknetzbetreibers
- Realisierung auf Basis Cobol, C und Oracle unter Open VMS
- Systemtest

Eingesetzte Qualifikationen

Cobol


Wissenschaftlicher Mitarbeiter (Festanstellung)
DESY, Hamburg
3/1998 – 2/2000 (2 Jahre)
Forschung
Tätigkeitszeitraum

3/1998 – 2/2000

Tätigkeitsbeschreibung

Forschung an einem neuartigen Freie-Elektronen-Laser (FEL) im VUV- Wellenlängenbereich im Rahmen eines internationalen Großprojekts
- Planung, Entwicklung und Aufbau einer Photonenstrahl-Diagnostik
- Entwicklung einer Bildverarbeitungssoftware zur Analyse von CCD-Kameradaten auf Basis von Matlab
- 3d-Simulation der Laserstrahl-Propagation des FEL zur Verbesserung der Laserstrahlperformance
- Wissenschaftliche Publikationen
- Forschungsaufenthalte an der Dublin City University (DCU)
- Präsentationen

Eingesetzte Qualifikationen

MATLAB / Simulink


Wissenschaftlicher Mitarbeiter (Festanstellung)
Ruhr-Universität-Bochum, Bochum
5/1993 – 2/1998 (4 Jahre, 10 Monate)
Forschung und Lehre
Tätigkeitszeitraum

5/1993 – 2/1998

Tätigkeitsbeschreibung

Forschung im Bereich experimenteller Plasmaspektroskopie
- Experimentelle Forschung
- Entwicklung numerischer Auswerteprogramme auf Basis von C und Matlab
- Wissenschaftliche Publikationen
- Lehrbetrieb, Praktikumsbetreuung
- Proof on Concept eines neuen Messverfahrens an der Comision Chilena Energia Nuclear in Santiago de Chile (08/95–10/95)
- Forschungsaufenthalt am Joint European Torus (JET) in Culham (England) (11/95-12/95)
- Präsentationen

Eingesetzte Qualifikationen

C++, MATLAB / Simulink


Zertifikate

Datavault 2.0
September 2018

Prince2 ® Practitioner
Juli 2011

EXASOL Certified Database Developer
Oktober 2010

Ausbildung

Promotion in Atom und Plasmaphysik
(Dr. rer. nat)
Jahr: 1998
Ort: Bochum

Physik
(Diplom Physiker)
Jahr: 1993
Ort: Bochum

Qualifikationen

- Data Integration
- Data-Warehouse
- Automation
- Linux
- Perl
- EXASOL
- Oracle
- SQL Server
- MySQL
- SQLite
- Confluence
- Consulting
- Data Vault
- Python
- Softwareentwicklung

Über mich

Deutsch, Jahrgang 1965

· Freiberuflicher IT-Berater seit 2017, kommunikative Persönlichkeit mit hands-on Mentalität
· 11 Jahre Consulting Erfahrung im Bereich Data Warehouse / Business Intelligence, davon mehrjährige Erfahrung und Fokus auf:
- hochperformante DWHs auf Basis von MPP-In-Memory-Datenbanken im Multi-Terabyte-Bereich
- Entwicklung von performanten Ladeframeworks zur Neartime Beladung von mehreren tausenden Datenquellen
- Entwicklung von Metadatengeneratoren für eine schnelle, automatisierte Integration neuer Datenquellen
- Optimierung von Rolloutprozessen bei Quellsystemänderungen
· 6 Jahre System Engineer in den Bereichen Billing, DWH und CRM
· 4 Jahre Lehrbeauftragter an der Technische Fachhochschule Georg Agricola zu Bochum ( Bereich Elektrotechnik)
· 2 Jahre Postdoc am Deutsches Elektronen-Synchrotron (DESY) in Hamburg
· Doktorarbeit in experimenteller Plasmaphysik, Abschluss als Dr. rer. nat.
· Physikstudium an der Ruhr-Universität Bochum, Abschluss als Diplom Physiker
· In der Freizeit sportlich (Boxen, Crossfit, Laufen)

Persönliche Daten

Sprache
  • Deutsch (Muttersprache)
  • Englisch (Fließend)
Reisebereitschaft
Umkreis (bis 200 km)
Arbeitserlaubnis
  • Europäische Union
Profilaufrufe
169
Alter
54
Berufserfahrung
22 Jahre und 7 Monate (seit 03/1997)
Projektleitung
2 Jahre

Kontaktdaten

Nur registrierte PREMIUM-Mitglieder von freelance.de können Kontaktdaten einsehen.

Jetzt Mitglied werden »