freelancer » Informations- und Kommunikationstechnologie » Qualitätsmanagement / Testing (IT)
freiberufler AI Agent Engineer (LLM) – Versicherungsprozesse | Python | OpenAI & LangChain | Testing & Regression auf freelance.de

AI Agent Engineer (LLM) – Versicherungsprozesse | Python | OpenAI & LangChain | Testing & Regression

zuletzt online vor wenigen Stunden
  • auf Anfrage
  • 73054 Eislingen / Fils
  • auf Anfrage
  • de  |  tr  |  en
  • 10.04.2026
  • Contract ready
Jetzt registrieren & Kontakt aufnehmen

Kurzvorstellung

AI-Agent Engineer für dialogbasierte Versicherungsprozesse: Prompt Engineering, Python-Integration, Tool-Use/Guardrails, Simulation & Regression-Tests sowie messbare Akzeptanzkriterien. 20 Jahre Versicherungspraxis; 5 Tage/Woche, remote.

Geschäftsdaten

 Freiberuflich
 Berufshaftpflichtversicherung aktiv

Qualifikationen

  • API-Entwickler2 J.
  • Aus- / Weiterbildung
  • Generative KI
  • Langchain2 J.
  • Open Source2 J.
  • Prompt Engineering2 J.
  • Qualitätsmanagement / QS / QA (IT)20 J.
  • Softwareauswahl (Evaluierung)1 J.
  • Softwaredokumentation1 J.
  • Test Management1 J.

Projekt‐ & Berufserfahrung

AI Quality / Evaluation Lead (Agent Testing & Regression)
Kundenname anonymisiert, Ebersbach an der Fils
6/2024 – offen (1 Jahr, 11 Monate)
Finanzdienstleister
Tätigkeitszeitraum

6/2024 – offen

Tätigkeitsbeschreibung

Aufbau eines Evaluation-/Testharness für LLM-Agents (Simulationen, Golden Sets, Scorecards)

Planung und Durchführung von funktionalen, Integrations- und Regressionstests inkl. adversarial Testfällen

Definition messbarer Akzeptanzkriterien (z. B. Task Success, Policy/Compliance, Escalation Rate, Format-Compliance) als Abnahmegrundlage

Eingesetzte Qualifikationen

Softwaredokumentation, Prompt Engineering, Qualitätsmanagement / QS / QA (IT), Test Management, Usability Testing, Softwareauswahl (Evaluierung), Risiko-Manager

AI Agent Engineer / Tech Lead (LLM Agents)
Kundenname anonymisiert, Ebersbach an der Fils
1/2024 – offen (2 Jahre, 4 Monate)
Finanzdienstleister
Tätigkeitszeitraum

1/2024 – offen

Tätigkeitsbeschreibung

Design und Aufbau agentenbasierter KI-Systeme für dialogbasierte Prozessautomatisierung

Prompt Engineering, Guardrails und Tool-Use/Function Calling für strukturierte, sichere Outputs

Python-Integration von APIs/Workflows; Fehlerbehandlung, Fallback-Strategien, iterative Optimierung

Eingesetzte Qualifikationen

Open Source, Langchain, Prompt Engineering, API-Entwickler, Json, XSD (XML Schema Definition), Workflows

Projektleitung / Prozess-Owner (Versicherungsprozesse) (Festanstellung)
Kundenname anonymisiert, Ebersbach an der Fils
1/2006 – 2/2026 (20 Jahre, 2 Monate)
Finanzdienstleister
Tätigkeitszeitraum

1/2006 – 2/2026

Tätigkeitsbeschreibung

Analyse und Optimierung dialogbasierter End-to-End-Prozesse (Intake → Klärfragen → Entscheidung → Dokumentation → Service)

Definition von Entscheidungslogiken, Ausnahmefällen und Eskalationspfaden (Human-in-the-Loop)

Sicherstellung von Qualität/Nachweisfähigkeit in regulierten Abläufen (Vollständigkeit, Plausibilität, Dokumentationspflicht)

Eingesetzte Qualifikationen

Qualitätsmanagement / QS / QA (IT), Prozessoptimierung, Requirement Analyse, Requirements Engineer, Versicherungen (allg.), Stakeholder-Analyse, Qualitätsdokumentation

Ausbildung

Diplom Wirtschaftsinformatik (FH)
Diplom Wirtschaftsinformatiker (FH)
AKAD Private Hochschulen
2009
Stuttgart
Versicherungskaufmann (IHK)
Ausbildung
Allianz Versicherungs AG
2003

Über mich

Ich unterstütze Unternehmen beim Aufbau und der Optimierung agentenbasierter KI-Systeme (LLM-Agents) für dialogbasierte, geschäftskritische Prozesse – insbesondere im Versicherungs- und Serviceumfeld. Schwerpunkt ist die Verbindung aus Fachlogik, technischer Umsetzung und Qualitätssicherung: Prompt Engineering, Guardrails, Tool-Use, Python-Integration (APIs/Workflows) sowie Evaluation durch Simulationen, Regressionstests und messbare Akzeptanzkriterien.

Durch langjährige Erfahrung in Versicherungsprozessen kenne ich typische Fehlerquellen in Kundendialogen (Unklarheiten, Ausnahmefälle, Dokumentationspflichten) und übersetze diese in robuste Agenten-Workflows mit klaren Entscheidungs- und Eskalationspfaden (Human-in-the-Loop). Ziel ist produktionsreife Automatisierung: nachvollziehbar, testbar, versionierbar und zuverlässig im Betrieb.

Ich arbeite strukturiert und ergebnisorientiert: Definition von KPIs und Abnahmekriterien, Aufbau eines Testharness (Golden Sets/Scorecards), kontinuierliche Optimierung anhand messbarer Qualitätskennzahlen sowie saubere Dokumentation für Stakeholder und regulierte Anforderungen.

Weitere Kenntnisse

- Anforderungsanalyse & Prozessmodellierung (dialogbasierte End-to-End-Workflows)

- Conversational Design (Intent/Slot, Klärfragen-Logik, Eskalationspfade)

- Datenaufbereitung für Dialogsysteme (Transkripte, Normalisierung, PII-Masking)

- Teststrategie: funktional, Integration, Regression, adversarial Testing

- Definition von KPIs & Akzeptanzkriterien (Scorecards, Golden Sets)

- Prompt-/Agent-Versionierung, Change-Management, Rollback-Strategien

- Monitoring/Observability (Logging, Tracing, Fehlerklassen-Katalog)

- API-Integration & Tooling (REST, Webhooks, Automations-Workflows)

- Sicherheits- & Compliance-Bewusstsein (DSGVO, Auditierbarkeit, Datenminimierung)

- Stakeholder-Management (Produkt/Engineering), strukturierte Dokumentation & Übergabe

Persönliche Daten

Sprache
  • Deutsch (Muttersprache)
  • Türkisch (Muttersprache)
  • Englisch (Fließend)
Reisebereitschaft
auf Anfrage
Arbeitserlaubnis
  • Europäische Union
Home-Office
bevorzugt
Profilaufrufe
67
Alter
47
Berufserfahrung
25 Jahre und 7 Monate (seit 09/2000)
Projektleitung
15 Jahre

Kontaktdaten

Nur registrierte PREMIUM-Mitglieder von freelance.de können Kontaktdaten einsehen.

Jetzt Mitglied werden