Intermediate Data Engineer (Sozialversicherungspflichtig angestellt) (m/w/d)

Ihre Aufgaben

• Konzeption, Implementierung und Betrieb einer GenAI-/RAG-basierten Lösung für „Chat with your Data“ unter Nutzung geeigneter AWS-Cloud-Services sowie bestehender Daten- und Analytics-Plattformen des Auftraggebers.
• Entwicklung einer technischen Zielarchitektur für Datenanbindung, semantische Suche, Embeddings, Retrieval-Augmented Generation, Quellenbezug, Antwortgenerierung, Berechtigungskonzepte und sichere Nutzung von Unternehmensdaten.
• Integration strukturierter und unstrukturierter Datenquellen, einschließlich Analyse geeigneter Datenquellen, Datenanbindung, Indexierung, Metadatenmanagement, semantischer Suche und Qualitätssicherung der bereitgestellten Inhalte.
• Umsetzung und Automatisierung der benötigten Infrastruktur mittels Infrastructure as Code und geeigneter Cloud-/DevOps-Werkzeuge, insbesondere im Kontext von AWS, CI/CD-Pipelines und GitOps-orientierten Betriebsmodellen.
• Entwicklung, Test und Betrieb von CI/CD-Pipelines für die Bereitstellung, Versionierung, Qualitätssicherung und Weiterentwicklung der Daten-, Plattform- und KI-Komponenten.
• Berücksichtigung von IT-Sicherheit, Datenschutz, Responsible AI, Zugriffskonzepten und Governance-Anforderungen des Auftraggebers bei Architektur, Implementierung und Betrieb der Lösung.
• Evaluation der Antwortqualität und fachlichen Nutzbarkeit des Chat-with-your-Data-Agents, insbesondere im Hinblick auf Quellenbezug, Nachvollziehbarkeit, Halluzinationsvermeidung, Prompt Engineering, Retrieval-Qualität und Nutzerfeedback.
• Projektmanagement- und Abstimmungsleistungen im agilen Projektkontext, insbesondere Planung, Priorisierung, Dokumentation und Nachverfolgung von Anforderungen, Aufgaben, Risiken, Abhängigkeiten und Ergebnissen.
• Erstellung und Pflege fachlicher und technischer Dokumentation zu Architektur, Datenquellen, Datenanbindung, Retrieval-Logik, Prompt-Konzepten, Berechtigungen, Sicherheitsaspekten, Betriebsmodellen und Nutzungsvorgaben.