inovex GmbH
Senior Software Engineer Python/AI (m/w/x)
Vollzeitmit HomeofficeSenior
Karlsruhe
Neuer Job?Nejo!
Dein persönlicher KI-Karriere-Agent
Nejo KI-Zusammenfassung
Durchführung von Tests für Large Language Models (LLMs) und Analyse der Modellperformance in MCP-Server-Architekturen. Mehrjährige Erfahrung mit LLMs und LLM-Tests erforderlich. Mobiles Arbeiten und JobRad.
Deine Match-Analyse
von deinem Karriere-Agenten
Warum dieser Job zu dir passt
Mögliche Lücken
Tipps für deine Bewerbung
Anforderungen
- Mehrjährige Erfahrung mit Large Language Models (GPT-basierte Modelle, Open-Source-LLMs)
- Fundierte Erfahrung in LLM-Tests (Functional, Prompt-Evaluation, Regression, Performance)
- Nachweisliche Erfahrung in Tool-Integration in MCP-Server-Umgebungen oder vergleichbaren KI-/Agenten-Architekturen
- Sehr gutes Verständnis von API-Schnittstellen, Service-Integration und Client-Server-Architekturen
- Erfahrung mit KI-Pipeline- oder Orchestrierungs-Ansätzen
- Kenntnisse in Testmethoden, Qualitätssicherung und technischer Dokumentation im KI-Kontext
- Sehr gute Programmierkenntnisse (z.B. Python)
- Erfahrung mit Tool-Anbindung, Plugin- oder Agent-Mechanismen für LLMs
- Idealerweise Kenntnisse in Prompt Engineering, RAG und Evaluationstechniken
- Sicherer Umgang mit Entwicklungs- und Kollaborationstools
- Verständnis moderner KI-Infrastrukturen (Cloud, Container, Server-basiert von Vorteil)
- Analytische und strukturierte Arbeitsweise
- Hohe Lösungs- und Ergebnisorientierung
- Selbstständiges Arbeiten und ausgeprägte Teamfähigkeit
- Technische Neugier und hohe Lernbereitschaft im KI-Umfeld
- Sehr gute Kommunikationsfähigkeit (technisch und nicht-technisch)
- Fließende Deutschkenntnisse
Aufgaben
- Tests für Large Language Models (LLMs) durchführen, planen und dokumentieren
- Modellperformance (Qualität, Robustheit, Halluzinationen, Bias, Antwortkonsistenz) analysieren, bewerten und optimieren
- KI-Tools innerhalb einer MCP-Server-Architektur integrieren, konfigurieren und validieren
- Bei der Anbindung externer Services und Tools (z. B. Search, Retrieval, APIs) an LLM-basierte Systeme unterstützen
- An der Weiterentwicklung von KI-Infrastrukturen, Toolchains und Testframeworks mitarbeiten
- Eng mit Entwicklung, Architektur, Produktmanagement und Qualitätssicherung zusammenarbeiten
- Testergebnisse, Schnittstellen und technische Konzepte dokumentieren
- Optimierungs- und Automatisierungspotenziale im KI-Umfeld identifizieren
Berufserfahrung
ca. 4 - 6 Jahre
Ausbildung
Abgeschlossene BerufsausbildungODER
Bachelor-AbschlussODER
Master-Abschluss
Sprachen
Deutsch – verhandlungssicher
Tools & Technologien
Large Language Models (LLMs)GPT-basierte ModelleOpen-Source-LLMsPythonAPI-SchnittstellenMCP-Server-UmgebungenKI-/Agenten-ArchitekturenKI-PipelineCloud-UmgebungenContainer-UmgebungenServer-basierte UmgebungenPrompt EngineeringRetrieval-Augmented Generation (RAG)Entwicklungs- und Kollaborationstools
Benefits
Flexibles Arbeiten
- Mobiles Arbeiten
Mitarbeiterrabatte
- Corporate Benefits
Sonstige Vorteile
- JobRad
Betriebliche Altersvorsorge
- Betriebliche Altersvorsorge
- BU-Versicherung
Sonstige Zulagen
- Weihnachtsgeld
Parkplatz & Pendelvorteile
- Öffentliche Verkehrsanbindung
Von Nejo automatisch aufbereitet
Nejo hat diesen Job automatisch von der Website des Unternehmens BERTRANDT AG erfasst und die Informationen auf Nejo mit Hilfe von KI für dich aufbereitet. Trotz sorgfältiger Analyse können einzelne Informationen unvollständig oder ungenau sein. Bitte prüfe immer alle Angaben in der Originalanzeige! Inhalte und Urheberrechte der Originalanzeige liegen beim ausschreibenden Unternehmen.
Zur Originalanzeige bei BERTRANDT AGÜber das Unternehmen
BE
EngineeringKarlsruhe
Das Unternehmen ist ein eigenständiger und internationaler Engineering Dienstleister mit langjähriger Expertise, der technologische Lösungen entlang der gesamten Wertschöpfungskette schafft und sich mit Trendthemen wie Digitalisierung, E-Mobilität und Autonomen Systemen beschäftigt.
bertrandt.comWie gut ist dein Lebenslauf?
Nejo bewertet ihn, und bringt ihn danach gemeinsam mit dir in Bestform.
Du hast noch keinen Lebenslauf?
Noch nicht perfekt?
- ExxetaAI Engineer - Integration Architecture (m/w/x)Vollzeitmit HomeofficeSeniorKarlsruhe, Stuttgart
- prenode GmbHCloud Data & MLOps Senior Engineer (m/w/x)Vollzeitmit HomeofficeSeniorKarlsruhe
- GFT Technologies SESenior AI Specialist (m/w/x)Vollzeitmit HomeofficeSeniorEschborn, St. Georgen im Schwarzwald, Konstanz, Stuttgart, Karlsruhe, Bonn
- CapgeminiAI Platform Engineer (m/w/x)Vollzeit/Teilzeitmit HomeofficeBerufserfahrenBerlin, Hamburg, München, Köln, Frankfurt am Main, Stuttgart, Dortmund, Hannover, Nürnberg, Karlsruhe