(Senior) AI Analyst m/w/d

Wir sind die Berater der Weltmarktführer: Hochmotivierte Expertinnen und Experten, die als erfolgreiches Team digitale End-to-End-Geschäftsprozesslösungen vorantreiben.

Gemeinsam stärken wir die Zukunft der beeindruckendsten Unternehmen der Welt aus Maschinen- und Anlagenbau, Automotive, Life Science, Pharma und Chemie, mit denen wir viel gemeinsam haben.

Als engagiertes Teammitglied kannst Du bei uns schnell Verantwortung übernehmen und über Dich hinauswachsen.

Du triffst auf ein starkes Team, das zusammenhält und wirklich etwas bewegen will.

Als (Senior) AI Analyst bist Du Teil unseres AI Teams und sorgst dafür, dass wir die Qualität, Nutzung und Wirksamkeit unserer AI-Anwendungen datenbasiert verstehen und kontinuierlich verbessern.

Du analysierst die Ergebnisse neuronaler Netze und insbesondere Large Language Models: Warum ist eine Antwort gut oder schlecht? Welche Muster, Fehlerquellen und Verbesserungspotenziale gibt es? Darüber hinaus untersuchst Du das Nutzerverhalten, entwickelst aussagekräftige KPIs und evaluierst die Qualität der zugrunde liegenden Wissensbestände.

Dabei arbeitest Du mit strukturierten und unstrukturierten Daten und übersetzt Deine Erkenntnisse gemeinsam mit AI Engineers in konkrete Verbesserungen unserer Modelle, Daten und Anwendungen.

Mit unseren AI Enablement Teams arbeitest du an der Definition und Auswertung von KPIs um die AI Adoption bei cbs zu unterstützen.

Zur Verstärkung unseres Teams suchen wir ab sofort in Heidelberg einen (Senior) AI Analyst m/w/d.

Was Dich erwartet Du analysierst und bewertest die Ergebnisse neuronaler Netze und Large Language Models und untersuchst, warum Antworten gut oder schlecht sind Du entwickelst quantitative und qualitative Evaluationskriterien, Testverfahren und Datensätze, um die Qualität von AI-Anwendungen systematisch zu messen Du analysierst das Nutzerverhalten und definierst aussagekräftige KPIs zur Nutzung, Qualität und Wirksamkeit unserer Anwendungen Du evaluierst und kuratierst Wissensbestände und stellst deren Qualität, Relevanz und Aktualität sicher Du analysierst strukturierte und unstrukturierte Daten, identifizierst Muster und leitest konkrete Handlungsempfehlungen ab Du arbeitest eng mit AI Engineers und Plattformexperten zusammen, um Deine Erkenntnisse in die Weiterentwicklung unserer Anwendungen, Daten und Wissens zu überführen Was wir uns wünschen Erfahrung in Datenanalyse, Statistik, Data Science oder einem vergleichbaren Bereich Sehr gute Kenntnisse in Python sowie in gängigen Frameworks zur Datenanalyse, beispielsweise pandas oder polars Fundierte Kenntnisse in Statistik, Datenvisualisierung sowie der Definition und Interpretation von KPIs Erfahrung mit quantitativen und qualitativen Methoden zur Evaluation von Machine-Learning- oder AI-Systemen Erfahrung im Umgang mit strukturierten und unstrukturierten Daten sowie ein gutes Verständnis für Daten- und Wissensqualität Vertrautheit mit AI-gestützter Softwareentwicklung und modernen AI-Coding-Tools Interesse an Large Language Models und die Bereitschaft, sich kontinuierlich in neue Entwicklungen im Bereich Data Science und AI einzuarbeiten Eine strukturierte und analytische Arbeitsweise sowie die Fähigkeit, komplexe Ergebnisse verständlich aufzubereiten und daraus konkrete Handlungsempfehlungen abzuleiten Für ein Senior-Profil wünschen wir uns zusätzlich Erfahrung im Aufbau übergreifender KPI- und Evaluationsframeworks Fähigkeit, komplexe Analysevorhaben eigenständig zu strukturieren und methodische Standards zu etablieren Erfahrung in der fachlichen Anleitung von Kolleginnen und Kollegen sowie in der Beratung unterschiedlicher Stakeholder Unsere