Bewertung und Verifizierung von KI-Modellen

Dieser Service richtet sich an Kunden, die KI-Systeme in ihren Geschäftsaktivitäten entwickeln oder einsetzen und Unterstützung beim Testen und Bewerten solcher Systeme benötigen. Die KI-Modelle können vom Kunden, Open Source oder von einem Dritten entwickelt werden. Service S00331 kann Kunden auch technische Beratung und Empfehlungen zur Einhaltung der EU-Verordnungen zum KI-Gesetz geben. Der Dienst gilt für alle KI-Systeme und -Aufgaben, die für den Agrarsektor relevant sind. Von besonderer Bedeutung sind KI-Systeme für die Robotersteuerung, Drohnensteuerung und andere Steuerungssysteme, bei denen formale Methoden in Verbindung mit traditionellen Tests verwendet werden können. Die Anforderungsformalisierung erfolgt iterativ in enger Zusammenarbeit mit dem Kunden. Letztere können eigene Anforderungen stellen, wobei RISE zusätzliche Anforderungen auf der Grundlage des EU-KI-Gesetzes vorschlägt. Anforderungstests und -überprüfungen werden von RISE durchgeführt und nach Kundenfeedback weiter verfeinert. Gegebenenfalls können auch Unterstützung und Beratung bei der Umschulung von KI-Modellen zur Anpassung an die Anforderungen geleistet werden. 

Logistik: • Die Formulierung der zu prüfenden Anforderungen ist ein iterativer Prozess zwischen RISE und dem Kunden.• Die Anforderungsprüfung wird hauptsächlich von RISE durchgeführt, wobei das Feedback des Kunden verwendet wird, um die Anforderungen bei Bedarf zu verfeinern und neu zu formulieren. • Zur Modellverbesserung kann RISE Ratschläge geben, wie das KI-System verbessert werden kann, um die gegebenen Anforderungen zu erfüllen, gefolgt von einer weiteren Runde von Anforderungsprüfungen. Lieferfrist: Der Service ist das ganze Jahr über verfügbar und bietet bei Bedarf Zugriffsunterstützung. Dauer: Die Serviceausführung kann je nach Komplexität der Tests mehrere Wochen dauern. Ort: Je nach Kundenwunsch und Art der Prüfung kann der Dienst aus der Ferne oder vor Ort ausgeführt werden. Kundenanforderungen: • Für die Erbringung der Dienstleistung muss der Zugriff auf die Modellparameter gewährt werden. Der Zugriff auf nur binäre oder verschlüsselte Modelle wird nur für die Durchführung einfacher Tests ausreichen.  • Der Zugang zu relevanten Datensätzen ist in der Regel nicht vorgeschrieben, kann aber für die Bewertung spezifischer Anforderungen erforderlich sein. • Vor Beginn der Tests muss eine PM mit detaillierten Testaufbauüberlegungen erstellt und genehmigt werden. • Alle Geheimhaltungsvereinbarungen müssen vor der Erbringung der Dienstleistung bestehen. Leistungen: • Ausgabe: Es wird ein Überprüfungs- und Bewertungsbericht über die Ergebnisse vorgelegt. Die Ergebnisse werden auch in einer abschließenden Überprüfungssitzung vorgestellt. 

Der Service kann an spezifische Kundenbedürfnisse angepasst werden. Die Bewertungsreise beginnt mit einem gemeinsamen Treffen, bei dem der Kunde verschiedene Alternativen mit einem technischen Team von agrifoodTEF diskutiert, ergänzt durch Domain-Experten von RISE und Mitglieder des Kundensupport-Teams. Es wird eine Roadmap für den Dienst erstellt, und der Dienst kann beginnen.