Évaluation et vérification des modèles d’IA

Ce service s'adresse aux clients qui développent ou utilisent des systèmes d'IA dans leurs activités commerciales et qui ont besoin d'assistance pour tester et évaluer ces systèmes. Les modèles d'IA peuvent être développés par le client, open source, ou développés par un tiers. Service S00331 peut également fournir des conseils techniques et des recommandations aux clients pour se conformer à la réglementation de l'UE AI-Act. Le service s’applique à tous les systèmes et tâches d’IA pertinents pour le secteur agricole. Les systèmes d'IA pour le contrôle robotique, le contrôle par drone et d'autres systèmes de contrôle où des méthodes formelles peuvent être utilisées en conjonction avec des tests traditionnels sont particulièrement pertinents. L'étape de formalisation des exigences est réalisée de manière itérative en étroite collaboration avec le client. Ces derniers peuvent fournir leur propre ensemble d’exigences, RISE suggérant des exigences supplémentaires fondées sur la législation de l’UE sur l’IA. Le test et la vérification des exigences sont effectués par RISE et affinés à la suite des commentaires des clients. Le cas échéant, une assistance et des conseils sur la manière de recycler les modèles d’IA pour les aligner sur les exigences peuvent également être fournis. 

Logistique: • La formulation des exigences à tester est un processus itératif entre RISE et le client.• Le test des exigences est principalement effectué par RISE, les commentaires du client étant utilisés pour affiner et reformuler les exigences en cas de besoin. • Pour l’amélioration du modèle, RISE peut fournir des conseils sur la manière dont le système d’IA peut être amélioré pour satisfaire aux exigences données, suivis d’une autre série d’essais des exigences. Délai de livraison: Le service est disponible tout au long de l'année, assurant un soutien d'accès au besoin. Durée: L'exécution du service peut s'étendre sur plusieurs semaines, en fonction de la complexité des tests. Lieu: Le service peut être exécuté à distance ou sur site, en fonction des préférences du client et de la nature des tests. Exigences du client: • Pour la fourniture du service, l'accès aux paramètres du modèle doit être accordé. L'accès aux seuls modèles binaires ou cryptés ne sera suffisant que pour la réalisation de tests simples.  • L’accès aux ensembles de données pertinents n’est généralement pas imposé, mais peut être nécessaire pour évaluer des exigences spécifiques. • Avant de commencer les essais, il convient de préparer et d'approuver une PM détaillant les paramètres d'installation de l'essai. • Tout accord de non-divulgation doit être en place avant la fourniture du service. Éléments livrables: • Réalisation: Un rapport de vérification et d'évaluation des résultats sera fourni. Les résultats seront également présentés lors d'une réunion d'examen final. 

Le service peut être adapté aux besoins spécifiques du client. Le parcours d'évaluation commence par une réunion conjointe où le client discute de différentes alternatives avec une équipe technique de l'agroalimentaireTEF, complétée par des experts du domaine de RISE et des membres de l'équipe de support client. Une feuille de route pour le service est établie, et le service peut commencer.