Conception de protocoles de test pour les tests numériques

Toute activité de test comporte trois composantes principales, à savoir:, environnement (où les tests ont lieu), protocole (définissant quelles activités sont exécutées et comment), et métriques d'évaluation (utilisé pour évaluer les résultats des tests). Ce service concerne le deuxième élément, à savoir la conception de la procédure de test pour les systèmes numériques tels que (par exemple) les modèles d’IA ou les logiciels de vision par ordinateur. L’environnement numérique et les indicateurs d’évaluation peuvent être conçus – si nécessaire – au moyen des services S00176 et S00178.

Dans le cadre du test des solutions des clients dans les environnements numériques, ce service vise à concevoir un protocole approprié pour les tests numériques sur la base des cas d’utilisation spécifiés par le client. Les composants du protocole de test peuvent inclure:

• Sélection des ensembles de données à utiliser pour les tests

• Sélection de modèles d’IA de référence à utiliser pour les essais (si nécessaire)

• Choisir les formats de données et les normes de métadonnées 

• Définition des étapes de prétraitement et de préparation des données 

• Définition des valeurs et des plages des paramètres d'essai

• Définir les différentes phases du protocole

• Décrire les opérations à exécuter dans chaque phase

• Décrire en détail les spécificités du protocole pour assurer la reproductibilité

Les ensembles de données à utiliser pour les tests peuvent être fournis par AgrifoodTEF et/ou par le client; si rien de approprié n’est disponible, d’autres services TEF agroalimentaires peuvent être mis à profit pour collecter et/ou générer des données sur mesure.

L'équipe technique qui exécute ce service comprend des ingénieurs experts, mais peut également faire appel à des agronomes lorsque cela est nécessaire pour garantir la pertinence des essais pour le cas d'utilisation, par exemple pour déterminer la distribution des répétitions d'essais dans les plages de variation.