Indsamling af testdata under digital testning

En af de vigtigste aktiviteter i forbindelse med digital testning er indsamling af data om udviklingen og det endelige resultat af testene. Sådanne data gør det muligt for kunden eller — om nødvendigt — agrifoodTEF at evaluere systemets ydeevne (via service S00184). Denne tjeneste forvalter indsamlingen af data, der er relevante for den evaluering af ydeevnen, der foretages under testene af både det system, der testes, og det beregningsmiljø, hvor testene finder sted.

Eksempler på indsamlede data omfatter oplysninger, der er produceret i et virtuelt miljø for at simulere indsamling af sensordata i et fysisk miljø statistikker om AI-modellens ydeevne i prøvnings- og ibrugtagningsfasen (f.eks. optaget hukommelse, antal parametre, der kan trænes, tab af træning/optimering osv.) specifikke etiketter og anmærkninger, der skal anvendes som grundsandhed til evaluering af systemet og systemets output, når det udsættes for en række prøvningsbetingelser.  

Det minimum af data, der skal indsamles, defineres af de evalueringsparametre, som brugeren har valgt (enten alene eller med agrifoodTEF-støtte via service S00178) til at behandle dem. Generelt udvælger agrifoodTEF sammen med kunden et større sæt data med et minimum for at give et bedre overblik over systemets ydeevne og for at gøre det muligt at anvende andre parametre i fremtiden, hvis det er nødvendigt.

Som et output af tjenesten giver vi ud over de rådata også kunden dokumentation, der beskriver logførte funktioner og betingelser for testmiljøet på testtidspunktet samt eventuelle parameterværdier, variationsområder og specifikationer, der kræves til reproducerbarhedsformål.