Ontwerp van testprotocollen voor digitaal testen

Elke testactiviteit omvat drie hoofdcomponenten, d.w.z., milieu (waar de tests plaatsvinden), protocol (welke activiteiten worden uitgevoerd en hoe), en evaluatiemaatstaven (gebruikt om de resultaten van de tests te beoordelen). Deze dienst betreft het tweede element, namelijk het ontwerp van de testprocedure voor digitale systemen zoals (bijvoorbeeld) AI-modellen of computer vision software. De digitale omgeving en de evaluatiemaatstaven kunnen – indien nodig – worden ontworpen via de diensten S00176 en S00178.

In het kader van het testen van de oplossingen van klanten in digitale omgevingen is deze dienst gericht op het ontwerpen van een geschikt protocol voor digitaal testen op basis van de door de klant gespecificeerde use cases. De onderdelen van het testprotocol kunnen het volgende omvatten:

• Selectie van de voor de tests te gebruiken datasets

• Selectie van referentie-AI-modellen die moeten worden gebruikt voor tests (indien nodig)

• Kiezen van dataformaten en metadatastandaarden 

• Gegevensvoorbewerkings- en -voorbereidingsstappen definiëren 

• Bepaling van de waarden en het bereik van de testparameters

• Bepaling van de verschillende fasen van het protocol

• Overzicht van de in elke fase uit te voeren werkzaamheden

• Grondige beschrijving van de protocolspecificaties om reproduceerbaarheid te waarborgen

Datasets die voor het testen worden gebruikt, kunnen worden verstrekt door agrifoodTEF en/of door de klant; als er niets geschikts beschikbaar is, kunnen andere agrifoodTEF-diensten worden gebruikt om op maat gesneden gegevens te verzamelen en/of te genereren.

Het technische team dat deze dienst uitvoert, bestaat uit deskundige ingenieurs, maar kan ook agronomen betrekken wanneer dit nodig is om de relevantie van de tests voor de use case te waarborgen, bijvoorbeeld om de verdeling van testherhalingen over de variatiebereiken te bepalen.