Een van de belangrijkste activiteiten tijdens digitale tests is het verzamelen van gegevens over de voortgang en het eindresultaat van de tests. Dergelijke gegevens maken de evaluatie van de systeemprestaties door de klant of, indien nodig, door agrifoodTEF (via Service S00184) mogelijk. Deze dienst beheert de verzameling van gegevens die relevant zijn voor de prestatie-evaluatie die tijdens de tests wordt geproduceerd door zowel het te testen systeem als de computeromgeving waar de tests plaatsvinden.
Voorbeelden van verzamelde gegevens zijn informatie die in een virtuele omgeving wordt geproduceerd om de verzameling van sensorgegevens in een fysieke omgeving te simuleren; statistieken over de prestaties van AI-modellen in de test- en uitrolfase (bv. bezet geheugen, aantal trainbare parameters, verlies van opleiding/optimalisatie enz.); specifieke etiketten en aantekeningen die moeten worden gebruikt als basiswaarheid voor de evaluatie van het systeem; en systeemoutput wanneer onderworpen aan een waaier van testvoorwaarden.
De minimumreeks gegevens die moet worden verzameld, wordt bepaald door de evaluatiemaatstaven die de gebruiker heeft gekozen (alleen of met agrifoodTEF-ondersteuning, via Service S00178) om ze te verwerken; over het algemeen kiest agrifoodTEF samen met de klant een grotere reeks gegevens wrt het minimum om een rijker beeld te geven van de prestaties van het systeem en om zo nodig in de toekomst andere maatstaven toe te passen.
Als output van de service bieden we, naast de ruwe gegevens, de klant ook documentatie waarin de geregistreerde functies en omstandigheden van de testomgeving op het moment van testen worden beschreven, evenals alle parameterwaarden, variatiebereiken en specificaties die nodig zijn voor reproduceerbaarheidsdoeleinden.
Hoe kan de dienst u helpen?
Bij het uitvoeren van digitale tests waarbij gebruik wordt gemaakt van de computationele middelen die door agrifoodTEF worden verstrekt, vereist het verzamelen van zinvolle gegevens diepgaande kennis over het soort infrastructuur dat voor de tests wordt gebruikt en over de specifieke kenmerken van de uitvoering van agrifoodTEF. Deze service helpt klanten de vereiste gegevens te verkrijgen zonder de interne competenties op te bouwen die nodig zijn om zelf gegevens te verzamelen.
Door gebruik te maken van deze dienst geeft de klant de taak van het verzamelen van gegevens door aan het team van ingenieurs van agrifoodTEF, die deskundigen zijn op het gebied van zowel gegevensverzamelingscampagnes als de architectuur en instrumenten van de digitale infrastructuur van agrifoodTEF.
Deze service stelt de klant in staat om gebruik te maken van de mogelijkheid (die alleen digitaal testen heeft) om perfecte reproduceerbaarheid / herhaalbaarheid van tests mogelijk te maken: perfecte controle over de testomgeving is in feite beschikbaar, zodat het probleem van reproduceerbaarheid/herhaalbaarheid wordt beperkt tot het beschikken over volledige informatie over de omgeving en de tests die daarin worden uitgevoerd.
Hoe de dienst zal worden geleverd
Bij het uitvoeren van digitale tests waarbij gebruik wordt gemaakt van de computationele middelen die door agrifoodTEF worden verstrekt, vereist het verzamelen van zinvolle gegevens diepgaande kennis over het soort infrastructuur dat voor de tests wordt gebruikt en over de specifieke kenmerken van de uitvoering van agrifoodTEF.
Deze service helpt klanten de vereiste gegevens te verkrijgen zonder de interne competenties op te bouwen die nodig zijn om zelf gegevens te verzamelen.
Door gebruik te maken van deze dienst geeft de klant de taak van het verzamelen van gegevens door aan het team van ingenieurs van agrifoodTEF, die deskundigen zijn op het gebied van zowel gegevensverzamelingscampagnes als de architectuur en instrumenten van de digitale infrastructuur van agrifoodTEF.
Service maatwerk
Deze servicebeschrijving is opzettelijk generiek. Elk exemplaar van deze service is in feite aangepast om deze aan te passen aan de behoeften en vereisten van de specifieke klant. Het volgende is een voorbeeld van een service-instantie.Voorbeeld service: Om beschadiging van planten tijdens robotonkruidbewerkingen te voorkomen, wil de klant een intra-row navigatie-oplossing in simulatie testen voordat het systeem in het veld wordt ingezet, zodat een geschikte simulatie (gebaseerd op Gazebo) van de robot en omgeving is voorbereid. Om de klant te helpen hun navigatiesoftware grondig te valideren, voeren we de simulatie uit en verzamelen we puntwolkgegevens in een Gazebo-simulator. De verzamelde gegevens vertegenwoordigen plantenrijen van verschillende lengtes (3, 5 en tot 10 meter), breedtes binnen de rij (van 3 tot 1 meter) en plantdichtheden om systeemtests in scenario's van verschillende moeilijkheidsgraad mogelijk te maken. Tijdens deze activiteiten verzamelen we datasets die de interactie van de robot met de gesimuleerde omgeving beschrijven; Daarnaast verzamelen we de volledige (gesimuleerde) sensordatastromen zodat de klant deze later kan gebruiken (bijvoorbeeld voor het trainen van AI-modellen). We bieden de klant ook een rapport met een beschrijving van de verschillende gegevensvelden die zijn opgenomen en hun frequentie van verzameling, evenals de volledige configuratiebestanden van de simulatieomgeving, waardoor het mogelijk is om de tests in de toekomst precies te reproduceren.