Gromadzenie danych testowych podczas testów cyfrowych

Jednym z kluczowych działań podczas testów cyfrowych jest gromadzenie danych dotyczących postępów i ostatecznych wyników testów. Takie dane umożliwiają ocenę wydajności systemu przez klienta lub – w razie potrzeby – przez przedsiębiorstwo rolno-spożywczeTEF (za pośrednictwem usługi S00184). Usługa ta zarządza gromadzeniem danych istotnych dla oceny działania uzyskanych podczas testów zarówno przez testowany system, jak i środowisko obliczeniowe, w którym przeprowadzane są testy.

Przykłady zgromadzonych danych obejmują informacje uzyskane w środowisku wirtualnym w celu symulacji gromadzenia danych z czujników w środowisku fizycznym; statystyki dotyczące wydajności modelu sztucznej inteligencji w fazie testowania i wdrażania (np. zajęta pamięć, liczba parametrów możliwych do wyszkolenia, utrata treningu/optymalizacji itp.); konkretne etykiety i adnotacje, które należy wykorzystać jako podstawową prawdę do oceny systemu; oraz dane wyjściowe systemu po poddaniu ich szeregowi warunków testowych.  

Minimalny zestaw danych, które należy gromadzić, określają wskaźniki oceny, które użytkownik wybrał (samodzielnie lub przy wsparciu agrifoodTEF, za pośrednictwem usługi S00178) do ich przetworzenia; ogólnie rzecz biorąc, agrifoodTEF wraz z klientem wybiera większy zestaw danych dotyczących minimum, aby zapewnić bogatszy obraz wydajności systemu i w razie potrzeby umożliwić stosowanie innych wskaźników w przyszłości.

Jako wynik usługi, oprócz surowych danych, dostarczamy również klientowi dokumentację opisującą zarejestrowane cechy i warunki środowiska testowego w momencie testowania, a także wszelkie wartości parametrów, zakresy zmienności i specyfiki wymagane do celów odtwarzalności.