Dostarczanie zbiorów danych

Określenie, jakie dane są potrzebne do opracowania lub przetestowania systemu (np. modelu sztucznej inteligencji) lub maszyny (np. zrobotyzowanego narzędzia rolniczego), nie jest prostym zadaniem; wybór cech, które muszą posiadać dane wykorzystywane do tych działań, wymaga wiedzy fachowej, którą nie wszystkie przedsiębiorstwa posiadają wewnętrznie. Ta usługa może pomóc klientom w tym początkowym i kluczowym zadaniu. Po zdefiniowaniu cech wymaganych danych konieczne jest wygenerowanie odpowiednich zbiorów danych. Odbywa się to poprzez gromadzenie, przetwarzanie, a często także powiększanie danych (np. poprzez dodawanie metadanych lub etykiet). Działalność ta wymaga specjalistycznej wiedzy fachowej i zazwyczaj wiąże się z dużym obciążeniem dla przedsiębiorstwa: usługa ta pomaga klientom, przenosząc obciążenie na agrifoodTEF.

Usługa składa się z trzech oddzielnych faz.Faza pierwsza to definicja specyfikacji danych i odbywa się za pośrednictwem jednego lub więcej wywiadów (zwykle zdalnych) z klientem. Wywiady te pozwalają agrifoodTEF określić, jakie zbiory danych są potrzebne klientowi i ich dokładne cechy. Na tym etapie klient może zdecydować się na udostępnienie agrifoodTEF, w razie potrzeby w ramach NDA, szczegółowych informacji na temat systemu, z którym dane będą wykorzystywane; takie szczegóły umożliwiają jeszcze ściślejsze dopasowanie wymogów systemowych do specyfikacji danych. Faza druga to przygotowanie danych i w dużym stopniu zależy od wyniku fazy pierwszej. Mogą wystąpić trzy różne przypadki:W przypadku 1 wymagane zbiory danych są dostępne w archiwach agrifoodTEF, już w formie w pełni zgodnej ze specyfikacjami. Wykonanie usługi można przejść do fazy trzeciej (opisanej poniżej). W przypadku 2 odpowiednie dane są dostępne w archiwach agrifoodTEF, ale wymagają dodatkowego przetwarzania (takiego jak etykietowanie, transkodowanie i formatowanie), aby były zgodne ze specyfikacjami. W tym przypadku usługi S00115 (usługi walidacji i przetwarzania danych) lub S00290 (etykietowanie danych) wykorzystuje się jako etap wstępny, a następnie sytuacja powraca do sprawy 1. W przypadku 3 w archiwach funduszu rolno-spożywczego TEF nie są dostępne żadne (lub są niewystarczające) dane zgodne ze specyfikacjami. W tym przypadku usługi S00112 + S00113 (wykonanie testów fizycznych + gromadzenie danych testowych podczas testów fizycznych) lub S00182 + S00183 (wykonanie testów cyfrowych + gromadzenie danych testowych podczas testów cyfrowych) są wykorzystywane do generowania surowych danych zgodnie z potrzebami klienta; Następnie sytuacja powraca do sprawy nr 2. Ogólnie rzecz biorąc, faza druga jest zakończona, gdy tylko działania niezbędne do dotarcia do sprawy 1 zostaną wykonane przez agrifoodTEF. Pod koniec fazy drugiej usługa przechodzi do fazy trzeciej, czyli dostarczania danych. Całkowity czas trwania usługi w dużym stopniu zależy od wymagań klienta, ponieważ wpływają one na fazę drugą, w której większość pracy jest wykonywana. Czas trwania usługi jest komunikowany klientowi podczas fazy pierwszej.

Ten opis usługi jest celowo ogólny. Każdy przypadek tej usługi jest w rzeczywistości dostosowany do potrzeb i wymagań konkretnego klienta. Poniżej przedstawiono przykład instancji usługi (należy zauważyć, że usługa jest dostępna dla wielu sektorów rolnictwa, a nie tylko dla sektora uwzględnionego w przykładzie). Przykładowa usługa: Klient jest firmą programistyczną opracowującą model sztucznej inteligencji do wizji komputerowej i potrzebuje danych do trenowania modelu. Celem modelu jest wiarygodne rozpoznanie roślin Matricaria i fasoli oraz wykrycie pojawienia się innych spontanicznych gatunków chwastów. Model ma być dostarczany jako moduł producentom narzędzi, a firma nie chce nadmiernie ograniczać zestawu potencjalnych klientów poprzez nałożenie rygorystycznych kryteriów na system kamer do zamontowania na oprzyrządowaniu. Z tego powodu, wraz z agrifoodTEF, klient definiuje zestaw 4 najczęstszych konfiguracji systemu kamer, które muszą być objęte zbiorami danych treningowych. Dla każdej z 4 konfiguracji firma wymaga danych w 3 różnych warunkach oświetleniowych, tj. silnego światła słonecznego ze słońcem nad głową, silnego światła słonecznego ze słońcem nisko na horyzoncie i rozproszonego światła słonecznego (np. pochmurna pogoda). Etykietowanie nie jest wymagane od agrifoodTEF, ponieważ firma zamierza realizować je wewnętrznie. AgrifoodTEF ma już w swoich archiwach odpowiednie zbiory danych obejmujące 5 z 12 warunków wymaganych przez klienta, więc są one odpowiednio sformatowane i natychmiast dostarczane klientowi. Zamiast tego dane obejmujące pozostałe 7 warunków muszą być generowane ad hoc. W tym celu klient i agrifoodTEF wspólnie opracowują plan pozyskiwania danych. Klient zgadza się również z agrifoodTEF na wykonanie usług pomocniczych S00112 (wykonanie badań fizycznych) i S00113 (gromadzenie danych testowych podczas badań fizycznych) w celu pozyskania zbiorów danych. Gromadzenie danych odbywa się z wykorzystaniem własnej infrastruktury instrumentu rolno-spożywczego TEF (przygotowane pola, czujniki, roboty). Kampania gromadzenia danych jest następnie realizowana przez instrument rolno-spożywczy TEF; uzyskane dane są zarówno dodawane do archiwów agrifoodTEF, jak i odpowiednio sformatowane, aby były zgodne z potrzebami klienta. Przygotowane w ten sposób zbiory danych uzupełniają zakres wszystkich 12 przypadków potrzebnych klientowi. Dostarczanie danych kończy realizację usługi.