Az Nvidia Flora modelleket adott ki robotikai videók címkézéséhez

Az Nvidia Flora projektje a robotikai adatok előkészítésének több feladatát fogja össze. A videó időpontjaihoz kapcsolt leírások az előtanítás adatainak szűrését és kiegyensúlyozását segítik. A köztes cselekvéseket értékelő címkék a megerősítéses tanulást támogatják, az eredménycímkék pedig azt írják le, sikerült-e egy teljes feladatsor. Az Nvidia a kiadást a kutatók saját robotikai adatkészleteinek bővítését segítő megoldásként mutatja be.

A leíró modell a hívó által kiválasztott célidőszakot kapja meg. Az előtte és utána történő szomszédos események összefüggést adnak a helyi művelet értelmezéséhez. A modell egyetlen angol cselekvési utasítást ad vissza; a környező feldolgozási folyamat kapcsolja ezt a szöveget a megadott időszakhoz. A modell nem választja ki és nem módosítja annak határait. Ez a különbség a bemenet előkészítésénél lényeges: az időbeli összefüggés a kiválasztott cselekvés leírását segíti, nem az azon kívüli cselekvések hozzáadását.

Az értékelő modell videóképkockákat és a címkézési feladatot meghatározó utasítást fogad. A teljes feladatsort a teljes kudarctól a teljes sikerig pontozhatja, vagy rövid lépéseket jelölhet sikertelennek, nem optimálisnak vagy normálisnak, a nem normális lépésekhez magyarázatot adva. Dokumentációja a rendeltetésszerű használatot kutatásra és fejlesztésre korlátozza: a kimenetek címkék, nem közvetlen robotvezérlésre vagy egyedüli biztonsági felügyeletre szolgálnak. A kereskedelmi és éles üzemi használat nem támogatott.

A kiadásról a The Decoder is beszámolt, és hivatkozott az Nvidia dokumentációjára.