A Label Studio egy felületre hozza a LiDAR-annotáció teljes folyamatát

Egy helyen a pontfelhő és a kamerakép

A HumanSignal szeptember 18-án ismertetett fejlesztése arra a munkafolyamatra kínál megoldást, amelyben az annotátorok több különálló eszköz között váltanak. A vállalat szerint a csapatok gyakran egy alkalmazásban rajzolják meg a 3D határolódobozokat a pontfelhőben, egy másikban ellenőrzik a kameraképeket, egy harmadikban követik az objektumokat az egymást követő képkockákon, majd táblázatba exportálják az eredményeket.

A Label Studio Enterprise-ben futó Interface a teljes jelenetet egy munkaterületen tartja. Az annotátorok pontfelhőket címkézhetnek, kalibrált kameranézeteket ellenőrizhetnek, időben követhetik az objektumokat, és a minőségellenőrzést is ugyanabban a feladatban végezhetik el.

A rendszerben egy határolódoboz kiválasztásakor a kameraképes panel arra a nézetre vált, amely ténylegesen tartalmazza az objektumot. Az annotátorok kiválaszthatják, mely LiDAR-érzékelőket jelenítsék meg, a pontokat pedig a szerkezet kiemelésére színezhetik. A munkaterület felosztható az egymás melletti összehasonlításhoz, a 2D felülnézeti kép pedig az egész jelenetet megmutatja, amikor a 3D nézet zsúfolttá válik.

Kevesebb képkockánkénti kézi munka

Az objektumkövetésnél az annotátor egy kulcskockán elhelyez egy határolódobozt, majd néhány képkockával később egy másikat. A felület a köztes pozíciókat interpolálja. Ha az annotátor módosítja a dobozt egy képkockán, a környező képkockák is újraszámolódnak.

A HumanSignal szerint így egy objektum követéséhez nem kell minden képkockán külön újrarajzolni a dobozt. A megoldást a vállalat önvezetési, fejlett vezetéstámogató rendszerekhez, valamint robotikai projektekhez is hasznosnak tartja. Az objektumazonosítók stabilak maradnak a sorozaton belül, az egyes objektumokhoz pedig az eredetükre vonatkozó információk is társulnak.

A munkafolyamat modell-előrejelzésekkel is elindítható. A LiDAR-adatokhoz csatolt előrejelzések határolódobozként jelennek meg, amelyeket az annotátor elfogadhat, áthelyezhet, átméretezhet vagy elforgathat. A felület kiemeli a dobozon belül található LiDAR-pontokat, így ellenőrizhető, hogy a határolás valóban lefedi-e az objektumot.

A határolódobozokon túl a szegmentálás is elérhető

A HumanSignal felülete többféle geometriai annotációt támogat. A határolódobozok mellett pontok, vonalak, sávok, valamint szemantikus és példányalapú maszkokkal készített pontfelhő-szegmentálás is használható. Így egy úthatár és egy gyalogos eltérő alakzatot kaphat.

A LiDAR-szegmentálás ugyanabban a nézetben fut, mint a határolódobozok követése, ezért az annotátornak nem kell külön eszközre váltania. A rendszer a HumanSignal szerint a modell által adott első javaslatot emberi ellenőrzéssel egészíti ki, így a végső döntés az annotátornál marad.

A fejlesztés nagy adathalmazokkal is számol. A felület több mint 10 millió pontot tartalmazó COPC-fájlokat olvas, és igény szerint tölti be a részleteket, amikor az annotátor nagyít vagy navigál a jelenetben. Egy részletességi keret segítségével egy kattintással több felbontás tölthető be.

A minőségellenőrzés a feladaton belül marad

A minőségellenőrzés közvetlenül az annotációs feladat része. Az ellenőrzést végző munkatárs nézetről nézetre haladhat, a blokkoló hibák pedig megakadályozzák, hogy a feladat elkészültként legyen megjelölve. A visszavonási és helyreállítási funkciók lehetővé teszik egy hiba javítását anélkül, hogy a teljes jelenetet újra kellene kezdeni.

A HumanSignal szerint az egyetlen Interface-be rendezett annotáció, érzékelőfúzió, időbeli követés és minőségbiztosítás gyorsabb iterációt, kevesebb újramunkát és az ML-mérnökök számára megbízhatóbb tanítóadatokat jelenthet. A LiDAR-munkaterület annak a Label Studio-rendszernek a része, amelyben a vállalat szerint más adatformátumokhoz, köztük dokumentumokhoz és hanganyagokhoz is kialakíthatók annotációs felületek.