Ai2 és Hugging Face bővíti együttműködését a nyílt AI terjesztésére

Több tárhely és nagyobb letöltési kapacitás a Hubon

Az Ai2 közlése szerint a Hugging Face kibővített infrastruktúrája azonnal elérhetővé válik, és az intézet Hubon tárolt anyagai több tárhelyet, valamint nagyobb sávszélességet kapnak. A bejelentés szerint az Ai2 forgalmára ezentúl nem vonatkoznak a Hub standard sebességkorlátai, így a legnagyobb adatkészletek és a több ellenőrzőpontot tartalmazó modellek is teljes áteresztőképességgel tölthetők le.

Az Ai2 azt írja, hogy 2024 tavasza óta modelljeit és adatkészleteit több mint 50 millió alkalommal töltötték le a Hugging Face Hubról. A szervezet szerint a bővítés a Hubon betöltött szerepük méretét is tükrözi: a Hugging Face hivatalos hőtérképe alapján az Ai2 évente több új artefaktumot tesz közzé, mint bármely más, a rendszer által követett szervezet.

A nonprofit kutatóintézet hangsúlyozza, hogy a nyílt kutatás náluk nem merül ki a modellsúlyok közzétételében. A publikált anyagok közé tartoznak a tanítóadatok, köztes ellenőrzőpontok, adatkeverékek, értékelések, ablációs vizsgálatok, demók és más erőforrások is, amelyek alapján a kutatók reprodukálhatják a munkát, illetve vizsgálhatják, hogyan készültek a modellek.

Olmo, Molmo, OlmoEarth és tudományos benchmarkok

A Hugging Face Hub már most is az Ai2 több nyílt munkájának központi helye. A bejelentés példaként említi az Olmo teljesen nyílt nyelvimodell-családot, a Molmo multimodális modelleket, az OlmoEarth földmegfigyelési modelleket és az AstaBench értékelőcsomagot, amelyet tudományos kutatási ügynökökhöz készítettek.

Clem Delangue, a Hugging Face társalapítója és vezérigazgatója a közleményben úgy fogalmazott: „Az Ai2 megmutatta nekünk, hogyan néz ki a teljesen nyílt megközelítés, amikor az Olmohoz és Molmóhoz hasonló hatásos modellek mögött a tanítószkriptektől a köztes adatkészletekig mindent végig megoszt.” Delangue szerint a Hugging Face büszke arra, hogy az Ai2 infrastruktúráját biztosíthatja olyan munkákhoz, mint a valódi robotokhoz készült MolmoAct VLA-k, az éghajlattal foglalkozó OlmoEarth, valamint több mint 900 modell és több mint 1200 adatkészlet.

Peter Clark, az Ai2 ideiglenes vezérigazgatója szerint a teljesen nyílt modellfejlesztés az intézet működésének alapja. A közleményben azt mondta: „A teljesen nyílt modellfejlesztés alapvető része annak, ahogyan az Ai2-nél dolgozunk, és ez azt jelenti, hogy mindent közzéteszünk, ami egy modellhez vezet, valamint magát a modellt is, hogy a terület többi szereplője tanulmányozhassa és építhessen rá.”

OCR, robotika és AI a tudományban

A két szervezet együttműködésének egyik példája az olmOCR-Bench, amely azt méri, mennyire jól olvasnak a modellek valódi dokumentumokat, köztük többhasábos elrendezéseket, táblázatokat, kézírást és feliratozott diagramokat. A Hugging Face csapata ezt választotta elsődleges OCR benchmarkjának, és beépítette az adatkészletet a Hub ranglistafolyamatába, így az OCR és dokumentumértési modellek eredményei egy helyen, közvetlen modellhivatkozásokkal hasonlíthatók össze.

Nathan Habib, a Hugging Face Evaluation Tooling területén dolgozó ML Engineer munkatársa szerint az olmOCR-Bench segít a közösségnek tájékozott döntést hozni arról, melyik OCR-modellt használja, figyelembe véve a modellméretet, a nyíltságot és a licencet. A közleményben úgy fogalmazott: „A ma ismert nagy, közismert LLM-ek egyike sem létezne OCR nélkül.”

A Hugging Face az Ai2 robotikai modelljeinek fejlesztői használatát is támogatja. Idén tavasszal integrálta a MolmoAct 2 nyílt robotikai modellt a LeRobot nyílt forrású robotikai könyvtárba, hogy hobbisták, robotikusok és kutatók megszokott munkafolyamatokkal és adatkészletekkel finomhangolhassák, értékelhessék és telepíthessék a modellt. Az Ai2 a MolmoAct 2 tanítóadatait a LeRobot standard formátumában is kiadta, többek között a LeRobot közösségben népszerű, alacsony költségű SO-100 és SO-101 karokhoz. A start után valamivel több mint három héten belül a MolmoAct 2 modelljeit és adatkészleteit több mint 400 000 alkalommal töltötték le.

Az Ai2 értékelőeszközei is a Hubon érhetők el. A közlemény az IFBench, RewardBench 2 és AstaBench benchmarkokat említi, amelyekkel a fejlesztők az utasításkövetést, a jutalommodellezést és az ügynökszerű feladatokat mérhetik.

Mit jelent ez a kutatóknak és fejlesztőknek

A bővítés közvetlen hatása, hogy az Ai2 nyílt modelljei, adatkészletei és benchmarkjai nagyobb kapacitással maradhatnak elérhetők a Hugging Face Hubon. Ez különösen azoknak fontos, akik nem csak kész modelleket akarnak letölteni, hanem a tanítási folyamatot, a köztes verziókat és az értékeléseket is vizsgálnák.

Az Ai2 szerint a kibővített infrastruktúra a jövőbeli munkákat is támogatja, beleértve a multimodális modelleket, az eszközhasználó ügynököket és a tudományos közösségeknek szánt nyílt modelleket. A Hub emellett otthont ad az Ai2 AI-for-science munkáinak is, köztük az OlmoEarth modelljeinek és a HiRO-ACE klímamodelleknek, amelyek az óceán és a légkör kölcsönhatásaira fókuszálnak a klíma szempontjából fontos, hosszú időtávokon.

A megállapodás így elsősorban a hozzáférésről és az ellenőrizhetőségről szól: a kutatók és fejlesztők egy helyen találhatják meg az Ai2 számos nyílt AI-erőforrását, miközben a nagyobb tárhely és sávszélesség a növekvő portfólió kiszolgálását segíti.