A Factory és a Databricks közös mérnöki munkafolyamatot épít

Együtt kezelnék az adat- és szoftvermigrációt

A Factory október 19-én jelentette be az együttműködést. A cég közlése szerint egyike annak a legnagyobb globális vállalatoknál zajló projekteknek, amelyben egy összetett, több száz üzleti alkalmazást kiszolgáló adatplatformot migrálnak a Databricks Data + AI Platformra. A rendszer több petabájtnyi adatot és több százezer táblát tartalmaz.

A migráció az alkalmazások felhasználói felületeit, szolgáltatásait, integrációs és API-rétegeit, üzleti logikáját, szabályait, biztonsági és kezelési funkcióit is érinti. A Factory akkor kapcsolódott be a munkába, amikor az adatok jelentős része már átkerült a Databricks lakehouse rendszerébe. A következő feladat az adatokat használó alkalmazások és munkafolyamatok újjáépítése volt.

A Factory szerint az adatmodernizációt és a szoftvermodernizációt együtt kell végrehajtani. A vállalat korábbi tapasztalatai alapján a nagy léptékű migrációk sok erőforrást igényelnek, mivel az adat- és alkalmazásfejlesztő csapatoknak külön kell elemezniük, újraépíteniük, tesztelniük és összehangolniuk a rendszereket. Az adatfolyamok kisebb módosításai is több downstream, vagyis későbbi folyamatot érinthetnek.

A Factory Droids a függőségeket is feltérképezik

Az együttműködés egyetlen mérnöki munkafolyamatba vonja össze a meglévő rendszer megértését, a migráció tervezését, az építést és az ellenőrzést. A Databricks nyílt, szabályozott alapot ad az adatok, az elemzések és a mesterséges intelligencia számára, a Factory pedig ügynöki szoftvermérnöki képességeket biztosít az erre épülő alkalmazások modernizációjához.

A Factory Droids az alkalmazáskódon, adatfolyamokon, SQL-lekérdezéseken, teszteken és rendelkezésre álló dokumentációkon dolgozik. A releváns tárhelyekhez és eszközökhöz való hozzáféréssel fel tudják tárni például, hogy egy alkalmazás mely tárolt eljárástól függ, mely adatfolyam hozza létre a szükséges bemeneteket, és egy módosítás hol okozhat későbbi működésbeli eltérést.

A Factory kontextusintegrációi a kódot és a mérnöki tudást kapcsolják össze a munkával. A Databricks Unity Catalog által szabályozott adatokhoz és eszközökhöz való hozzáféréssel ez összeköthető az alkalmazásfüggőségekkel. A Droids segítséget adhatnak a függőségek azonosításához, a végrehajtási sorrend kialakításához és a kompatibilitást ellenőrző vizsgálatok meghatározásához. A Factory Missions a több komponensre kiterjedő tervezést, mérföldköveket és összehangolt végrehajtást támogatja, miközben a mérnökök felülvizsgálják a terveket és tisztázzák a bizonytalan üzleti szabályokat.

Három fő felhasználási területet emelnek ki

A partnerség három kategóriát céloz. Az első a PDLC Automation, vagyis a termékfejlesztési életciklus automatizálása. A Factory a követelménytől a tervezésen, fejlesztésen, tesztelésen, biztonsági ellenőrzésen és dokumentáláson át a megfigyelésig és továbbfejlesztésig segítheti a Databricks adataira épülő alkalmazások munkafolyamatát. Ide tartozik az adatvezérelt alkalmazások és mesterséges intelligenciával működő szoftverek fejlesztése is.

A második terület a Migration and Modernization, azaz a migráció és modernizáció. A Factory az adatplatformok Databricksre költöztetésének, valamint az ezektől függő alkalmazások elemzésében, tervezésében és végrehajtásában segíthet. Egy példa szerint egy alkalmazás migrációja magában foglalhatja a régi Postgres adatbázis Databricks Lakebase-re cseréjét, az adatátalakítások Pythonban történő újraírását, Lakeflow-folyamat létrehozását és ütemezését, AI/BI-irányítópult építését, majd az új alkalmazás és adatai összevetését a régi rendszerrel.

A harmadik terület a kiberbiztonság. A Factory a Databricks Lakewatch által figyelt alkalmazások sérülékenységeinek javításában segíthet.

Marketplace-en is elérhető lehet a Factory

A Factory közlése szerint a minősített ügyfelek a Databricks Marketplace-en keresztül is megvásárolhatják a szolgáltatást, a meglévő Databricks-keretük legfeljebb 10 százalékának felhasználásával. A használat megkezdéséhez a Databricks-kapcsolatot a Factory beállításaiban, a Connectors résznél kell létrehozni.

A cég egy példafeladatot is megadott: az automatizáció minden este ellenőrizze a Lakehouse és Lakebase közötti szinkronizációs munkafolyamatot, majd reggel küldje el annak összefoglalóját a csapat Slack-csatornájára. A beállítási útmutató a kezelt MCP-szervereket, a Databricks által kiszolgált modelleken futó Droids használatát és a webhookos automatizációkat is lefedi.

A partnerség a Factory és a Databricks szerint szorosabb kapcsolatot teremthet a vállalati adatok és az azokkal működő szoftverek között. A felhasználók számára ez egy olyan közös munkafolyamatot jelenthet, amelyben ugyanahhoz a migrációhoz kapcsolódik az adatplatform, az alkalmazás, az ellenőrzés és az automatizáció.