A Datadog Bits Chat már Slackből is végigvezeti az incidenskezelést
A Datadog Bits Chat a Slackbe hozza a Bits AI természetes nyelvű felületét, így az incidenskezelő csapatok ugyanabból a beszélgetésből vizsgálhatják ki a hibákat, indíthatják el a javítást és zárhatják le az esetet. A vállalat szerint a folyamat az első riasztástól a dokumentált utómunkáig kezelhető a Slack elhagyása nélkül.
- A Bits Chat a Datadog Bits AI felületét közvetlenül Slackben teszi elérhetővé.
- A Bits Investigation telemetria, útmutatók és korábbi incidensek alapján vizsgálja a hibákat.
- A Bits Remediation műveleteket és incidensmunkafolyamatokat indíthat a beszélgetésből.
- A Bits Code a vizsgálat alapján javítást készíthet és pull requestet nyithat.
- A lezárt incidensből postmortem notebook készíthető.
A riasztástól indulhat a vizsgálat
A Datadog szeptember 16-i bejegyzése szerint egy éles környezetben bekövetkező probléma esetén az incidenselhárítók gyakran Slackben dolgoznak, miközben a szükséges bizonyítékok más rendszerekben találhatók. A beszélgetések, a telemetriai adatok, a forráskód és az incidenskezelési eszközök közötti váltás lassíthatja az időérzékeny vizsgálatot, és megnehezítheti a frissítések követését.
Ha egy csapat egy webáruház ajánlórendszerének időtúllépések miatt jelentkező hibáit vizsgálja, az incidens bejelentésekor a Datadog külön Slack-csatornát hoz létre. Az ügyeletes mérnök ebben a csatornában a @Datadog investigate paranccsal kérheti a Bits vizsgálatának elindítását.
A Bits Investigation a kapcsolódó telemetriai adatok, üzemeltetési útmutatók és korábbi incidensek alapján állít fel hipotéziseket. A kezdeti üzenetben a csapat további körülményeket vagy saját feltételezést is megadhat. A vizsgálat közben a Bits Slackben tesz közzé frissítéseket, így a válaszadók a saját munkájuk mellett követhetik az elemzés alakulását.
Kérdések, telemetria és javítás egy csatornában
A vizsgálat végén a Bits közli a valószínűsíthető kiváltó okot és a javasolt következő lépéseket. A Datadog példájában egy friss kódmódosítást azonosít a probléma valószínű okaként, és a megállapítást alátámasztó telemetriai adatokat is megosztja.
A csapattagok a Slack-csatornában további kérdéseket tehetnek fel a @Datadog megemlítésével. Rákérdezhetnek például arra, hogy mely végpontok és ügyfélrégiók érintettek, illetve hatással vannak-e a hibák más, kapcsolódó szolgáltatásokra. A vizsgálat közben születő megállapítások így a kapcsolódó beszélgetéssel együtt maradnak.
A Bits Remediation a vizsgálat alapján következő lépéseket javasol, és az incidensbeszélgetésből indítható műveleteket kínál. Ezek közé tartozhat további válaszadók bevonása, incidensmunkafolyamatok futtatása vagy a Status Pages frissítése.
Ha a csapat javítást kér, a Bits Remediation átadja a releváns környezetet a Bits Code számára. Ez külön kódcsatornát hoz létre a Slackben, a vizsgálat eredményei alapján elkészíti a javítást, majd pull requestet nyit, amelyet a válaszadók átnézhetnek.
Lezárás és utómunka a Slackben
A Datadog szerint más incidenseknél a Bits Remediation csevegésből indítható triázsműveleteket is támogat. A csapat üzenetet küldhet a munkatársaknak, mérnököket riaszthat a Datadog On-Call segítségével, valamint incidens- vagy utókövetési rekordokat hozhat létre.
A probléma elhárítása után a Bits megerősíti, hogy a hibaarány visszatért a normál szintre. A válaszadók ezután megkérhetik az incidens lezárására, valamint arra, hogy a vizsgálatból postmortem notebookot készítsen.
A notebook tartalmazza az incidens összefoglalóját, a releváns megállapításokat, a megoldást és a következő lépéseket. Mivel a Bits már rendelkezik az elhárítás során összegyűjtött környezettel, a csapatnak nem kell külön beszélgetésekből és eszközökből újra összeállítania a történteket. A Datadog szerint a postmortemek a későbbi incidensek gyorsabb kezelését is segíthetik.
A Bits Chat Slack-integrációjának beállításához a Datadog Bits Chat beállítási útmutatója használható. A vállalat további anyagokat kínál a Bits Investigation és a Bits Code használatához, új Datadog-fiók esetén pedig 14 napos ingyenes próbaidőt említ.
