Datadog

Datadog prepája metriky, záznamy a trasovanie aplikácií. Prepojenie jednotlivých pozorovaní závisí od konzistentných identifikátorov služby, prostredia a verzie.

Rozhodnutia pri návrhu

Vzorkovanie stôp môže obmedziť možnosti vyšetrovania zriedkavej chyby. Pri plánovaní zberu posudzujeme náklady aj obsah osobných údajov v atribútoch.

Príklad z pracovného postupu

Po vydaní novej verzie rastie latencia iba pri nahrávaní príloh. V stope sa musí dať prepojiť verzia nasadenia, cesta aplikácie a závislé úložisko bez ukladania samotného citlivého obsahu prílohy.

Ako výsledok overiť

V kontrolovanom zlyhaní nájdeme konkrétny release, dotknutú trasu a súvisiaci záznam bez citlivého obsahu.

Čas, význam a vlastník upozornenia

Pred nastavením výstrahy určíme, ktorý používateľský proces má chrániť. Chybovosť jednej služby a počet neuložených objednávok sa môžu líšiť. Pri malej prevádzke môže jediné zlyhanie vytvoriť vysoké percento, zatiaľ čo tichá služba nevráti žiadnu metriku.

Pravidlo preto potrebuje okno, význam chýbajúcej hodnoty, vlastníka zásahu a podmienku návratu do normálneho stavu. Pri spätnej kontrole sa pýtame, či by tím z oznámenia vedel rozhodnúť, ktorú operáciu preveriť.

Pôvodný odborný zdroj – Datadog

Pomalú rezerváciu treba sledovať cez hranicu služieb

Pri rezervácii termínu môže web rýchlo odovzdať požiadavku a čakať na kalendár vzdialenej prevádzky. Priemer za všetky rezervácie výpadok malej pobočky ľahko prekryje. Pri vyšetrovaní preto pomáha vedieť, ktorou službou prešla konkrétna pomalá požiadavka a kde strávila najviac času.

Praktické rozdelenie sleduje operáciu a pobočku v primeranej podrobnosti. Mená návštevníkov do označení nepatria. Pri výbere vzorky sledovaných požiadaviek treba počítať aj s tým, že chýbajúca stopa sama osebe nepotvrdzuje úspešné vybavenie rezervácie.

Otázky z praxe

Ako môže vzorkovanie skresliť obraz zriedkavej chyby?

Zachytené stopy predstavujú vybranú časť prevádzky, takže neprítomnosť konkrétnej stopy nevylučuje incident. Pri hľadaní príčiny porovnáme počet chýb v metrikách, čas a dostupné záznamy služby. Pre kritickú vetvu navrhneme primeranú viditeľnosť a zmeriame aj náklady dodatočného zberu.

Ktoré údaje je vhodné dávať do atribútov stôp?

Na priradenie príčiny často postačuje názov služby, operácia, verzia a bezpečne zvolený korelačný identifikátor. Celý obsah objednávky či poverenia by zbytočne rozšírili rozsah citlivých dát. Vzorku skutočnej telemetrie preskúmame pred spustením aj po doplnení ďalšej integrácie.

Ako porovnať výkon pred nasadením a po ňom?

Označíme verziu aplikácie a porovnáme rovnaký typ operácie za porovnateľného objemu požiadaviek. Samotný denný priemer môže odrážať napríklad sezónny nárast exportov. Pri podozrení preto otvoríme rozdelenie odozvy podľa služby a overíme, na ktorej hranici medzi systémami sa čas predĺžil.

Potrebujete poradiť?

Opíšte nám, čo potrebujete vyriešiť. Odpovedáme e-mailom.

O čo máte záujem?

Martin Michalka vám pošle návrh e-mailom. Opíšte jednu úlohu, ktorú vo firme robíte opakovane.

Ako vás máme kontaktovať?