Združevanje telemetrije združuje metrike, dnevnike in sledi iz več virov v enoten cevovod, medtem ko se beleženje iz enega samega vira osredotoča na zajemanje in analizo podatkov iz enega samega izvora. Prava izbira je odvisna od kompleksnosti sistema, ciljev opazovanja in operativnega obsega.
Poenoten pristop, ki zbira in povezuje podatke o opazovanju iz več porazdeljenih virov v infrastrukturi.
Osredotočena strategija beleženja, ki zajema, shranjuje in analizira izhodne podatke dnevnika iz ene same aplikacije, storitve ali sistemske komponente.
| Funkcija | Združevanje telemetrije | Enovirno beleženje |
|---|---|---|
| Obseg podatkov | Več virov v celotni infrastrukturi | Ena specifična aplikacija ali sistem |
| Vrste signalov | Metrike, dnevniki in sledi | Samo dnevniki |
| Tipična orodja | OpenTelemetry, Prometheus, Grafana, Datadog | rsyslog, Filebeat, syslog, dnevnik |
| Kompleksnost infrastrukture | Višje; zahteva zbiralnike, cevovode in zaledne sisteme za shranjevanje | Nižje; minimalna nastavitev z osnovnim pošiljanjem hlodov |
| Najboljši primer uporabe | Porazdeljene mikrostoritve in okolja, ki so izvorno v oblaku | Monolitne aplikacije ali odpravljanje napak v izoliranih sistemih |
| Zmožnost korelacije | Močna korelacija med signali in storitvami | Omejeno; omejeno na dogodke iz enega vira |
| Profil stroškov | Višje zaradi zahtev glede skladiščenja in predelave | Nižje z predvidljivimi, manjšimi količinami podatkov |
| Prilagodljivost | Zasnovan za horizontalno skaliranje čez več vozlišč | Najbolj primeren za uvedbe z enim gostiteljem ali manjšega obsega |
Združevanje telemetrije deluje na principu, da sodobni sistemi proizvajajo veliko različnih vrst signalov, ki jih je treba povezati za razumevanje delovanja sistema. V centralni cevovod potegne metrike, dnevnike in sledi iz več deset ali več sto storitev. Beleženje iz enega vira uporablja nasproten pristop, saj vsako aplikacijo ali gostitelja obravnava kot svojo neodvisno domeno beleženja brez pričakovanja korelacije med viri.
Nastavitev združevanja telemetrije zahteva uvedbo agentov ali SDK-jev v celotni floti podatkov, konfiguriranje zbiralnikov in vzdrževanje zalednega sistema, ki je sposoben obvladovati visoke stopnje vnosa podatkov. Prednost je celovita preglednost, vendar so začetni in tekoči operativni stroški znatni. Beleženje iz enega vira je pogosto mogoče konfigurirati v nekaj minutah, pri čemer en sam pošiljatelj dnevnika pokaže na datoteko ali vtičnico, zaradi česar je privlačno za ekipe brez namenskih inženirskih virov za platformo.
Ko se v porazdeljenem sistemu kaj pokvari, vam združevanje telemetrije omogoča sledenje zahtevi med storitvami, povezovanje porasta zakasnitve z določeno uvedbo in preklop od anomalije metrike k ustreznim dnevnikom. Beleženje iz enega vira sili inženirje, da ročno združujejo informacije iz več izoliranih tokov dnevnikov, kar deluje dobro za preproste aplikacije, vendar postane mučno, ko sistemi rastejo.
Platforme za združevanje telemetrije lahko hitro postanejo drage, ker vnašajo in shranjujejo velike količine podatkov z visoko kardinalnostjo, ki so pogosto cenovno odvisni od količine podatkov ali števila gostiteljev. Beleženje iz enega vira omogoča predvidljive stroške, saj shranjujete dnevnike samo iz enega vira, vendar izgubite možnost zaznavanja vzorcev med sistemi. Številne ekipe začnejo z beleženjem iz enega vira in se z rastjo svoje infrastrukture preselijo na združevanje.
Prostor združevanja telemetrije se je združil okoli OpenTelemetry kot standarda za instrumentacijo, nevtralnega do prodajalcev, ki ga podpira CNCF in so ga sprejeli večji ponudniki storitev v oblaku. Beleženje iz enega vira se opira na starejše, a dobro uveljavljene protokole, kot je syslog (RFC 5424), in preproste formate datotek. Oba ekosistema sta zrela, vendar orodja za združevanje izkoriščajo bogatejšo integracijo s sodobnimi CI/CD in delovnimi tokovi, ki so izvorni v oblaku.
Združevanje telemetrije je prava izbira za vsako organizacijo, ki izvaja mikrostoritve, Kubernetes ali večoblačne arhitekture, kjer razumevanje delovanja sistema zahteva pogled preko meja. Beleženje iz enega vira ostaja pomembno za vgrajene sisteme, starejše monolitne aplikacije, beleženje skladnosti s predpisi iz določenega sistema ali majhne projekte, kjer režijski stroški združevanja niso upravičeni.
Združevanje telemetrije je le domiselno beleženje z drugačnim imenom.
Čeprav so dnevniki ena od komponent, agregacija telemetrije obravnava tudi metrike in sledi, ki zagotavljajo kvantitativne meritve in informacije o poti na ravni zahtev, ki jih dnevniki sami ne morejo učinkovito zajeti. Tri vrste signalov služijo različnim namenom odpravljanja napak in se medsebojno dopolnjujejo.
Beleženje iz enega vira je v sodobnih oblačnih okoljih zastarelo.
Beleženje iz enega vira se še vedno pogosto uporablja v vgrajenih sistemih, napravah interneta stvari, starejših poslovnih aplikacijah in scenarijih, osredotočenih na skladnost s predpisi, kjer je zajemanje revizijskih sledi iz določenega sistema glavna zahteva. Ni zastarelo, ampak le specializirano.
Več telemetričnih podatkov vedno pomeni boljšo opazovalnost.
Zbiranje vsega brez premišljenega vzorčenja in filtriranja vodi do visokih stroškov in utrujenosti od opozoril. Učinkovito združevanje zahteva odločitev, kateri signali so pomembni, določitev ustreznih politik hrambe in oblikovanje poizvedb, ki izpostavijo uporabne vpoglede, namesto da bi ekipe utapljale v hrupu.
Za združevanje telemetrije potrebujete komercialno platformo SaaS.
Odprtokodni skladi, kot so Prometheus, Grafana, Loki, Tempo in OpenTelemetry Collector, zagotavljajo popolne zmogljivosti združevanja brez vezave na določenega prodajalca. Številne organizacije delujejo v celoti z odprtokodnimi orodji, zlasti v reguliranih panogah ali okoljih, ki so občutljiva na stroške.
Sečnja iz enega vira je vedno cenejša od združevanja.
Čeprav ima sečnja iz enega vira nižje osnovne stroške, lahko izvajanje številnih izoliranih sečalnih cevovodov v veliki floti dejansko stane več kot centralizirana agregacijska platforma. Skupni stroški so odvisni od obsega, zahtev glede hrambe in količine inženirskega časa, porabljenega za vzdrževanje vsakega cevovoda.
Združevanje telemetrije izberite, kadar vaša infrastruktura obsega več storitev ali gostiteljev in potrebujete korelirano preglednost za hiter odziv na incidente. Za enostavnejša okolja, starejše sisteme ali kadar se zahteve glede skladnosti osredotočajo na revizijsko sled določene komponente se držite beleženja iz enega vira. Številne zrele organizacije dejansko uporabljajo oboje, pri čemer uporabljajo združevanje za operativno opazovanje, hkrati pa vzdržujejo dnevnike iz enega vira za ciljno usmerjeno odpravljanje napak ali regulativne potrebe.
Ta primerjava med službama Amazon Web Services in Google Cloud analizira njune ponudbe storitev, cenovne modele, globalno infrastrukturo, zmogljivost, izkušnje razvijalcev ter idealne primere uporabe, kar organizacijam pomaga izbrati oblačno platformo, ki najbolje ustreza njihovim tehničnim in poslovnim zahtevam.
Čakalne vrste mrtvih sporočil in ponovni poskusi v pomnilniku predstavljajo dva bistveno različna pristopa k obravnavanju napak pri obdelavi sporočil v porazdeljenih sistemih, pri čemer čakalne vrste mrtvih sporočil zagotavljajo trajno izolacijo problematičnih sporočil, medtem ko ponovni poskusi v pomnilniku ponujajo lahkotno obnovitev z nizko zakasnitvijo brez dodatnih stroškov vztrajnosti.
Deduplikacija na ravni zahtev obdela vsako dohodno zahtevo posebej, da v realnem času odstrani podvojene podatke, medtem ko deduplikacija na ravni paketov združuje več zahtev in po kopičenju odstrani redundance. Oba pristopa zmanjšata redundanco podatkov, vendar se bistveno razlikujeta po zakasnitvi, porabi virov in idealnih primerih uporabe.
Deljenje podatkov po uporabniškem ID-ju distribuira zapise na podlagi edinstvenih uporabniških identifikatorjev za predvidljive vzorce dostopa, medtem ko deljenje podatkov po geografski lokaciji razdeli podatke po regijah, da se zmanjša zakasnitev in zagotovi skladnost z zakoni o suverenosti podatkov. Obe strategiji rešujeta izzive obsega, vendar optimizirata za bistveno različne prioritete.
Dinamično usmerjanje prometa prilagaja poti zahtev v realnem času glede na stanje strežnika, zakasnitev in obremenitev, medtem ko fiksno usmerjanje zahtev pošlje vsako zahtevo na vnaprej določen cilj ne glede na spreminjajoče se pogoje. Oba pristopa se močno razlikujeta po odpornosti, skalabilnosti in operativni kompleksnosti za sodobne sisteme v oblaku.
