Procijenjeno vrijeme čitanja: 7 minuti
Ako postoje podaci koji dolaze iz različitih izvora, bilo da se radi o CRM-u, feedovima društvenih medija ili podacima o događajima u ponašanju. I ti su podaci vjerojatno pohranjeni u raznim različitim alatima i sustavima u cijelom tehnološkom nizu (kao što su naslijeđeni sustavi, alati temeljeni na oblaku i skladište podataka o jezero).
Prvi korak u orkestraciji podataka je prikupljanje i organiziranje podataka iz svih tih različitih izvora i osiguravanje da su pravilno formatirani za ciljno odredište. Što nas dovodi do: transformacije.
Podaci su dostupni u nekoliko različitih formata. Može biti strukturiran, nestrukturiran ili polustrukturiran ili isti događaj može imati različitu konvenciju imenovanja između dva interna tima. Na primjer, jedan sustav može prikupiti i pohraniti datum kao 21. travnja 2022., a drugi ga može pohraniti u numeričkom formatu, 20220421.
Kako bi svi ti podaci imali smisla, tvrtke ih često moraju transformirati u standardni format. Orkestracija podataka može pomoći u smanjenju tereta ručnog usklađivanja svih tih podataka i primjene transformacija na temelju politika upravljanja podacima vaše organizacije i plana praćenja.
Ključni dio orkestracije podataka je učiniti podatke dostupnima za aktivaciju. To se događa kada se čisti, konsolidirani podaci šalju nizvodnim alatima za neposrednu upotrebu (na primjer, stvaranje publike kampanje ili ažuriranje nadzorne ploče poslovne inteligencije).
Orkestracija podataka u biti je poništavanje izoliranih podataka i fragmentiranih sustava. Alluxio cijeni da podatkovna tehnologija prolazi kroz velike promjene svakih 3-8 godina. To znači da je tvrtka stara 21 godinu možda prošla kroz 7 različitih sustava upravljanja podacima od početka.
Orkestracija podataka također vam pomaže da se uskladite sa zakonima o privatnosti podataka, uklonite uska grla u podacima i provedete upravljanje podacima – samo tri (među mnogima) dobra razloga za njegovu implementaciju.
Zakoni o privatnosti podataka, kao što su GDPR i CCPA, imaju stroge smjernice za prikupljanje, korištenje i pohranu podataka. Dio usklađenosti je davanje potrošačima mogućnosti da odustanu od prikupljanja podataka ili da zatraže da vaša tvrtka izbriše sve njihove osobne podatke. Ako ne znate gdje su vaši podaci pohranjeni i tko im pristupa, može biti teško zadovoljiti ovaj zahtjev.
Otkako je GDPR stupio na snagu, vidjeli smo milijune zahtjeva za brisanjem. Neophodno je dobro razumjeti cijeli životni ciklus podaci kako bi bili sigurni da ništa ne pobjegne.
Uska grla su stalan izazov bez orkestracije podataka. Recimo da ste tvrtka s više sustava za pohranu podataka kojima trebate tražiti informacije. Osoba odgovorna za postavljanje upita tim sustavima vjerojatno će imati puno zahtjeva za prosijavanje, što znači da može doći do kašnjenja između timova koje im je potrebno podataka i onih koji tamo primaju učinkovito, što zauzvrat može učiniti informacije zastarjelima.
U dobro organiziranom okruženju, ova vrsta pokretanja i zaustavljanja bila bi eliminirana. Vaši će podaci već biti dostavljeni daljnjim alatima za aktivaciju (i ti će podaci biti standardizirani, što znači da možete imati povjerenja u njihovu kvalitetu).
Upravljanje podacima je teško kada se podaci distribuiraju u više sustava. Tvrtke nemaju potpuni uvid u životni ciklus podataka i nesigurnost oko toga koji su podaci pohranjeni (npr. golub) stvara ranjivosti, kao što je neadekvatna zaštita osobnih podataka.
Orkestracija podataka pomaže u rješavanju ovog problema nudeći veću transparentnost načina na koji se upravlja podacima. To omogućuje tvrtkama da proaktivno blokiraju loše podatke prije nego što dospiju u baze podataka ili utječu na izvješćivanje i postave dozvole za pristup podacima.
Postoji nekoliko izazova koji se mogu pojaviti prilikom pokušaja implementacije orkestracije podataka. Evo najčešćih kojih morate biti svjesni i kako ih izbjeći.
Silosi podataka uobičajena su, ako ne i štetna, pojava među poduzećima. Kako se tehnološki skupovi razvijaju, a različiti timovi posjeduju različite aspekte korisničkog iskustva, previše je lako da se podaci razvrstaju u različite alate i sustave. Ali rezultat je nepotpuno razumijevanje uspješnosti tvrtke, od slijepih točaka na putu korisnika do nepovjerenja u točnost analitike i izvješćivanja.
Poduzeća će uvijek imati protok podataka iz više dodirnih točaka u različite alate. Ali razbijanje silosa je ključno ako te tvrtke žele dobiti vrijednost od svojih podataka.
Posljednjih godina pojavili su se neki trendovi u pogledu načina na koji tvrtke upravljaju protokom i aktivacijom svojih podataka. Primjer za to je obrada podataka u stvarnom vremenu, kada se podaci obrađuju unutar milisekundi od generiranja. Podaci u stvarnom vremenu postali su ključni u svim industrijama, igrajući ključnu ulogu uIOT (na primjer, senzori blizine u automobilima), zdravstvo, upravljanje opskrbnim lancem, otkrivanje prijevara i gotovo trenutna personalizacija. Osobito s napretkom u strojnom učenju i umjetnoj inteligenciji, podaci u stvarnom vremenu omogućuju algoritme iumjetna inteligencija učiti bržim tempom.
Još jedan trend bio je prelazak na tehnologije temeljene na oblak. Dok su se neka poduzeća u potpunosti preselila u oblak, drugi će možda nastaviti imati kombinaciju lokalnih sustava i rješenja temeljenih na oblaku.
Zatim, tu je evolucija načina na koji je softver izgrađen i implementiran, što utječe na način na koji će se izvoditi orkestracija podataka.
– Ne uključuje čišćenje i provjeru podataka
– Ne testirati tijekove rada kako bi se osigurali glatki i optimizirani procesi
– Odgođeni odgovori na probleme kao što su nedosljednosti podataka, pogreške poslužitelja, uska grla
– Nepostojanje jasne dokumentacije u vezi s mapiranjem podataka, porijeklom podataka i planom praćenja
Za mjerenje ROI-ja orkestracije podataka:
– Razumijevanje osnovnih performansi
– Imajte na umu jasan skup ciljeva, KPI-ja i ciljeva za orkestraciju podataka
– Izračunajte ukupne troškove korištene tehnologije, zajedno s vremenom i unutarnjim resursima
– Mjerite važne metrike kao što su ušteđeno vrijeme, brzina obrade i dostupnost podataka itd.
BlogInnovazione.it
Coveware by Veeam nastavit će pružati usluge odgovora na incidente cyber iznude. Coveware će ponuditi forenziku i mogućnosti sanacije...
Prediktivno održavanje revolucionira sektor nafte i plina, s inovativnim i proaktivnim pristupom upravljanju postrojenjima.…
UK CMA izdao je upozorenje o ponašanju Big Tech-a na tržištu umjetne inteligencije. Tamo…
Uredba o "zelenim kućama", koju je formulirala Europska unija za povećanje energetske učinkovitosti zgrada, završila je svoj zakonodavni proces s...
