Maailm on muutumas andmeruumiks, kus iga päev genereeritakse üha rohkem andmeid. Ühe uuringu kohaselt laadivad kasutajad iga päev üles 55 miljonit pilti, 340 miljonit säutsu ja 1 miljard dokumenti, mis kokku moodustab 2,5 kvintiljonit andmeid. Jah, sa lugesid õigesti!
Nüüd on küsimus selles, kuidas me saame nii palju andmeid hallata, kui traditsioonilised andmetöötlusrakendused pole selleks piisavad. Üha intensiivistunud andmete loomine on toonud kaasa uue tehnika, mida me nimetame suurandmeteks . See on lihtsalt uuem tehnika suure hulga andmeväärtuste salvestamiseks, haldamiseks ja jagamiseks. Suurandmed said oma hoo sisse 2000. aastate alguses, kuid nende tähtsus praeguses stsenaariumis kasvab. Asjatundmatute jaoks hõlmab see kolme Vs- mahtu , kiirust ja mitmekesisust .
- Maht: andmeid kogutakse mitmest allikast, nagu äritehingud, sotsiaalmeedia, masinatevahelised andmed ja muud allikad. Koos muutub see tohutuks andmete kogumiseks, mida hallatakse uute tehnoloogiate, nagu Hadoop, abil. See on avatud lähtekoodiga tarkvara, mis võimaldab töödelda suuremaid andmekogumeid hajutatud andmetöötluskeskkonnas. Teisisõnu, Hadoop võimaldab teil murdosa aja jooksul sujuvalt salvestada ja hallata tonni andmeid.
- Kiirus: see on kiirus, millega andmeid vastu võetakse/kogutakse ja neile reageeritakse. Search Cloud Computing ütleb: „Iga suurandmete analüüsiprojekt neelab, korreleerib ja analüüsib andmeallikaid ning renderdab seejärel üldise päringu põhjal vastuse või tulemuse. See tähendab, et inimanalüütikutel peab olema üksikasjalik arusaam olemasolevatest andmetest ja neil peab olema mingisugune arusaam, millist vastust nad otsivad. Edaspidi mõistab see peaaegu reaalajas ja reaalajas andmeanalüüse sobiva andmete voogesituse jaoks.
- Mitmekesisus: andmed on tavaliselt erineval kujul, näiteks struktureeritud ja struktureerimata andmed, mis hõlmavad lisaks numbrilisi andmeid traditsioonilistes andmebaasides ja dokumentides, e-kirju, heli-, video-, finantstehinguid ja börsihindade andmeid. Kui struktureeritud andmete töötlemiseks ei ole vaja mingeid eeltingimusi, siis struktureerimata andmete puhul oleks seda vaja. Selle töötlemiseks on vaja sümmeetrilist struktureerimist.
Need V-d hõlmavad suurandmete traditsioonilist määratlust. Kuid tänapäevased uuringud on sellele lisanud täiendavaid V-sid, mis on:
- Tõesus: andmete tõepärasus viitab andmete tähenduslikkusele. Teisisõnu, andmete eelarvamused, müra ja ebanormaalsus. Kuigi andmeväärtusi pommitatakse, pole kõik need olulised. Andmed tuleks filtreerida kogumise ja analüüsimise etapis edasiseks voogesitamiseks. Ilmselt nõuab andmete sõelumine konkreetset meeskonda ja partnereid ning tagatakse, et töödeldakse ainult väärtuslikku teavet, samas kui ebaolulist jäetakse tähelepanuta.
Vaata ka: 13 suurandmete kommertsandmete ekstraheerimise tööriista
- Kehtivus: andmete kehtivus on suurandmete teine aspekt. Sarnaselt andmete õigsusele mängib ka kehtivus üliolulist rolli. See viitab andmete õigsusele ja täpsusele ettenähtud kasutuse kohta. Pärast filtreerimist analüüsitakse ja töödeldakse seda edasi.
- Volatiilsus: suurandmete volatiilsus viitab andmete kehtivusele ajas ja kasulikkuses. See aspekt hõlmab selliseid variante nagu andmed kehtivad ja kui kaua tuleks neid säilitada.
- Variatiivsus: varieeruvus viitab andmetele, mille tähendus pidevalt muutub. Sagedamini juhtub see andmetega, mis ilmuvad teatud ajahetkel, näiteks sotsiaalmeedia trendid või teatud ajavahemikku puudutav teave. Seda tüüpi andmeid analüüsitakse ja töödeldakse nende tähtsuse alusel.
Kuidas Big Data on stsenaariumi aja jooksul muutnud ja selle mõju
Üha suurenev andmete kogumine muudab organisatsioonide jaoks muutumatuks suurandmete tehnika kasutuselevõtu. Praegu on suurandmed kaasa toonud teatud konkreetsed muutused. Ilmselt nimetame neid muutusi ka tehnoloogia ajaks ja ajastuks.
- Sotsiaalsed võrgustikud/meedia: sotsiaalvõrgustikud oma mitme meediumi kaudu on praegusel ajal muutunud peavooluks. Miljardid inimesed kasutavad sotsiaalmeediat, et suhelda inimestega kõikjal, levitada sõna – äri, reklaam ja vahetus jne. Edaspidi genereeritakse sotsiaalmeedia ja selle võrgustike kaudu tohutuid andmeid ning need on suurandmete ilming.
Vaata ka: ülevaade 26 suurandmete analüüsitehnikast
- Andmeallikas – avalikud/avatud andmed: erinevalt varasematest aegadest on paljud era- ja avalikud organisatsioonid teinud kasutajatele lugemiseks või kasutamiseks kättesaadavaks palju andmeid. Sagedamini on see teave osa piirkondlike ja riiklike andmete, majandustegevusega seotud andmete, avalike teenuste, demograafiliste või keskkonnanähtuste, infomobiilsuse ja transpordi kohta.
- Asjade Internet: iga toode ja ajaelement hõlmab elektroonika miniatureerimist ning laiaulatuslikke, mobiilseid ja "kõikjal leiduvaid" ühendusvõimalusi, mis muudab asjad digitaalselt juhitavaks. Näiteks autod ja muud kodumaised tooted on mingil moel interneti ja tehnoloogia keskmes. Lisaks ütleb Ingenium Magazine : "Meie keskkonna iga osa saab "rikastada", et koguda andmeid ja teavet loodusnähtuste (nt maalihked, kliimamuutused, loodusnähtused) nii käitumuslike kui ka sotsiaalsete nähtuste (nt liiklus, inimeste vood linnapiirkondades) kohta. , ohutustasemed ja kogukonna järelevalve). Iga tänapäeva maailma sfääri saab digitaliseerida ja sellisena saada peaaegu piiramatuks andme- ja teabeallikaks.
- Internet, veeb, e-kaubandus ja rakendused: täna loodud teave on täpsemalt saadaval Internetis/veebis või kasvavates rakendustes. Suurandmete osa moodustamisel ei saa ignoreerida internetti/veebi, e-kaubandust ja rakendusi. Need on valdkonnad, millest kasutajad andmekasutuse osas üldiselt sõltuvad.
Suurandmete mõju
Kuna suurandmed muudavad stsenaariumi, on teatud tööstusharud neile suurt mõju avaldanud. Mõned neist mõjudest on vastavalt tööstusharule loetletud allpool.
- Mõju turundusele: Turunduse osas aitavad suurandmed tarbijatel paremini kaasata, säilitada ja lojaalsust ning pakkuda turundusstrateegiatest optimaalset väljundit/jõudlust. Poleks liialdus öelda, et suurandmed on turundusstsenaariumi seestpoolt muutnud.
Pildi allikas: forbes.com
- Mõju ettevõtetele: Matisia Consultantsi tegevjuht ja asutaja Kristina Roth ütleb: " Suurandmete abil saavad ettevõtted õppida täiustama kiiremini, paremini ja väiksemate kuludega, võttes igast parendusprojektist õppetunnid ja kaasates need järgmisesse projekti." Lisaks on see aidanud organisatsioonil hoida oma andmeid turvalisena. Üks uuringutest on vallandanud järgmised aspektid.
- 64% IT-ettevõtetest investeerib palju suurandmetesse.
- 69% vastajatest kinnitas, et suurandmed on üliolulised ja esmatähtsad.
- 75% CIO-dest on näidanud, et suur on nende tootlikkust ja üldist tõhusust positiivselt mõjutanud.
- 70% osalejatest on näidanud, et nende ettevõtetel on suur andmeinvesteeringute tõttu olnud positiivne mõju
- Mõju ühiskonnale: muu hulgas on suurandmed mõjutanud igapäevaelu ja ka ühiskonda. Suurema selguse huvides võime vaadelda uuemaid tehnoloogiaid, mis muudavad elu intelligentsemaks, näiteks isejuhtivad autod, mida navigeeritakse läbi inti-tech. Lähitulevikus lahendatakse probleemid isegi enne, kui need pinnale tulevad. Tõenäoliselt vahetavad intelligentsed rakendused ja vidinad ka olemasolevad.
Lisaks kõigele sellele on suurandmetel tohutu mõju ka meditsiinile, sotsiaalmeedia turundusele, reklaamile ja muudele majandusaspektidele.
Vaata ka: Suurandmete hall ala – mida tohib ja mida mitte
Suurandmete tulevikuväljavaated
Seda kõike arvestades hakkab üha rohkem ettevõtteid lähiajal suurandmeid kasutusele võtma. Lisaks on teadlased määranud ka mitmesuguseid suurandmete tulevikuväljavaateid. Siin on mõned neist:
- Üleminek operatiivselt analüütilisele: kuigi olemasolev tehnoloogia on aidanud andmete voogesituse toimimist, on tulevane kalduvus rohkem analüüsima andmeid kogutavates valdkondades. Teisisõnu, reaalajas voogesitus on suurandmete tuleviku aspekt.
- Privaatsus on väljakutse: kui andmete kasv pidevalt intensiivistub ilma peatumiseta, on privaatsus selle areneva tehnika jaoks väljakutse. Seda rohkem sellistes tööstusharudes nagu pangandus, sotsiaalmeedia ja muud sarnased, kus kasutajateave on vajalik ja sellel on oluline roll.
- Ettevõtted saavad sellest tohutut kasu: nagu eespool mainitud, saavad ettevõtted suurandmetest kasu. Seda on tulevikus veelgi rohkem. Täiustatud optimeerimine ja tootlikkus on peamised eelised. Täpsemalt eeldatakse, et ettevõtted näevad tootlikkuse kasuna 430 miljardit dollarit.
Vaata ka: 40 hämmastavat fakti suurandmete kohta
Kui on olemas suur tehnoloogia, mida me praegu vaatleme, ei saaks midagi muud kui suurandmed, mis kõik on loodud koguma tohutuid andmeid. Nagu öeldud, muutuvad suurandmed aja jooksul paremaks ja muudavad maailma paremaks.