13 Orodja za ekstrakcijo komercialnih podatkov velikih podatkov

V mojem zadnjem blogu smo govorili o odprtokodnih orodjih za ekstrakcijo podatkov. Glavni cilj "orodja ETL" je zbrati vsebino različnih baz podatkov ali operacijskih sistemov v vaši organizaciji in vse te podatke premakniti/kopirati/prenesti v centralizirano bazo podatkov. Ta »centralizirana baza podatkov« se pogosto imenuje »skladišče podatkov«. Druga možnost je, da se orodja ETL uporabljajo tudi za izvajanje zapletenih pretvorb podatkov, ki jih je težko narediti s preprostimi stavki SQL.

Tukaj je seznam nekaterih komercialnih orodij ETL:

• PODATKOVNI PODATKI IBM INFOSPHERE –

Je orodje ETL in del zbirke IBM informacijskih platform rešitev in IBM InfoSphere. Za izdelavo rešitev za integracijo podatkov uporablja grafični zapis. Integrira podatke v več sistemih z uporabo visoko zmogljivega vzporednega ogrodja in podpira razširjeno upravljanje metapodatkov in povezljivost podjetja. Razširljiva platforma omogoča bolj prilagodljivo integracijo vseh vrst podatkov, vključno z velikimi podatki v mirovanju (na podlagi Hadoop) ali v gibanju (na podlagi toka), na distribuiranih in velikih platformah.

• Integracijske storitve Microsoft SQL Server (SSIS) –

Microsoft SSIS je orodje za integracijo, pretvorbo podatkov in selitev podatkov podjetja, ki je vgrajeno v Microsoftovo bazo podatkov SQL Server. Uporablja se lahko za različna opravila, povezana z integracijo, kot so analiza in čiščenje podatkov ter zagon procesov ekstrakcije, preoblikovanja in nalaganja za posodabljanje podatkovnih skladišč.

Glejte tudi:  Vpogled v 26 analitičnih tehnik velikih podatkov

• APARTMA ADEPTIA ETL –

Adeptia ponuja popolno funkcionalnost ETL v kombinaciji z enostavnim, intuitivnim vmesnikom; daje uporabnikom možnost preoblikovanja številnih različnih datotek. Adeptia ETL Suite je zasnovan celo za osebe, ki niso IT, saj daje poslovnim uporabnikom možnost dostopa do svojih podatkov v realnem času in preoblikovanja lastnih podatkov, da ustrezajo njihovim operacijam, hkrati pa IT-ju omogoča upravljanje procesov in zagotavlja, da se podatki upravljajo varno in pravilno.

• Informatica Powercenter –

Informatica Power Center je široko uporabljeno orodje za ekstrakcijo, transformacijo in nalaganje, ki se uporablja pri gradnji podatkovnih skladišč podjetij. Glavne komponente Informatica PowerCenter so njegova odjemalska orodja, strežnik, strežnik repozitorija in repozitorij. Strežnik Power Center in strežnik repozitorija sestavljata sloj ETL, ki dokonča obdelavo ETL.

• IBI IWAY DATAMIGRATOR –

Data Migrator je zmogljivo in celovito avtomatizirano orodje, zasnovano za dramatično poenostavitev procesov ekstrakcije, preoblikovanja in nalaganja (ETL), vključno z ustvarjanjem, vzdrževanjem in širitvijo podatkovnih skladišč, podatkovnih prodajnih mest in operativnih shramb podatkov. Intuitiven vmesnik omogoča hitro ustvarjanje ETL procesa od konca do konca, ki vključuje heterogene podatkovne strukture na različnih računalniških platformah. Poleg tega funkcija za zajem podatkov o spremembah naloži le spremenjene zapise v vaš vir podatkov, kar dramatično skrajša čas, potreben za osvežitev podatkov, in olajša skladišče podatkov v skoraj realnem času.

Glejte tudi:  Sivo območje velikih podatkov – kaj storiti in ne

• Elixir Data ETL –

Elixir Data ETL je zasnovan tako, da zagotavlja samopostrežno obdelavo podatkov na zahtevo za poslovne uporabnike kot tudi za potrebe obdelave podatkov na ravni podjetja. Njegova paradigma vizualnega modeliranja drastično skrajša čas, potreben za načrtovanje, testiranje in izvajanje ekstrakcije, združevanja in preoblikovanja podatkov – kritičnega procesa za katero koli obdelavo aplikacij, poročanje v podjetju in merjenje uspešnosti, trg podatkov ali pobude za shranjevanje podatkov.

• SYNCSORT DMX –

Syncsort DMX prinaša vse pretvorbe podatkov v zmogljivejši ETL motor v pomnilniku. Transformacije se obdelujejo sproti, kar odpravlja potrebo po dragih uprizoritvenih območjih baze podatkov ali ročnem potiskanju transformacij v bazo podatkov.

• Upravljanje podatkov SAS –

SAS Data Management omogoča vašim poslovnim uporabnikom, da sami posodabljajo podatke, prilagajajo procese in analizirajo rezultate, s čimer se sprostijo za druge projekte. Poleg tega vgrajeni poslovni glosar ter SAS in zmožnosti upravljanja metapodatkov tretjih oseb in vizualizacije rodov ohranjajo vse na isti strani.

• SAP Data Services –

Pomaga pri integraciji, preoblikovanju in izboljšanju podatkov na ravni projekta ali podjetja. Ponuja enotno rešitev poslovnega razreda za integracijo podatkov, kakovost podatkov, profiliranje podatkov in obdelavo besedilnih podatkov, ki uporabnikom omogoča integracijo, preoblikovanje, izboljšanje in dostavo podatkov.

• ORACLE DATA INTEGRATOR ENTERPRISE EDITION –

Zagotavlja tehnologijo Extract Load and Transform (E-LT), ki izboljšuje zmogljivost in zmanjšuje stroške integracije podatkov – tudi v heterogenih sistemih. Zagotavlja visoko zmogljivo in nižjo TCO ter podporo heterogene platforme za integracijo podatkov v podjetju in module znanja za optimizirano produktivnost in razširljivost razvijalcev.

• Meta Suite –

Meta Suite vam ponuja hiter čas do vrednosti, razširljivost in bogato izbiro podprtih izvornih in ciljnih datotek ter vrst baz podatkov. Razen običajnega delovanja ekstrahiranja, nalaganja in spajanja operativnih podatkov se lahko uporablja tudi za konsolidacijo in racionalizacijo podatkov ter kot tako zagotavlja podporo za upravljanje glavnih podatkov.

Preberite tudi:  Vodnik za začetnike po analitiki velikih podatkov

• INTEGRATOR PODATKOV PERVASIVE –

Zdaj je del Actiana. Izvaja zapletene integracijske operacije, čeprav je programska oprema izjemno enostavna za uporabo in ne zahteva posebnega nabora veščin. Njegove bogate funkcije so zelo intuitivne in jih je mogoče konfigurirati za načrtovanje, uvajanje in upravljanje – brez udarca nalepke. Ima enak spletni uporabniški vmesnik z vsemi funkcijami, ki se uporablja tako za lokalne različice kot za različice v oblaku.

• Sagent podatkovni tok –

Je zmogljiv in prilagodljiv integracijski mehanizem, ki zbira podatke iz različnih virov. Zasnoval ga je Pitney Bowes Software in ponuja obsežen nabor orodij za pretvorbo podatkov za izboljšanje njegovih poslovnih vrednosti. Omogoča analizo informacij in ustvarjanje smiselnih poročil, ki pomagajo razumeti vaše podjetje

Preberite tudi:  15 najboljših orodij za velike podatke v letu 2017

Izbira katere koli programske opreme ali orodja je odvisna od vrste zahtev, ki se razlikujejo od podjetja do podjetja. Telekomunikacijsko podjetje bi imelo velike in zapletene podatke za obdelavo v primerjavi s trgovino z oblačili. Torej bi telekomunikacijsko podjetje izbralo orodje, ki ima funkcije za delovanje s kompleksnimi podatki. Medtem ko bi trgovina na drobno izbrala orodje, ki je enostavno za uporabo z manj zapletenostjo, saj nima programskih veščin in tehničnega ozadja.

V svojem naslednjem blogu bi navedel orodja za naslednjo plast v referenčni arhitekturi.