13 Инструменти за извличане на търговски данни от Big Data

В последния ми блог говорихме за инструменти за извличане на данни с отворен код. Основната цел на „ETL инструмента“ е да събере съдържанието на различни бази данни или операционни системи във вашата организация и да премести/копира/прехвърли всички тези данни в централизирана база данни. Тази „централизирана база данни“ често се нарича „склад за данни“. Като алтернатива, ETL инструменти се използват и за извършване на сложни трансформации на данни, които е трудно да се направят с помощта на прости SQL изрази.

Ето списък с някои търговски ETL инструменти:

• IBM ИНФОСФЕРА ДАННИ –

Това е ETL инструмент и част от пакета IBM Information Platforms Solutions и IBM InfoSphere. Той използва графична нотация за изграждане на решения за интегриране на данни. Той интегрира данни в множество системи, използвайки високопроизводителна паралелна рамка и поддържа разширено управление на метаданни и корпоративна свързаност. Мащабируемата платформа осигурява по-гъвкава интеграция на всички видове данни, включително големи данни в покой (базирани на Hadoop) или в движение (базирани на поток), на разпределени и мейнфрейм платформи.

• Услуги за интеграция на Microsoft SQL Server (SSIS) –

Microsoft SSIS е инструмент за интеграция на корпоративни данни, трансформация на данни и миграция на данни, който е вграден в базата данни на Microsoft SQL Server. Може да се използва за различни задачи, свързани с интеграцията, като например анализиране и почистване на данни и стартиране на процеси за извличане, трансформиране и зареждане за актуализиране на складове за данни.

Вижте също:  Вникване в 26 техники за анализ на големи данни

• ADEPTIA ETL SUITE –

Adeptia предлага пълна ETL функционалност, комбинирана с лесен, интуитивен интерфейс; давайки на потребителите възможността да трансформират множество различни файлове. Adeptia ETL Suite е предназначен дори за хора, които не са ИТ, като дава на бизнес потребителите възможност да имат достъп до своите данни в реално време и да трансформират собствените си данни, за да отговарят на техните операции, като същевременно позволява на ИТ да управлява процеси и гарантира, че данните се управляват сигурно и правилно.

• Informatica Powercenter –

Informatica Power Center е широко използван инструмент за извличане, трансформиране и зареждане, използван при изграждането на корпоративни хранилища за данни. Основните компоненти на Informatica PowerCenter са неговите клиентски инструменти, сървър, сървър на хранилище и хранилище. Сървърът на Power Center и сървърът на хранилището съставляват ETL слоя, който завършва ETL обработката.

• IBI IWAY DATAMIGRATOR –

Data Migrator е мощен и изчерпателен автоматизиран инструмент, предназначен да опрости драстично процесите на извличане, трансформиране и зареждане (ETL), включително създаването, поддръжката и разширяването на хранилища за данни, витрини с данни и оперативни хранилища на данни. Интуитивен интерфейс позволява бързо създаване на ETL процес от край до край, включващ хетерогенни структури от данни в различни изчислителни платформи. Освен това, функцията за улавяне на данни за промяна зарежда само променени записи във вашия източник на данни, намалявайки драстично времето, необходимо за опресняване на данните, и улеснявайки склад за данни в почти реално време.

Вижте също:  Сивата зона на големите данни – какво трябва и не

• Elixir Data ETL –

Elixir Data ETL е проектиран да осигури самообслужваща се манипулация на данни при поискване за бизнес потребители, както и за нуждите от обработка на данни на ниво предприятие. Неговата парадигма за визуално моделиране драстично намалява времето, необходимо за проектиране, тестване и внедряване на извличане, агрегиране и трансформиране на данни – критичен процес за всяка обработка на приложения, корпоративно отчитане и измерване на производителността, витрина с данни или инициативи за съхранение на данни.

• SYNCSORT DMX –

Syncsort DMX пренася всички трансформации на данни в по-високопроизводителен ETL двигател в паметта. Трансформациите се обработват в движение, елиминирайки необходимостта от скъпоструващи области на база данни или ръчно насочване на трансформации към базата данни.

• SAS управление на данни –

SAS Data Management дава възможност на вашите бизнес потребители сами да актуализират данни, да променят процесите и да анализират резултатите, като освобождават за други проекти. Плюс това, вграденият бизнес речник, както и SAS и възможности за управление на метаданни на трети страни и визуализация на родословието поддържат всички на една и съща страница.

• SAP Data Services –

Той помага за интегриране, трансформиране и подобряване на данните на ниво проект или предприятие. Той предоставя едно решение от корпоративен клас за интегриране на данни, качество на данните, профилиране на данни и обработка на текстови данни, което позволява на потребителите да интегрират, трансформират, подобряват и доставят данни.

• ИЗДАНИЕ НА ORACLE ИНТЕГРАТОР НА ДАННИ ENTERPRISE –

Той предоставя технология за извличане на натоварване и трансформиране (E-LT), която подобрява производителността и намалява разходите за интегриране на данни – дори в хетерогенни системи. Осигурява високопроизводителна и по-ниска TCO, поддръжка на хетерогенна платформа за интегриране на корпоративни данни и модули за знания за оптимизирана производителност и разширяемост на разработчиците.

• Мета апартамент –

Meta Suite ви предлага бързо време до стойност, мащабируемост и богат избор от поддържани изходни и целеви файлове и типове бази данни. Освен нормалната работа на извличане, зареждане и сливане на оперативни данни, тя може да се използва и за консолидиране и рационализиране на данни и предоставяне като такава поддръжка за управление на основните данни.

Прочетете също:  Ръководство за начинаещи за анализ на големи данни

• ИНТЕГРАТОР НА ДАННИ НА PERVASIVE –

Сега е част от Actian. Той изпълнява сложни операции по интеграция, въпреки че софтуерът е забележително лесен за използване и не изисква специализиран набор от умения. Богатите му функции са изключително интуитивни и конфигурируеми за проектиране, внедряване и управление – без удар на стикера. Той има същия пълнофункционален уеб потребителски интерфейс, използван както за локални, така и за облачни версии.

• Sagent Data Flow –

Това е мощен и гъвкав механизъм за интеграция, който събира данни от различни източници. Той е проектиран от Pitney Bowes Software и предоставя изчерпателен набор от инструменти за преобразуване на данни за подобряване на неговите бизнес стойности. Позволява анализиране на информация и създаване на смислени отчети, които да подпомогнат разбирането на вашия бизнес

Прочетете също:  Топ 15 инструменти за големи данни през 2017 г

Изборът на софтуер или инструмент се решава от това какъв тип изискване има човек и което варира от бизнес до бизнес. Телекомуникационният бизнес би разполагал с големи и сложни данни за обработка в сравнение с магазина за дрехи. Така че телекомуникационният бизнес ще избере инструмент, който има функции за работа със сложни данни. Докато магазинът за търговия на дребно би предпочел лесен за използване инструмент с по-малко сложности, тъй като няма умения за програмиране и технически опит.

В следващия си блог ще изброя инструменти за следващия слой в референтната архитектура.