Увод у архитектуру складишта података
- Складиште података је место складиштења које садржи колекције неколико различитих врста података прикупљених из више врста извора.
- Цео процес у коме се спољни извори података прикупљају, обрађују, чувају и анализирају до употребљивих информација одвијају се унутар скупа система који су обједињени јединственом шемом познатом као Архитектура складишта података.
Архитектура складишта података
Архитектура складишта података обично се састоји од три нивоа.
- Топ Тиер
- Средњи ниво
- Боттом Тиер
Топ Тиер
- Топ Тиер се састоји од предњег краја клијентове архитектуре.
- Информације примењене у Трансформисане и Логике похрањене у складишту података биће коришћене и стечене у пословне сврхе на овом нивоу.
- Постоји неколико алата за генерисање и анализу извештаја за генерисање жељених информација.
- Овде се врши рударство података које је ових дана постало велики тренд.
- Сав документ анализе трошкова, трошкова и све функције које одређују пословни посао на основу профита врши се на основу ових алата који користе податке складишта података.
Средњи ниво
- Средњи слој чине ОЛАП сервери
- ОЛАП је Онлине аналитички сервер за обраду
- ОЛАП се користи за пружање информација пословним аналитичарима и руководиоцима
- Пошто се налази у Средњем нивоу, с правом ступа у интеракцију са информацијама које су присутне у Доњем нивоу и преноси увид у алате Топ Тиер који обрађују расположиве информације.
- Углавном се релационалан или вишедимензионалан ОЛАП користи у архитектури складишта података.
Боттом Тиер
Доњи слој се углавном састоји од извора података, ЕТЛ алата и складишта података.
1. Извори података
Извори података састоје се од Изворних података који се прибављају и пружају алата Стагинг и ЕТЛ за даљи поступак.
2. ЕТЛ Алати
- ЕТЛ алати су веома важни јер помажу у комбиновању логике, сирових података и шеме у једно и учитавају информације у складиште података или податке о марки.
- Понекад ЕТЛ учитава податке у марке података и информације се затим чувају у складишту података. Овај приступ је познат и као Боттом Уп приступ.
- Приступ у којем ЕТЛ директно преноси информације у складиште података познат је и као приступ одоздо.
Разлика између приступа одоздо нагоре и приступа одоздо према горе
| Одозго на доле приступ | Приступ одоздо према горе |
| Пружа прецизан и доследан приказ информација јер се информације из складишта података користе за креирање марки података | Извештаји се могу лако генерисати будући да се Дата мартови креирају први и релативно је лако комуницирати са мартовима података. |
| Снажан модел и стога га преферирају велике компаније | Није тако снажно, али складиште података се може проширити и број података се може створити |
| Време, трошкови и одржавање су високи | Време, трошкови и одржавање су ниски. |
Подаци Мартс
- Дата Март је такође компонента складиштења која се користи за чување података одређене функције или дела који је у вези са компанијом од стране појединог органа.
- Дата март прикупља информације из Дата Варехоусе-а и стога можемо рећи да дата март похрањује подскуп података у Дата Варехоусе-у.
- Подаци за марку су флексибилни и мале величине.
3. Складиште података
- Дата Варехоусе је централна компонента целокупне архитектуре складишта података.
- Дјелује као складиште за похрану информација.
- Велике количине података се чувају у складишту података.
- Ове информације користе неколико технологија попут Биг Дата-а за које је потребна анализа великих подскупова информација.
- Дата Март је такође модел Дата Варехоусе-а.
Различити слојеви архитектуре складишта података
Постоје четири различите врсте слојева који ће увек бити присутни у архитектури складишта података.
1. Слој извора података
- Слој извора података је слој на коме се наилазе подаци из извора и који се затим шаљу осталим слојевима ради жељених операција.
- Подаци могу бити било које врсте.
- Изворни подаци могу бити база података, прорачунска табела или било које друге врсте текстуалне датотеке.
- Изворни подаци могу бити било којег формата. Не можемо очекивати да ћемо добити податке истог формата с обзиром да су извори увелико различити.
- У стварном животу могу бити неки примери изворних података
- Датотеке за евиденцију сваке конкретне пријаве или посла или уноса послодаваца у компанију.
- Подаци анкете, подаци са берзе итд.
- Подаци веб прегледача и још много тога.
2. Слој стадија података
Следећи кораци се одвијају у слоју фазе података.
1. Вађење података
Подаци примљени од стране Слоја извора уносе се у фазни ниво где се први процес који се одвија са стеченим подацима екстракција.
2. База података за слетање
- Издвојени подаци привремено се чувају у одредишној бази података.
- Дохваћа податке након вађења података.
3. Подручје извођења
- Узимају се подаци у подацима о слијетању и обавља се неколико провјера квалитета и поступака у подручју поступања.
- Такође су идентификована структура и шема и прилагођавања података који нису уређени чиме се покушава створити заједничко међу подацима који су стечени.
- Имати место или поставити податке непосредно пре трансформације и промене додатна је предност због чега је поступак постављања врло важан.
- Олакшава обраду података.
4. ЕТЛ
- То је екстракција, трансформација и оптерећење.
- ЕТЛ Алати користе се за интеграцију и обраду података где се логика примењује на прилично сирове, али помало уређене податке.
- Ови подаци се издвајају према аналитичкој природи који су потребни и трансформишу се у податке за које се сматра да су подобни за складиштење у складишту података.
- Након Трансформације, подаци или боље речено информација се коначно учитава у складиште података.
- Неки примери ЕТЛ алата су Информатица, ССИС итд.
3. Слој за складиштење података
- Обрађени подаци се чувају у складишту података.
- Ови подаци се бришу, трансформишу и припремају са одређеном структуром и на тај начин пружају могућност послодавцима да користе податке како то захтева Бизнис.
- Овисно о приступу архитектуре, подаци ће се похранити у Дата Варехоусе и Дата Мартс. О подацима података ће се разговарати у каснијим фазама.
- Неки укључују и оперативну трговину података.
4. Слој презентације података
- Овај слој где корисници ступају у интеракцију са подацима похрањеним у складишту података.
- Упити и неколико алата користиће се за добивање различитих врста информација на основу података.
- Информације до корисника стижу кроз графички приказ података.
- Алати за извештавање користе се за добијање пословних података, а пословна логика се такође примењује за прикупљање неколико врста информација.
- Мета подаци и системске операције и перформансе се такође одржавају и гледају у овом слоју.
Закључак
Важна тачка у складишту података је његова ефикасност. Да бисмо створили ефикасну складиште података, конструирамо оквир познат као оквир пословне анализе. Постоје четири врсте гледишта у погледу дизајна складишта података.
1. Поглед одозго на доле: овај приказ омогућава само одређене информације потребне за складиште података.
2. Приказ извора података: Овај приказ приказује све информације од извора података до начина преобликовања и складиштења.
3. Приказ складишта података: Овај приказ приказује информације присутне у складишту података путем табела чињеница и табела димензија.
4. Приказ пословног упита: Ово је приказ који приказује податке са становишта корисника.
Препоручени чланци
Ово је водич за архитектуру складишта података. Овде смо разговарали о различитим врстама погледа, слојева и слојева архитектуре складишта података. Можете и да прођете кроз друге наше предложене чланке да бисте сазнали више -
- Каријера у складишту података
- Како функционише ЈаваСцрипт
- Интервјуи за складиште података
- Шта је Панда