Увод у питања и одговоре на Хадооп Админ интервју
Дакле, коначно сте нашли посао из снова у Хадооп Админу, али се питате како пробити Хадооп Админ Интервју и шта би могло бити вероватно Хадооп Админ Интервју Питања. Сваки интервју је различит и обим посла је такође различит. Имајући то у виду, осмислили смо најчешћа питања и одговоре за Хадооп Админ интервју који ће вам помоћи да постигнете успех у свом интервјуу.
Следи Хадооп Админ Интервјуска питања која ће вам помоћи у креирању интервјуа са Хадооп-ом.
1. Шта је сталак свест? И зашто је то потребно?
Одговор:
Свијест о сталак се односи на дистрибуцију чворова података на више регали.ХДФС слиједи алгоритам свијести о сталак за постављање блокова података. Сталак садржи више сервера. А за грозд, може бити више регала. Рецимо да постоји Хадооп кластер постављен са 12 чворова. Могле су да постоје 3 сталка са по 4 сервера на сваком. Сва три регала су повезана тако да су свих 12 чворова спојена и творе грозд. Приликом одлучивања о броју регала, важна ствар коју треба узети у обзир је фактор репликације. Ако постоји 100 ГБ података који ће свакодневно долазити са фактором репликације 3. Тада ће 300 ГБ података морати да се налази на кластеру. Боља је опција копирање података преко регала. Чак и ако се неки чвор спусти, реплика ће се налазити у другом сталку.
2. Која је подразумевана величина блока и како је дефинисана?
Одговор:
128МБ и то је дефинисано у хдфс-сите.кмл и такође је прилагодљиво у зависности од количине података и нивоа приступа. Рецимо, 100 ГБ података који тече у дану, подаци се раздвајају и чувају у кластеру. Колики ће бити број датотека? 800 датотека. (1024 * 100/128) (1024 а претворио ГБ у МБ.) Постоје два начина за подешавање величине блока података.
- хадооп фс -Д фс.лоцал.блоцк.сизе = 134217728 (у битовима)
- У хдфс-сите.кмл додајте ово својство а блоцк.сизе са величином битова.
Ако промените подразумевану величину на 512МБ јер је величина података огромна, тада ће генериране датотеке но.оф бити 200. (1024 * 100/512)
3. Како добијате извештај о хдфс датотечном систему? О доступности диска и бројим активним чворовима?
Одговор:
Команда: судо -у хдфс дфсадмин –репорт
Ово је листа информација које приказује,
- Конфигурисани капацитет - Укупан капацитет доступан у хдфс
- Садашњи капацитет - ово је укупна количина простора додијељена ресурсима који се налазе поред метастора и фсимаге употребе простора.
- Преостали ДФС - То је количина простора за складиштење који је и даље доступан ХДФС-у за смештање више датотека
- Употребљен ДФС - ХДФС је простор за складиштење који је искористио.
- ДФС коришћено% - у процентима
- Под реплицираним блоковима - Број блокова
- Блокови са оштећеним репликама - ако постоје оштећени блокови
- Недостају блокови
- Недостају блокови (са фактором репликације 1)
4. Шта је Хадооп баланс и зашто је то потребно?
Одговор:
Подаци распоређени по чворовима нису дистрибуирани у правом удјелу, што значи да употреба сваког чвора можда није уравнотежена. Један чвор може се прекомерно користити, а други се може недовољно користити. То доводи до високог трошковног ефекта током извођења било којег процеса и на крају би се приказивала велика употреба тих чворова. Да би се то решило, користи се Хадооп балансатор који ће уравнотежити употребу података у чворовима. Дакле, кад год се изврши баланс, подаци ће се премештати преко места где се чворови са недовољно искориштењима и преко коришћени чворови ослобађају.
5. Разлика између Цлоудере и Амбарија?
Одговор:
| Цлоудера Манагер | Амбари |
| Алат за администрацију за Цлоудера | Алат за администрацију за Хортон делује |
| Надгледа и управља целим кластером и извештава о употреби и било којим проблемима | Надгледа и управља целим кластером и извештава о употреби и било којим проблемима |
| Долази са Цлоудера услугом која се плаћа | Отвореног кода |
6. Које су главне радње које обавља Хадооп администратор?
Одговор:
Надгледајте здравље кластера - Постоји много страница апликација које се морају надгледати ако се покрећу неки процеси. (Сервер за посао, ИАРН менаџер ресурса, Цлоудера менаџер / амбарија у зависности од дистрибуције)
укључите сигурност - ССЛ или Керберос
Извођење мелодије - Хадооп баланс
По потреби додајте нове чворове података - Промјене и конфигурације инфраструктуре
Необавезно за укључивање МапРедуце послужитеља за праћење историје посла а Понекад би поновно покретање услуга помогло да се ослободи кеш меморија. То је када кластер с празним процесом.
7. Шта је Керберос?
Одговор:
Потребна је провјера аутентичности за сваку услугу за синкронизацију како би се покренуо процес. Препоручује се да омогућите Керберос. Будући да се бавимо дистрибуираним рачунањем, увек је добра пракса да се шифрира док приступамо подацима и обрађујемо их. Пошто су сваки чвор повезани и сваки пролаз информација пролази кроз мрежу. Како Хадооп користи Керберос, лозинке се не шаљу преко мрежа. Уместо тога, лозинке се користе за израчунавање кључева за шифровање. Поруке се размењују између клијента и сервера. Једноставно речено, Керберос међусобно обезбеђује идентитет (чворови) на сигуран начин.
Конфигурација у цоре-сите.кмл
Хадооп.сецурити.аутхентицатион: Керберос
8. Која је важна листа хдфс команди?
Одговор:
| Команде | Сврха |
| хдфс дфс –лс | За попис датотека из датотечног система хдфс. |
| Хдфс дфс - улаз | Копирајте датотеку из локалног система у хдфс датотечни систем |
| Хдфс дфс –цхмод 777 | Дајте дозволу за читање, писање и извршавање датотеке |
| Хдфс дфс –гет | Копирајте датотеку из хдфс датотечног система у локални датотечни систем |
| Хдфс дфс –цат | Погледајте садржај датотеке из датотечног система хдфс |
| Хдфс дфс –рм | Уклоните датотеку из хдфс датотечног система. Али биће премештен на отпад датотеку смећа (то је као кош за смеће у Виндовсима) |
| Хдфс дфс –рм –скипТрасх | Трајно уклања датотеку из кластера. |
| Хдфс дфс –тоуцхз | Креирајте датотеку у датотечном систему хдфс |
9. Како проверити записе Хадооп посла посланих у кластеру и како прекинути већ покренути процес?
Одговор:
дневници пређе –апплицатионИд - мастер апликација генерира евиденције на свом спремнику и додаје се уз ИД који генерише. Ово ће бити корисно за надгледање стања покретања процеса и информација дневника.
апликација пређе –килл - Ако постојећи процес који је покренут у кластеру треба прекинути, користи се наредба килл тамо гдје се ИД апликације користи за прекид посла у кластеру.
Препоручени чланак
Ово је водич за списак питања и одговора за интервјуе за Хадооп Админ како би кандидат могао лако да разбије ова Хадооп Админ Интервју Питања. Такође можете погледати следеће чланке да бисте сазнали више
- Питања и одговори за Хадооп кластер интервју - Топ 10 најкориснијих
- Интервјуска питања за моделирање података - 10 важних питања
- Питања о интервјуу за систем САС - Топ 10 корисних питања