Padidėjus „Hadoop“ pritaikymui tradiciniuose įmonės IT sprendimuose ir didėjant „Hadoop“ diegimų gamybos aplinkoje, „Hadoop“ operacijų ir administravimo ekspertų poreikis rūpintis dideliais „Hadoop“ klasteriais tampa gyvybiškai svarbus.
„Hadoop“ administratoriaus pareigos:
- Atsakingas už „Hadoop“ infrastruktūros įgyvendinimą ir nuolatinį administravimą.
- Susiderinkite su sistemų inžinerijos komanda siūlydami ir įdiegdami naują „Hadoop“ reikalingą aparatinės ir programinės įrangos aplinką ir išplėsdami esamą aplinką.
- Darbas su duomenų perdavimo grupėmis nustatant naujus „Hadoop“ vartotojus. Šis darbas apima „Linux“ vartotojų nustatymą, „Kerberos“ vadovų nustatymą ir HDFS, „Hive“, „Pig“ ir „MapReduce“ prieigos bandymą naujiems vartotojams.
- Klasterių priežiūra, taip pat mazgų kūrimas ir pašalinimas naudojant tokius įrankius kaip „Ganglia“, „Nagios“, „Cloudera Manager Enterprise“, „Dell Open Manage“ ir kitus įrankius.
- „Hadoop“ grupių ir „Hadoop Map“ našumo derinimas.
- „Screen Hadoop“ klasterio darbų atlikimas ir pajėgumų planavimas
- Stebėkite „Hadoop“ sankaupos ryšį ir saugumą
- Tvarkykite ir peržiūrėkite „Hadoop“ žurnalo failus.
- Failų sistemos valdymas ir stebėjimas.
- HDFS palaikymas ir priežiūra.
- Kruopščiai bendradarbiaujate su infrastruktūros, tinklo, duomenų bazių, programų ir verslo informacijos grupėmis, kad garantuotumėte aukštą duomenų kokybę ir prieinamumą.
- Bendradarbiavimas su programų grupėmis, jei reikia, įdiegti operacinės sistemos ir „Hadoop“ naujinimus, pataisas, versijų naujinimus.
- Pardavėjo eskalacijos kontaktinis punktas
„Hadoop Administration“ yra naudinga ir pelninga karjera, suteikianti daug galimybių augti. Jei aukščiau išvardytos darbo pareigos jus domina, atėjo laikas mokytis iš „Hadoop Administration“ ir pereiti į „Hadoop Admin“ karjeros kelią.
rūšiuoti algoritmus c ++
DBA pareigos, kurias atlieka „Hadoop“ administratorius:
- Duomenų modeliavimas, projektavimas ir įgyvendinimas remiantis pripažintais standartais.
- Programinės įrangos diegimas ir konfigūravimas.
- Duomenų bazės atsarginė kopija ir atkūrimas.
- Duomenų bazių sujungimas ir sauga.
- Veiklos stebėjimas ir derinimas.
- Disko vietos valdymas.
- Programinės įrangos pataisos ir atnaujinimai.
- Automatizuokite rankines užduotis.
DWH plėtros atsakomybė, kurią atlieka „Hadoop“ administratorius:
„DWH“ administratoriaus darbo pareigos apima paketinių užduočių kūrimą, testavimą ir stebėjimą šioms užduotims atlikti:
- Užtikrinkite referencinį vientisumą.
- Atlikite pagrindinio rakto vykdymą.
- Atlikite duomenų pakartojimą.
- Laiku įkelkite didelius duomenų kiekius.
Dabar, kai žinote apie „Hadoop“ administratoriaus darbo pareigas, pažvelkime į įgūdžius, kurių reikia norint jam būti.
Įgūdžiai, reikalingi norint tapti „Hadoop“ administratoriumi:
- Bendra eksploatacinė patirtis, tokia kaip geri trikčių šalinimo įgūdžiai, sistemos pajėgumų supratimas, kliūtys, atminties pagrindai, procesorius, OS, saugykla ir tinklai.
- „Hadoop“ įgūdžiai, tokie kaip „HBase“, „Hive“, „Pig“, „Mahout“ ir kt.
- Esminiai reikalavimai yra šie: Jie turėtų galėti įdiegti „Hadoop“ grupę, pridėti ir pašalinti mazgus, sekti užduotis, stebėti svarbiausias sankaupos dalis, sukonfigūruoti aukštą vardų ir mazgų prieinamumą, suplanuoti ir konfigūruoti ją bei padaryti atsargines kopijas.
- Geros „Linux“ žinios, nes „Hadoop“ veikia „Linux“.
- Susipažinimas su atvirojo kodo konfigūracijos valdymu ir diegimo įrankiais, tokiais kaip „Puppet“ arba „Chef“ ir „Linux“ scenarijai.
- Žinios apie pagrindinių „Java“ programų trikčių šalinimą yra pliusas.
„Edureka“ specialiai kuravo „Hadoop Administration“ kursus. Spustelėkite žemiau esantį mygtuką, kad pradėtumėte naudoti „Hadoop Administration“ ir sužinotumėte, kaip kursas padeda tapti „Hadoop“ administratoriumi.
Susijusios žinutės:
galų gale užbaigti java