Hadoopi suurenenud kasutuselevõtuga traditsioonilistes ettevõtte IT-lahendustes ja Hadoopi juurutamiste arvu suurenemisega tootmiskeskkonnas muutub Hadoopi operatsiooni ja halduse ekspertide vajadus hoolitseda suurte Hadoopi klastrite eest.
Hadoopi administraatori kohustused:
- Vastutab Hadoopi infrastruktuuri juurutamise ja pideva haldamise eest.
- Hadoopi jaoks vajalike uute riist- ja tarkvarakeskkondade väljapakkumiseks ja juurutamiseks ning olemasolevate keskkondade laiendamiseks joondumine süsteemitehnika meeskonnaga.
- Koostöö andmete edastamise meeskondadega uute Hadoopi kasutajate seadistamiseks. See töö hõlmab Linuxi kasutajate seadistamist, Kerberose direktorite seadistamist ning HDFS-i, Hive, Pig ja MapReduce juurdepääsu testimist uutele kasutajatele.
- Klastrite hooldus ning sõlmede loomine ja eemaldamine selliste tööriistade abil nagu Ganglia, Nagios, Cloudera Manager Enterprise, Dell Open Manage ja muud tööriistad.
- Hadoopi klastrite ja Hadoop Mapi jõudluse häälestamine Rutiinide vähendamine.
- Ekraani Hadoop klastri tööde jõudlus ja suutlikkuse planeerimine
- Hadoopi klastri ühenduvuse ja turvalisuse jälgimine
- Hadoopi logifailide haldamine ja ülevaatamine.
- Failisüsteemi haldamine ja jälgimine.
- HDFS-i tugi ja hooldus.
- Tehke hoolikat koostööd infrastruktuuri, võrgu, andmebaasi, rakenduste ja äriteabe meeskondadega, et tagada andmete kõrge kvaliteet ja kättesaadavus.
- Vajaduse korral opsüsteemi ja Hadoopi värskenduste, plaastrite, versiooniuuenduste installimiseks koostöö rakenduste meeskondadega.
- Müüja eskaleerimise kontaktpunkt
Hadoop Administration on tasuv ja tulus karjäär, millel on palju kasvuvõimalusi. Kui ülal loetletud töökohustused teid huvitavad, on aeg end Hadoop Administrationiga kursis hoida ja asuda Hadoop Admini karjääriteele.
jquery eelised javascripti ees
DBA kohustused, mida täidab Hadoopi administraator:
- Andmete modelleerimine, kujundamine ja rakendamine tunnustatud standardite alusel.
- Tarkvara installimine ja konfigureerimine.
- Andmebaasi varundamine ja taastamine.
- Andmebaaside ühenduvus ja turvalisus.
- Jõudluse jälgimine ja häälestamine.
- Kettaruumi haldamine.
- Tarkvarapaigad ja täiendused.
- Automatiseerige käsitsi tehtavad toimingud.
DWH arenduskohustused, mille täidab Hadoopi administraator:
DWH administraatorite töökohustuste hulka kuulub partiitööde väljatöötamine, testimine ja jälgimine järgmiste ülesannete jaoks:
- Tagage viite terviklikkus.
- Tehke esmane võti.
- Andmete ümbersõnastamine.
- Suurte andmemahtude õigeaegne laadimine.
Nüüd, kui teate Hadoopi administraatori töökohustustest, heitkem pilk selle saamiseks vajalikele oskustele.
Hadoopi administraatoriks saamiseks vajalikud oskused:
- Üldised töökogemused, nagu head tõrkeotsinguoskused, arusaam süsteemi võimsusest, kitsaskohtadest, mälu, protsessori, operatsioonisüsteemi, salvestusruumi ja võrkude põhitõdedest.
- Hadoopi oskused nagu HBase, Hive, Pig, Mahout jne.
- Kõige olulisemad nõuded on järgmised: Neil peaks olema võimalus Hadoopi klastrit juurutada, sõlme lisada ja eemaldada, jälgida töid, jälgida klastri kriitilisi osi, konfigureerida nimesõlmede kõrge kättesaadavus, ajastada ja konfigureerida seda ning teha varukoopiaid.
- Hea teadmine Linuxist, kuna Hadoop töötab Linuxil.
- Tutvumine avatud lähtekoodiga konfiguratsioonihalduse ja juurutamistööriistadega, nagu nuku või peakokk ja Linuxi skriptimine.
- Pluss on teadmised Java põhirakenduste tõrkeotsingust.
Edureka on spetsiaalselt kureerinud kursuse Hadoop Administration'ist. Hadoopi administreerimise alustamiseks ja õppimiseks, kuidas kursus aitab teil saada Hadoopi administraatoriks, klõpsake allolevat nuppu.
Seonduvad postitused:
sql serveri kuupäeva andmetüüp