Nooremana armastasin ma Tähesõdade filmisarju. Mulle meeldis see nii väga, et mul oli selline videokassett kõigist neist. Ma vaatasin neid ikka ja jälle. Siis saabus DVD-mängijate aeg ja ma pidin need filmid uuesti DVD-le hankima. Mul ei olnud mingit kahtlust kogu komplekti uuesti DVD-le ostmise pärast, kuna tahtsin kogeda uut tehnoloogiat ja jätkata ka oma lemmikfilmide nautimist. Asjad olid suurepärased, kuni ilmus veel üks uus tehnoloogia - Blu-ray. Olles filme juba kaks korda ostnud, ei oodanud ma enam, et saaksin neid uuesti osta. Mõnda aega ei teinud ma mingeid pingutusi enda värskendamiseks, arvates, et saan ilma selle tehnoloogiata suurepäraselt hakkama. Ja mul läks hästi. See ei mõjutanud mu elu nagunii. Kuid ma nägin trendimuutust ja ma ei saanud oma filme oma sõpradega jagada, nagu nad teeksid omavahel. Tundsin end tõepoolest kõrvalejäetuna.
Lõpuks läksin välja ja sain filmi Blu-ray-sse. Ma ei mäleta seda mitte sellepärast, et ma filmi armastaksin, vaid sellepärast, et video kvaliteet oli meeletu. Ja kõige tipuks sain kogu filmikomplekti ühte Blu-ray plaadile.
Vajadus või tung ajakohasena püsimiseks on kõige tugevam, kui tegemist on meie erialaga, kuna riskid on suuremad. On muutunud oluliseks oma mängu tipus püsimine.
4 praktilist põhjust Hadoop 2.0 õppimiseks:
Nii vältimatu kui see ka pole, on oma erialal ajakohasena püsimisest saanud oluline osa meie elust. Nii hirmutav kui see ka ei tundu, pole vaja muretseda, sest tehnoloogiad ei muutu tegelikult nii kiiresti ega drastiliselt. Kuid kõnelused ja teave nende tehnoloogiate kohta ning asjad, mida me nendega teha saame, saavad nähtavaks. Siin on mõned põhjused, miks peaksite end kursis hoidma:
# 1: Ärge laske end välja tõmmata
Kui te ei pööra tähelepanu tehnoloogia uusimale värskendusele, võib teil olla esilaterna vahele jäänud hirve. Pole just teie elukutsete võimekas pilt. Kui olete ajakohane, tunnevad eakaaslased teid professionaalsete oskuste eest. Kõiki uusi asju, mida õpite, ei pruugi olla vaja rakendada, kuid värskendustest teadlik olemine on hädavajalik.
Näiteks kui Hadoopis räägitakse, saate oma eakaaslastele teada anda, et Hadoop 2.5.0-l on HTTP-puhverserveri kasutamisel autentimise täiustused. Ja ka Hadoopi samas versioonis on säte kirjutada otse Graphite'i.
Kui organisatsioonid kavatsevad minna üle Hadoopi, on hädavajalik olla viimaste värskenduste hulgas. Ja ‘teadmine’ võib teie karjääris tohutult muutuda.
# 2: Konkurentsiserv
Oma valdkonnas vilunud spetsialiste austatakse. Ja ajakohasena püsimine on parim viis olla tipus. Teie vajadus end värskena hoida peegeldab teie kirge oma töö vastu. Arendades oma asjatundlikkust oma töös ja valdkonnas, teenite ümbritsevate inimeste usalduse ja austuse. Juhtimise vaatenurgast on see hindamatu!
Isegi kui teie organisatsioon töötab endiselt Hadoop 1.0-ga, hoiab Hadoop 2 kõigi uusimate funktsioonide tundmine teid kursil, kuna see on suhteliselt uus ja kindlasti parem. Esimesena selle õppimine annaks teile eakaaslastest eelise.
# 3: uued võimalused
See on kurb reaalsus, et meie praegune roll pidevalt muutub. Aja jooksul lisanduvad vastutus ja võimalused uute ülesannete täitmiseks. Kui olete kursis tööstusharu trendidega, saate neist võimalustest kõige paremini kinni haarata.
Sellised ettevõtted nagu Macy's, Lockheed Martin, California Creative Solutions, Capital One, CSpring, CACI International Inc., Oracle, Yahoo !, American Express, BlueHawk, Aetna, Lawrence Livermore'i riiklik labor ja paljud teised otsivad inimesi, kes on oskuslikud Hadoop 2, nagu LÕNG.
# 4: Tehke paremaid otsuseid
Lisateave võimaldab teil teha teadlikke valikuid ja paremaid otsuseid. See aitab teil ära tunda võimalusi ja lisada oma organisatsiooni strateegiale lisaväärtust.
Hadoop 2-l on funktsioone, mis suurendavad kiirust ja vähendavad kulusid. Võimaluste soovitamine jõudluse parandamiseks ja kiiruse suurendamiseks võib kindlasti suurendada organisatsiooni tootlikkust. Siin on mõned Hadoop 2 funktsioonid, mis organisatsioonile kasuks tulevad ja nende soovitamine suurendab ka teie karjääri.
Hadoopi käitamise tugi Microsoft Windowsis
MapReduce binaarsete failide lihtsustatud levitamine HDFS-i kaudu YARN Distributed Cache'is.
Tõhustatud tugi uutele rakendustele YARN-is koos Application History Serveri ja Application Timeline Serveriga
Täielik HDFS-i HTTPS-tugi
Kerberose integreerimine YARNi ajaskaala poele.
HDFS-i heterogeense salvestushierarhia tugi.
Tsentraliseeritud halduse ja haldusega HDFS-andmete mälusisene vahemälu.
MapReduce binaarsete failide lihtsustatud levitamine HDFS-i kaudu YARN Distributed Cache'is.
Uuenduses püsimiseks on lisaks praktilistele põhjustele ka tehnilisi põhjuseid. Hadoopil on arvukalt organisatsiooni jaoks kasulikke funktsioone. Neid põhjalikult vaadates saate selge pildi eeliste eelistest.
Mis on Hadoopi viimane värskendus?
Iga toode läbib erinevaid väljalaske etappe ja pakub välja erinevaid versioone iseendast. Hadoop pole erand ja on välja tulnud Hadoop 2.0-ga. Apache fond on välja pakkunud järgmised Hadoopi versioonid nagu Hadoop 2.1.0, Hadoop 2.4.0 ja jõudnud Hadoop 2.5.1-ni, mis on viimane versioon, mis ilmus 2014. aasta septembris.
Miks Hadoop 2 välja anti?
Uue versiooniga kaasnevad lisatud funktsioonid ja parandatud vead. Nii et iga kord, kui kasutate mõnda konkreetset Hadoopi versiooni ja arvate, et teatud funktsiooni saab lisada või tuleb mõned vead parandada, andke sellest Apache Foundationi poistele sellest teada. Need tüübid töötavad omakorda selle kallal ja annavad teile järgmises versioonis parema toote.
Hadoop 2 - mitte ainult arv
Hadoop 2 pole lihtsalt Hadoopi uusim versioon. Üldiselt on see teise põlvkonna arhitektuur. Hadoopi turustaja Hortonworks asutaja ja arhitekt Arun Murthy rõhutab, et eristamine on oluline, kuna Hadoopi viimine partiitöötlusest kaugemale ja reaalajas analüütika maailma on olnud märkimisväärne.
Arutleme, kui erinev on Hadoop 2.0 oma eelkäijast Hadoop 1.0-st. Ilmselt saab hilisem välja antud versioon olema varasemast versioonist parem. Järgmised on Hadoop 2.0 neli peamist täiustust võrreldes Hadoop 1.x-iga:
HDFS-i föderatsioon - NameNode'i horisontaalne mastaapsus
NameNode kõrge kättesaadavus - NameNode ei ole enam üks rikke punkt
LÕNG - võime töödelda HDFS-is saadaolevaid andmeid terabaitides ja petabaitides, kasutades mitte-MapReduce rakendusi, näiteks MPI, GIRAPH
Ressursihaldur - jagab ülekoormatud JobTrackeri kaks peamist funktsionaalsust (ressursside haldamine ja tööde ajastamine / jälgimine) kaheks eraldi deemoniks: ülemaailmne ressursihaldur ja rakenduskohane ApplicationMaster
On ka täiendavaid funktsioone, nagu mahtuvuse ajastaja (lubage mitme üürimise tugi Hadoopis), andmete hetktõmmis, Windowsi tugi, NFS-i juurdepääs, mis võimaldab Hadoopi suurema kasutuselevõtu tööstuses suurandmete probleemide lahendamiseks.
Hadoop 2.X vs Hadoop 1.X
Teeme väikese võrdluse ja vaatame, kuidas on Hadoop 2.0 parem ja erinev Hadoop 1.0-st
Miks eelistatakse Hadoop 2-d Hadoop 1.0-le?
Hadoop 2.0 pakub jõudluse täiustusi, mis toovad kasu Hadoopi ökosüsteemi seotud tehnoloogiatele. Lisaks HDFS-i ja teise põlvkonna arhitektuuri (YARN) murrangulistele omadustele on Hadoop 2 eelistamisele Hadoop 1.0-le eelistatumad põhjused veelgi suuremad:
lugeda ja kirjutada Exceli faili javas
Hadoop 2-l pole enam keelepiiranguid. See tähendab, et Hadoopi saavad nüüd kasutada paljud spetsialistid.
Hadoop 2 abil on ületatud sellised takistused nagu MapReduce kooderite puudus.
2 korda kiirem kui Hadoop 1.0
2 korda ROI olemasoleva riistvaraga.
YARNi kasutamisel on rakenduse programmeerimise liides palju avatum ja paindlikum.
Hadoop 2 laiendab võimalusi Hadoopi kasutamiseks Big Data projektides.
Hadoop 2 abil saavad arendajad nüüd täita tohutult erinevaid andmete krigistamise ülesandeid, mis ületavad Hadoopi varasemat pakettide töötlemise ulatust.
Pakub infohalduritele uusi võimalusi ja kõrvaldab varasemate versioonide puudused.
Sellel uuel versioonil on ainulaadne omadus töötada mitu töökoormust ühes ja samas Hadoopi klastris.
Hadoop ei ole enam piiratud ühe funktsiooniga. Selle rakendus ulatub nüüd kaugemale HDFS-ist ja MapReduce'ist.
LÕNGA peamised eelised
Oleme teadlikud, et YARN on teise põlvkonna arhitektuur, vaatame, mis teeb selle nii suurepäraseks.
Kaal
Uued programmeerimismudelid ja teenused
Tõhustatud klastri kasutamine
Agility
Palju rohkem kui Java
Ja paljud teised
Nõudlus Hadoop 2 oskuste järele
Organisatsioonid käivitavad nüüd Hadoop 2 või katsetavad seda. Sellest tuleneb vajadus Hadoop 2-s asjatundlike spetsialistide järele. Paljud organisatsioonid on juba hakanud sisemiselt otsima inimesi Hadoopiga töötamiseks. On selgeid märke selle kohta, et YARN on tõusuteel ja korvab lõpuks nõudluse MapReduce oskuste järele.
Siin on mõned vaated praegusele ja prognoositavale nõudlusele Hadoopi oskuste järele:
Gartneri analüütikute sõnul on Hadoop 2 elutähtis areng, kuna kogu maailmas asuvad suurettevõtted on leidnud, et Hadoop on oma Big Data halduses mängude vahetaja.
Bloori kontserni kuuluva Eric Kavanaghi sõnul on Hadoop 2.0 võitnud infotöötajate seas tõmbeid, kes soovivad Big Data välja rabeleda.
Hadoop 2.0 kasutuselevõtt on jätkuvalt tõusuteel ja on nüüd jõudmas küpsuse staadiumisse.
Organisatsioonid on YARNi eelistest teadlikud ja on sellest põnevil.
Siin on ülevaade Hadoop 2.0 / YARNi töökohtade avamisest aastal Tõepoolest.com
Kes kolib Hadoop 2-sse või kellel juba on?
Yahoo:
Yahoo! , juhtiv asi kõigis, mida Hadoop on rakendanud YARN (0,23x). Murthy sõnul töötleb Yahoo 35 000 sõlmega klaster nüüd 130–150 töökohta päevas, võrreldes 50–60 enne YARNi.
Tähe esitusest rääkides tsiteerib Murthy: 'Kui teil on 2x üle 35 000 kuni 40 000 sõlme, on see fenomenaalne'. Ta lisas ka: 'See on üsna veenev lugu öelda CIO-le, et kui värskendate oma tarkvara lihtsalt Hadoop 1-lt Hadoop 2-le, näete oma töökohtades 2 korda läbilaskevõime paranemist.'
eBay:
eBays on üks tööstuse suurimaid Hadoopi klastreid, kus andmed on petabaitides. Samuti on nad oma klastrid migreerinud Hadoop 2-sse.
Järeldus:
Kuna Hadoop 2 on küps ja seda on lihtsam rakendada, veenavad nad isegi skeptikuid ja üha rohkem organisatsioone rändab Hadoop 2.0-le. 1.x versioonide vältimiseks on põhjendatud põhjused. Kuid Hadoop 2 puhul kaaluvad seda isegi uskmatud, kuna seda saab kasutada mitmesugustel eesmärkidel. Hadoop 2.0 õppimine ja selle rakendamine Big Data arvutuste tegemiseks avate väravad tehniliselt arenenud ja rahaliselt tasuvale karjäärile.
Kas teil on meile küsimus? Palun mainige neid kommentaaride jaotises ja me võtame teiega ühendust.
Seonduvad postitused: