Selles postituses räägin Apache Pigi installimine Linuxi . Alustame Apache Pigi ja Pig Latiniga.
Apache siga on tööriist / platvorm Hadoopiga kasutatava programmi Map Reduce loomiseks ja käivitamiseks. See on tööriist / platvorm suurte andmehulkade analüüsimiseks. Võib öelda, et Apache Pig on MapReduce'i abstraktsioon. Programmeerijad, kes pole Java-s nii osavad, kasutasid vaeva Hadoopi kallal töötamisega, peamiselt MapReduce'i töökohtade kirjutamise ajal.Nii et see on oluline teema, mida õppida ja omandada .Apache Pigil on oma keel Sea ladina keel mis on viletsate programmeerijate jaoks hea.
Pig Latin sissejuhatus aitab teil paremini mõista:
Apache Pig platvormil kasutatavat kõrgetasemelist menetluskeelt nimetatakse Sea ladina keel . Apache Pig sisaldab funktsiooni ‘Pig Latin’, mis on suhteliselt lihtsam keel, mida saab Hadoopi failisüsteemis (HDFS) hajutatud andmekogumite peal käitada. Apache Pigis peate sigade skriptid kirjutama Pigi ladina keeles, mis teisendatakse MapReduce tööks, kui käivitate Pigi skripti. Apache Pigil on mitu operaatorit, mida kasutatakse selliste ülesannete täitmiseks nagu andmete lugemine, kirjutamine ja töötlemine. Apache Pigi operaatorite kohta lisateabe saamiseks minge meie ajaveebi “ Apache Pigi operaatorid: 1. osa - suhtlusoperaatorid ”.
Nüüd, kui teil on põhiteadmised Apache Pigist, alustame Apache Pigi installimisega Linuxis.
Apache Pigi installimine Linuxis:
Allpool on toodud sammud Apache Pigi installimiseks Linuxis (ubuntu / centos / Windows, kasutades Linuxi VM-i). Kasutan seadistuses allpool Ubuntu 16.04.
kuidas kasutada komplekte javas
Samm 1: Lae alla Siga tõrv faili.
Käsk: wget http://www-us.apache.org/dist/pig/pig-0.16.0/pig-0.16.0.tar.gz
2. samm: Väljavõte tõrv faili, kasutades käsku tar. Tõrva all olevas käsus x tähendab arhiivifaili väljavõtet, koos tähendab filtreerida arhiivi läbi gzip-i, f tähendab arhiivifaili failinime.
Käsk: tõrv -xzf siga-0,16,0.tar.gz
Käsk: ls
3. samm: Muutke .bashrc ”Fail Apache Pigi keskkonnamuutujate värskendamiseks. Seadistame selle nii, et pääseksime sigadele juurde igast kataloogist, me ei pea minema seakäsudesse sigade kataloogi. Samuti, kui mõni muu rakendus otsib Pigi, õpib ta sellest failist Apache Pigi teed.
Käsk: sudo gedit .bashrc
Lisage faili lõppu järgmine:
# Määra PIG_HOME
eksport PIG_HOME = / kodu / edureka / siga-0,16,0
eksport PATH = $ PATH: /home/edureka/pig-0.16.0/bin
eksport PIG_CLASSPATH = $ HADOOP_CONF_DIR
Samuti veenduge, et ka hadoopi tee oleks määratud.
Käivitage käsk allpool, et muudatusi värskendataks samas terminalis.
Käsk: allikas .bashrc
4. samm: Kontrollige sea versiooni. Selle eesmärk on kontrollida, kas Apache Pig sai õigesti installitud. Kui te ei saa Apache Pig versiooni, peate kontrollima, kas olete ülaltoodud samme õigesti järginud.
Käsk: siga -versioon
mis on virtuaalne funktsioon javas
5. samm :Kontrollige sigade abi, et näha kõiki sea käsuviise.
Käsk: siga -abiline
6. samm :Käivita siga, et käivitada nurin kest. Grunni kesta kasutatakse Pig Ladina skriptide käitamiseks.
Käsk: siga
Kui vaatate ülaltoodud pilti õigesti, on Apache Pigil kaks režiimi, milles ta saab töötada, vaikimisi valib ta režiimi MapReduce. Teine režiim, milles saate sead käivitada, on kohalik režiim. Las ma räägin teile sellest lähemalt.
Apache Pigi täitmisrežiimid:
- MapReduce režiim - See on vaikerežiim, mis nõuab juurdepääsu Hadoopi klastrile ja HDFS-i installile. Kuna see on vaikerežiim, ei ole vaja märgistada -x lippu (saate käivitada siga VÕI siga -x mapreduce ). Selles režiimis on sisend ja väljund olemas HDFS-is.
- Kohalik režiim - Juurdepääsu korral ühele masinale installitakse ja käivitatakse kõik failid kohaliku hosti ja failisüsteemi abil. Siin määratakse kohalik režiim kasutades -x lippu ( siga -x kohalik ). Selles režiimis on sisend ja väljund olemas kohalikus failisüsteemis.
Käsk: siga -x kohalik
Apache Pig'i installimise vaatamiseks Linuxis saate vaadata allolevat videot:
Apache Pigi installimine | Siga installimine Linuxis | Edureka
Nüüd, kui olete Apache Pigi installimisega Linuxis lõpetanud, on järgmine samm edasi proovida Pig Grunti kestas mõningaid relatsioonilisi Pig-operaatoreid. Seega järgmine blogi “ Apache Pigi operaatorid: 1. osa - suhtlusoperaatorid ”Aitab teil sigaoperaatoreid valdada.
Nüüd, kui olete Apache Pigi Linuxi installinud, vaadake Edureka, usaldusväärne veebiõppeettevõte, mille võrgustik hõlmab üle 250 000 rahuloleva õppija, levinud üle kogu maailma. Edureka Big Data Hadoopi sertifitseerimiskoolitus aitab õppijatel saada HDFS, lõnga, MapReduce, Pig, Hive, HBase, Oozie, Flume ja Sqoop ekspertideks, kasutades reaalajas kasutatavaid juhtumeid jaekaubanduse, sotsiaalmeedia, lennunduse, turismi ja rahanduse valdkonnas.
Kas teil on meile küsimus? Palun mainige seda kommentaaride jaotises ja võtame teiega ühendust.