Vodič za postavljanje Hadoop okruženje za učenje i testiranje u VirtualBox

Objavljeno dana po

Uz ovaj tutorial možete postaviti svoj vlastiti Hadoop okoliša korištenjem virtualne strojeve. Da biste započeli preuzimanje i instalaciju VirtualBox .

Zatim ćete morati dobiti CentOS virtualna slika. Jednom preuzeli stvoriti direktorij na korijen od tvoj voziti se zove virtualna i raspakirajte sadržaj CentOS zip datoteku na VMS imenik.

u VirtualBox, morat ćete stvoriti novi virtualni stroj. Choose Linux from type and then Red Hat 64-bit from version. Trebate izdvojiti 2048Mb memorije i hard diska odabrati korištenje postojećeg virtualni tvrdi disk datoteke i idite na CentOS slike direktorij u VMS imenik. Odaberite VMDK datoteku čiji naziv datoteke ne završava s brojem. Nakon što ste učinili da je uređaj spreman za start up.

Sljedeća je za instalaciju VirtualBox Guest Povećanja što vam daje bolje performanse među ostalim poboljšanja. Prije instaliranja Guest Povećanja, pokrenite sljedeće instalaciju naredbe da se pripreme za ugradnju

# yum update
# yum install gcc
# yum install kernel-devel
# yum install bzip2
# shutdown -r 00

If you need to return the cursor to Windows press the host key which is the right Ctrl key by default. Odaberite uređaje iz izbornika VirtualBox i odaberite Insert Ocjene Dodaci CD sa slikama. Slijedite upute za instalaciju. Ponovno pokretanje virtualnog stroja za promjene stupile na snagu.

 

Instalacija Apache BigTop

BigTop is ideal for learning Big Data components like Hadoop. Počnimo s instalacijom.

Prvo dobiti povratnu datoteku koja ukazuje na preuzimanje Hadoop i to je ovisnost.

wget -O /etc/yum.repos.d/bigtop.repo \
http://www.apache.org/dist/bigtop/bigtop-1.0.0/repos/centos6/bigtop.repo

Zatim je odabrati i instalirati komponente Hadoop

yum instalirati Hadoop  * čuvar slonova u Indiji  * oozie  * hbase  * košnica  * nijansa  * svinja  * čuvara iz zoološkog vrta  *

Odaberite Da za potpisivanje koda upite. Nakon što je instaliran Hadoop i odabrane komponente sljedeći korak je konfiguriranje Hadoop. Nakon konfiguracije Hadoop će biti spreman za početak.

Preuzimanje i instaliranje java

yum instalirati java-1.7.0-openjdk-devel.x86_64

Oblikujte namenode

sudo init /etc/init.d/hadoop-hdfs-namenode

Pokrenite Hadoop usluge za svoj klaster

Jer ja, i Hadoop-HDF-ovi-namenode Hadoop-HDF-ovi-datanode ; 

učiniti sudo uslugu $ i početi ;

gotova

Napravite strukturu poddirektorija u HDF-ovi

sudo /usr/lib/hadoop/libexec/init-hdfs.sh

Početak pređe demone

sudo service Hadoop-pređe resourcemanager početak;
sudo service Hadoop-pređe nodemanager početak

Ako sve dobro smo sada imate radnu Hadoop instalaciju.