Въведение в инсталацията на кошера

В инсталацията на кошера трябва да се направят някои предпоставки преди инсталирането.

Компонентите на Hadoop като Hive, Hbase, Pig и др. Поддържат Linux среда. Затова се препоръчва да имате операционна система Linux на вашето устройство. Ако не е така и искате да практикувате на кошера, докато имате прозорци в системата си. Това, което можете да направите, е да инсталирате CDH машината на вашата система и да я използвате като платформа за изследване на Hadoop. Това ще изисква минимум 4 GB Ram на вашата система или можете да имате CDH машина в устройството за писалка и да я използвате.

Така или иначе винаги можете да намерите решение на въпроса си, което може би по-рано от късно.

Предпоставки за инсталиране на кошер

Има някои предпоставки за инсталиране на кошера на всяка машина:

  1. Инсталиране на Java
  2. Инсталация на Hadoop

Етап 1

  • Проверете дали Java е инсталирана.
  • Отворете терминала и въведете командата.

Java-Version

  • Ако java е инсталиран в системата, той ще ви даде версията или иначе грешка. В моя случай Java вече е инсталирана и по-долу е изходът на командата.

  • В случай, че Java не е инсталирана във вашата система. Можете да посетите долния линк и да изтеглите Java и да го инсталирате.
  • http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads- 1880260.html.

Инсталиране на Java

  1. Извадете изтегленото.
  2. Преместете го на „/ usr / local /“.
  3. Настройте PATH и JAVA_HOME променливи.

Стъпка 2

  • Проверете дали Hadoop е инсталиран.
  • Отворете терминала и въведете командата.

Hadoop-Version

  • Ако Hadoop вече е инсталиран, тази команда ще ви даде версията или иначе грешка.
  • В моя случай Hadoop вече е инсталиран оттук нататък изхода по-долу.

  • Вече можете да забележите, че работя с CDH5 машина.
  • Ако Hadoop не е инсталиран, изтеглете софтуерната фондация Hadoop от Apache.

Инсталация на Hadoop

1. Настройка Hadoop

2. Конфигурирайте Hadoop

Файловете, необходими за редактиране за конфигуриране на Hadoop, са:

  • сърцевина site.xml
  • hdfs-site.xml
  • прежда site.xml
  • mapred-site.xml

3. Настройте Namenode с помощта на командата:

Hdfs namenode -format

4. Стартирайте dfs, като използвате следната команда:

start -dfs.sh

5. Стартирайте прежда с помощта на командата:

Start -yarn.sh

Как да инсталирате кошер?

Под точките помага да инсталирате кошер:

  • Първото нещо, което трябва да направим, е да изтеглите освобождаването на кошера, което може да се извърши, като кликнете върху връзката по-долу: http://apachemirror.wuchna.com/hive/
  • По-горе линкът ще даде връзката, от която трябва да изберете стабилно-2, подчертано по-долу в жълто:

  • След като отворите стабилно-2, изберете файла с контейнер (подчертан жълт на екрана) и щракнете с десния бутон и „копирайте адреса на връзката“.

Стъпки за инсталиране на кошер

По-долу са стъпките за инсталиране на кошер:

Стъпка 1: Изтеглете файла с катран.

http://apachemirror.wuchna.com/hive/stable-2/apache-hive-2.3.6-bin.tar.gz0

Стъпка 2: Извадете файла.

sudo tar zxvf /Downloads/apache-hive-* -C /usr/local

Стъпка 3: Преместете апаш файловете в / usr / local / hive директория.

sudo mv /usr/local/apache-hive-* /usr/local/hive

Стъпка 4: Настройте средата на кошера, като добавите следните редове към ~ / .bashrc файла

export HIVE_HOME=/usr/local/hive
export PATH=$PATH:$HIVE_HOME/bin
export CLASSPATH=$CLASSPATH:/usr/local/Hadoop/lib/*:.
export CLASSPATH=$CLASSPATH:/usr/local/hive/lib/*:.

Стъпка 5: Изпълнете файла bashrc.

$ source ~/.bashrc

Стъпка 6: Конфигурация на кошера - Редактиране на hive-env.sh файл, за да добавите това:

export HADOOP_HOME=/usr/local/Hadoop

Стъпка 7: Редактиране с помощта на командите по-долу:

$ cd $HIVE_HOME/conf
$ cp hive-env.sh.template hive-env.sh

  • Сега, за да проверите дали кошерът е инсталиран или не, използвайте команда hive-version.
  • Тук версията на кошера влиза в обвивката на кошера, което означава, че кошерът е инсталиран. В моя случай обаче това е по-старата версия, която дава предупреждение.

Заключение - инсталация на кошера

Hive отваря големите данни за много хора поради своята лекота и сходство с SQL като език на заявки и интерфейси. Hive е изграден на основата на Hadoop, тъй като използва Mapreduce за изпълнение. Много лесно да извлечете данните и да обработите Big Data.

Препоръчителни статии

Това е ръководство за инсталиране на кошера. Тук обсъждаме някои предпоставки за инсталиране на кошер на всяка машина и как да инсталирате кошер на стъпки за по-добро разбиране. Можете също да разгледате и другите ни свързани статии, за да научите повече-

  1. Какво е кошер?
  2. Команди на кошера
  3. Как да инсталирате кошера
  4. Какво е прасето?

Категория:

Голяма информация