Въведение в инсталацията на кошера
В инсталацията на кошера трябва да се направят някои предпоставки преди инсталирането.
Компонентите на Hadoop като Hive, Hbase, Pig и др. Поддържат Linux среда. Затова се препоръчва да имате операционна система Linux на вашето устройство. Ако не е така и искате да практикувате на кошера, докато имате прозорци в системата си. Това, което можете да направите, е да инсталирате CDH машината на вашата система и да я използвате като платформа за изследване на Hadoop. Това ще изисква минимум 4 GB Ram на вашата система или можете да имате CDH машина в устройството за писалка и да я използвате.
Така или иначе винаги можете да намерите решение на въпроса си, което може би по-рано от късно.
Предпоставки за инсталиране на кошер
Има някои предпоставки за инсталиране на кошера на всяка машина:
- Инсталиране на Java
- Инсталация на Hadoop
Етап 1
- Проверете дали Java е инсталирана.
- Отворете терминала и въведете командата.
Java-Version
- Ако java е инсталиран в системата, той ще ви даде версията или иначе грешка. В моя случай Java вече е инсталирана и по-долу е изходът на командата.
- В случай, че Java не е инсталирана във вашата система. Можете да посетите долния линк и да изтеглите Java и да го инсталирате.
- http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads- 1880260.html.
Инсталиране на Java
- Извадете изтегленото.
- Преместете го на „/ usr / local /“.
- Настройте PATH и JAVA_HOME променливи.
Стъпка 2
- Проверете дали Hadoop е инсталиран.
- Отворете терминала и въведете командата.
Hadoop-Version
- Ако Hadoop вече е инсталиран, тази команда ще ви даде версията или иначе грешка.
- В моя случай Hadoop вече е инсталиран оттук нататък изхода по-долу.
- Вече можете да забележите, че работя с CDH5 машина.
- Ако Hadoop не е инсталиран, изтеглете софтуерната фондация Hadoop от Apache.
Инсталация на Hadoop
1. Настройка Hadoop
2. Конфигурирайте Hadoop
Файловете, необходими за редактиране за конфигуриране на Hadoop, са:
- сърцевина site.xml
- hdfs-site.xml
- прежда site.xml
- mapred-site.xml
3. Настройте Namenode с помощта на командата:
Hdfs namenode -format
4. Стартирайте dfs, като използвате следната команда:
start -dfs.sh
5. Стартирайте прежда с помощта на командата:
Start -yarn.sh
Как да инсталирате кошер?
Под точките помага да инсталирате кошер:
- Първото нещо, което трябва да направим, е да изтеглите освобождаването на кошера, което може да се извърши, като кликнете върху връзката по-долу: http://apachemirror.wuchna.com/hive/
- По-горе линкът ще даде връзката, от която трябва да изберете стабилно-2, подчертано по-долу в жълто:
- След като отворите стабилно-2, изберете файла с контейнер (подчертан жълт на екрана) и щракнете с десния бутон и „копирайте адреса на връзката“.
Стъпки за инсталиране на кошер
По-долу са стъпките за инсталиране на кошер:
Стъпка 1: Изтеглете файла с катран.
http://apachemirror.wuchna.com/hive/stable-2/apache-hive-2.3.6-bin.tar.gz0
Стъпка 2: Извадете файла.
sudo tar zxvf /Downloads/apache-hive-* -C /usr/local
Стъпка 3: Преместете апаш файловете в / usr / local / hive директория.
sudo mv /usr/local/apache-hive-* /usr/local/hive
Стъпка 4: Настройте средата на кошера, като добавите следните редове към ~ / .bashrc файла
export HIVE_HOME=/usr/local/hive
export PATH=$PATH:$HIVE_HOME/bin
export CLASSPATH=$CLASSPATH:/usr/local/Hadoop/lib/*:.
export CLASSPATH=$CLASSPATH:/usr/local/hive/lib/*:.
Стъпка 5: Изпълнете файла bashrc.
$ source ~/.bashrc
Стъпка 6: Конфигурация на кошера - Редактиране на hive-env.sh файл, за да добавите това:
export HADOOP_HOME=/usr/local/Hadoop
Стъпка 7: Редактиране с помощта на командите по-долу:
$ cd $HIVE_HOME/conf
$ cp hive-env.sh.template hive-env.sh
- Сега, за да проверите дали кошерът е инсталиран или не, използвайте команда hive-version.
- Тук версията на кошера влиза в обвивката на кошера, което означава, че кошерът е инсталиран. В моя случай обаче това е по-старата версия, която дава предупреждение.
Заключение - инсталация на кошера
Hive отваря големите данни за много хора поради своята лекота и сходство с SQL като език на заявки и интерфейси. Hive е изграден на основата на Hadoop, тъй като използва Mapreduce за изпълнение. Много лесно да извлечете данните и да обработите Big Data.
Препоръчителни статии
Това е ръководство за инсталиране на кошера. Тук обсъждаме някои предпоставки за инсталиране на кошер на всяка машина и как да инсталирате кошер на стъпки за по-добро разбиране. Можете също да разгледате и другите ни свързани статии, за да научите повече-
- Какво е кошер?
- Команди на кошера
- Как да инсталирате кошера
- Какво е прасето?