Вступ до установки вулика

В установці вулика є певні передумови перед встановленням.

Компоненти Hadoop, як Hive, Hbase, Pig тощо, підтримують середовище Linux. Тому рекомендується мати на вашому пристрої операційну систему Linux. Якщо це не так, і ви хочете попрактикуватися у вулику, маючи вікна у вашій системі. Що ви можете зробити, це встановити машину CDH у вашу систему та використовувати її як платформу для дослідження Hadoop. Для цього знадобиться мінімум 4 ГБ оперативної пам’яті у вашій системі або ви можете мати CDH-апарат на своєму накопичувачі пера та користуватися ним.

Так чи інакше, ви завжди зможете вирішити своє питання, яке може бути швидше пізнього.

Передумови для встановлення вулика

Існує кілька передумов для встановлення вулика на будь-якій машині:

  1. Установка Java
  2. Установка Hadoop

Крок 1

  • Перевірте, чи встановлена ​​Java.
  • Відкрийте термінал і введіть команду.

Java-версія

  • Якщо java встановлена ​​в системі, вона надасть вам версію або ще помилку. У моєму випадку Java вже встановлена, а нижче - вихід команди.

  • У разі якщо Java не встановлена ​​у вашій системі. Ви можете перейти за посиланням нижче та завантажити java та встановити його.
  • http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads- 1880260.html.

Установка Java

  1. Витягніть завантажене.
  2. Перемістіть його до “/ usr / local /”.
  3. Налаштуйте змінні PATH та JAVA_HOME.

Крок №2

  • Перевірте, чи встановлено Hadoop.
  • Відкрийте термінал і введіть команду.

Hadoop-версія

  • Якщо Hadoop вже встановлений, ця команда надасть вам версію або інакше помилку.
  • У моєму випадку Hadoop вже встановив звідси нижченаведений вихід.

  • Тепер ви можете спостерігати, як я працюю з машиною CDH5.
  • Якщо Hadoop не встановлений, завантажте програму Hadoop від програмного забезпечення Apache.

Установка Hadoop

1. Налаштування Hadoop

2. Налаштуйте Hadoop

Файли, необхідні для редагування Hadoop, є:

  • core-site.xml
  • hdfs-site.xml
  • пряжа-site.xml
  • mapred-site.xml

3. Налаштуйте Namenode за допомогою команди:

Hdfs namenode -format

4. Запустіть dfs за допомогою наступної команди:

start -dfs.sh

5. Запустіть пряжу за допомогою команди:

Start -yarn.sh

Як встановити вулик?

Нижче очок допомагає встановити вулик:

  • Перше, що нам потрібно зробити, це завантажити випуск вулика, який можна виконати, натиснувши посилання нижче: http://apachemirror.wuchna.com/hive/
  • Наведене вище посилання надасть посилання, з якого вам слід вибрати стабільний-2, виділений внизу жовтим кольором:

  • Відкривши стабільний-2, виберіть бін-файл (виділений жовтим на скріншоті) та клацніть правою кнопкою миші та “скопіюйте адресу посилання”.

Кроки до встановлення вулика

Нижче наведено етапи встановлення вулика:

Крок 1. Завантажте файл смоли.

http://apachemirror.wuchna.com/hive/stable-2/apache-hive-2.3.6-bin.tar.gz0

Крок 2: Витягніть файл.

sudo tar zxvf /Downloads/apache-hive-* -C /usr/local

Крок 3: Перемістіть файли apache до каталогу / usr / local / hive.

sudo mv /usr/local/apache-hive-* /usr/local/hive

Крок 4: Налаштуйте середовище вулика, додавши наступні рядки до файлу ~ / .bashrc

export HIVE_HOME=/usr/local/hive
export PATH=$PATH:$HIVE_HOME/bin
export CLASSPATH=$CLASSPATH:/usr/local/Hadoop/lib/*:.
export CLASSPATH=$CLASSPATH:/usr/local/hive/lib/*:.

Крок 5: Виконайте файл bashrc.

$ source ~/.bashrc

Крок 6: Конфігурація вулика - Відредагуйте файл hive-env.sh, щоб додати це:

export HADOOP_HOME=/usr/local/Hadoop

Крок 7: Редагуйте за допомогою наведених нижче команд:

$ cd $HIVE_HOME/conf
$ cp hive-env.sh.template hive-env.sh

  • Тепер, щоб перевірити, чи вулик встановлений чи ні, використовуйте команду hive-version.
  • Тут версія вулика потрапляє в оболонку вулика, а значить, вулик встановлений. Однак у моєму випадку це попередня версія.

Висновок - Установка вулика

Вулик відкриває великі дані багатьом людям через його простоту та схожість з SQL, як мова запитів та інтерфейси. Вулик побудований на ядрі Hadoop, оскільки він використовує Mapreduce для виконання. Набагато легше отримати дані та зробити обробку Big Data.

Рекомендовані статті

Це посібник з установки вуликів. Тут ми обговорюємо деякі передумови для встановлення вулика на будь-якій машині та способи встановлення вулика поетапно для кращого розуміння. Ви також можете ознайомитись з іншими пов'язаними з нами статтями, щоб дізнатися більше -

  1. Що таке вулик?
  2. Команди вуликів
  3. Як встановити вулик
  4. Що таке Свиня?

Категорія:

Великі дані