Агуулгын хүснэгт:

Hadoop кластерын бүрэн тархсан горимыг тохируулахын тулд ямар чухал тохиргооны файлуудыг шинэчлэх шаардлагатай вэ?
Hadoop кластерын бүрэн тархсан горимыг тохируулахын тулд ямар чухал тохиргооны файлуудыг шинэчлэх шаардлагатай вэ?

Видео: Hadoop кластерын бүрэн тархсан горимыг тохируулахын тулд ямар чухал тохиргооны файлуудыг шинэчлэх шаардлагатай вэ?

Видео: Hadoop кластерын бүрэн тархсан горимыг тохируулахын тулд ямар чухал тохиргооны файлуудыг шинэчлэх шаардлагатай вэ?
Видео: Поднимаем Hadoop-кластер локально | Скринкасты | Ok #1 2024, Дөрөвдүгээр сар
Anonim

Hadoop-ийн бүрэн тархсан горимыг тохируулахын тулд шинэчлэх шаардлагатай тохиргооны файлууд нь:

  • Hadoop-env.sh.
  • Үндсэн сайт. xml.
  • Hdfs сайт. xml.
  • Mapred-сайт. xml.
  • Мастерууд.
  • Боолууд.

Үүнээс гадна Hadoop дахь чухал тохиргооны файлууд юу вэ?

Hadoop тохиргоог хоёр төрлийн чухал тохиргооны файлаар удирддаг:

  • Зөвхөн унших боломжтой өгөгдмөл тохиргоо - src/core/core-default. xml, src/hdfs/hdfs-өгөгдмөл. xml болон src/mapred/mapred-default. xml.
  • Сайтын тусгай тохиргоо - conf/core-site. xml, conf/hdfs-сайт. xml болон conf/mapred-site. xml.

Үүний нэгэн адил дараах зүйлсийн аль нь HDFS демонуудын тохиргоог агуулж байна вэ? xml тохиргоог агуулдаг -ийн тохиргоо HDFS демонууд (жишээ нь NameNode, DataNode, Secondary NameNode). Үүнд мөн хуулбарлах хүчин зүйл болон блокийн хэмжээ багтана HDFS.

Hadoop дахь тохиргооны файлууд гэж юу вэ?

Тохиргооны файлууд нь файлууд олборлосон давирхайд байрладаг. gz файл гэх мэт/ hadoop / лавлах. Бүгд Hadoop дахь тохиргооны файлууд доор жагсаасан байна, 1) HADOOP -ENV.sh->>Энэ нь ашигласан JDK-д нөлөөлөх орчны хувьсагчдыг тодорхойлдог Hadoop Демон (бин/ hadoop ).

Hadoop дахь жижиг файлын асуудалтай ямар файлууд ажилладаг вэ?

1) HAR ( Hadoop Архив) Файлууд -д танилцуулсан жижиг файлын асуудлыг шийдвэрлэх . HAR дээр нь давхарга нэвтрүүлсэн HDFS интерфэйсийг хангадаг файл хандах. Ашиглаж байна Hadoop архивын тушаал, HAR файлууд үүсгэгддэг бөгөөд энэ нь a MapReduce савлах ажил файлууд руу архивлаж байна жижиг тоо HDFS файлууд.

Зөвлөмж болгож буй: