Видео: Би Hadoop-ийг spark-д сурах хэрэгтэй юу?
2024 Зохиолч: Lynn Donovan | [email protected]. Хамгийн сүүлд өөрчлөгдсөн: 2023-12-15 23:51
Үгүй ээ, чи тэгэхгүй Hadoop сурах хэрэгтэй руу Spark сур . Оч бие даасан төсөл байсан. Харин ЯРНандын дараа Hadoop 2.0, Оч учир нь алдартай болсон Оч бусадтай хамт HDFS дээр ажиллах боломжтой Hadoop бүрэлдэхүүн хэсгүүд. Hadoop нь Java ангиудыг өвлөн авах замаар MapReduce ажлыг бичих хүрээ юм.
Үүний нэгэн адил, Spark эсвэл Hadoop-ийн аль нь илүү дээр вэ?
Эхний ба гол ялгаа нь RAM-ийн багтаамж ба түүнийг ашиглах явдал юм. Оч ашигладаг илүү Санамсаргүй хандалтын санах ой Hadoop , гэхдээ энэ нь бага хэмжээний интернет эсвэл дискний санах ойг "иддэг" тул хэрэв та ашигладаг бол Hadoop , энэ нь илүү сайн том дотоод санах ойтой хүчирхэг машин олох.
Хоёрдугаарт, Hadoop сурахад хялбар уу? Hadoop програмчлал юм Илүү амархан SQL-ийн ур чадвартай хүмүүст зориулсан - Pig and Hive-ийн ачаар. Оюутнууд эсвэл ямар ч програмчлалын мэдлэггүй, зүгээр л SQL-ийн үндсэн мэдлэгтэй мэргэжлийн хүмүүс эзэмшиж чадна Hadoop иж бүрэн дадлагаар дамжуулан Hadoop хичээл зүтгэл, хүсэл эрмэлзэлтэй бол сургах сурах.
Мөн Hadoop сурахад хэр хугацаа шаардагдах вэ гэж асуусан.
ойролцоогоор 3-4 сар
Оч Hadoop-ыг орлож байна уу?
Оч хэзээ ч байж болохгүй солих төлөө Hadoop ! Оч нь дээд талд ажилладаг боловсруулах хөдөлгүүр юм Hadoop экосистем. Дээрх архитектурт үзүүлснээр, Оч -д MapReduce-ийн оронд ирдэг Hadoop экосистем. Үүнд бусад бүрэлдэхүүн хэсгүүд байдаг Hadoop Pig and Hive зэрэг өгөгдлийг боловсруулах архитектур.
Зөвлөмж болгож буй:
Би Линуксыг хаанаас сурах вэ?
Линукс сурахыг хүссэн хэн бүхэн эдгээр үнэгүй сургалтуудыг ашиглах боломжтой боловч энэ нь хөгжүүлэгчид, QA, системийн админууд болон программистуудад илүү тохиромжтой. Мэдээллийн технологийн мэргэжилтнүүдэд зориулсан Линуксийн үндэс. Линуксийн командын мөрийг сур: Үндсэн командууд. Red Hat Enterprise Linux-ийн техникийн тойм. Линуксийн заавар ба төслүүд (үнэгүй)
Долоо хоногийн дотор питон сурах боломжтой юу?
Хариулт: Би Python-ийг нэг долоо хоногт яаж сурах вэ? Та чадахгүй. Python бол харьцангуй энгийн хэл тул та түүний үндсэн синтаксийг богино хугацаанд сурах боломжтой. Гэсэн хэдий ч үүнийг үр дүнтэй програмчлахын тулд та Python дээр програм бичих хангалттай туршлага хуримтлуулах хэрэгтэй
Нэг гогцоо сурах гэж юу вэ?
Нэг давталтын сургалт гэдэг нь системийн бүтцийг өөрчлөх оролдлого хийхгүй байхын тулд одоогийн зохион байгуулалтын бүтцэд байгаа асуудлуудыг шийдвэрлэхэд чиглэгдсэн сургалтын төрлийг тодорхойлдог
Би яагаад Голанг сурах ёстой вэ?
Go-г доод түвшний ажлуудаас өндөр түвшний API-д ашиглаж болно. Энэ нь маш сайн үзүүлэлттэй, гайхалтай стандарт lib-тэй, хурдан, уугуул хоёртын файлд хөрвүүлдэг, статикаар бичдэг, санах ойн менежментийг хийсвэрлэдэг, тэр ч байтугай таны BBQ хийх болно. Би яагаад үүнийг хийснээ хэлж чадна, энэ нь бусад програмчлалын хэлэнд ч хамаатай
Spark эсвэл Hadoop аль нь илүү дээр вэ?
Үгүй ээ, Spark-д суралцахын тулд эхлээд Hadoop-д суралцах нь заавал байх албагүй ч Hadoop болон HDFS-ийн үндсэн мэдлэг нь Spark-ийн талаар суралцахад тань давуу тал болно. Spark бол шинээр гарч ирж буй технологи бөгөөд зах зээлд шуугиан дэгдээж байна. Spark-ийн мэргэжилтнүүдийн хувьд Spark-ийг сургах нь таны карьерт ашигтай байх болно. салбарт илүү давуу талтай