Агуулгын хүснэгт:

Би oozie дахь үүрний ажлыг хэрхэн төлөвлөх вэ?
Би oozie дахь үүрний ажлыг хэрхэн төлөвлөх вэ?

Видео: Би oozie дахь үүрний ажлыг хэрхэн төлөвлөх вэ?

Видео: Би oozie дахь үүрний ажлыг хэрхэн төлөвлөх вэ?
Видео: Штукатурка стен - самое полное видео! Переделка хрущевки от А до Я. #5 2024, Арваннэгдүгээр
Anonim

руу үүрний ажлын хуваарь ашиглах Оози , та бичих хэрэгтэй Зөгий - үйлдэл.

hql) дотор.

  1. Доорх командыг ажиллуулж HDFS-д лавлах үүсгэнэ үү.
  2. hadoop fs -mkdir -p /хэрэглэгч/ уйтгартай /ажлын урсгал/
  3. Ажлын урсгалыг тавих. xml, Зөгий скрипт (create_table. hql) болон үүр - сайт. xml-г 2-р алхамд үүсгэсэн санд суулгана уу. Та доорх командыг ашиглаж болно.

Тэгэхээр би Hive скриптийг oozie дээр хэрхэн ажиллуулах вэ?

Oozie-тэй Hive Jobs ажиллуул

  1. Зөгийн үүрний газрыг зааж өгнө үү. job-xml параметр дэх xml.
  2. Скрипт параметрт үүрний хайлтыг агуулсан скриптийн нэрийг (жишээ нь, скрипт. q) зааж өгнө үү.
  3. Сонголтоор, Oozie эхлүүлэгч ажилд ашигладаг шинж чанаруудыг нэмнэ үү. oozie угтварыг нэмнэ үү. үл хөдлөх хөрөнгийн нэр рүү эхлүүлэгч.

Цаашилбал, би oozie ажлын урсгалыг хэрхэн ажиллуулах вэ? Oozie ажлын урсгалыг тушаалын мөрөөс ажиллуулж байна

  1. Вэб консол руу нэвтэрнэ үү.
  2. Oozie жишээнүүдийг вэб консол дахь өөрийн гэрийн лавлах руу хуулна уу: cp /usr/hdp/current/oozie-client/doc/oozie-examples. давирхай. gz.
  3. tar tar -zxvf oozie-examples.tar.gz-ээс файлуудыг задлах.
  4. Жишээнүүдийн санг HDFS hadoop fs -copyFromLocal жишээ рүү хуулна уу.

Үүнтэй холбогдуулан би Hadoop ажилд хэрхэн хуваарилах вэ?

Яаж ажлын хуваарь in hadoop - Квора. Хамгийн энгийн арга бол кодоо бүрхүүлийн скрипт болон хуваарь Энэ нь крон шиг ажил захын зангилаа дээр(таны ихэвчлэн таны илгээдэг зангилаа ажлын байр ). Гэхдээ ихэвчлэн кодыг скриптэд хийж, үүнийг ажиллуулдаг ажил дибаг хийхэд хэцүү. турших, засвар үйлчилгээ хийх.

Oozie ажлын урсгал гэж юу вэ?

Оози нь ажлын урсгал Apache Hadoop ажлуудыг удирдах хуваарийн систем. Oozie ажлын урсгал ажлууд нь үйлдлүүдийн чиглэгдсэн мөчлөгт график (DAG) юм. Оози Зохицуулагчийн ажил тогтмол байдаг Oozie ажлын урсгал цаг хугацаа (давтамж) болон өгөгдлийн хүртээмжээр өдөөгдсөн ажлууд. Оози нь өргөтгөх боломжтой, найдвартай, өргөтгөх боломжтой систем юм.

Зөвлөмж болгож буй: