Агуулгын хүснэгт:

MapReduce ажлыг ажиллуулахын тулд хэрэглэгч ямар үндсэн тохиргооны параметрүүдийг зааж өгөх ёстой вэ?
MapReduce ажлыг ажиллуулахын тулд хэрэглэгч ямар үндсэн тохиргооны параметрүүдийг зааж өгөх ёстой вэ?

Видео: MapReduce ажлыг ажиллуулахын тулд хэрэглэгч ямар үндсэн тохиргооны параметрүүдийг зааж өгөх ёстой вэ?

Видео: MapReduce ажлыг ажиллуулахын тулд хэрэглэгч ямар үндсэн тохиргооны параметрүүдийг зааж өгөх ёстой вэ?
Видео: Map Reduce Execution Framework - Ажиллаж байгаа ажлууд болон параметрүүдийг ажиллах үед өөрчлөх 2024, May
Anonim

"MapReduce" хүрээн дээр хэрэглэгчдийн зааж өгөх ёстой үндсэн тохиргооны параметрүүд нь:

  • Ажлын тархсан файлын систем дэх оролтын байршлууд.
  • Ажлын тархсан файлын систем дэх гаралтын байршил.
  • Өгөгдлийн оролтын формат.
  • Өгөгдлийн гаралтын формат.
  • Газрын зургийн функцийг агуулсан анги.
  • Бууруулах функц агуулсан анги.

MapReduce программын үндсэн тохиргооны параметрүүд юу вэ?

"MapReduce" хүрээн дэх үндсэн тохиргооны параметрүүд нь:

  • Тархсан файлын систем дэх ажлын байрыг оруулах.
  • Тархсан файлын систем дэх ажлын байрны гаралтын байршил.
  • Өгөгдлийн оролтын формат.
  • Өгөгдлийн гаралтын формат.
  • Газрын зургийн функцийг агуулсан анги.
  • Бууруулах функцийг агуулсан анги.

Маппер ба бууруулагчийн параметрүүд юу вэ? Газрын зурагчдад зориулсан дөрвөн параметр нь:

  • Урт бичих боломжтой (оролт)
  • текст (оролт)
  • текст (завсрын гаралт)
  • IntWritable (завсрын гаралт)

MapReduce ажлын үндсэн бүрэлдэхүүн хэсгүүд юу вэ?

  • Ажлын тохиргооны параметрүүдийг хангадаг драйверын үндсэн ангилал.
  • Орг өргөтгөх ёстой Mapper анги. apache. hadoop. зураглал. Mapper класс ба map () аргын хэрэгжилтийг хангана.
  • Орг өргөтгөх ёстой бууруулагч анги. apache. hadoop. зураглал. Бууруулах анги.

Partitioner гэж юу вэ, MapReduce ажлын процесст хэрхэн тусалдаг вэ?

Хуваагч in MapReduce ажил гүйцэтгэл нь завсрын газрын зургийн гаралтын түлхүүрүүдийн хуваагдлыг хянадаг. -тай хамт Туслаач хэш функцийн түлхүүр (эсвэл түлхүүрийн дэд олонлог) нь хуваалт . Түлхүүртэй ижил утгатай бичлэгүүд ижил утгатай байна хуваалт (зурагч бүрийн дотор).

Зөвлөмж болгож буй: