Emrfs гэж юу вэ?
Emrfs гэж юу вэ?

Видео: Emrfs гэж юу вэ?

Видео: Emrfs гэж юу вэ?
Видео: AWS re:Invent 2022 - Migrating to Amazon EMR to reduce costs and simplify operations (ANT337) 2024, Арваннэгдүгээр
Anonim

EMR файлын систем ( EMRFS ) нь Amazon EMR-ээс Amazon S3 руу шууд файлуудыг унших, бичихэд Amazon EMR кластерууд ашигладаг HDFS-ийн хэрэгжилт юм. Өгөгдлийн шифрлэлт нь тухайн объектыг шифрлэх боломжийг олгодог EMRFS Amazon S3 руу бичиж, идэвхжүүлдэг EMRFS Amazon S3 дээр шифрлэгдсэн объектуудтай ажиллах.

Үүнтэй холбогдуулан Emrfs-ийн тууштай үзэл бодол юу вэ?

The EMRFS-ийн тууштай үзэл бодол хадгалахын тулд Amazon DynamoDB хүснэгтэд мета өгөгдлийг үүсгэж ашигладаг тууштай үзэл бодол таны S3 объектуудын. Энэ хүснэгт нь тодорхой үйлдлүүдийг хянадаг боловч таны өгөгдлийг агуулдаггүй.

s3 ба s3a хоёрын ялгаа юу вэ? Энэ бол хоорондын ялгаа гурав: s3 нь Амазоны дээд талд байрлах блок дээр суурилсан давхарга юм S3 , харин s3n/ s3a биш юм. Эдгээр нь объектод суурилсан. Хэмжээ нь чухал бол s3n нь 5 ГБ хүртэлх объектуудыг дэмждэг s3a 5TB хүртэлх объектуудыг дэмждэг бөгөөд илүү өндөр гүйцэтгэлтэй.

Үүний дагуу EMR HDFS ашигладаг уу?

EMR Файлын систем (EMRFS) Та ашиглаж болно аль аль нь HDFS эсвэл Amazon S3-ийг таны кластерт файлын систем болгон ашиглах. Ихэнхдээ Amazon S3 байна оролт, гаралтын өгөгдлийг хадгалахад ашигладаг ба завсрын үр дүнгүүд нь хадгалагдана HDFS.

s3a гэж юу вэ?

S3A (URI схем: s3a ) -ийн залгамжлагч S3 Төрөлх, s3n fs, the S3a : систем нь Amazon-ийн номын сангуудтай харилцахдаа ашигладаг S3 . Энэ нь зөвшөөрдөг S3a том файлуудыг дэмжих (5 ГБ-аас илүүгүй), илүү өндөр гүйцэтгэлтэй үйлдлүүд болон бусад.

Зөвлөмж болгож буй: