Spark-д ямар шинэ зүйл байна вэ?
Spark-д ямар шинэ зүйл байна вэ?

Видео: Spark-д ямар шинэ зүйл байна вэ?

Видео: Spark-д ямар шинэ зүйл байна вэ?
Видео: Рэмзи Мусаллам: 3 способа пробудить интерес к обучению 2024, Арваннэгдүгээр
Anonim

Алдаа засахаас бусад нь 2 байна шинэ онцлогууд Оч 2.4: SPARK -22239 Pandas UDF-тэй хэрэглэгчийн тодорхойлсон цонхны функцууд. SPARK -22274 pandas udf-тэй хэрэглэгчийн тодорхойлсон нэгтгэх функцууд. Бид эдгээрт итгэдэг шинэ онцлогууд нь Pandas UDF-ийн хэрэглээг улам сайжруулах бөгөөд бид Pandas UDF-ийг дараагийн хувилбаруудад үргэлжлүүлэн сайжруулах болно.

Үүний нэгэн адил Spark-ийн хамгийн сүүлийн хувилбар юу вэ?

Түүх

Хувилбар Жинхэнэ гаргасан огноо Хамгийн сүүлийн үеийн хувилбар
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Домог: Хуучин хувилбар Хуучин хувилбар, хэвээр хадгалагдаж байгаа Хамгийн сүүлийн хувилбар Хамгийн сүүлийн хувилбар

Дээрхээс гадна Spark SQL ANSI нийцэж байгаа юу? байдлаар Оч 2.0, Оч байна ANSI SQL :2003 нийцтэй , юу гэсэн үг вэ гэхээр Spark SQL дэмждэг SQL бусад аялгуунд байхгүй үйлдлүүд.

Энд Spark нь Java 11-ийг дэмждэг үү?

Скала ба Java хэрэглэгчид оруулах боломжтой Оч Maven координатыг ашиглан өөрсдийн төслүүдэд Python хэрэглэгчид суулгаж болно Оч PyPI-аас. Оч гүйдэг Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ болон R 3.1+.

Spark SQL шинэчлэлтийг дэмждэг үү?

2 хариулт. Spark SQL үгүй UPDATE-г дэмжинэ мэдэгдлүүд хараахан. Hive эхэллээ UPDATE-г дэмждэг hive 0.14 хувилбараас хойш. Гэхдээ Hive-тэй байсан ч гэсэн шинэчлэлтүүдийг дэмждэг /зөвхөн эдгээр хүснэгтүүдийг устгана дэмжлэг үзүүлэх гүйлгээ, энэ нь үүрний баримт бичигт дурдсан байдаг.

Зөвлөмж болгож буй: