Apa yang baharu dalam Spark?
Apa yang baharu dalam Spark?

Video: Apa yang baharu dalam Spark?

Video: Apa yang baharu dalam Spark?
Video: Рэмзи Мусаллам: 3 способа пробудить интерес к обучению 2024, Mungkin
Anonim

Selain daripada pembetulan pepijat, terdapat 2 baru ciri dalam Percikan api 2.4: SPARK -22239 Fungsi tetingkap yang ditentukan pengguna dengan Pandas UDF. SPARK -22274 Fungsi pengagregatan yang ditentukan pengguna dengan udf panda. Kami percaya ini baru ciri akan meningkatkan lagi penggunaan Pandas UDF, dan kami akan terus menambah baik Pandas UDF dalam keluaran seterusnya.

Begitu juga, apakah versi terbaru Spark?

Sejarah

Versi Tarikh keluaran asal Versi terkini
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Lagenda: Versi lama Versi lama, masih dikekalkan Versi terkini Versi pratonton terkini

Selain di atas, adakah spark SQL ANSI mematuhi? Setakat Percikan api 2.0, Percikan api ialah ANSI SQL :2003 patuh , yang bermaksud Spark SQL menyokong SQL operasi yang tidak terdapat dalam dialek lain.

Di sini, adakah percikan menyokong Java 11?

Scala dan Jawa pengguna boleh memasukkan Percikan api dalam projek mereka menggunakan koordinat Maven dan pengguna Python boleh memasang Percikan api daripada PyPI. Percikan api berjalan terus Jawa 8/ 11 , Scala 2.12, Python 2.7+/3.4+ dan R 3.1+.

Adakah percikan kemas kini sokongan SQL?

2 Jawapan. Spark SQL tidak menyokong KEMASKINI kenyataan lagi. Hive telah bermula menyokong KEMASKINI sejak sarang versi 0.14. Tetapi walaupun dengan Hive, ia menyokong kemas kini /padam hanya pada jadual yang sokongan transaksi, ia disebut dalam dokumentasi sarang.

Disyorkan: