Isi kandungan:

Bolehkah saya menjalankan spark secara tempatan?
Bolehkah saya menjalankan spark secara tempatan?

Video: Bolehkah saya menjalankan spark secara tempatan?

Video: Bolehkah saya menjalankan spark secara tempatan?
Video: Как установить Spark на Windows 2024, Mungkin
Anonim

Spark boleh jadilah lari menggunakan penjadual kluster kendiri terbina dalam dalam tempatan mod. Ini bermakna bahawa semua Percikan api proses adalah lari dalam JVM yang sama secara berkesan, satu contoh berbilang benang Percikan api.

Dalam hal ini, bagaimana saya menjalankan Apache spark secara tempatan?

Langkah berikut menunjukkan cara memasang Apache Spark

  1. Langkah 1: Mengesahkan Pemasangan Java.
  2. Langkah 2: Mengesahkan pemasangan Scala.
  3. Langkah 3: Memuat turun Scala.
  4. Langkah 4: Memasang Scala.
  5. Langkah 5: Memuat turun Apache Spark.
  6. Langkah 6: Memasang Spark.
  7. Langkah 7: Mengesahkan Pemasangan Spark.

Tambahan pula, bolehkah kita menjalankan percikan tanpa Hadoop? Seperti yang diper Percikan api dokumentasi, Spark boleh berlari tanpa Hadoop . awak mungkin jalankannya sebagai mod Kendiri tanpa mana-mana pengurus sumber. Tetapi kalau awak mahu lari dalam persediaan berbilang nod, awak memerlukan pengurus sumber seperti YARN atau Mesos dan sistem fail yang diedarkan seperti HDFS , S3 dsb. Ya, percikan api boleh berjalan tanpa hadoop.

Di samping di atas, bagaimanakah cara saya menjalankan percikan dalam mod kendiri?

Untuk memasang Mod Kendiri Spark , anda hanya meletakkan versi terkumpul Percikan api pada setiap nod pada kelompok. Anda boleh mendapatkan versi pra-binaan Percikan api dengan setiap keluaran atau bina sendiri.

Bolehkah percikan berjalan pada Windows?

A Percikan api permohonan boleh menjadi a Windows -skrip shell atau ia boleh menjadi program tersuai dalam Java bertulis, Scala, Python, atau R. Anda perlukan Windows boleh laku yang dipasang pada sistem anda untuk lari aplikasi ini.

Disyorkan: