Isi kandungan:

Apakah parameter konfigurasi utama yang perlu ditentukan oleh pengguna untuk menjalankan tugas MapReduce?
Apakah parameter konfigurasi utama yang perlu ditentukan oleh pengguna untuk menjalankan tugas MapReduce?

Video: Apakah parameter konfigurasi utama yang perlu ditentukan oleh pengguna untuk menjalankan tugas MapReduce?

Video: Apakah parameter konfigurasi utama yang perlu ditentukan oleh pengguna untuk menjalankan tugas MapReduce?
Video: Create and Execute MapReduce in Eclipse 2024, Mungkin
Anonim

Parameter konfigurasi utama yang pengguna perlu tentukan dalam rangka kerja "MapReduce" ialah:

  • Ayub lokasi input dalam sistem fail yang diedarkan.
  • Ayub lokasi output dalam sistem fail yang diedarkan.
  • Format input data.
  • Format keluaran data.
  • Kelas yang mengandungi fungsi peta.
  • Kelas yang mengandungi fungsi pengurangan.

Di sini, apakah parameter konfigurasi utama dalam program MapReduce?

Parameter konfigurasi utama dalam rangka kerja "MapReduce" ialah:

  • Masukkan lokasi Pekerjaan dalam sistem fail yang diedarkan.
  • Lokasi Output Jobs dalam sistem fail yang diedarkan.
  • Format input data.
  • Format keluaran data.
  • Kelas yang mengandungi fungsi peta.
  • Kelas yang mengandungi fungsi pengurangan.

Seseorang juga mungkin bertanya, apakah parameter pemeta dan pengurang? Empat parameter untuk pemeta ialah:

  • Boleh Tulis Panjang (input)
  • teks (input)
  • teks (output perantaraan)
  • IntWritable (output perantaraan)

Soalan juga ialah, apakah komponen utama kerja MapReduce?

  • Kelas pemacu utama yang menyediakan parameter konfigurasi kerja.
  • Kelas Mapper yang mesti memanjangkan org. apache. hadoop. mapreduce. Kelas Mapper dan menyediakan pelaksanaan untuk kaedah peta ().
  • Kelas pengurangan yang sepatutnya memanjangkan org. apache. hadoop. mapreduce. Kelas pengurang.

Apakah itu partitioner dan bagaimana ia membantu dalam proses kerja MapReduce?

Pembahagi dalam Kerja MapReduce pelaksanaan mengawal pembahagian kekunci keluaran peta perantaraan. Dengan membantu fungsi cincang, kunci (atau subset kunci) memperoleh partition . Rekod sebagai mempunyai nilai kunci yang sama masuk ke dalam yang sama partition (dalam setiap pemeta).

Disyorkan: