Adakah saya perlu belajar Hadoop untuk percikan api?
Adakah saya perlu belajar Hadoop untuk percikan api?

Video: Adakah saya perlu belajar Hadoop untuk percikan api?

Video: Adakah saya perlu belajar Hadoop untuk percikan api?
Video: HPC Webinar Series #3 HPC untuk Analisis Big Data dengan Hadoop dan Spark 2024, Mungkin
Anonim

Tidak, anda tidak perlu belajar Hadoop kepada belajarSpark . Percikan api adalah projek bebas. Tetapi selepas YARNAnd Hadoop 2.0, Percikan api menjadi popular kerana Percikan api boleh berjalan di atas HDFS bersama-sama dengan yang lain Hadoop komponen. Hadoop ialah rangka kerja di mana anda menulisMapReduce kerja dengan mewarisi kelas Java.

Begitu juga, yang mana lebih baik untuk belajar spark atau Hadoop?

Perbezaan pertama dan utama ialah kapasiti RAM dan penggunaannya. Percikan api kegunaan lebih Memori Capaian Rawak daripada Hadoop , tetapi ia "makan" kurang jumlah Internet atau memori cakera, jadi jika anda menggunakan Hadoop , ia lebih baik untuk mencari mesin berkuasa dengan storan dalaman yang besar.

Kedua, adakah Hadoop mudah dipelajari? Hadoop pengaturcaraan ialah lebih mudah untuk orang yang mempunyai kemahiran SQL juga - terima kasih kepada Pig dan Hive. Pelajar atau profesional tanpa latar belakang pengaturcaraan, hanya dengan pengetahuan basicSQL, boleh menguasai Hadoop melalui komprehensifhands-on Hadoop latihan jika mereka mempunyai semangat dan kesanggupan untuk belajar.

Juga ditanya, berapa lama masa yang diperlukan untuk mempelajari Hadoop?

lebih kurang 3-4 bulan

Adakah percikan menggantikan Hadoop?

Percikan api tidak boleh menjadi a penggantian untuk Hadoop ! Percikan api ialah enjin pemprosesan yang berfungsi di atas Hadoop ekosistem. Seperti yang ditunjukkan dalam seni bina di atas, Percikan api datang menggantikan MapReduce dalam Hadoop ekosistem. Terdapat komponen lain dalam Hadoop seni bina untuk memproses data seperti Pig andHive.

Disyorkan: