Isi kandungan:

Di manakah saya boleh mencari log percikan?
Di manakah saya boleh mencari log percikan?

Video: Di manakah saya boleh mencari log percikan?

Video: Di manakah saya boleh mencari log percikan?
Video: Шок!!! ДУШИ МЕРТВЕЦОВ В ЗАТОЧЕНИИ У ДЕМОНА В ЭТОМ СТРАШНОМ ДОМЕ / HERE ARE THE SOULS OF THE DEAD 2024, April
Anonim

Log direktori

Lokasi SPARK_WORKER_LOG_DIR lalai ialah /var/ log / percikan api /pekerja. lalai log direktori untuk memulakan Percikan api Pelayan SQL Thrift ialah $HOME/ percikan api -pelayan berjimat cermat. Percikan api Shell dan aplikasi balak adalah output kepada konsol. Log fail konfigurasi terletak dalam direktori yang sama seperti percikan api -env.sh.

Berkenaan dengan ini, bagaimanakah saya boleh mendapatkan log percikan?

Percikan api kerja atau permohonan daripada halaman Analisis, anda boleh mengakses balak melalui UI Aplikasi dan Percikan api UI Aplikasi. halaman, anda boleh mengakses balak melalui Percikan api UI Aplikasi. Anda juga boleh tambahan balak untuk mengenal pasti ralat dan pengecualian dalam Percikan api kegagalan kerja atau permohonan.

Begitu juga, bagaimana anda menyemak log benang? Melihat a log fail The balak induk aplikasi juga boleh dilihat dalam penyemak imbas dalam UI pengurus sumber di benang .resourcemanager.webapp.address}/cluster (https://localhost:8088 pada satu nod "cluster").

Begitu juga seseorang mungkin bertanya, bagaimana saya boleh mendapatkan log pelaksana di Spark?

Jawab

  1. Arahan untuk mendapatkan log pelaksana Spark:
  2. Untuk Amabari -- 1) Pergi ke Spark Service dan tab Configs: 2) Cari entri "Advanced spark-log4j-properties".
  3. Untuk Cloudera -- Tetapkan: spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Bagaimanakah cara saya mencari URL pelayan Sejarah percikan saya?

Cth., untuk pelayan sejarah , mereka biasanya boleh diakses di pelayan - url >:18080/api/v1, dan untuk aplikasi yang sedang berjalan, di https://localhost:4040/api/v1. Dalam API, aplikasi dirujuk oleh ID aplikasinya, [app-id].

Disyorkan: