Indholdsfortegnelse:

Hvor kan jeg finde gnistlogs?
Hvor kan jeg finde gnistlogs?

Video: Hvor kan jeg finde gnistlogs?

Video: Hvor kan jeg finde gnistlogs?
Video: Keld & Hilda Heick - Hvor kan jeg finde den mand (2006) 2024, April
Anonim

Log mapper

Standard SPARK_WORKER_LOG_DIR placering er /var/ log / gnist /arbejder. Standarden log mappe til at starte Gnist SQL Thrift-server er $HOME/ gnist -sparsomme server. Gnist Skal og applikation logs udsendes til konsollen. Log konfigurationsfiler er placeret i samme mappe som gnist -env.sh.

I forhold til dette, hvordan får jeg gnistlogs?

Gnist job eller ansøgning fra siden Analyse, kan du få adgang til logs via Application UI og Gnist Applikations-UI. side, kan du få adgang til logs via Gnist Applikations-UI. Du kan også yderligere logs at identificere fejl og undtagelser i Gnist job- eller ansøgningsfejl.

På samme måde, hvordan kontrollerer du garnlogs? Visning af en log fil den logs af en applikationsmaster kan også ses i en browser i ressourcemanager UI på garn .resourcemanager.webapp.address}/cluster (https://localhost:8088 på en enkelt node "cluster").

På samme måde kan man spørge, hvordan får jeg executor logs på Spark?

Svar

  1. Instruktioner til at hente Spark-eksekutorloggene:
  2. For Amabari -- 1) Gå til Spark Service og fanen Configs: 2) Find "Advanced spark-log4j-properties" indgangen.
  3. For Cloudera -- Indstil: spark.executor.extraJavaOptions=-Dlog4j.configuration=fil:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Hvordan finder jeg min gnisthistorikserver-URL?

F.eks. for historie server , vil de typisk være tilgængelige på server - url >:18080/api/v1, og for en kørende applikation på https://localhost:4040/api/v1. I API'et refereres en applikation af dens applikations-id, [app-id].

Anbefalede: