Gdje mogu pronaći iskrice?

2024 Autor: Lynn Donovan | [email protected]. Zadnja promjena: 2023-12-15 23:47

Dnevnik imenike

Zadana lokacija SPARK_WORKER_LOG_DIR je /var/ zapisnik / iskra /radnik. Zadana vrijednost zapisnik imenik za pokretanje Iskra SQL Thrift poslužitelj je $HOME/ iskra - štedljivi poslužitelj. Iskra Shell i aplikacija trupaca izlaze na konzolu. Dnevnik konfiguracijske datoteke nalaze se u istom direktoriju kao iskra -env.sh

S obzirom na to, kako mogu dobiti iskrice?

Iskra posao ili prijavu sa stranice Analiza, možete pristupiti trupaca putem korisničkog sučelja aplikacije i Iskra Korisničko sučelje aplikacije. stranici, možete pristupiti trupaca putem Iskra Korisničko sučelje aplikacije. Također možete dodatno trupaca identificirati pogreške i iznimke u Iskra neuspjehe posla ili aplikacije.

Slično tome, kako provjeravate trupce pređe? Pregled a zapisnik datoteka The trupaca glavnog aplikacije također se može vidjeti u pregledniku u korisničkom sučelju upravitelja resursa na pređa .resourcemanager.webapp.address}/cluster (https://localhost:8088 na jednom čvoru "cluster").

Slično se može pitati, kako mogu dobiti zapisnike izvršitelja na Sparku?

Odgovor

1. Upute za dobivanje zapisnika izvršitelja Spark:
2. Za Amabari -- 1) Idite na uslugu Spark i karticu Configs: 2) Pronađite unos "Advanced spark-log4j-properties".
3. Za Cloudera -- Postavite: spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Kako mogu pronaći URL svog poslužitelja spark povijesti?

Npr., za poslužitelj povijesti , obično bi bili dostupni na poslužitelju - url >:18080/api/v1, a za pokrenutu aplikaciju, na https://localhost:4040/api/v1. U API-ju se na aplikaciju upućuje njezin ID aplikacije, [app-id].