Koji su glavni konfiguracijski parametri koje korisnik treba navesti za pokretanje MapReduce posla?
Koji su glavni konfiguracijski parametri koje korisnik treba navesti za pokretanje MapReduce posla?
Anonim

Glavni konfiguracijski parametri koje korisnici moraju navesti u okviru "MapReduce" su:

  • Posao ulazne lokacije u distribuiranom datotečnom sustavu.
  • Posao mjesto izlaza u distribuiranom datotečnom sustavu.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Ovdje, koji su glavni konfiguracijski parametri u programu MapReduce?

Glavni konfiguracijski parametri u okviru "MapReduce" su:

  • Mjesto unosa poslova u distribuirani datotečni sustav.
  • Izlazno mjesto poslova u distribuiranom datotečnom sustavu.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Također se može zapitati, koji su parametri mapera i reduktora? Četiri parametra za mapere su:

  • Longwritable (unos)
  • tekst (unos)
  • tekst (srednji izlaz)
  • IntWritable (srednji izlaz)

Također se postavlja pitanje koje su glavne komponente MapReduce posla?

  • Glavna klasa drajvera koja daje parametre konfiguracije posla.
  • Mapper klasa koja mora proširiti org. apache. hadoop. mapreduce. Mapper klasa i osigurati implementaciju za mapu () metodu.
  • Reducer klasa koja bi trebala proširiti org. apache. hadoop. mapreduce. Razred reduktora.

Što je partitioner i kako pomaže u MapReduce procesu posla?

Particioner u MapReduce posao izvršenje kontrolira particioniranje ključeva posrednih izlaza karte. Uz Pomozite hash funkcije, ključ (ili podskup ključa) izvodi particija . Zapisi koji imaju istu vrijednost ključa ulaze u isto particija (unutar svakog mapera).

Preporučeni: