Sadržaj:

Koji su glavni konfiguracijski parametri koje korisnik treba navesti za pokretanje MapReduce posla?
Koji su glavni konfiguracijski parametri koje korisnik treba navesti za pokretanje MapReduce posla?

Video: Koji su glavni konfiguracijski parametri koje korisnik treba navesti za pokretanje MapReduce posla?

Video: Koji su glavni konfiguracijski parametri koje korisnik treba navesti za pokretanje MapReduce posla?
Video: Статистическое программирование с помощью R, Коннор Харрис 2024, Travanj
Anonim

Glavni konfiguracijski parametri koje korisnici moraju navesti u okviru "MapReduce" su:

  • Posao ulazne lokacije u distribuiranom datotečnom sustavu.
  • Posao mjesto izlaza u distribuiranom datotečnom sustavu.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Ovdje, koji su glavni konfiguracijski parametri u programu MapReduce?

Glavni konfiguracijski parametri u okviru "MapReduce" su:

  • Mjesto unosa poslova u distribuirani datotečni sustav.
  • Izlazno mjesto poslova u distribuiranom datotečnom sustavu.
  • Format unosa podataka.
  • Izlazni format podataka.
  • Klasa koja sadrži funkciju mape.
  • Klasa koja sadrži funkciju redukcije.

Također se može zapitati, koji su parametri mapera i reduktora? Četiri parametra za mapere su:

  • Longwritable (unos)
  • tekst (unos)
  • tekst (srednji izlaz)
  • IntWritable (srednji izlaz)

Također se postavlja pitanje koje su glavne komponente MapReduce posla?

  • Glavna klasa drajvera koja daje parametre konfiguracije posla.
  • Mapper klasa koja mora proširiti org. apache. hadoop. mapreduce. Mapper klasa i osigurati implementaciju za mapu () metodu.
  • Reducer klasa koja bi trebala proširiti org. apache. hadoop. mapreduce. Razred reduktora.

Što je partitioner i kako pomaže u MapReduce procesu posla?

Particioner u MapReduce posao izvršenje kontrolira particioniranje ključeva posrednih izlaza karte. Uz Pomozite hash funkcije, ključ (ili podskup ključa) izvodi particija . Zapisi koji imaju istu vrijednost ključa ulaze u isto particija (unutar svakog mapera).

Preporučeni: