Sadržaj:

Koji su različiti formati datoteka u Hadoopu?
Koji su različiti formati datoteka u Hadoopu?

Video: Koji su različiti formati datoteka u Hadoopu?

Video: Koji su različiti formati datoteka u Hadoopu?
Video: Красивая история о настоящей любви! Мелодрама НЕЛЮБОВЬ (Домашний). 2024, Svibanj
Anonim

Na vašu sreću, zajednica velikih podataka u osnovi se odlučila na tri optimizirana formati datoteka za korištenje u Hadoop klasteri: Optimizirani stupovi redova (ORC), Avro i Parket.

Nakon toga se također može zapitati koje su različite vrste formata podataka?

Postoje tri vrste podataka kartiranje i GIS formate podataka . Svaki tip drugačije se postupa.

Vrste formata podataka

  • Na temelju datoteka- Shapefiles, Microstation Design Files (DGN), GeoTIFF slike.
  • Na temelju imenika - ESRI ArcInfo Coverages, US Census TIGER.
  • Veze baze podataka - PostGIS, ESRI ArcSDE, MySQL.

Osim toga, koji je format datoteke najbolji u košnici? RCFile je stupasti redak format datoteke . Ovo je još jedan oblik Format datoteke Hive koji nudi visoke stope kompresije na razini reda. Ako imate zahtjev za izvođenje više redaka istovremeno, onda možete koristiti RCFile format.

Imajući to u vidu, koji su uobičajeni formati unosa u Hadoopu?

InputFormat stvara Inputsplit

  • Najčešći formati za unos su:
  • FileInputFormat- To je osnovna klasa za sve datoteke input-basedInputFormat.
  • TextInputFormat- To je zadani InputFormat za MapReduce.
  • KeyValueTextInputFormat- Sličan je TextInputFormat.
  • Slijedite vezu kako biste saznali više o InputFormatu u Hadoopu.

Što je orc format datoteke u Hadoopu?

ORC format datoteke Optimizirani stupac reda ( ORC ) format datoteke pruža vrlo učinkovit način za pohranu podataka Hive. Dizajniran je da prevlada ograničenja druge košnice formati datoteka . Korištenje ORC datoteke poboljšava performanse kada Hive čita, piše i obrađuje podatke.

Preporučeni: