Je li s3 baziran na HDFS-u?
Je li s3 baziran na HDFS-u?

Video: Je li s3 baziran na HDFS-u?

Video: Je li s3 baziran na HDFS-u?
Video: The Expert (Short Comedy Sketch) 2024, Travanj
Anonim

S3 je zapravo beskonačna pohrana u oblaku ali HDFS nije. HDFS se nalazi na fizičkim strojevima, tako da tamo možete izvršiti bilo koji program. Ne možete izvršiti ništa na S3 jer je samo Object Store, a ne FS.

Zatim, je li s3 distribuirani datotečni sustav?

S3 nije a distribuirani datotečni sustav . To je pohrana binarnih objekata koja pohranjuje podatke u parovima ključ/vrijednost. To je u biti vrsta NoSQL baze podataka. Svaki segment je nova "baza podataka", s ključevima koji su vaša "puta mape", a vrijednosti su binarni objekti ( datoteke ).

Također se može zapitati je li AWS baziran na Hadoopu? Hadoop je okvir koji pomaže u obradi velikih skupova podataka na više računala. To uključuje Map/Reduce (paralelna obrada) i HDFS (distribuirani datotečni sustav). AWS je skladište podataka izgrađena na vrhu vlasničke tehnologije koju je izvorno razvio ParAccel.

Osim ovoga, kako mogu prenijeti datoteke sa s3 na HDFS?

Odgovor. Nema izravnog način kopiranja datoteka sa S3 na HDFS bez prolaska kroz lokalno datoteke . Međutim, možete koristiti komponentu tSystem u standardnom zadatku za pozivanje izvornog Hadoop naredbu koju obično koristite kopirati datoteke , na primjer, s3 -dist-cp.

Što je s3 baza podataka?

Amazon S3 ili Amazon Simple Storage Service je usluga koju nudi Amazon Web Services (AWS) koja pruža pohranu objekata putem sučelja web usluge. Amazon S3 koristi istu skalabilnu infrastrukturu za pohranu koju Amazon.com koristi za pokretanje svoje globalne mreže e-trgovine.

Preporučeni: