Hvad er Emrfs?
Hvad er Emrfs?

Video: Hvad er Emrfs?

Video: Hvad er Emrfs?
Video: What is AWS EMR | Introduction to Amazon EMR | Intellipaat 2024, November
Anonim

EMR-filsystemet ( EMRFS ) er en implementering af HDFS, som alle Amazon EMR-klynger bruger til at læse og skrive almindelige filer fra Amazon EMR direkte til Amazon S3. Datakryptering giver dig mulighed for at kryptere objekter, der EMRFS skriver til Amazon S3, og aktiverer EMRFS at arbejde med krypterede objekter i Amazon S3.

Hvad er Emrfs konsekvente opfattelse med hensyn til dette?

Det EMRFS konsekvent syn opretter og bruger metadata i en Amazon DynamoDB-tabel til at vedligeholde en konsekvent syn af dine S3-objekter. Denne tabel sporer visse operationer, men indeholder ingen af dine data.

hvad er forskellen mellem s3 og s3a? Dette er forskel mellem de tre: s3 er en blok-baseret overlejring oven på Amazon S3 , hvorimod s3n/ s3a er ikke. Disse er objektbaserede. s3n understøtter objekter op til 5 GB, når størrelsen er et problem, mens s3a understøtter objekter op til 5 TB og har højere ydeevne.

Bruger EMR derfor HDFS?

EMR Filsystem (EMRFS) Du kan bruge enten HDFS eller Amazon S3 som filsystemet i din klynge. Oftest Amazon S3 er bruges til at gemme input- og outputdata, og mellemresultater gemmes i HDFS.

Hvad er s3a?

S3A (URI-skema: s3a ) En efterfølger til S3 Native, s3n fs, den S3a : systemet bruger Amazons biblioteker til at interagere med S3 . Dette tillader S3a til at understøtte større filer (ikke mere 5 GB grænse), højere ydeevne operationer og mere.

Anbefalede: