Hjem Personlig finansiering Slave node og diskfeil i HDFS - dummies

Slave node og diskfeil i HDFS - dummies

Video: Jabba's Dance Number (Original 1983) - Return of the Jedi 2025

Video: Jabba's Dance Number (Original 1983) - Return of the Jedi 2025
Anonim

Som død og skatt, diskfeil (og gitt nok tid, jevn knutepunkt eller rackfeil) uunngåelig i Hadoop Distributed File System (HDFS). I eksemplet som vises, ville klyngen fortsette å fungere selv om ett rekk skulle mislykkes. Ytelsen vil lide fordi du har mistet halvparten av prosessressursene dine, men systemet er fremdeles online, og alle data er fortsatt tilgjengelige.

I et scenario der en harddisk eller en slave node mislykkes, finner den sentrale metadata-serveren for HDFS (kalles NameNode) til slutt at filblokkene som er lagret på den mislykkede ressursen, ikke lenger er tilgjengelige. Hvis for eksempel slave node 3 mislykkes, vil det bety at blokkene A, C og D er underreplisert .

Med andre ord er for få kopier av disse blokkene tilgjengelige i HDFS. Når HDFS oppdager at en blokk er underreplisert, bestiller den en ny kopi.

For å fortsette eksemplet, si at Slave Node 3 kommer tilbake online etter noen timer. I mellomtiden har HDFS sikret at det er tre kopier av alle filblokkene. Så nå har blokkene A, C og D fire eksemplarer og er overreplisert . Som med underrepliserte blokker vil HDFS sentrale metadata server også finne ut om dette, og vil bestille en kopi av hver fil som skal slettes.

Et fint resultat av tilgjengeligheten av data er at når diskfeil oppstår, er det ikke nødvendig å erstatte feilbare harddisker umiddelbart. Dette kan mer effektivt gjøres med jevne mellomrom.

Slave node og diskfeil i HDFS - dummies

Redaktørens valg

Hvordan beskrives et datasett statistisk for GEDs vitenskapstest - dummies

Hvordan beskrives et datasett statistisk for GEDs vitenskapstest - dummies

GED Science test vil stille spørsmål relatert til beskrivende statistikk. Du kan ofte oppsummere en samling av data (fra et eksperiment, observasjoner eller undersøkelser, for eksempel) ved å bruke beskrivende statistikk, tall som brukes til å oppsummere og analysere dataene og trekke konklusjoner fra det. Beskrivende statistikk for en samling av data inkluderer følgende: Frekvens: ...

Hvordan forutsi en utgang basert på data eller bevis på GED-vitenskapstesten

Hvordan forutsi en utgang basert på data eller bevis på GED-vitenskapstesten

Bruk av bevis for å forutsi utfall er en nødvendig ferdighet for GED Science-testen. De største fordelene med vitenskapelige studier kan ofte tilskrives det faktum at deres konklusjoner gjør det mulig for folk å forutsi utfall. (Du vil sikkert ønske vitenskap kan hjelpe deg med å forutsi utfallet ditt på prøve!) Du er vitne til vitenskap i handling hver dag ...

Hvordan man måler en forfatters troverdighet for GEDs samfunnsstudietest - dummies

Hvordan man måler en forfatters troverdighet for GEDs samfunnsstudietest - dummies

GED Social Studies test vil stille spørsmål som krever at du bestemmer troverdigheten til en forfatter. Det er ikke alltid lett å vurdere om en forfatter er troverdig basert på informasjonen som er gitt i en skriftlig oversikt og referansen, men du kan hente spor ved å nøye undersøke følgende områder: Forfatterens ...

Redaktørens valg

Hva skjer i QuickBooks 2013 Setup? - dummies

Hva skjer i QuickBooks 2013 Setup? - dummies

Etter at du har installert QuickBooks 2013, kjører du en skjermveiviser for å sette opp QuickBooks for firmaets regnskap. Klart, denne skjermveiviseren kalles QuickBooks Setup. Når du kjører QuickBooks Setup, gir du ganske mye informasjon til QuickBooks. Som en praktisk sak krever oppsettet og oppsettet etter oppsettet at du har ...

Leverandørmenykommandoer i QuickBooks 2013 - dummies

Leverandørmenykommandoer i QuickBooks 2013 - dummies

Når du jobber med betalbar betaling i QuickBooks 2013, har du ofte vil bruke flere av kommandoene på leverandørmenyen. Noen av kommandoene er imidlertid ikke så populære, men du må fortsatt være klar over deres formål. Leverandørssenter i QuickBooks 2013 Vendor Center-vinduet viser en liste over leverandører og detaljerte ...

Kommandoer for leverandørmeny i QuickBooks 2014 - dummies

Kommandoer for leverandørmeny i QuickBooks 2014 - dummies

Når du jobber med betalbar betaling i QuickBooks 2014, har du ofte vil bruke flere av kommandoene på leverandørmenyen. Noen av kommandoene er imidlertid ikke så populære, men du må fortsatt være klar over deres formål. Leverandørssenter Vendor Center-vinduet viser en liste over leverandører og detaljert leverandørinformasjon for ...