Hjem Personlig finansiering Hadoop-dummiernes opprinnelse og design <[SET:descriptionno]Hadoop

Hadoop-dummiernes opprinnelse og design <[SET:descriptionno]Hadoop

Anonim

Så hva er dette med det morsomme navnet Hadoop? I kjerne er Hadoop et rammeverk for lagring av data på store klynger av < Commodity -hardware - daglig datamaskinhardware som er rimelig og lett tilgjengelig - og kjører applikasjoner mot dataene. En klynge er en gruppe sammenkoblede datamaskiner (kjent som noder ) som kan fungere sammen om det samme problemet.

Bruk av nettverk av rimelige beregningsressurser for å skaffe seg forretningsmessig innsikt, er Hadops nøkkelverdier.

Som for det navnet Hadoop, ikke se etter noen stor betydning der, det er bare navnet Doug Cutting sønn ga til sin utstoppede elefant. (Doug Cutting er selvfølgelig medskaperen til Hadoop.) Navnet er unikt og lett å huske - Egenskaper som gjorde det til et godt valg.

Hadoop består av to hovedkomponenter: en distribuert prosessramme kalt MapReduce (som nå støttes av en komponent som heter YARN) og et distribuert filsystem kjent som Hadoop distribuert filsystem eller HDFS.

En applikasjon som kjører på Hadoop får sitt arbeid delt mellom noder (maskiner) i klyngen, og HDFS lagrer dataene som skal behandles. En Hadoop-klynge kan spanne tusenvis av maskiner, hvor HDFS lagrer data, og MapReduce-jobber gjør behandlingen i nærheten av dataene, noe som holder I / O-kostnadene lave. MapReduce er ekstremt fleksibel og muliggjør utvikling av et bredt utvalg av applikasjoner.

Som du kanskje har antatt, er en Hadoop-klynge en form for

beregne klynge, en type klynge som hovedsakelig brukes til beregningsformål. I en beregningsklynger kan mange datamaskiner ( beregne noder ) dele beregningsarbeidbelastninger og dra nytte av en meget stor samlet båndbredde over hele klyngen. Hadoop-klynger består vanligvis av noen få

master noder, som styrer lagrings- og behandlingssystemene i Hadoop, og mange slave noder, som lagrer alle klyngens data og er også der dataene blir behandlet.

Hadoop-dummiernes opprinnelse og design <[SET:descriptionno]Hadoop

Redaktørens valg

Hvordan beskrives et datasett statistisk for GEDs vitenskapstest - dummies

Hvordan beskrives et datasett statistisk for GEDs vitenskapstest - dummies

GED Science test vil stille spørsmål relatert til beskrivende statistikk. Du kan ofte oppsummere en samling av data (fra et eksperiment, observasjoner eller undersøkelser, for eksempel) ved å bruke beskrivende statistikk, tall som brukes til å oppsummere og analysere dataene og trekke konklusjoner fra det. Beskrivende statistikk for en samling av data inkluderer følgende: Frekvens: ...

Hvordan forutsi en utgang basert på data eller bevis på GED-vitenskapstesten

Hvordan forutsi en utgang basert på data eller bevis på GED-vitenskapstesten

Bruk av bevis for å forutsi utfall er en nødvendig ferdighet for GED Science-testen. De største fordelene med vitenskapelige studier kan ofte tilskrives det faktum at deres konklusjoner gjør det mulig for folk å forutsi utfall. (Du vil sikkert ønske vitenskap kan hjelpe deg med å forutsi utfallet ditt på prøve!) Du er vitne til vitenskap i handling hver dag ...

Hvordan man måler en forfatters troverdighet for GEDs samfunnsstudietest - dummies

Hvordan man måler en forfatters troverdighet for GEDs samfunnsstudietest - dummies

GED Social Studies test vil stille spørsmål som krever at du bestemmer troverdigheten til en forfatter. Det er ikke alltid lett å vurdere om en forfatter er troverdig basert på informasjonen som er gitt i en skriftlig oversikt og referansen, men du kan hente spor ved å nøye undersøke følgende områder: Forfatterens ...

Redaktørens valg

Hva skjer i QuickBooks 2013 Setup? - dummies

Hva skjer i QuickBooks 2013 Setup? - dummies

Etter at du har installert QuickBooks 2013, kjører du en skjermveiviser for å sette opp QuickBooks for firmaets regnskap. Klart, denne skjermveiviseren kalles QuickBooks Setup. Når du kjører QuickBooks Setup, gir du ganske mye informasjon til QuickBooks. Som en praktisk sak krever oppsettet og oppsettet etter oppsettet at du har ...

Leverandørmenykommandoer i QuickBooks 2013 - dummies

Leverandørmenykommandoer i QuickBooks 2013 - dummies

Når du jobber med betalbar betaling i QuickBooks 2013, har du ofte vil bruke flere av kommandoene på leverandørmenyen. Noen av kommandoene er imidlertid ikke så populære, men du må fortsatt være klar over deres formål. Leverandørssenter i QuickBooks 2013 Vendor Center-vinduet viser en liste over leverandører og detaljerte ...

Kommandoer for leverandørmeny i QuickBooks 2014 - dummies

Kommandoer for leverandørmeny i QuickBooks 2014 - dummies

Når du jobber med betalbar betaling i QuickBooks 2014, har du ofte vil bruke flere av kommandoene på leverandørmenyen. Noen av kommandoene er imidlertid ikke så populære, men du må fortsatt være klar over deres formål. Leverandørssenter Vendor Center-vinduet viser en liste over leverandører og detaljert leverandørinformasjon for ...