Innholdsfortegnelse:
Video: Hadoop Multi Node Cluster Setup | Hadoop Installation | Hadoop Administration Tutorial | Edureka 2025
Enkelt rack Hadoop-distribusjon
En single-rack-distribusjon er et ideelt utgangspunkt for en Hadoop-klynge.
Her er klyngen ganske selvstendig, men fordi den fortsatt har relativt få slave noder, er de sanne fordelene ved Hadops elastisitet ennå ikke tydelig.
Tre-rack Hadoop-distribusjon
En mellomstore klynge har flere rack, hvor de tre masterknutene er fordelt over rekkene.
Hadops elastisitet begynner å bli tydelig: Selv om en hel rack skulle svikte (for eksempel, begge ToR-brytere i en enkelt rack), ville klyngen fortsatt fungere, om enn på lavere ytelsesnivå. En slave node feil ville knapt være merkbar.
Storformat Hadoop-distribusjon
I større klynger med mange stativer, som det viste eksempelet, er det nødvendig med nettverksarkitektur som er så elegant.
Uansett hvor mange rack Hadoop-klynger utvider til, må slave noder fra hvilken som helst rack være i stand til effektivt å snakke? til hvilken som helst masterknute.
Når antall slave noder øker til det punktet du har mer enn tre rack, er ekstra rack kun sammensatt av slave noder, bortsett fra ToR-bryterne. Hvis du bruker HBase tungt på klyngen din, kan du legge til hovednoder for å være vert for flere HMaster- og Zookeeper-tjenester.
Hvis du oppgraderer til en virkelig stor skala, hvor du har hundrevis av slave noder, må du kanskje bruke HDFS-føderasjonsfunksjonene slik at store deler av datasettene dine blir administrert av forskjellige NameNode-tjenester.
For hver ekstra Active NameNode, trenger du en tilsvarende Standby NameNode og to master noder som vert for disse serverne. Med HDFS-føderasjonen er himmelen virkelig grensen når det gjelder hvor langt du kan skalere ut klyngene dine.
Tilbake Neste
