Hjem Personlig finansiering Hvordan du bruker Apache Mahout for Predictive Analytics - dummies

Hvordan du bruker Apache Mahout for Predictive Analytics - dummies

Video: Slik bruker du Ordnett 2025

Video: Slik bruker du Ordnett 2025
Anonim

En åpen kildekode verktøy som er unikt nyttig i prediktiv analyse er Apache Mahout. Dette maskinlæringsbiblioteket inneholder omfattende versjoner av clustering, klassifisering, samarbeidsfiltrering og andre data-miningalgoritmer som kan støtte en storskala prediktiv analysemodell.

En svært anbefalt måte å behandle dataene som trengs for en slik modell, er å kjøre Mahout i et system som allerede kjører Hadoop. Hadoop utpeker en mastermaskin som orkestrerer de andre maskinene (for eksempel Kartmaskiner og Reduser maskiner) som er ansatt i sin distribuerte prosessering. Mahout skal installeres på denne masteren.

Tenk deg at du har stor mengde av streamede data - Google-nyhetsartikler - og du vil klynge etter emne, ved hjelp av en av klyngalgoritmer. Etter at du har installert Hadoop og Mahout, kan du utføre en av algoritmer - som K-betyr - på dataene dine.

Implementeringen av K-midler under Mahout bruker en MapReduce-tilnærming, noe som gjør at den er forskjellig fra den normale implementeringen av K-midler. Mahout deler K-middelalgoritmen i disse delprosedyrene:

  • KmeansMapper leser inntastingsdatasettet og tilordner hvert innspillingspunkt til nærmeste innledningsvis valgte midler (klusterrepresentanter).

  • KmeansCombiner prosedyren vil ta alle poster - par - produsert av KmeansMapper og produserer delvise beløp for å lette beregningen av de etterfølgende klyngerrepresentanter.

  • KmeansReducer mottar verdiene som produseres av alle deltakene (kombinatørene) for å beregne de faktiske sentroider av klyngene som er den endelige utgangen av K-midler.

  • KmeansDriver håndterer iterasjoner av prosessen til alle klynger har konvergert. Utgangen av en gitt iterasjon, en delvis clustering-utgang, brukes som inngang for neste iterasjon. Prosessen med å kartlegge og redusere datasettet til tildeling av poster og klynger viser ingen videre endringer.

Apache Mahout er et nylig utviklet prosjekt; dets funksjonalitet har fortsatt mye plass til å imøtekomme utvidelser. I mellomtiden bruker Mahout allerede MapReduce til å implementere klassifisering, clustering og andre maskinlære teknikker - og kan gjøre det i stor skala.

Hvordan du bruker Apache Mahout for Predictive Analytics - dummies

Redaktørens valg

10 Tips for visuelt analysere og presentere data i Excel - dummies

10 Tips for visuelt analysere og presentere data i Excel - dummies

Her er noen konkrete forslag om hvordan du med hell kan bruke diagrammer som dataanalyseværktøy i Excel, og hvordan du kan bruke diagrammer for å mer effektivt kommunisere resultatene av dataanalysen du gjør. Bruk riktig diagramtype Hva mange mennesker ikke skjønner er at du bare kan lage fem ...

10 Måter å forbedre Power Pivot Performance - dummies

10 Måter å forbedre Power Pivot Performance - dummies

Når du publiserer Power Pivot-rapporter på nettet, har du tenkt for å gi publikum den beste opplevelsen som er mulig. En stor del av denne erfaringen er å sikre at ytelsen er god. Ordet ytelse (som det gjelder applikasjoner og rapportering) er vanligvis synonymt med hastighet - eller hvor raskt et program utfører bestemte handlinger ...

Legger ekstra analyselagre til Excel-diagrammer - dummies

Legger ekstra analyselagre til Excel-diagrammer - dummies

Det er ikke uvanlig å bli bedt om å legge til Ekstra analyse til din visualisering som vanligvis ikke er plottet på et Excel-diagram. For eksempel viser dette diagramet salg for hvert kvartal, men klienten vil kanskje også se prosentveksten i samme kvartal. De fleste Excel-analytikere oppfyller dette behovet med faktiske tekstbokser. ...

Redaktørens valg

Reise fotografering kamera sammenligning diagram - dummies

Reise fotografering kamera sammenligning diagram - dummies

Fra smarte telefoner til punkt-og-skyte og digitale speilreflekskameraer, du har en mange fotograferingsvalg der ute. Bruk følgende diagram for å se hvilken type kamera som passer best for deg. Smartphone Point-and-shoot dSLR Bildesensor Kvalitet Lav til middels Medium Høy Vannbestandig (egnet for basseng) Sjeldne Få modeller Sjeldne Optiske Zoom Lav ...

Ta et makrofoto-dummies

Ta et makrofoto-dummies

Fotografi (makrofotografi) gir deg den som ser bildene dine, utsikt over verden ikke normalt sett av det blotte øye. De fleste kameraer, selv smarttelefoner, kan skyte ting med en rimelig nærhet med en viss grad av klarhet og fokus. Mens du reiser, finner du ting som skyter nærbilde, for eksempel hva du spiser til middag, en merkelig feil, ...

Forestille et Moving Object - dummies

Forestille et Moving Object - dummies

Når du ser et bilde, skjønner du selv hva som skjedde da det ble tatt. Noen bilder kan innebære bevegelse eller aktivitet. For eksempel kan du fokusere på en sykkel som beveger seg nedover gaten med bygningene bak den sløret. Dette er annerledes enn grunne dybdeskarphet, men fordi blenderåpningen ikke er det som skaper ...

Redaktørens valg

ACT-strategi for å multiplisere en horisontal matrise med en vertikal matrise - dummies

ACT-strategi for å multiplisere en horisontal matrise med en vertikal matrise - dummies

På ACT Matematisk test, du må sannsynligvis multiplisere par matriser som har enten en rad eller en kolonne. En enkel måte å formere en horisontal matrise med en vertikal matris er å sette opp et lite rutenett. Denne metoden lar deg fylle ut tallene for å få det riktige svaret. Matrix ...

ACT-strategi for å løse en matrise ved hjelp av en determinant-dummies

ACT-strategi for å løse en matrise ved hjelp av en determinant-dummies

Er en determinant en vanlig operasjon utført på en firkantet matrise. På ACT Math-testen er den eneste determinantformelen du trenger å være kjent med, for en 2 x 2-matrise. Her er formelen for determinanten av Merk at determinanten av en matrise bare er et tall, ikke en matrise. Å ...

ACT Trick for Quadratics: Slik finner du raskt en Parabola-dummies retning

ACT Trick for Quadratics: Slik finner du raskt en Parabola-dummies retning

For å spare tid når du graver en kvadratisk funksjon på ACT Math-testen, kan du raskt bestemme retningen for parabolen ved hjelp av et enkelt triks basert på koeffisienten a. Dette trikset vedrører tegnet på variabelen a (i uttrykket ax2): Når a er positivt, er grafen konkav opp. I ...