Tartalomjegyzék:
- Mit csinálnak a térképezők és reduktorok?
- Mi a különbség a térképező és a szűkítő között?
- Hogyan számítja ki a leképezők és szűkítők számát?
- Hogyan működik a Mapper funkció?
Videó: Hogyan működnek a térképezők és reduktorok?
2024 Szerző: Fiona Howard | [email protected]. Utoljára módosítva: 2024-01-10 06:38
Egy leképező vagy leképezési feladat kimenete (kulcsérték párok) bemenet a reduktorba A reduktor több leképezési feladattól kapja a kulcs-érték párt. Ezután a reduktor ezeket a közbenső adatsorokat (köztes kulcs-érték pár) a sorok vagy kulcsérték-párok kisebb halmazává aggregálja, amely a végső kimenet.
Mit csinálnak a térképezők és reduktorok?
A Hadoop Mapper egy függvény vagy feladat, amely egy fájl összes bemeneti rekordjának feldolgozására szolgál, és a kimenetet generálja, amely bemenetként működik a Reducer számára A kimenetet új visszaadásával állítja elő kulcs-érték párok. … A leképező néhány kis adatblokkot is generál, miközben a bemeneti rekordokat kulcs-érték párként dolgozza fel.
Mi a különbség a térképező és a szűkítő között?
Mi a fő különbség a Mapper és a Reducer között? A Mapper feladat a feldolgozás első fázisa, amely minden egyes bemeneti rekordot(a RecordReaderből) feldolgoz, és egy közbenső kulcs-érték párt generál. A Reduce metódus minden kulcs/érték listapárhoz külön kerül meghívásra.
Hogyan számítja ki a leképezők és szűkítők számát?
Attól függ, hogy hány mag és mennyi memória van az egyes slave-eken. Általában egy leképezőnek 1-1,5 processzormagot kell szereznie Tehát ha 15 magja van, akkor csomópontonként 10 leképezőt futtathat. Tehát ha 100 adatcsomópontja van a Hadoop-fürtben, akkor 1000 leképezőt futtathat egy fürtben.
Hogyan működik a Mapper funkció?
A Mapper egy olyan függvény, amely feldolgozza a bemeneti adatokat A leképező feldolgozza az adatokat, és több kis adatdarabot hoz létre. A leképező függvény bemenete (kulcs, érték) párok formájában történik, még akkor is, ha a MapReduce program bemenete egy fájl vagy könyvtár (amely a HDFS-ben van tárolva).
Ajánlott:
Hogyan működnek a polarizáló napszemüvegek?
A polarizált lencsék csökkentik a tükröződést azáltal, hogy vegyi filmet alkalmaznak a lencsékre vagy beágyazzák őket. A polarizált napszemüveg kémiai szűrője eltávolítja a tükröződést azáltal, hogy elnyeli a bejövő vízszintes fényt, miközben továbbra is engedi a függőleges fényt … A lencsék csak függőleges fényt engednek be, és kémiai zsalúziaként működnek .
Hogyan működnek a sertéstollak?
A tolltollak módosult szőrszálak, és pikkelyek borítják őket, amelyek úgy viselkednek, mint a horogsor, aminek következtében a tolltollak folyamatosan befelé mozognak, mélyebben a szövetbe. A sertéstollak leszúrhatják a bőrt, és áthaladhatnak az izomzaton, végül behatolhatnak a testüregekbe és a belső szervekbe .
Hogyan működnek a kutyák kommunikátorai?
A kutyák testbeszéddel kommunikálnak - fogukat kiteszik, farkukat csóválnak, lihegnek, olyan intenzitással néznek a szemedbe, ami csak annyit jelenthet, hogy „KÉREM. PISILNI KELL!!!!!!!!!!!!” – és reagálj a finom emberi jelzésekre oly módon, hogy úgy tűnjön, olvasnak a gondolataidban .
Hogyan működnek a könyvelési szolgáltatások?
A könyvelők felelősek a könyvek gondos karbantartásáért nap mint nap. Általában minden adatbevitelt végeznek a könyvelési könyvekben vagy szoftverekben. egy vállalkozás pénzügyi tranzakcióinak rögzítésére összpontosítanak nyilvántartások vezetésével, a tranzakciók nyomon követésével és pénzügyi jelentések készítésével .
Hogyan működnek a kronometrikus sebességmérők?
A kronometrikus fordulatszámmérők és sebességmérők óramechanizmusokat tartalmaznak kiegyensúlyozó kerék mozgásokkal Ezeket a mozgásokat a forgó bemeneti kábel okosan hajtja meg egy csúszó tengelykapcsolón keresztül. Egy háromkaréjos vezérműtengely, amelynek forgását az óra hajtja, „mechanikai irányítóként” szolgál .