Acasă Finanțe personale Managerul nodului yarn în Hadoop - dummies

Managerul nodului yarn în Hadoop - dummies

Video: Lora, îndrăgostită de sânii ei, complexată de altele 2024

Video: Lora, îndrăgostită de sânii ei, complexată de altele 2024
Anonim

Fiecare nod de slave din încă un alt negociator de resurse (YARN) are un daemon pentru Node Manager, care acționează ca un sclav pentru Managerul de resurse. Ca și în TaskTracker, fiecare nod slave are un serviciu care leagă serviciul de procesare (Node Manager) și serviciul de stocare (DataNode) care permit ca Hadoop să fie un sistem distribuit.

Fiecare manager de noduri urmărește resursele de procesare a datelor disponibile pe nodul său slave și trimite rapoarte periodice către Managerul de resurse.

Resursele de procesare dintr-un grup Hadoop sunt consumate în bucăți de mărimea mușcăturii numite containere. Un container este o colecție a tuturor resurselor necesare pentru a rula o aplicație: nuclee CPU, memorie, lățime de bandă a rețelei și spațiu pe disc. Un container implementat rulează ca un proces individual pe un nod de slave într-un cluster Hadoop.

Conceptul de container poate să vă reamintească un slot , unitatea de procesare utilizată de JobTracker și TaskTracker, dar au unele diferențe notabile. În mod semnificativ, containerele sunt generice și pot rula orice logică de aplicație pe care sunt date, spre deosebire de sloturile, definite în mod specific pentru a executa fie hărți, fie pentru a reduce sarcinile. De asemenea, containerele pot fi solicitate cu sumele personalizate ale resurselor, în timp ce sloturile sunt uniforme.

Atâta timp cât suma solicitată se află în limitele minime și maxime ale a ceea ce este acceptabil pentru un container (și atâta timp cât suma solicitată de memorie este un multiplu al sumei minime), Managerul de resurse va acorda și programarea acelui container.

Toate procesele de container care rulează pe un nod sclav sunt inițial furnizate, monitorizate și urmărite de către daemonul Node Manager al nodului slave.

Managerul nodului yarn în Hadoop - dummies

Alegerea editorilor

Administrator de rețea: Zone de căutare inversă - dummies

Administrator de rețea: Zone de căutare inversă - dummies

Interogări DNS obișnuite sunt interogări de căutare înainte corespunde unui nume de domeniu complet calificat. O căutare inversă este opusul unei căutări forward: returnează numele de domeniu complet calificat al unei gazde pe baza adresei sale IP. Căutările inverse sunt posibile din cauza unui domeniu special numit ...

Rețea Elemente de bază: Clienți și servere - manechine

Rețea Elemente de bază: Clienți și servere - manechine

Computerul de rețea care conține hard disk-urile, imprimantele și alte resurse care sunt partajate cu alte calculatoare de rețea se numește un server. Acest termen vine în repetate rânduri, deci trebuie să-l amintiți. Scrie-o pe spatele mâinii tale stângi. Orice computer care nu este un server este numit client. Aveți ...

Retea Bazele: Poduri - dummies

Retea Bazele: Poduri - dummies

O punte este un dispozitiv care conecteaza doua retele astfel incat sa actioneze ca si cum ar fi o rețea. Podurile sunt utilizate pentru a împărți o rețea mare în două rețele mai mici din motive de performanță. Vă puteți gândi la un pod ca pe un repetor inteligent. Repetoarele ascultă semnale care coboară pe un cablu de rețea, amplifică ...

Alegerea editorilor

ÎMprumuta și tweak idei de la alte comunități online - dummies

ÎMprumuta și tweak idei de la alte comunități online - dummies

, Mai degrabă decât să ia ideile altcuiva complet pentru dvs. comunitate online, încercați să riffați pe aceeași idee, dar nu atât de mult încât este evident că nu sunteți creierul din spatele brainstorming-ului. Idei sunt acolo pentru a lua, dar nu ar fi mai degrabă văzute ca cineva inovatoare, nu cineva care scours pe web ...

Branding Blogul tău

Branding Blogul tău

Branding blog-ul tău merge mult spre a face dacă este ușor de recunoscut pentru cititorii tăi. Când vedeți un punct roșu în interiorul unui cerc roșu, ce magazin vine în minte? Ce zici de acele arcuri de aur? Un nume de marcă apare în minte atunci când vedeți simbolul swoosh? La fel ca magazinele populare, restaurantele și încălțămintea ...

Construiți un Blog Mama care este Sellable - dummies

Construiți un Blog Mama care este Sellable - dummies

Dacă obiectivul pe termen lung este de a vinde blogul dvs. ar trebui să o construiască cu acest scop în minte. Evitați asocierea prea intensă a blogului cu marca dvs. personală. Un blog care poate fi valoros cu orice scriitor la cârma trebuie să îndeplinească majoritatea, dacă nu toate, următoarele criterii: Blogul este concentrat ...

Alegerea editorilor

Cum să creați o nouă campanie de anunțuri LinkedIn - dummies

Cum să creați o nouă campanie de anunțuri LinkedIn - dummies

LinkedIn oferă servicii de publicitate pentru afacerea dvs. Dacă vă decideți să utilizați LinkedIn ca instrument de marketing, va trebui doar să obțineți o nouă campanie de anunțuri în lucrări. Când sunteți gata să începeți o nouă campanie, urmați acești pași:

Opțiuni de filtrare pentru anunțul dvs. LinkedIn - manechine

Opțiuni de filtrare pentru anunțul dvs. LinkedIn - manechine

Ce opțiuni de filtrare aveți pentru anunțul dvs. LinkedIn? Alte rețele de publicitate vă permit să filtrați publicul vizat de câteva atribute cunoscute ale persoanei care vă va vedea anunțul, sexul și locația membrilor din public. LinkedIn vă permite să faceți un pas mai departe permițându-vă ...

Oferind și primind viziuni pe LinkedIn - manechine

Oferind și primind viziuni pe LinkedIn - manechine

Deși mulți oameni cred că "Nu este ceea ce știi, știi, "care este unul dintre principalele motive pentru care LinkedIn este atât de valoros, mulți oameni (recrutorii, angajații, directorii executivi, investitorii și altele) sunt foarte interesați de ceea ce știi. În mod logic, oamenii care vă cunosc cel mai bine sunt oamenii din rețeaua dvs., care ...