Video: Legăturile dintre criminalul Gherghe Dincă și grupările mafiote din Caracal 2024
Ca și în cazul oricărui sistem distribuit, crearea de rețele poate să spargă sau să spargă un cluster Hadoop: Nu "mergeți ieftin. "O mulțime de chatter are loc între nodurile principale și nodurile slave într-un cluster Hadoop, care este esențial pentru păstrarea funcționării cluster-ului, deci comutatoarele de clasă de întreprindere sunt cu siguranță recomandate.
Pentru fiecare rack din cluster, aveți nevoie de două switch-uri de tip top-of-rack (ToR), atât pentru redundanță, cât și pentru performanță. Utilizați switch-uri 10GbE pentru ToR.
Întrerupătoarele ToR sunt întrerupătoare de rețea care conectează toate calculatoarele într-un rack împreună. În mod normal, le vedeți la vârful unui rack, de aceea oamenii spun "top-of-rack". "O abordare alternativă în rețea este utilizarea comutatoarelor end-of-row (EoR), dar nu vedeți acest lucru foarte des.
Abordarea ToR este mai simplă din perspectiva unei rețele în ceea ce privește creșterea clusterelor. De exemplu, adăugarea de noduri slave și rafturi suplimentare este mult mai ușoară cu comutatoarele ToR decât EoR.
Când aveți mai mult de trei rafturi, aveți nevoie de cel puțin două comutatoare principale (din nou, în primul rând pentru redundanță, dar și pentru performanță). Aceste switch-uri de bază se ocupă de cantități masive de trafic, deci 40GbE este o necesitate.
Dacă construiți sau extindeți un cluster pentru a acoperi mai multe rafturi, angajați experți în rețea care sunt familiarizați cu Hadoop, planurile viitoare de creștere și volumul de muncă. Rețelele necorespunzătoare pot împiedica performanțele severe, dar pot și ele să ducă la creșterea dureroasă și costisitoare.
