Date Modernizarea depozitului cu Hadoop

Depozitele de date sunt acum stresate, încercând să facă față cereri sporite asupra resurselor lor finite. Hadoop poate oferi o ușurare semnificativă în această situație a depozitului de date.

Creșterea rapidă a cantității de date generate în lume a afectat, de asemenea, depozitele de date, deoarece volumele de date pe care le gestionează sunt în creștere - în parte pentru că mai mult date structurate , tipul de date care este puternic introdus și introduse în rânduri și coloane - este generată, dar și pentru că de multe ori trebuie să vă ocupați de cerințele de reglementare menite să mențină accesul interogat la datele istorice.

În plus, puterea de procesare în depozitele de date este adesea folosită pentru a efectua transformări ale datelor relaționale, fie că intră în depozitul în sine, fie că este încărcată într-un copil un subset separat al depozitului de date) pentru o aplicație specifică de analiză.

În plus, este nevoie ca analiștii să crească întrebări noi cu privire la datele structurate stocate în depozite, iar aceste interogări ad-hoc pot folosi adesea resurse importante de procesare a datelor. Uneori poate fi suficient un raport unic și, uneori, este necesară o analiză exploratorie pentru a găsi întrebări care nu au fost încă solicitate, care ar putea aduce o valoare semnificativă pentru afaceri.

Linia de jos este că depozitele de date sunt adesea folosite în scopuri care depășesc designul lor original.

Figura arată, folosind arhitectura la nivel înalt, modul în care Hadoop poate trăi alături de depozitele de date și îndeplinește unele dintre scopurile pentru care nu sunt proiectate.

Hadoop este un depozit ajutător, nu înlocuitor de depozit. Hadoop poate moderniza un ecosistem de stocare a datelor în patru moduri; aici sunt în rezumat:

• Oferiți o zonă de aterizare pentru toate datele.

• Persistența datelor pentru a furniza o arhivă de date frigorifice interogabile.

• Îmbunătățește performanțele proceselor de procesare la scară largă ale Hadoop pentru preprocesarea și transformarea datelor pentru depozit.

• Activați un mediu pentru descoperirea datelor ad hoc.