Management verticale de stocare a datelor - dummies

Majoritatea managerilor de baze de date relaționale au fost construiți pe un manager de depozitare orizontal , baza de date pe rând (sau înregistrare) atunci când are loc o tranzacție. O tabelă de baze de date este reprezentată ca un lanț de pagini de bază de date care conțin una sau mai multe rânduri de date. Un manager de stocare pe orizontală oferă suport pentru procesarea rapidă a tranzacțiilor on-line (OLTP), deoarece cele mai multe tranzacții apar într-un format de înregistrare - de exemplu, introducerea unei intrări în registru general sau scrierea unui cec. Cu toate acestea, atunci când un utilizator cere o înregistrare, pagina bazei de date care conține datele este adesea mutată în memorie, ceea ce pentru aplicațiile de business intelligence este extrem de ineficientă.

În decursul anilor au apărut mai multe produse de bază de date specializate pentru a ajuta și optimiza aplicațiile centrate pe interogări, cum ar fi business intelligence. Astfel de produse vă permit să dezvoltați mai ușor depozite de date interactive. Scopul acestor baze de date bazate pe coloane este de a spori viteza interogărilor de suport decizional efectuate împotriva unor cantități mari de date.

Când administratorii de baze de date sunt întrebați dacă ar plasa vreodată un index pe o coloană care conține codul zonal al unei persoane, media punctului unui student sau totalitatea tranzacțiilor unui client, ei răspund cu un răsunător: "Nu! "Acestea dau de obicei acest răspuns rambursabil din motive bazate pe tehnologie, cum ar fi:

Indreptăm numai pe căi standard, cunoscute (cum ar fi numele) din cauza cheltuielilor generale ale indexurilor.

• Cardinalitatea

• , sau apariția unică a datelor, ar forța baza de date să efectueze o scanare de tabel oricum. Cu toate acestea, atunci când întrebați utilizatorii ce informații au nevoie pentru a-și îndeplini sarcinile de serviciu, aceștia răspund cu astfel de cerințe:

A se vedea numărul de persoane după codul zonal de pe teritoriul meu, astfel încât să pot gestiona mai eficient promoțiile mele.

• Identificați elevii de top din clasa de absolvire pentru a putea organiza interviurile adecvate.

• Aflați ce clienți fac afaceri cu compania mea și cheltuiți între 100, 000 și 500 000 de dolari pe an.

• Fiecare dintre aceste trei cerințe caracterizează o cerere diferită de utilizator, totuși ele îndeplinesc toate funcțiile similare: Ele sunt întrebări orientate spre suportul decizional. O necesitate de a accesa datele conduce cerințele privind informațiile despre utilizatori, dar modelele de acces ale utilizatorilor nu sunt compatibile cu cele mai multe strategii de indexare RDBMS. Pe scurt, tehnologia RDBMS se opune succesului aplicațiilor.

O tabelă de bază de date este reprezentată ca un lanț de pagini de bază de date care conțin una sau mai multe rânduri de date, după cum se arată în această figură.Un manager de stocare pe orizontală oferă suport pentru procesarea rapidă a tranzacțiilor on-line (OLTP) deoarece majoritatea tranzacțiilor apar într-un format de înregistrare.

Aceste baze de date relaționale ajută activitatea de interogare prin utilizarea de indici. Indicii sunt construiți pe rând, pentru a simplifica și a accelera recuperarea datelor pe căi comune, după cum se arată în figură.

Soluțiile de stocare a datelor, cum ar fi business intelligence, nu utilizează multe dintre aceste tehnici de indexare deoarece au fost create pentru a ajuta aplicațiile OLTP în nevoia frecventă de a găsi și actualiza rânduri individuale în tabelele bazei de date.

Pentru a suporta în mod corespunzător interogările tipice ale utilizatorilor găsite în business intelligence, sunt necesare alte tehnici de stocare și indexare. Furnizori precum Sybase și Vertica au construit administratori verticali de stocare. În loc să stocheze datele pe rând, aceste produse stochează datele pe coloane - de aici numele

managerul de stocare verticală sau stocarea pe coloane. Această metodă de stocare rezolvă în mod eficient problema interogărilor utilizatorilor față de seturi mari de date deoarece un utilizator caută adesea doar câteva coloane, comparativ cu numărul mare de coloane gestionate într-un rând de către un manager de stocare orizontal. Cu datele stocate ca o serie de modificări ale paginii, cu fiecare pagină care conține date de coloană, timpul de procesare a interogărilor este redus cu un factor de 500 sau mai mult la 1.

În plus, aceste produse acceptă alte optimizări care ajută la viteza interogării procesarea, inclusiv compresia datelor, operațiile de interogare paralelă și tehnicile multiple de indexare pe coloană. Provocarea în implementarea unor astfel de tehnologii implică standardizarea. Prin urmare, multe departamente de gestionare a datelor refuză să implementeze astfel de tehnologii, deoarece aceste tehnologii necesită o forță de muncă suplimentară.