Acasă Finanțe personale Datele mari nu sunt doar un Fad moderne - manechine

Datele mari nu sunt doar un Fad moderne - manechine

Video: The Third Industrial Revolution: A Radical New Sharing Economy 2024

Video: The Third Industrial Revolution: A Radical New Sharing Economy 2024
Anonim

Oamenii de știință au început să lupte împotriva unor cantități impresionante de date de ani de zile înainte ca oricine să fi inventat termenul Date mare. În acest moment, Internetul nu a produs sumele vaste pentru datele pe care le face astăzi. Este util să ne amintim că datele importante nu sunt doar o simplă umilință creată de furnizorii de software și hardware, ci au o bază în multe dintre următoarele domenii:

  • Astronomie: Luați în considerare datele primite de la nave spațiale într-o misiune (cum ar fi Voyager sau Galileo) și toate datele primite de la telescoapele radio, care sunt antene specializate utilizate pentru a recepționa unde radio de la organismele astronomice. Un exemplu comun este proiectul Search for Intelligence Extraterrestrial (SETI), care caută semnale extraterestre prin observarea frecvențelor radio care sosesc din spațiu. Cantitatea de date primite și puterea calculatorului folosită pentru a analiza o porțiune a cerului pentru o singură oră este impresionantă. Dacă străinii sunt acolo, este foarte greu să le vezi. (Contact explorează ce s-ar putea întâmpla dacă oamenii ar intercepta un semnal.)
  • Meteorologie: Gândiți-vă la încercarea de a anticipa vremea pe termen scurt dat fiind numărul mare de măsuri necesare temperatura, presiunea atmosferică, umiditatea, vânturile și precipitațiile la momente diferite, locații și altitudini. Prognoza meteo este într-adevăr una dintre primele probleme în date mari și destul de relevantă. Potrivit companiei Weather Analytics, o companie care furnizează date despre climă, mai mult de 33% din produsul intern brut (PIB) mondial este determinată de modul în care condițiile meteorologice afectează agricultura, pescuitul, turismul și transportul, doar pentru a numi câteva. Datând din anii 1950, primele supercomputere ale acelor timpuri au fost utilizate pentru a distruge cât mai multe date posibil, deoarece în meteorologie, cu cât sunt mai multe date, cu atât precizia este mai precisă. Acesta este motivul pentru care toată lumea acumulează mai multă capacitate de stocare și prelucrare, după cum puteți citi în această poveste privind Asociația Meteorologică Coreeană pentru prognoza meteo și studierea schimbărilor climatice.
  • Fizica: Luați în considerare cantitățile mari de date obținute prin experimente folosind acceleratoare de particule în încercarea de a determina structura materiei, a spațiului și a timpului. De exemplu, Large Hadron Collider, cel mai mare accelerator de particule creat vreodată, produce 15 PB (petabytes) de date în fiecare an ca urmare a coliziunilor particulelor.
  • Genomica: Sequencing-ul unei catene ADN unice, ceea ce înseamnă determinarea exactă a numeroaselor combinații ale celor patru baze - adenină, guanină, citozină și timină - care constituie structura moleculei, necesită destul de mult de date.De exemplu, un singur cromozom, o structură care conține ADN-ul în celulă, poate necesita între 50MB și 300MB. O ființă umană are 46 de cromozomi, iar datele ADN pentru o singură persoană consumă un DVD întreg. Imaginați-vă doar stocarea masivă necesară pentru a documenta datele ADN ale unui număr mare de oameni sau pentru a secvența alte forme de viață pe pământ.
  • Din cauza numeroaselor senzori plasați în oceane pentru măsurarea temperaturii, a curenților și, folosind hidrofoanele, chiar sunete pentru monitorizarea acustică în scopuri științifice (descoperirea despre pești, balene și plancton) și scopuri militare de apărare (găsirea de submarine mascate din alte țări). Puteți să vă uitați la această problemă veche de supraveghere, care devine mai complexă și mai digitală. Sateliți:
  • Înregistrarea imaginilor din întregul glob și trimiterea lor pe pământ pentru a monitoriza suprafața Pământului și atmosfera sa nu este o afacere nouă (TIROS 1, primul satelit care trimite imagini și date înapoi, datează din 1960). De-a lungul anilor, totuși, lumea a lansat mai mult de 1 400 de sateliți activi care oferă observarea Pământului. Cantitatea de date care sosesc pe pământ este uimitoare și servește atât în ​​scopuri militare (de supraveghere), cât și în scopuri civile, cum ar fi urmărirea dezvoltării economice, monitorizarea agriculturii și monitorizarea schimbărilor și a riscurilor. Un satelit unic al Agenției Spațiale Europene, Sentinel 1A, generează 5 PB de date în timpul a doi ani de funcționare.
Însoțind aceste tendințe de date mai vechi, acum sunt generate sau transmise noi cantități de date de pe Internet, creând noi probleme și necesitând soluții atât în ​​ceea ce privește stocarea datelor, cât și algoritmi pentru procesare:

As raportate de Agenția Națională de Securitate (ANS), cantitatea de informații care circulă zilnic prin internet în toată lumea, a ajuns la 1, 826PB de date în 2013 și 1,6% din acestea au constat din e-mailuri și apeluri telefonice. Pentru a asigura securitatea națională, ANS trebuie să verifice conținutul de cel puțin 0,25% din toate e-mailurile și apelurile telefonice (căutând cuvinte cheie care ar putea semnala ceva asemănător unui complot terorist). Acest lucru este în continuare de 25PB pe an, ceea ce echivalează cu 37 500 de CD-uri în fiecare an de date stocate și analizate (și care cresc). Puteți citi întreaga poveste.

  • Internetul obiectelor (IoT) devine realitate. S-ar putea să fi auzit acest termen de mai multe ori în ultimii 15 ani, dar acum creșterea numărului de chestii legate de Internet va exploda. Ideea este de a pune senzori și transmițătoare pe toate și de a folosi datele atât pentru a controla mai bine ceea ce se întâmplă în lume și pentru a face obiecte mai inteligente. Dispozitivele de transmisie devin mai mici, mai ieftine și mai puțin solicitante; unele sunt deja atât de mici, încât pot fi puse peste tot. (Uitați-vă la radio-ul de dimensiuni ant, dezvoltat de inginerii Stanford.) Experții estimează că, până în 2020, vor exista de șase ori mai multe lucruri legate pe pământ, pe măsură ce vor exista oameni, însă multe companii de cercetare și think-tank-uri deja revizuiesc aceste cifre.
Datele mari nu sunt doar un Fad moderne - manechine

Alegerea editorilor

Evaluarea Vizualizărilor de date - dummies

Evaluarea Vizualizărilor de date - dummies

Vizualizările de date pot fi foarte colorate și impresionante. Dar amintiți-vă că cheia pentru crearea unor vizualizări eficiente de date nu depinde de faptul dacă este interesantă, ci mai degrabă de faptul dacă descoperă problemele reale de afaceri care trebuie abordate. O foaie de lucru vă ajută să creați propriile vizualizări de date sau să evaluați creațiile altora. Aici ...

Determinarea programului care funcționează cel mai bine pentru nevoile tale informatice

Determinarea programului care funcționează cel mai bine pentru nevoile tale informatice

Să lucreze mai bine decât celălalt. În timp, veți dezvolta un sentiment dacă Illustrator sau Photoshop se potrivesc mai bine pentru diverse sarcini. Până atunci, iată un exemplu despre modul în care fiecare program gestionează diferite elemente ale lucrării de design grafic. Graphing Photoshop nu este un program de grafic. Tu ...

Infografice nevergreen: Închirierea obiectelor Build - dummies

Infografice nevergreen: Închirierea obiectelor Build - dummies

Infografics evergreen nu sunt legate de niciun eveniment sau persoană în știri . Ele nu au o componentă sezonieră și nu sunt legate de ceva în timp util. O infographic despre cum se fac CD-urile se va aplica pentru că este vorba de muzică, dar nu este specifică nici unui artist sau gen. Cu infografiile veșnic verzi, ignorați complet evenimentele curente și explorați ideile ...

Alegerea editorilor

Utilizați Zoom în Adobe Photoshop CS5 - manechine

Utilizați Zoom în Adobe Photoshop CS5 - manechine

Adobe Creative Suite 5 oferă scurtături pentru Zooming în Photoshop. Imaginile care arată bine la un nivel de zoom pot părea extrem de proaste la altul. Veți mări și micșora destul de des în timp ce lucrați la imagini în Photoshop. Puteți găsi opțiuni de meniu pentru zoom în meniul Vizualizare; o modalitate mai rapidă de a mări este ...

Text în Photoshop CC - dummies

Text în Photoshop CC - dummies

Când editați o imagine cu text în Photoshop CC, puteți schimba linia care fluxul dvs. de tip fie folosind funcția Warp Text sau tastând pe o cale. Tipul de deformare utilizează forme predefinite la care se formează tipul dvs. (și poate fi utilizat atât cu tipul de punct, cât și cu paragraful) și tastând ...

Alegerea editorilor

Cum se adaugă Biblioteca RegEx în C ++ - dummies

Cum se adaugă Biblioteca RegEx în C ++ - dummies

Cea mai mare parte a bibliotecii Boost funcționează bine adăugând la codul aplicației. Cu toate acestea, câteva componente, cum ar fi RegEx, necesită o bibliotecă. Înainte de a putea folosi o bibliotecă, trebuie să o construiți. După ce ați construit biblioteca, trebuie să o adăugați în aplicație. Există două tehnici de adăugare a ...

Cum Heap Works în C ++ - dummies

Cum Heap Works în C ++ - dummies

Halda este un bloc amorf de memorie pe care programul C ++ îl poate accesa după cum este necesar. Aflați de ce există și cum se utilizează. Așa cum este posibil să treci un pointer la o funcție, este posibil ca o funcție să returneze un pointer. O funcție care returnează adresa ...

Cum să evitați codul de injectare în C ++ - dummies

Cum să evitați codul de injectare în C ++ - dummies

Prima regulă de evitare a codului injectat în programele C ++ , permiterea prelucrării datelor de către un interpret de limbă cu scop general. O eroare obișnuită cu SQL-injectarea este că programul acceptă intrarea utilizatorului ca și cum ar fi fost întotdeauna acceptabilă și îl inserează într-o interogare SQL pe care o trimite apoi la ...