MapD: Baza de date care funcționează pe GPU-uri

Astăzi ne trezim trăind fenomenul Datele mari, putem obține o cantitate imensă de date dintr-un număr infinit de surse. Această cantitate imensă de date aduce multe beneficii, dar aduce cu sine și multe provocări. Cele mai frecvente dintre ele: timpii de răspuns în seturi masive de date.

HartaD sa născut pentru a oferi viteze mari în domeniul bazelor de date analitice. Conceput pentru a procesa trilioane de înregistrări în câteva milisecunde profitând de puterea de calcul oferită de unități de procesare grafică. Construit tocmai pentru a profita din plin de toate capacitățile hardware și software disponibile în plăcile grafice, oferă analiștilor și cercetătorilor timpi de răspuns cu aproximativ 3 ordine de mărime (x1000) mai rapid decât tehnologiile utilizate anterior în aceste scopuri. Profitând de paralelismul GPU-urilor (Aproximativ 80000 de nuclee în GPU-urile moderne) și de lățimile de bandă mari de memorie (Aproximativ 8Gbps) pentru a efectua sarcini de algebră liniară și căutări în baze de date, folosind LLVM pentru a compila în timp real fiecare interogare, pe lângă păstrarea celei mai consultate. date din memoria cache a GPU-urilor (memorii DDR5 de mare viteză).

Trebuie să ne amintim că în lumea Big Data, bazele de date tradiționale, bazate pe scrierea și conservarea fișierelor, nu sunt de obicei folosite, deoarece acestea ar provoca o cantitate excesivă de sarcini I/O pe hard disk. În scopul analizării miliardelor de înregistrări, baze de date în memorie, precum Apache Spark. Totuși, pentru a obține cantitatea necesară de memorie și performanța dorită, este necesar un cluster de servere și știm că acest lucru implică costuri în hardware, cablare de rețea și un număr mai mare de tehnicieni. Prin urmare, HartaD Oferă capacitatea de a obține performanțe ridicate cu costuri și complexitate mai reduse, permițând mai multor persoane să aibă acces la tehnologii de înaltă performanță pentru analiza datelor.

Datorită faptului că este susținut de GPU-uri, MapD de asemenea oferă un mediu pentru vizualizarea datelor, profitând de capacitățile grafice ale GPU-urilor. Facilitează crearea de grafice interactive cu un volum mare de date, permițându-vă să interacționați cu informațiile aproape în timp real (visul umed al fiecărui analist de date). Pe lângă includerea unor algoritmi de învățare automată, pentru a efectua analize avansate cu același mediu folosind GPU-uri.

Vă invităm să vă plimbați prin Pagina oficială MapD pentru a revizui mai detaliat fiecare dintre caracteristicile sale. De asemenea, oferă o lucrare, pe care o puteți descărca gratuit, care detaliază tehnologiile și abordările care au făcut posibil MapD. Te poți bucura chiar de câteva demo-uri surprinzător!
MapD este în prezent în faza beta și disponibil pentru Linux, le puteți scrie (împreună cu o expunere de motive) pentru a participa la ea.