Așa cum spune, CEO-ul Cloudera, Mike Olson, platforma de analiză Hadoop are unele limitări semnificative care implică viteză și complexitate. Cu toate acestea, liderii industriei - inclusiv cei de la propria firmă - lucrează pentru a schimba asta, încrezători că acest instrument de cercetare va evolua în moduri fundamentale în următorii ani.
La Conferința Stratelor de anul trecut, Olson a cerut publicului să își imagineze cum, dacă a fost creat astăzi, Hadoop ar fi conceput diferit, prezentând că unele schimbări specifice ar putea deschide noi porți de cercetare în domenii precum educația, energia și agricultura. Citând cosmologul și autorul științific Carl Sagan, Olson a subliniat importanța descompunerii datelor la nivel înalt pentru o audiență mai mare.
„Cred că suntem pregătiți la marginea descoperirilor majore care contează pentru afaceri și pentru societate”, a spus Olson.
Un exemplu, a menționat el, este descoperirea științifică făcută posibilă prin activitatea profesioniștilor științifici în cadrul Colibrului de Hadroni Mari din Elveția. Potrivit Olson, este evaluarea zilnică a 37 de terabyte de date care au dus la avansări cheie precum descoperirea bazinului hidrografic Higgs-Boson, care a dezvăluit aspecte cheie ale materiei și energiei. Olson a adăugat că Hadoop ajută la asistența în aceste proiecte fundamentale de cercetare prin captarea unei cantități enorme de date într-un singur depozit, dar că este dificil să interacționezi cu aceste date în timp real.
Concluzionându-se asupra modalităților prin care Hadoop și tehnologii similare pot ajuta oamenii de știință din domenii cheie, precum asistența medicală, Olson a anunțat și proiectul Impala, lucru la care compania sa lucrează de doi ani, cu două sferturi de testare beta în coordonare cu majoritatea clienți. Proiectul Impala, a spus Olson, este o tehnologie „100% open source”, cu licență Apache, care funcționează cu Hadoop ca „motor de interogare în timp real”. Acest lucru, a spus Olson, permite ceea ce el numește „rapiditatea interogărilor de gândire”, în care utilizatorii pot să pună o întrebare, să obțină un răspuns și să formuleze o nouă întrebare pentru a utiliza eficient grupuri de date majore.
"Vă oferă o nouă modalitate de a vă afla la datele dvs.", a spus Olson, prezentând modul în care acest tip de avansare ar putea deschide oportunități suplimentare de rezolvare a problemelor majore din SUA și din străinătate.