Kao što kaže, izvršni direktor Cloudere Mike Olson, platforma Hadoop analitika ima značajna ograničenja koja uključuju brzinu i složenost. Međutim, lideri u industriji - uključujući one u njegovoj tvrtki - rade na tome da to promijene, uvjereni da će se ovaj istraživački alat razviti na fundamentalni način u narednim godinama.
Na prošlogodišnjoj Konferenciji o strati, Olson je zamolio publiku da zamisli kako bi, ako bi danas bio stvoren, Hadoop drugačije dizajniran, smatrajući kako bi neke konkretne promjene mogle otvoriti nova vrata za istraživanje u područjima poput obrazovanja, energetike i poljoprivrede. Citirajući kozmologa i znanstvenog autora Carla Sagana, Olson je naglasio važnost uništavanja podataka na visokoj razini za veću publiku.
"Mislim da smo spremni na ivici velikih otkrića koja su bitna za posao i društvo", rekao je Olson.
Jedan je primjer, istaknuo je, znanstveno otkriće omogućeno radom znanstvenih stručnjaka na Velikom hadronskom sudaraču u Švicarskoj. Prema Olsonu, svakodnevna procjena podataka od 37 terabajta dovela je do ključnog napretka poput otkrića Higgs-Boson koji je bio sliv, koji je otkrio ključne aspekte materije i energije. Olson je dodao da Hadoop pomaže pružiti pomoć u ovim temeljnim istraživačkim projektima hvatanjem ogromne količine podataka u jednom spremištu, ali da je s tim podacima teško komunicirati u stvarnom vremenu.
Izlažući o načinima na koji Hadoop i slične tehnologije mogu pomoći znanstvenicima u ključnim područjima, poput zdravstvene zaštite, Olson je također najavio projekt Impala, nešto na čemu njegova tvrtka radi već dvije godine, s dvije četvrtine beta testiranja u koordinaciji s glavnim klijenti. Projekt Impala, rekao je Olson, je tehnologija "100% otvorenog koda" s licencama Apache koja radi s Hadoopom kao "mehanizmom za ispitivanje u stvarnom vremenu". Ovo, rekao je Olson, dopušta ono što on naziva "brzina misaonih upita", pri čemu korisnici mogu postaviti pitanje, dobiti odgovor i formulirati novo pitanje za učinkovito korištenje glavnih klastera podataka.
"To vam daje novi način da dobijete svoje podatke", rekao je Olson, naglašavajući kako ovakav napredak može razbiti dodatne mogućnosti za rješavanje velikih problema u SAD-u i inozemstvu.
