Jak říká, generální ředitel společnosti Cloudera Mike Olson, analytická platforma Hadoop má některá významná omezení týkající se rychlosti a složitosti. Vedoucí představitelé průmyslu - včetně těch z vlastní firmy - však pracují na tom, aby to změnili, protože věří, že tento výzkumný nástroj se v nadcházejících letech bude vyvíjet zásadním způsobem.
Na loňské Strata konferenci požádal Olson publikum, aby si představilo, jak by bylo, kdyby bylo vytvořeno dnes, Hadoop navržen jinak, přičemž by předpokládal, že některé specifické změny by mohly otevřít nové brány pro výzkum v oblastech, jako je vzdělávání, energetika a zemědělství. Olson citoval kosmologa a vědeckého autora Carla Sagana a zdůraznil důležitost rozebírání údajů na vysoké úrovni pro větší publikum.
"Myslím, že jsme připraveni na hranici velkých objevů, které jsou důležité pro podnikání a pro společnost, " řekl Olson.
Příkladem je vědecký objev umožněný prací vědeckých odborníků ve velkém hadronském srážce ve Švýcarsku. Podle Olsona je to denní hodnocení 37 terabajtů dat, které vedlo ke klíčovým pokrokům, jako je objev Higgs-Boson v povodí, který odhalil klíčové aspekty hmoty a energie. Olson dodal, že Hadoop pomáhá pomáhat v těchto základních výzkumných projektech zachycením obrovského množství dat v jednom úložišti, ale že je obtížné s těmito daty v reálném čase interagovat.
Olson také vysvětlil, jak může Hadoop a podobné technologie pomoci vědcům v klíčových oblastech, jako je zdravotnictví, a oznámil projekt Impala, něco, na čem jeho společnost pracuje dva roky, se dvěma čtvrtinami testování beta v koordinaci s hlavními klienti. Projekt Impala, řekl Olson, je „100% open source“ technologie s licencí Apache, která pracuje s Hadoopem jako „dotazovacím modulem v reálném čase“. To, jak řekl Olson, umožňuje to, co nazývá „rychlost myšlenkových dotazů“, kde uživatelé mohou položit otázku, získat odpověď a formulovat novou otázku, aby mohli efektivně využívat hlavní datové klastry.
„Poskytuje vám nový způsob, jak se dostat ke svým datům, “ řekl Olson a nastínil, jak by tento druh pokroku mohl otevřít další příležitosti k vyřešení hlavních problémů v USA i v zahraničí.
