Zobrať:
Analytická platforma Hadoop má niektoré významné obmedzenia, ktoré zahŕňajú rýchlosť a zložitosť, ale lídri v tomto odvetví sa ich snažia zmeniť.
Ako hovorí, výkonný riaditeľ spoločnosti Cloudera Mike Olson, analytická platforma spoločnosti Hadoop má niektoré významné obmedzenia týkajúce sa rýchlosti a zložitosti. Vedúci predstavitelia tohto odvetvia - vrátane vedúcich pracovníkov vo vlastnej firme - sa však snažia túto zmenu zmeniť a sú presvedčení, že tento výskumný nástroj sa v nasledujúcich rokoch bude vyvíjať zásadným spôsobom.Na minuloročnej Strata konferencii Olson požiadal publikum, aby si predstavilo, ako by sa Hadoop, keby bol vytvorený dnes, navrhol inak, pričom by predpokladal, že niektoré konkrétne zmeny by mohli otvoriť nové brány pre výskum v oblastiach ako vzdelávanie, energetika a poľnohospodárstvo. Olson, citujúc kozmológa a vedeckého autora Carla Sagana, zdôraznil dôležitosť rozdelenia údajov na vysokej úrovni pre väčšie publikum.
„Myslím, že sme pripravení na okraji veľkých objavov, ktoré sú dôležité pre podnikanie a pre spoločnosť,“ povedal Olson.
Príkladom je vedecký objav, ktorý umožnila práca vedeckých odborníkov na veľkom hadrónovom zrážači vo Švajčiarsku. Podľa Olsona je to denné hodnotenie 37 terabajtov údajov, ktoré viedlo ku kľúčovým pokrokom, ako je objav Higgs-Boson v povodí, ktorý odhalil kľúčové aspekty hmoty a energie. Olson dodal, že Hadoop pomáha pri týchto základných výskumných projektoch tým, že zachytáva obrovské množstvo údajov v jednom úložisku, ale je ťažké s týmito údajmi interagovať v reálnom čase.
Po vysvetlení spôsobov, akými môžu Hadoop a podobné technológie pomôcť vedcom v kľúčových oblastiach, napríklad v oblasti zdravotnej starostlivosti, Olson tiež oznámil projekt Impala, niečo, na čom jeho spoločnosť pracuje dva roky, s dvoma štvrtinami beta testovania v koordinácii s hlavnými klienti. Projekt Impala, povedal Olson, je technológia „100% otvoreného zdroja“ s licenciou Apache, ktorá spolupracuje s Hadoop ako „dotazovací modul v reálnom čase“. Olson povedal, že umožňuje to, čo nazýva „rýchlosť myšlienkových otázok“, kde používatelia môžu klásť otázku, získať odpoveď a sformulovať novú otázku, aby efektívne využívali hlavné dátové zoskupenia.
„Poskytuje vám nový spôsob, ako sa dostať k svojim údajom,“ uviedol Olson a načrtol, ako by tento druh pokroku mohol otvoriť ďalšie príležitosti na vyriešenie hlavných problémov v USA a zahraničí.