IT in World — October 15, 2016 at 3:41 pm

Implementarea Spark trebuie făcută cu prudență

by
Managementul datelor
Managementul datelor

Companiile Intuit și Novantas au început implementarea motorului de procesare a datelor open-source, Spark, dar au limitat accesul inițial al utilizatorilor.

Intuit a creat o pereche de clustere Spark pentru analiza datelor de acces pe bază de ”click” de pe siteurile sale și pentru formularele online introduse prin programul său de contabilitate online. Totuși, Intuit nu va grăbi lucrurile mai mult de atât până nu va fi sigur că Spark este mai mult decât un proiect experimental. Astfel, Spark nu va fi utilizat de sistemele companiei la scară largă până la sfârșitul anului 2016.

Această abordare vine pentru a implementa tehnologii pas cu pas, pentru a vedea dacă acestea fac față cerințelor companiei, în proiectul de a dezvolta o arhitectură de analiză a datelor bazată pe distribuția Hadoop Cloudera. Tehnologiile sunt rulate în mod de studiu pentru cel puțin 6 luni, implementarea timpurie a unor tehnologii fiind uneori o mare greșeală, mai ales când aceasta vine la nivel de utilizator.