Статьи по ключевому слову «Hadoop»

В ранний период времени своего существования технология Big Data характеризовалась тремя основными векторами:

  • Volume — рабом с большими массивами данных;
  • Variety — обработка разнообразных данных — структурированных, слабо структурироваиных и неструктурированных;
  • Velacity — высокая оперативность и скорость обработки данных.

Для реализации этой технологии используются специально разработанные аппаратные устройства и специальное программное обеспечение - первую очередь технология Apache Hadoop MapReduce.

В настоящее время технология Big Data, помимо возможности обрабатывать и анализировать очень большие массивы данных, обладает рядом интеллектуальных свойств. Она позволяет применять самообучающиеся алгоритмы, которые могут самостоятельно усложняться и самосовершенствоваться.

К перечисленным выше трем векторам в настоящее время добавляются еще четыре новых:

  • Value — фильтрация данных по степени важности или влиятельности информации;
  • Veracity — достоверность, разделение данных по степени достоверности;
  • Variability/Variance — изменчивость, учет отклонения информации от среднего значения;
  • Viability — жизнеспособность данных, учет фундаментальности и долговечности параметров.

всего статей: 1