Статьи по ключевому слову «BigData»

Согласно данным аналитической компании Gartner, количество данных в мире ежегодно увеличивается на 30-50%. Для обработки непрерывно увеличивающегося объема данных в последние годы разработаны специальные аппаратные и программные решения. Они получили название Big Data. Технология Big Data в первую очередь ориентирована на бизнес. В больших данных содержится ценная информация, владея которой, можно преобразовать бизнес.

В ранний период времени своего существования технология Big Data характеризовалась тремя основными векторами:

  • Volume — рабом с большими массивами данных;
  • Variety — обработка разнообразных данных — структурированных, слабо структурироваиных и неструктурированных;
  • Velacity — высокая оперативность и скорость обработки данных.

Для реализации этой технологии используются специально разработанные аппаратные устройства и специальное программное обеспечение - первую очередь технология Apache Hadoop MapReduce.

В настоящее время технология Big Data, помимо возможности обрабатывать и анализировать очень большие массивы данных, обладает рядом интеллектуальных свойств. Она позволяет применять самообучающиеся алгоритмы, которые могут самостоятельно усложняться и самосовершенствоваться.

К перечисленным выше трем векторам в настоящее время добавляются еще четыре новых:

  • Value — фильтрация данных по степени важности или влиятельности информации;
  • Veracity — достоверность, разделение данных по степени достоверности;
  • Variability/Variance — изменчивость, учет отклонения информации от среднего значения;
  • Viability — жизнеспособность данных, учет фундаментальности и долговечности параметров.

всего статей: 2