Что такое Big Data?

11 мая 2017

Это англоязычное сочетание слов часто упоминается в различных статьях, выносится в названия конференций и форумов. Давайте разберёмся, что же относится к понятию Big Data.

Big Data - это всё, что связано с “большими данными”, с непрекращающимся потоком этих данных. Обычно этим термином объединяют технологии, которым характерны следующие моменты:

Они обрабатывают такие объёмы данных, которые превосходят стандартные сценарии. Их невозможно обработать при помощи Excel.
Технологии подразумевают использование для обработки данных более одного компьютера.
Это технологии быстрой обработки информации.
Они работают как со структурированными, так и с неструктурированными данными.

Примеры, когда говорят о “больших данных”

Это то, что выдаёт учёным большой адронный коллайдер.
Это социальные сети, потому что в них зарегистрировано огромное количество людей.
Это различные картотеки и базы данных.
Это YouTube, потому что ежедневно здесь совершается множество просмотров, комментариев и различных операций.
Это обработка изображений с камер видеонаблюдения.
Это оцифрованные архивы в Национальной библиотеки.
Это сумма транзакций всех клиентов банка.
Это учёт товара в ретейл-сетях.

Как видно, Big Data непосредственно связана с нашей реальностью. Развитие технологий и виртуальной жизни привело к тому, что “большие данные” применяются в самых разных областях нашей жизни, а мы просто этого не замечаем.