3_Необходимость анализа данных

Откуда берутся большие данные:

Социальные сети и их данные Данные от измерительных устройств Данные от RFID

Журналы доступа пользователей веб-сайтов Сенсорные сети Тексты и документы из Интернета

Научные данные (астрономия, геном человека, исследования атмосферы, биохимия, биология)

Данные министерства обороны Медицинские наблюдения Фото- и видео-архивы Данные электронной коммерции

Признаки больших данных:

Объем

Сложность обработки

Неструктурированность, разнообразие

Скорость обновления

Мы не знаем, с каким типом данных будем иметь дело (привычный ETL не работает)

«три V»: объём (англ. volume, в смысле величины физического объёма), скорость (англ. velocity в смыслах как скорости изменения, так и потребности в быстрой обработке и получении информации), многообразие (англ. variety, в смысле возможности одновременной обработки различных типов как структурированных, так и неструктурированных данных)

Какие компании нуждаются в обработке больших данных:

Имеющие дело с массовым потребителем

Действующие в конкурентной среде

Действующие в высоко-изменчивой среде

Осуществляющие планирование на основании анализа прошлого

Накопившие большое количество полезной информации

Сотрудники которой умеют использовать результаты обработки

Зачем нужны большие данные:

Более точное определение групп потенциальных клиентов

Сегментация клиентской базы

Более точная оценка бизнеса

Выявление возможностей рынка

Автоматизация решений в процессах реального времени

Выяснение поведения клиентов

Выявление угроз

Использование и возврат инвестиций в сбор данных

Вычисление рисков

Отслеживание рыночных тенденций

Понимание изменений в бизнесе

Улучшение планирования и прогнозов

Выявление ключевой причины издержек

Понимание поведения клиентов по анализу посещения сайта

Улучшение результатов производства

Другое

Инструменты Big Data:

подготовка управленческой отчетности

анализ денежных потоков

прогнозирование поведения клиента

оценка рисков, скорость реакции и принятия управленческих решений

IDC (компания, занимающаяся аналитикой):

•Мировой рынок Big data (технологий и сервисов для обработки больших данных) к 2015 г. составит $16,9 млрд.

•Сегмент Big Data будет расти почти в 7 раз быстрее, чем ИКТ-рынок в целом

По итогам 2012 года Big Data = $7 млрд (+50%) Gartner:

К 2015 г. большие данные создадут 4,4 млн рабочих мест.

В 2012 г. – 28 млрд долл., а в 2013 вырастут до 34 млрд долл., к 2016 г. – до 232 млрд долл.

Большие данные – клондайк для BI

Business

Intelligence

	Data	СХД
	Warehouse

BI и Big Data – положительная обратная связь

Big Data в России

Согласно исследованию Oracle, целью которого было определение готовности ЦОДов к росту объемов данных, российские компании имеют хороший потенциал роста. Из 10 баллов ЦОДы в РФ набрали 4,62, что означает весьма средний показатель. Согласно исследованию, российские организации рассматривают поддержку роста бизнеса в качестве важной причины для инвестиций в ЦОДы. Более 60% компаний видят необходимость таких инвестиций сегодня или в ближайшем будущем, предполагая грядущее ужесточение конкуренции и "подкладывая соломку" заранее.

В России доступны решения, использующие технологию Big Data от ведущих производителей (Cisco, HP, IBM, Microsoft, Oracle и других), но проектов – единицы. Таким образом, отечественный рынок находится в зачаточной стадии развития, что, впрочем, не исключает возможности взрывного роста, который предрекают все аналитики без исключения.