Big data для среднего бизнеса: нужны ли большие данные

Big data — данные такого объёма, скорости поступления или разнообразия, что их обработка требует специальных технологий: распределённых хранилищ, параллельных вычислений. Термин часто используют для любой аналитики, но средний бизнес в большинстве случаев работает с обычными данными.

Признаки больших данных

• Объём, который не помещается в обычную базу данных
• Поток событий в реальном времени: клики, датчики, транзакции
• Разнородные данные: тексты, изображения, логи, видео

Миллионы строк продаж за несколько лет — это ещё не big data: обычная база данных и BI-инструмент справляются с ними.

Что решается на обычных данных

Отчёты, дашборды, прогноз продаж, сегментация клиентов, анализ ассортимента, оценка рекламы. Для большинства компаний среднего размера этого достаточно, и эффект от наведения порядка в обычных данных выше, чем от внедрения технологий big data.

Когда нужны технологии big data

Анализ поведения миллионов пользователей сайта или приложения. Обработка потоков данных с тысяч датчиков на производстве. Анализ больших объёмов видео или текстов. Крупные интернет-компании, банки, операторы связи.

Облачные сервисы

Облачные платформы позволяют использовать технологии обработки больших данных без собственной инфраструктуры и платить за фактическое использование. Это снижает порог входа, если задача действительно этого требует.

Ошибка

Покупка сложных платформ для данных, которые помещаются в таблицу. Это увеличивает затраты и сложность без пользы.

С чего начать

Наведите порядок в данных, которые уже есть: учёт, клиенты, продажи. Настройте отчёты и дашборды. Если со временем объёмы вырастут настолько, что обычные инструменты перестанут справляться, — это и будет сигналом для перехода.

Итог

Ценность создают не большие данные, а правильные вопросы и качественные данные.