По оценкам исследования рынка консалтинговой фирмы Ovum рынок больших данных вырастет с $ 1,7 млрд. в 2016 году до $ 9,4 млрд. к 2020 году. По мере роста рынка, проблемы предприятий сдвигаются, требования к навыкам меняются, а ландшафт поставщиков видоизменяется. Наступающий год обещает быть напряженным для экспертов больших данных. Вот некоторые прогнозы от аналитиков индустрии и технологических игроков.

  1. Спрос на исследователей данных будет ослабевать

Спрос на исследователей данных смягчается, предполагает Ovum в своем докладе о тенденциях больших данных. Исследовательская фирма ссылается на данные из Indeed.com, которые показывают плоский спрос на исследователей данных в течение последних четырех лет. В то же время, колледжи и университеты выпускают большее число выпускников с дипломами в области анализа данных.

«Кто набирает этих перспективных кандидатов? По всей вероятности, за исключением интернет предприятий, относительно небольшое число предприятий за пределами 2000 Global впитывают их, и мало кто будет иметь хоть малейшее представление о том, как использовать данных ученых,» пишет Ovum. «Для массы организаций, которые полагаются на упакованные аналитики, потребность не в исследователях данных самих по себе, но в приложениях и инструментах, которые применяют анализ данных.»

  1. Переход исследования данных в командный вид спорта станет главным приоритетом

Исследователи и инженеры данных играют различные роли на предприятии: исследователи данных формируют и проверяют гипотезы, в то время как инженеры выбирают наборы данных, формируют кластеры, а также оптимизируют алгоритмы для использования. Без сотрудничества, модели и гипотезы, которые исследователи данных разрабатывают, рискуют застрять на их рабочих столах, предупреждает Ovum.

«Реальная потребность – налаживание коммуникации исследователей данных и инженеров данных, чтобы гарантировать, что модели, которые исследователи данных написали и проверили на своем ноутбуке, будут правильно развернуты с нужными наборами данных на кластере (что является экспертизой инженера обработки данных),» пишет Ovum.

В то же время, машинное обучение становится встроенным в программное обеспечение предприятия и инструменты для сбора и подготовки данных, Ovum отмечает, это оказывает давление на предприятия, поскольку они должны убедиться, что их исследователи данных и бизнес-аналитики работают в тесном взаимодействии. «Компании не получат полную ценность машинного обучения, если модели останутся в головах исследователей данных», пишет Ovum. «Основная тенденция будет среда для совместной работы, где бизнес-аналитики и исследователи могут разделить рабочие процессы в области планирования, развертывания и выполнения моделей машинного обучения.»

Тренды в Big Data 2017

Тренды в Big Data 2017

  1. Будет больше давления, чтобы сохранить данные локально

Международная юридическая фирма Morrison & Foerster прогнозирует увеличение законов о конфиденциальности, которые стремятся сохранить данные в стране.

«Следует ожидать больше законов о локализации данных вследствие недавних событий, таких как первое исполнение локализации данных в рамках российского законодательства, что было поддержано российскими судами, Китай недавно принял свой собственный закон локализации данных. Другие страны будут следовать этому тренду в будущем году, «говорят Miriam Wugmeister и Andrew Serwin, сопредседатели глобальной группы конфиденциальности и безопасности данных в Morrison & Foerster.

  1. Компании будут сталкиваться с трудностями при монетизации данных

Компании будут иметь много вариантов для использования данных в качестве продуктов, но это будет нелегко сделать, и многим предприятиям будет не хватать возможностей, предупреждает исследовательская фирма IDC.

«Несмотря на желания лидеров бизнеса, бизнес будет сталкиваться с трудностями, чтобы преуспеть в создании значимых продуктов и источников дохода. Те же, кто достигнут успеха, будут основываться на жестких ИТ стратегиях и услугах, ориентированных на данные: сбор данных, транспортировка, переработка и хранение; аналитика и панели управления; данные в качестве продукта / услуги; и безопасность и контроль доступа,» пишет в своем докладе IDC FutureScape: Worldwide CIO Agenda 2017 Predictions.

В качестве советов IDC предлагает формат, чтобы ИТ-руководители «создали инновационную команду, состоящую из ИТ и бизнес-персонала, которая рассматривает существующие и будущие приложения / системы для возможной монетизации получаемых данных.»

  1. Пуллы данных, наконец, станут полезными

«Многие компании, внедрившие пуллы данных в самом начале, потратили значительную сумму денег, не только покупая обещание хранения при низкой стоимости и обработке, но и множество услуг для того, чтобы объединить и сделать доступными значительные массивы больших объемов данных, сделать их связанными между собой и получить возможность для лучшего проникновения в суть,» говорит Ramon Chen, директор по маркетингу поставщика системы управления данными Reltio. Проблемы были в том, чтобы найти людей с навыками, необходимыми для осмысления информации, чтобы массивы данных обеспечивали вводную информацию и получать обновления в режиме реального времени из оперативных приложений. Преодолеть разрыв между управлением основными данными и оперативными приложениями, аналитическими хранилищами данных и пуллами данных.

  1. Деятельность по слияниям и поглощениям ждет развитие

«Нет сомнений в том, что есть массовая борьба за ресурсы для всего, что связано с искусственным интеллектом, машинным обучением или глубоким обучением», отмечает Chen из Reltio. Ключевым фактором всех сделок был спрос на специалистов в области искусственного интеллекта: «Из-за короткой истории существования большинства стартапов, которые были приобретены, эти шаги, в равной степени о приобретении ограниченного числа экспертов AI на планете, как и оценка стоимости того, что каждая компания произвела на сегодняшний день», говорит Chen, который предсказывает еще более агрессивную M&A активность в предстоящем году.

  1. Спрос на архитекторов интернета вещей взлетит до небес

Интернет вещей (IoT), согласно прогнозам, станет рынком размером в $ 1.46 трлн. к 2020 году, по данным IDC. С развитием и связан спрос на квалифицированных специалистов в этой сфере.

Роль архитектора интернета вещей затмит исследователя данных как самый ценный кандидат для HR отделов. Всплеск IoT будет производить всплеск вычислений и эксплуатационного проектирования IoT. Тысячи резюме будут обновляться в течение ночи, предсказывает Dan Graham, специалист по техническому маркетингу интернета вещей поставщика данных и аналитики Teradata. Кроме того, менее 10% компаний понимают, что они нуждаются в архитекторе аналитики IoT, что есть отличным видом от системного архитектора IoT. Программные архитекторы, которые могут разрабатывать как распределенные, так и центральные аналитики для IoT будут расти в цене.

  1. Поточная аналитика возродится

В анализе данных в движении нет ничего нового — программы обработки событий существовали в течение почти 20 лет. Но есть целый ряд факторов, которые трансформируют режим реального времени из нишевой технологии в ту, которая более широко привлекательна. Технология с открытым исходным кодом, например, делает потоки в режиме реального времени более доступными, как это делает и наличие масштабируемой инфраструктуры. Со стороны спроса, IoT подогревает интерес к потоковым приложениям, которые могут чувствовать, анализировать и реагировать в режиме реального времени.

Что не будет происходить сразу же, так это консолидация рынка. На сегодняшний день, существует растущая масса предложений, которые конкурируют за новые рабочие проекты. В конце концов, мы ожидаем, что рынок сведется к трем — четырем потоковым платформам.

Но платформы, такие как Spark Streaming и Amazon Kinesis Analytics и их конкуренты — по-прежнему находятся в стадии разработки. Учитывая раннее состояние рынка, мы не ожидаем, что рынок сократиться в 2017 году. Мы ожидаем, что у потоковых технологий займет 24-36 месяца стадия зрелости и реализации для IOT и для достижения критической массы.

Комментарии

  • David

    Статья отличная и если прогнозы автора подтвердятся, то сейлзам и маркетологам в ИТ компаниях нужно начинать действовать уже сейчас и таргетировать конкретные ниши, брать по возможности IoT проэкты и выйти на этот рынок, чтобы потом не «сосать палец.» Если есть возможность, то обучать своих специалистов новым технологиям, которые будут востребованы уже очень скоро.

  • Mark_Zeeuv

    Хорошая статья! Если так, то нужно быть подготовленными и действовать на опережение, работать с новыми технологиями. Спасибо автору за откровения.