ZDNet опубликовал прогнозы Forrester на 2015 г. относительно перспектив использования технологии Hadoop в корпоративном секторе. Там в общей сложности восемь пунктов, однако для публикации представлены только два: остальные, как уточняет Forrester, доступны за деньги. Не уверен, что игра стоит свеч: во всяком случае, обнародованные два пункта в этом вовсе не убеждают. Что же в них?
В первом сообщается, что мы вступаем в эпоху «Хэдупономики» (Hadooponomics), а это требует от предприятий скорейшего освоения данной технологии. Несмотря на то, что вокруг нее в последнее время поднялось много неоправданного шума, есть масса реальных проектов по построению «озер данных» (data lakes — в отличие от витрин data marts в них отсутствуют предварительно сформированные агрегаты для последующей BI-обработки), традиционной и продвинутой аналитике, упрощению процедур ETL-загрузки данных, декомпозиции хранилищ на архивные и активные и даже для транзакционной обработки. Во всех в той или иной степени используются такие достоинства Hadoop, как линейная масштабируемость ресурсов процессорной мощности и систем хранения. Утверждается, что немногие замешкавшиеся CIO в 2015 г. тоже сделают Hadoop одним из своих приоритетов.
В четвертом прогнозе Forrester развеивает сомнения относительно сложности работы с Hadoop и дефицита соответствующих специалистов, мотивируя это тем, что мы имеем дело просто с еще одной файловой системой, пусть и распределенной, и еще одной вычислительной платформой, тоже распределенной. Для взаимодействия с ними используются API-интерфейсы Java. Что такого уж трудного в освоении еще одного опенсорсного API-интерфейса, если корпоративному разработчику с нормальными карьерными амбициями приходится заниматься этим постоянно? Как только предприятия начнут запускать проекты на Hadoop, дефицит специалистов в этой области моментально исчезнет сам собой. То же относится и к специалистам, отвечающим за поддержку функционирования Hadoop-кластеров. Отсюда следует рекомендация для CIO: не охотиться на высокооплачиваемых Hadoop-консультантов, а больше полагаться на собственных сотрудников, хорошо понимающих свои структуры данных, поддерживающих вполне определенные приложения и интеграцию между ними и лучше других осведомленных в реальных бизнес-проблемах своего предприятия.
Остаются неизвестными (для широкой публики) остальные шесть прогнозов Forrester: второй и третий и с пятого по восьмой. Будем надеяться, что те, кто заплатит 499 долл. за полный отчет, получат более глубокий и содержащий реальные цифры взгляд на ситуацию с использованием технологий Hadoop и Big Data в корпоративном секторе.