Мейнфреймы и Big Data

Было бы весьма банально (и даже глупо) назвать этот блог «Вторая жизнь мейнфреймов». Их и первая жизнь еще далеко не окончена, а в современном виде мейнфреймы получают все большее признание как лучшая платформа для обработки больших данных.

Имеют ли все еще значение в современном мире ИТ старые добрые мейнфреймы?

«Вопрос на засыпку: Им уже более 60 лет от роду. Однако сегодня это семейство является наиболее вероятным кандидатом для построения вычислительных кластеров среднего масштаба (mid-range clusters) для работы с Big Data. Кто они? Если вы без колебаний ответили, что это – мейнфреймы, вы не ошиблись».

Так начинает свой недавний блог Кен Хесс (Ken Hess), который ведет одну из веток на ZDNet.

«Поднимите руки те, кто прется сегодня от мейнфреймов. Никто? Really? А вот я − прусь, – продолжает Хесс. – Ну, вообще-то, это не то, о чем можно сказать "люблю" или "ненавижу". Мейнфреймы просто существуют, – независимо от нашего отношения к ним. А теперь поднимите руки те, кто сегодня работает с мейнфреймами и/или хочет продолжать работать с ними. Ага, какие-то пять старых чуваков… Прекрасно»!

Итак, джентльмены, извольте видеть, в наши дни ни любви, ни отвращения к мейнфреймам в ИТ-сообществе нет. Как к вашей газонокосилке, которую уже забыли, когда купили, но при надобности она все еще тарахтит.

И тут вдруг оказывается, что есть повод вытащить это надежное оружие полувековой давности на свет божий и внимательно обследовать его на предмет новых применений.

Как показывает свежий отчет компании SyncSort, мейнфреймы не только принципиально могут быть эффективными средствами обработки больших данных, но в последнее время получают в данной области все более благосклонное отношение CIO и бизнес-руководителей.

Только одна иллюстрация из этого отчета. При взгляде на нее первое, что хочется сделать – перефразировать известную шутку о кошках: «Вы не любите мейнфреймы? Да вы просто не умеете с ними работать!». А вот более 83% крупных компаний во всем мире умеют. И работают. И осваивают все новые применения

Почти 90% респондентов указали, что мейнфреймы могут стать наиболее выгодным средством обработки больших данных в CICS (Customer Information Control System), DB2 и WebSphere. Более трети рассматривают их как аппаратную часть таких платформ обработки больших данных, как IDAA, Netezza, Splunk, Spark, Oracle, Teradata и Hadoop.

Обзор дает также еще несколько не слишком очевидных результатов об использовании мейнфреймов в крупных компаниях, где они все еще управляют львиной долей корпоративных данных:

• Более двух третей опрошенных (69%) оценили использование мейнфреймов для крупномасштабной обработки транзакций (performing large-scale transaction processing) как «очень важную».
• Примерно столько же (67,4%) указали, что возможность интеграции с другими компьютерными платформами (Linux, UNIX или Windows) является «ключевой силой» мейнфреймов (key strength of mainframe).
• Этот результат – все же определенное веление времени. В то время как большинство (79%) все еще анализирует транзакционные данные в реальном времени инструментами самих мейнфреймов, неуклонно увеличивается количество пользователей Splunk (11,8%), Hadoop (8,6%), и Spark (1,6%), которые добавляют к аналитике ряд полезных функций.

Больше других, пожалуй, в это направление сегодня инвестирует IBM. В первой половине 2015 г. она представила коммерческую версию Hadoop-совместимого мейнфрейма, назвав его «одной из самых сложных компьютерных систем, которые были когда-либо построены». (Ну, это, так сказать, в духе IBM, – без всякой иронии).

Кроме того, она разработала IBM InfoSphere System z Connector for Hadoop, который позволяет текущим пользователям System z использовать преимущества Hadoop, – прежде всего, в мощности обработки данных и ее ценовой эффективности (power and cost-efficiencies).

Однако большие данные и быстрая аналитика – не единственные причины, которые побуждают пользователей к попыткам расширения платформы мейнфреймов. Речь идет о безопасности и доступности, которые также находятся в числе основных факторов их долговечности.

82,9% и 83,4% респондентов назвали соответственно безопасность и доступность ключевыми преимуществами мейнфреймов.

Таким образом, если вы до сих пор думали, что старым мейнфреймам остался последний вздох, то это было довольно грубой ошибкой. Более того, их использование в крупных компаниях в настоящее время расширяется (разумеется, на современной аппаратно-программной базе), и области их применения становятся все шире, – прежде всего в больших данных и аналитике.

Одно из исследований CA Technologies (которая, кстати, как и много лет назад, жива и здорова), нашло, что более 75% респондентов США и более 80% во всем мире полагают, что мейнфреймы – «стратегическая» или «очень стратегическая» составляющая настоящего и будущего их ИТ.

Простой пример. Если вы полагаете, что лично вы не используете мейнфреймы, подумайте об этом еще раз, когда будете вставлять свою пластиковую карточку в банкомат.

Крупные компании продолжают полагаться на мейнфреймы. Скорость обработки данных, безопасность и масштабируемость у них остаются непревзойденной по сравнению с любой другой вычислительной платформой.

Доказательством того, что мейнфреймы достойны новых исследований и разработок, может служить новейшая IBM z13. Ее разработка обошлась в миллиард долларов и заняла пять лет. Никто не может позволить себе такие инвестиции просто в хобби.

В результате, применительно к сегодняшнему моменту, для больших данных ничто так хорошо не подходит с точки зрения вычислительной мощности, как мейнфреймы.

Для дальнейшего чтения можно рекомендовать отчет Forrester об аналитике с использованием больших данных.

Также, пожалуй, будет правильно, если сегодня, говоря о мейнфреймах, вы будете подразумевать не COBOL, а Hadoop. А закончить хотелось бы любопытной лингвистической конструкцией, построенной Кеном Хессом (и очень верной по сути):

Mainframe is still a Thing – a Big Thing – a Big Data Thing!

Ready, set, buy! Посібник для початківців - як придбати Copilot для Microsoft 365