0 |
Компанія Pure Storage представила FlashBlade//EXA, найпродуктивнішу в галузі платформу зберігання даних, розроблену з урахуванням найвищих вимог штучного інтелекту та високопродуктивних обчислень (HPC). У той час як застарілі підходи до зберігання даних стримували потенціал AI, FlashBlade//EXA усуває вузьке місце метаданих за допомогою архітектури на базі FlashBlade, створеної для високого паралелізму і величезної кількості операцій з метаданими, характерних для великомасштабних робочих навантажень AI та HPC. За результатами попереднього тестування, продуктивність FlashBlade//EXA під час читання в одному просторі імен становитиме понад 10 ТБ/с, що дасть змогу встановити нову планку як найвисокопродуктивніше рішення для зберігання даних у галузі.
Архітектура FlashBlade//EXA забезпечує незалежне масштабування даних і метаданих; практично необмежене масштабування за допомогою готових вузлів даних сторонніх виробників, які забезпечують високу масштабовану багатовимірну продуктивність; зниження складності розгортання, управління та масштабування шляхом використання стандартних протоколів і мереж.
Більш потужні графічні процесори збільшили темпи та масштаби навчання фундаментальних моделей AI. Вибухове зростання розмірів і складності моделей призвело до зміни парадигми вимог до систем зберігання даних, де рішення повинні безперешкодно відповідати інтенсивності та обсягу обчислень, а також різноманітності даних, необхідних AI та високопродуктивними обчисленнями.
Застарілі системи зберігання даних не були розроблені з урахуванням сучасних вимог AI. Під час використання у великомасштабних AI та високопродуктивних обчисленнях вони стикаються з критичними обмеженнями, пов'язаними з паралельним та одночасним читанням і записом, продуктивністю метаданих, наднизькою затримкою, асинхронною перевіркою точок і передбачувано високою пропускною спроможністю.
Сучасне рішення для зберігання даних має забезпечувати масивно-паралельну, дезагреговану архітектуру, щоб забезпечити гнучкість у масштабі, гарантуючи, що зберігання даних допоможе прискорити темпи розвитку AI.
Застарілі високопродуктивні архітектури зберігання даних були оптимізовані для традиційних середовищ високопродуктивних обчислень, з більш передбачуваними та регулярними робочими навантаженнями та упором на масштабування продуктивності. Сучасні робочі навантаження AI є складними й мультимодальними - включно з текстом, зображеннями, відео - і обробляються одночасно десятками тисяч графічних процесорів. Такий різкий зсув вимагає просунутої оптимізації метаданих поряд із масштабним нарощуванням продуктивності для ефективного управління різноманітними типами даних і високим паралелізмом.
FlashBlade//EXA спеціально створена для вирішення завдань, пов'язаних з робочими навантаженнями штучного інтелекту, з неперевершеною продуктивністю та управлінням метаданими. Її дезагрегована, масивно-паралельна архітектура забезпечує гнучкість зберігання в масштабі. Підприємства можуть адаптуватися до мультимодальних моделей, що розвиваються, оптимізувати надійність і усунути час простою, щоб прискорити навчання і виведення моделей AI й підвищити ефективність використання GPU. Крім того, поєднання рушія метаданих Pure Storage та операційної системи Purity з економічними готовими вузлами обробки даних дає змогу підприємствам досягти безпрецедентного співвідношення ціни та продуктивності.
Зазначається, FlashBlade//EXA створено на основі десятирічних інновацій Pure Storage, щоб забезпечити перетворювальне зберігання даних для середовищ штучного інтелекту та високопродуктивних обчислень. FlashBlade//EXA буде:
- Забезпечувати найкращу в галузі продуктивність у масштабі, використовуючи перевірені можливості метаданих Pure Storage для підвищення ефективності конвеєрів AI та мінімізації затримок у процесі навчання та виведення.
- Забезпечення багатовимірної продуктивності завдяки масивно-паралельній обробці та масштабованому IOPS метаданих для підтримки високошвидкісних вимог AI. Забезпечення швидкості 10+ терабайт на секунду в одному просторі імен, що гарантує найкращу в галузі продуктивність.
- Зниження складності управління шляхом усунення «вузьких місць» метаданих.
- Забезпечення високої продуктивності, доступності та відмовостійкості метаданих для роботи з величезними масивами даних AI без ручного налаштування і додаткових конфігурацій.
- Прискорення інновацій у сфері AI завдяки висококонфігурованій і дезагрегованій архітектурі.
Підтримка ландшафту AI та HPC, що розвивається, за допомогою протоколів промислових стандартів;
- Використання високошвидкісних мережевих карт NVIDIA ConnectX, комутаторів Spectrum, кабелів LinkX і прискорених комунікаційних бібліотек.
Очікується, що FlashBlade//EXA з'явиться в продажу влітку 2025 року.
Комп’ютерний розум: генеративний штучний інтелект у рішеннях AWS
0 |