Время передачи петабайта данных удалось улучшить на пять часов

В совместным эксперименте исследователи из Национальной лаборатории ускорителя SLAC и фирмы Zettar осуществили передачу петабайта данных по замкнутому отрезку сети ESnet протяжённостью 5 тыс. миль (~8 тыс. км). Вместе с шифрованием и проверкой контрольных сумм вся пересылка заняла 29 часов, превзойдя рекорд прошлого года на 5 часов (почти 15-процентное улучшение).

Задачей этого проекта является отработка техники высокопроизводительной передачи больших объёмов данных, генерируемых первым в мире жёстким рентгеновским лазером на свободных электронах Linac Coherent Light Source II (LCLS II), ввод в строй которого ожидается в 2020 г.

Импульсы LCLS II будут в миллиард раз ярче, чем у прежних рентгеновских лазеров, а частота их следования возрастёт со 120 до миллиона импульсов в секунду. Эти улучшения приведут к резкому росту количества экспериментальных данных, пересылаемых из SLAC в Окриджскую и Берклиевскую национальные лаборатории для анализа. Сейчас связь между этими учреждениями осуществляется через выделенную магистраль ESnet, пропускная способность её составляет многие сотни гигабит в секунду.

«Инновационный и универсальный характер On-Demand Secure Circuits and Advance Reservation System (OSCARS) ESnet позволил нам разработать уникальный 5000-мильный контур 100 Гб/с, который наши коллеги ESnet помогли быстро создать в 2015 г., — сказал основатель и генеральный директор Zettar, Чинь Фан (Chin Fang). — Конструкция, разработанная Esnet, позволяет использовать для испытаний отдельный выделенный канал без помех для рабочего трафика. Таким образом, мы смогли разместить кластеры хранения данных и узлы передачи данных в одной стойке. Физически их разделяли дюймы, но в цифровом смысле они имели между собой 5000 миль».

Достигнутый выигрыш в 5 часов Фан Fang приписывает усовершенствованиям в программном и аппаратном обеспечении. В этом году, Zettar значительно улучшила параллелизм своего ПО, а Intel предоставила более мощные процессоры и флэш-память, что позволило ускорить обмен данными с хранилищами.

Ready, set, buy! Посібник для початківців - як придбати Copilot для Microsoft 365