В дополнение к уже работающим службам Amazon EC2 и Amazon S3 компания Amazon запустила сервис Elastic MapReduce, который позволят легко обрабатывать огромные массивы разнообразных данных. Новый сервис может использоваться, например, для индексации веб-сайтов, анализа хранилищ данных на основе методов искусственного интеллекта, финансового анализа, моделирования, исследований в области биоинформатики. Сервис пока находится в режиме бета-тестирования.
Elastic MapReduce основан на совместном использовании Amazon EC2, Amazon S3 и фреймворка Hadoop. Данные загружаются в сервис Amazon S3, а их обработка выполняется Hadoop, запущенном внутри Amazon EC2. По окончании параллельной обработки, данные объединяются, а результат возвращается в Amazon S3. Управление, конфигурация и мониторинг потока заданий выполняется через API веб-служб или AWS Management Console.
Стратегія охолодження ЦОД для епохи AI
+11 голос |