Высокопроизводительные вычисления для клиентов Azure: Проект Microsoft и Cray

Компания Microsoft начала совместный проект с компанией Cray, чтобы предоставить клиентам Azure доступ к высокопроизводительным вычислениям (HPC) для исследований в области искусственного интеллекта, моделирования и решения ресурсоемких аналитических задач.

cy4zsweygckdqaltnjmr360-jvk.jpeg
/ Flickr / Jody McIntyre / CC

По словам Барри Болдинга (Barry Bolding), вице-президента и директора по стратегическим вопросам компании Cray, анализ рынка показал, что большинство организаций не могут позволить себе приобрести суперкомпьютер, и спрос на предоставление суперкомпьютерных вычислений в облаке растёт.

Увеличение потребности в облачных вычислениях на базе HPC обусловлено ростом рынка Big Data и необходимостью повышения производительности ресурсов при выполнении неоднородных рабочих нагрузок. По оценкам Research and Markets, рынок облачных HPC вырастет с 4,3 млрд долларов в 2015 году до 10,8 млрд к 2020 году. Ежегодный темп роста рынка составит 20%.

Как говорят в Microsoft и Cray, новый сервис поможет биотехнологам секвенировать ДНК, а инженеры в автомобильной промышленности смогут эффективнее моделировать аварийные ситуации и рассчитывать аэродинамические характеристики транспорта.

Например, инженеры «Формулы-1» изучают влияние на аэродинамику таких переменных, как рельеф поверхности, поведение колес и рельеф трассы. Также они анализируют влияние кривизны поверхности болида на прижимную силу и коэффициент сопротивления воздуха. Высокая производительность суперкомпьютеров позволяет изучить возможности настройки болидов между гонками, что повышает результативность команды.

Ещё HPCaaS позволит строить высокоточные модели космических, климатических и финансовых процессов, а также рендерить видео. Например, вычислительные мощности суперкомпьютеров использовались во время производства фильма «Жизнь Пи». Художники имели возможность быстро посмотреть, как будут выглядеть в кадре рисованные изображения окружающей среды.

Хотя услуга выйдет как часть пакета сервисов для клиентов Azure, компания Cray также рассчитывает привлечь клиентов из государственного сектора: университеты, погодные сервисы и другие организации. Всё будет зависеть от спроса на технологию.

Что внутри


Клиенты компании Microsoft получат доступ к машинам Cray XC, Cray CS и хранилищу Cray ClusterStor. Все системы будут интегрироваться с виртуальными машинами Azure и хранилищем данных Azure Data Lake. Ещё клиенты облачного сервиса смогут задействовать системы искусственного интеллекта и машинного обучения от Microsoft. По данным ИТ-гиганта, решение станет доступно в 2018 году.

Cray XC и Cray CS работают на базе серверных чипов Intel Xeon, графических видеоускорителей Nvidia Tesla P100, сопроцессоров Xeon Phi. Сети InfiniBand и Aries позволяют процессорам обмениваться данными быстрее, чем по Ethernet.

Cray также предлагает несколько способов соединения процессоров и машин в кластере между собой. Клиенты смогут настроить нужную конфигурацию и топологию системы в зависимости от рабочей нагрузки.

Альтернативы


Объединение с компанией Microsoft — это не первое партнерское соглашение, которое заключили в Cray. Впервые возможности суперкомпьютера в облаке стали доступны благодаря сотрудничеству компаний Cray и Markley. Партнёрство этих компаний позволило объединить мощность суперкомпьютеров Cray и хостинг высокого уровня Markley в одно HPCaaS-решение. Платформу назвали Urika-GX.

По словам учёного Криса Двана (Chris Dwan), исследования и разработки в области биологических наук и фармацевтики требуют обработки большого количества данных. Успехи в секвенировании ДНК означают, что объём данных и потребности в их анализе скоро превысят возможности устаревших инфраструктур. Самый короткий путь к прорыву в медицине — сделать лучшие технологии доступными для исследователей. HPCaaS-решение Cray и Markley делает именно это.

Другой альянс — Cray и Deloitte — предлагает сервис аналитики угроз. Перед аналитиками безопасности стоит сложная задача: данные поступают гораздо быстрее, чем они могут их анализировать, а пропущенная угроза может нанести непоправимый ущерб.

Комбинация аналитической платформы Cray и сервиса управления рисками Deloitte Advisory комплексно анализирует системы безопасности «с точки зрения киберпреступников». Оперативный анализ больших данных позволяет обнаруживать угрозы и подозрительную активность в режиме реального времени. Решение эффективно распределяет вычислительные ресурсы и дает правдоподобную оценку степени защищённости сети.

Другие компании, помимо Cray, также занимаются предоставлением услуг высокопроизводительных вычислений по требованию. Облачное решение на базе HPC предлагает Rescale. Она дает клиентам доступ к высокопроизводительной облачной инфраструктуре и библиотекам. Платформа представлена в трёх версиях:

  • ScaleX Pro — для предприятий малого и среднего бизнеса;
  • ScaleX Developer — для разработчиков приложений и независимых поставщиков программного обеспечения;
  • ScaleX Enterprise — для крупных корпораций.


Продукт IBM Spectrum Computing позволяет пользователям выбирать из множества публичных, частных или гибридных облачных инфраструктур. IBM предлагает ряд решений под ключ для корпоративных клиентов: IBM High Performance Services, IBM Spectrum HPC и другие.

О компании Cray
Cray Inc. — американская компания, занимающаяся производством суперкомпьютеров. Базируется в Сиэтле. Покупателями её технологий являются научные лаборатории и службы безопасности, метеостанции, научно-исследовательские институты, ИТ-компании.


P.S. Тройка материалов на тему высокой производительности из нашего корпоративного блога:

  • Как справиться с пиковыми нагрузками при помощи IaaS
  • vCloud Director 8.10: Storage Policy для виртуальных дисков
  • Решение проблем в облаке IaaS: Низкая производительность


P.P. S. Несколько материалов о работе IaaS-провайдера из нашего блога на Хабре:

  • С какими трудностями веб-студий поможет разобраться хостинг-провайдер
  • Разработка провайдера виртуальной инфраструктуры: опыт 1cloud
  • Клиент у руля, или почему провайдеру следует передать штурвал

© Habrahabr.ru