高性能计算工作负载迁移至云中的CIO攻略英国气象局所使用的是来自非传统经销商的传统超级计算机：在Azure上选了四个Cray EX系统，这样做可以“减少购买超级计算机所花的时间，而是大量地利用计算机”
发布时间：2023-02-21 15:16:50 所属栏目：云计算 来源：
导读：英国气象局所使用的是来自非传统经销商的传统超级计算机：在Azure上选了四个Cray EX系统，这样做可以“减少购买超级计算机所花的时间，而是大量地利用计算机”，引号出自气象局IT研究员Richard Lawrence。
|
英国气象局所使用的是来自非传统经销商的传统超级计算机：在Azure上选了四个Cray EX系统，这样做可以“减少购买超级计算机所花的时间，而是大量地利用计算机”，引号出自气象局IT研究员Richard Lawrence。 这样做除了跳过通常的多年采购周期外购买了灵活性，还可以更方便地在未来对高性能计算（HPC）工作负载做出不同的选择，比购买自己的硬件要快得多。市场研究和咨询公司Gartner建议，将HPC迁移到云端可以提供一个机会，可以摆脱处理数据分析时的内部孤岛，对那些通常可以追溯到20年或更久的做法现代化。 云HPC的优点和缺点 公共云供应商能够提供对Cray硬件的访问，使得公共云供应商具有可信度，表明他们了解HPC用户中要求最高的那部分人的需求。但这也为云HPC的好处提供了一个垫脚石，这样一来就需要使用Linux服务器集群来处理要求严格的扩展工作负载，而且还有人们更熟悉的云的优势：灵活性、敏捷性和低门槛。 Forrester公司的高级分析师Tracy Woo告诉记者，“最大的一件事是能够选择异构的而不是同构的基础设施。HPC基础设施的高成本意味着大多数买家会选择一个单一品牌，这样他们就可以谈交易，每一个工作负载都必须在这个品牌上运行，无论这个配置是否合适。你使用你所拥有的东西，即使它不是你特别需要的。而有了公共云后，你就可能得到想要或需要的每一个基础设施选项，可以满足你的具体使用情况。” 云HPC能让你准确地指定应用程序的需求，可以提供消费者熟悉的高性能的英特尔和AMD处理器以及多年以来价格较低的Arm处理器的高度选择性的组合，配置快速的CPU和GPU、密集的内核数量和高内存内核。你还可以获得大多数组织没有预算或专业知识的硬件加速器，可以马上轻松地进行试验。 Woo指出，“我不再需要在基础设施设备上花费数十万美元——在某些情况下甚至是数百万美元，而只需要一张信用卡就可以运行需要HPC的计算或特定分析，用几个小时就够了。”你还可以为每个工作负载甚至每个任务挑选合适的基础设施，而且可以在新硬件到达市场时对其进行基准测试，而不是等待下一个更新周期。 但这种灵活性也可能令人困惑，Woo警告说，多选择会引起“分析瘫痪”，一个帮助组织做出这些选择的工具和平台产业正在兴起。 英伟达公司HPC和量子产品总监Timothy Costa表示同意并表示，“管理员拥有巨大的选择自由，但也必须深入了解他们所选择的云供应商的独特架构。例如，他们可以在高速网络上组合各种计算硬件，进而优化其基础设施设 计，但并不是所有地区都具备所有类型的硬件。” 确定更适合于云计算的HPC工作负载 根据Hyperion Research的数据，2019年里在云中运行的HPC工作负载比例翻了一番，从10%增加到20%。Gartner将云HPC评为高收益的选择，离主流采用只有2-5年的时间了。 制造业和生命科学是最早将HPC转移到云端的行业，而且仍然是增长最快的分市场。Costa表示，这些工作负载往往是“高度并行化的代码或工作组合，对单个任务失败的容忍度很高以及对执行位置的要求不高”，他表示，金融、气象、航空航天和政府实验室正在增加对云HPC的使用，高等教育也一样。 对于一些“性能与成本的关系比绝对运行时间更重要的长尾HPC工作负载”来说，云HPC是一个特别好的选择，你可以花时间建立云基础设施，以达到成本最小化（或用于一些“需在内部部署不能提供的硬件上运行而获得巨大利益”的代码）的目的。 虚拟化性能对于那些习惯于裸机HPC的人来说可能是陌生的，但是在2021年11月的500强名单中，一台建立在Azure上的虚拟超级计算机跻身世界十大最快机器之列，全部使用基于Hyper-V的虚拟机。谷歌云的首席HPC技术专家Bill Magro告诉我们，“云中的计算优化虚拟机提供接近裸机的低抖动性能，云网络可以提供200Gbs以上的带宽和小于10µs的延迟，并行文件系统则可以提供TB s的数据速度。” （编辑：聊城站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
站长推荐