跳到内容

澳大利亚气象局的Cyclc&Altair的PBS Professional™电力天气模型

前往2019年超级计算?注册加入CYLC用户组以Altair天气解决方案为特色!!包括午餐。

天气模型是一项挑战。它需要高性能计算(HPCbob官网 bob体育下载)资源和功能强大的软件,可以协调最复杂的循环工作负载。

预测澳大利亚的气候和天气

气象局是澳大利亚国家气候,水和天气代理商,是澳大利亚政府最基本和广泛使用的服务之一。该局在主席团的项目经理Alan Riley,项目经理Alan Riley,为其“经常恶劣的自然环境,干旱,洪水,风暴和热带气旋等事物,提供了整个大陆。“所有这些事情都需要向澳大利亚公众提供的专业知识,这是通过定期预测,警告,监测和建议所做的,不仅澳大利亚,而且涵盖南极领域。”

该局在其PetaScale Cray SuperComputer上运行其数值天气预报(NWP)套件。它正在使用老化的SMS工作流程调度程序。主席团需要现代,可扩展的服务,以支持不断增长的NWP建模和后处理输出。

协调骑自行车的工作流程

气缸(发音为“丝绸”)是一个开源Python工作流引擎,用于处理一系列工作流程复杂性的循环系统。[看用于自行车系统的工作流程自动化,科学和工程计算,第21卷,第4期,7月/ 8月2019年]。它根据详细的时间表和依赖项自动执行任务,并且在天气和气候建模,NWP,物理仿真和数据处理等领域中特别有用。Cycc已成为世界各地的天气和气候中心的热门选择 - 现在它是气象局的关键工具。

使用Cycc,一旦满足依赖关系,可以立即运行任务,并最大限度地并发,以便更有效地使用HPC资源。最初用于运营环境预测的气缸尼沃,新西兰国家水中和大气研究所,现在这是NIWA之间的开源合作,是遇见办公室(英国),欧洲天气和气候模拟卓越中心(ESIWACE),气象局和其他贡献者。

“骑自行车与实时调度不一样,”Niwa的Cylc博士博士说,纽瓦尔博士。“如果系统捕获到时钟,则在运行时钟和实时调度时尽快在调度之间无缝过渡。”

气象局计划主任Tim Pugh告诉我们,他的组织选择气缸的一个原因是有效地在研究和运营中使用。“作为我们操作的工作流程调度器的选择,气缸的选择非常简单,”他说。“我们在研究中使用它。通过在生产中使用它,这意味着我们的HPC应用程序的转换和从研究中的数值预测转变为操作。“bob电竞官方

缸和Altair PBS Professional™

将复杂的,关键系统转换为新的开源工作流程引擎可以是令人生畏的前景 - 所以Altair与Niwa和澳大利亚气象局开发了一种用于监控许多气缸工作流程的生产环境以及PBS专业工作负载经理。

PBS Professional.Altair的行业领先的工作负载经理和HPC和云环境的作业调度程序,一部分Altair PBS Works™套房。它允许HPC用户简化HPC基础架构管理,并优化系统利用率,提高应用程序性能和最大限度地提高硬件和软件投资的投资回报率。

Altair已经为主席团提供PBS专业人员,以管理HPC系统上的资源。随着短信调度程序被弃用并需要更换,主席团正在寻找商业供应商,为他们的气缸工作流提供支持,因为气缸是没有商业支持的开源。

为什么气象局选择Altair

“由于其对HPC系统的了解以及我们需要与产品融合的需要,”Altair被选为协助局,“Tim Pugh说。“PBS Professional在我们的HPC系统提供工作资源管理和调度。这对系统至关重要,这样如果该服务要下跌,那么我们认为整个系统中断。Altair明白了这一点。“他说,伙伴关系,“让我们每天都在局预测中心所需的每一天实现结果。”

Altair的Project Manager David Block(Altair)补充说:“Altair历史悠久的历史记录了我们的客户,并按时和目标生产强大的解决方案。Altair正在与主席团合作,建立一个通用解决方案,以协助监测其环境的天气和气候人员,然后提供确定任何问题所需的诊断。“

目前,员工在许多地点需要不断监控环境。新解决方案将通过推送机制提醒它们。它还允许他们监控超级计算机硬件,气缸套件和PBS专业工作,并清楚地简明地报告状态。该解决方案被设计为模块化和通用,因此任何网站都可以将其部署在盒子中,或者替代组件更熟悉。Altair正在建立几个部件以及对气缸的贡献。

“由于使用开源软件,”街区表示,“世界各地的网站可以实施解决方案并与社区合作以改进。Altair也可以支持安装解决方案的任何网站。“

继续改善气缸

澳大利亚气象局的气缸+ PBS专业集成将统一使用PBS专业人员和开源Kafka消息经纪的许多工作流程的大型生产系统。“Altair为开源项目带来了重大的商业专业知识,”Niwa的Oliver表示,“他们支持气缸开发,以使图形用户界面现代化并提高安全性。”

局的Alan Riley补充道,“简单地搬到了Cycc解决了我们所说的很多问题,但该项目也在继续前进。它正在进行一些额外的东西来改善系统。“合作继续发展的领域包括:

  • 安全功能
  • 通过Apache Kafka触发Cross-Scheduler
  • 短信与气缸套件之间的通信,反之亦然
  • 加强报告
  • BI工具支持仪表板和性能分析
  • 与局的企业监测工具集成

额外即将到来的CYLC改进包括全新的基于Web的控制面板,具有为支持团队提供更多控制和更好的监控功能的工具。CYLC版本8将成为现代Web技术方案的主要探索。Altair将继续在气缸社区中活跃。

学习更多关于气缸PBS Professional.