PSI/J:用于提交,监控和管理工作的便携式接口

科学领域:

• 高性能计算 (HPC) 是一种高性能计算.
• 软件工程 软件工程 软件工程
• 计算科学 计算科学

背景情况:

• 科学应用程序通常需要在不同的高性能计算 (HPC) 系统上运行,以利用更好的硬件或数据本地化.
• 高性能计算系统的可移植性受到工作安排器多样性的阻碍,使应用程序的部署和执行变得复杂.
• 现有的解决方案管理工作在不同的HPC调度器是不够的,需要一种新的方法.

研究的目的:

• 引入PSI/J,这是一种新的工作管理抽象API,旨在提高软件组件和应用程序在各种HPC调度器实现中的可移植性.
• 解决对标准化API的需求,以简化在异质HPC环境中的便携式科学应用程序的开发和部署.
• 为HPC生态系统中现有的工作管理解决方案提供必要且可行的替代方案.

主要方法:

• 分析HPC社区现有的工作管理API,以了解影响其设计,演变和采用的因素.
• 基于对以前系统的分析获得的见解,设计和开发Java (PSI/J) 便携式调度器接口API.
• 将PSI/J API集成到三个不同的工作流系统和一个科学应用中,以证明其实际可用性.

主要成果:

• PSI/J已成功集成到多个工作流系统和独立应用程序中,验证了其实际实用性.
• 实验结果表明,PSI/J API要求最小的性能开销,使其适合要求高性能计算工作负载.
• 对现有API的分析为设计强大有效的工作管理抽象提供了基础.

结论:

• 通过抽象调度器差异,PSI/J提供了一种必要的解决方案,以改善跨多种HPC系统的高性能计算应用程序的可移植性.
• PSI/J所展示的最小的开销表明它适合在没有显著的性能惩罚的情况下集成到生产HPC环境中.
• 成功的整合和实验验证表明,PSI/J是简化科学计算中跨系统应用部署的可行和有效工具.