MLExchange:一个基于网络的平台,可用于科学研究的可交换机器学习工作流
Zhuowen Zhao1, Tanny Chavez1, Elizabeth A Holman1
1Advanced Light Source (ALS) Division, Lawrence Berkeley National Laboratory, Berkeley, CA 94720.
概括
MLExchange为科学家提供了一个协作平台,可以轻松使用机器学习 (ML) 算法和计算资源进行科学发现. 这个平台提供灵活的部署选项,使先进的ML可用,而不需要深层次的技术专业知识.
科学领域:
- 计算科学是一种计算科学.
- 数据科学是数据科学.
- 科学计算是科学计算.
背景情况:
- 机器学习 (ML) 算法越来越重要,用于分析跨科学学科的大型,多样化的数据集.
- 现有的ML工具往往给没有专业专业知识的研究人员带来了重大的程序和计算挑战.
- 弥合这一差距对于民主化获得科学中先进分析能力至关重要.
研究的目的:
- 开发MLExchange,一个旨在简化ML和计算资源用于科学发现的协作平台.
- 为了使科学家和设施用户具有有限的ML背景,以利用强大的分析工具.
- 为管理和交换ML算法,工作流和数据创建一个用户友好的体验.
主要方法:
- 开发一个协作平台,为ML可访问性提供支持工具.
- 实施基于Web的用户体验,用于管理和交换ML算法,工作流程和数据.
- 平台组件的集装箱化,以便在各种规模上灵活部署,从个人设备到高性能集群 (HPC).
主要成果:
- MLExchange平台为访问和使用ML资源提供了一个无的用户体验.
- 组件被容器化,允许在各种硬件上进行适应部署,包括本地网络和远程服务器.
- 该系统支持灵活的使用场景,满足不同规模的个人和多用户访问.
结论:
- MLExchange降低了希望在研究中应用ML的科学家的进入障碍.
- 该平台的灵活架构确保了在不同的计算环境中广泛的适用性和可访问性.
- 该倡议通过解决可用性和资源可访问性挑战,促进在科学发现中更广泛地采用ML.


