相关实验视频
Updated: May 3, 2026

06:19
Fixed Target Serial Data Collection at Diamond Light Source
Published on: February 26, 2021
3.2K
实时数据处理用于串行结晶学实验
Thomas White1, Tim Schoof2, Sergey Yakubov2
1Center for Data and Computing in Natural Science CDCS, Deutsches Elektronen-Synchrotron DESY, Hamburg, Germany.
IUCrJ
|December 23, 2024
概括
这项研究引入了串行晶体学在线数据处理,使实时布拉格反射分析无需中间数据存储. 这种方法解决了
科学领域:
- 晶体学 晶体学是指结晶学.
- 数据科学数据科学数据科学
- 在光子科学方面,光子科学是科学.
背景情况:
- 序列结晶学实验产生了大量的数据,这带来了大量的存储和处理挑战.
- 传统方法涉及存储中间数据,导致效率低下和潜在的数据丢失.
- 来自现代光子科学实验的"数据洪水"需要先进的实时数据处理解决方案.
研究的目的:
- 开发和实施一个完全在线的数据处理系统,用于串行结晶学.
- 为了实现实时布拉格反射强度测量,适合缩放和合并.
- 评估在线处理所需的计算资源及其对未来实验的影响.
主要方法:
- 利用流式数据接口来实现不间断的数据流.
- 整合了CrystFEL软件与ASAP::O数据框架进行数据处理.
- 在PETRA III实时在探测器框架上进行峰值查找,索引和集成.
主要成果:
- 实现了每不到1秒的处理延迟.
- 在检测器最大读取速度 (每秒133) 上成功处理数据.
- 证明单个96核心计算节点足以进行在线处理,处理时间为空242 ms/frame,热455 ms/frame.
结论:
- 实时数据处理有效地减轻了串行晶体学中的"数据洪水"问题.
- 开发的系统提供了适合立即分析的布拉格反射强度数据.
- 强调需要根据实时处理重新评估校准,计算访问和原始数据保存策略.

