超快速动态机器视觉与时空光子计算
Tiankuang Zhou1,2,3,4, Wei Wu1, Jinzhi Zhang1,4
1Department of Electronic Engineering, Tsinghua University, Beijing 100084, China.
Science advances
|June 7, 2023
概括
研究人员开发了一种用于超快速机器视觉的新型时空光子计算架构. 这种方法显著加快视频处理速度,减少计算参数,克服了高性能计算中的内存限制.
科学领域:
- 光学和光子学 在光学和光子学.
- 计算机科学 计算机科学
- 人工智能的人工智能
背景情况:
- 现有的光子计算因缓慢的内存操作而难以处理动态处理.
- 有限的自由度限制了高性能计算中的当前方法.
研究的目的:
- 为超快的动态机器视觉提出一个时空光子计算架构.
- 将高速时间计算与并行空间计算相结合.
- 为了克服光子计算中的内存墙限制.
主要方法:
- 开发了一个时空光子计算架构.
- 实施统一的培训框架以优化物理系统和网络模型.
- 使用了空间多重复和波长多重复系统.
主要成果:
- 实现了对视频数据集的光子处理速度的40倍增加.
- 使用空间复合系统将计算参数减少了35倍.
- 通过使用波长多重复合系统,证明了动态光场的全光学非线性计算,时间为3.57纳秒.
结论:
- 拟议的架构能够实现超快的先进机器视觉.
- 这种方法克服了计算中的内存墙的局限性.
- 潜在的应用包括无人系统,自动驾驶和超高速科学.
