模型元模揭示了生物和人工神经网络之间的异常异常
Jenelle Feather1,2,3,4, Guillaume Leclerc5,6, Aleksander Mądry5,6
1Department of Brain and Cognitive Sciences, Massachusetts Institute of Technology, Cambridge, MA, USA. jfeather@mit.edu.
Nature neuroscience
|October 16, 2023
概括
与人类相比,深度神经网络模型表现出独特的不变性,正如"模型元器件"所示. 这些刺激与模型激活相匹配,对于人们来说通常是不可识别的,突出显示了感官处理中的差异.
科学领域:
- 计算神经科学是一种计算神经科学.
- 人工智能的人工智能是人工智能.
- 认知科学是一种认知科学.
背景情况:
- 深度神经网络 (DNN) 越来越多地用于模拟大脑感官系统.
- DNN的目标是学习类似于生物系统中观察到的表示转换和不变.
- 了解这些学习不变对于评估模型对生物处理的忠实性至关重要.
研究的目的:
- 通过视觉和听觉的深度神经网络模型与人类感知模型来研究和比较学到的不变性.
- 开发一种方法来使用"模型计量器"揭示模型特定的不变性.
- 评估当前的DNN在多大程度上捕捉了类似人类的异常.
主要方法:
- 与自然刺激相比,通过创建刺激,在特定的模型层内引起匹配激活的刺激来生成"模型元器件".
- 从最先进的监督和无监督DNNs的各个阶段生成的模型metamers的测试人类识别能力,用于视觉和听觉.
- 修改模型并重新评估metamer可识别性,以评估目标变化的影响.
- 人类对元体的识别能力与其他DNN模型的识别能力相关联.
主要成果:
- 从当前DNN的后期阶段生成的元通常无法被人类识别,这表明已知的不变性存在显著差异.
- 对模型的有针对性的修改提高了人体识别度,但并没有完全解决人与模型之间的差异.
- 其他DNN模型可以预测模型元体的人类识别能力,这表明共享的,特异性的模型不变.
- 超标识别能力与传统的基准标准 (如基于大脑的测量和对抗性脆弱性) 截然不同.
结论:
- 对于感官处理的最先进的DNN具有与人类感知不同的不变性.
- 模型计量器提供了一个新的工具来探测和基准这些模型特定的不变.
- 现有的DNN具有独特的故障模式,目前的评估方法无法捕获.
- 需要进一步的研究来使人工感官处理与类似人类的不变性保持一致.
更多相关视频
相关概念视频
Neural Circuits
1.3K
Neural circuits and neuronal pools are two of the main structures found in the nervous system. Neural circuits are networks of neurons that work together to carry out a specific task or process. They consist of interconnected neurons and glial cells, which provide structural and metabolic support.
Neuronal pools are collections of nerve cells with similar functions and interact through chemical and electrical signals. These pools include both interneurons (the central neural circuit nodes that...
Neuronal pools are collections of nerve cells with similar functions and interact through chemical and electrical signals. These pools include both interneurons (the central neural circuit nodes that...
1.3K
Neural Regulation
39.5K
Digestion begins with a cephalic phase that prepares the digestive system to receive food. When our brain processes visual or olfactory information about food, it triggers impulses in the cranial nerves innervating the salivary glands and stomach to prepare for food.
39.5K


