从算法生成的伪注释中学习,用于在视频中检测
Yizhe Zhang1, Natalie Imirzian2,3, Christoph Kurze2,4
1School of Computer Science and Engineering, Nanjing University of Science and Technology, Nanjing, 210094, China. zhangyizhe@njust.edu.cn.
从算法生成的伪注释中学习 (LFAGPA) 训练深度学习模型使用自动生成的标签来检测,减少手动注释的需求. 这种方法实现了强大的性能,甚至超过了使用有限的人类输入的全手动注释.
科学领域:
- 计算机视觉 计算机视觉
- 生物灵感的人工智能
- 生态监测 生态监测
背景情况:
- 深度学习 (DL) 模型擅长分析视频中的生物行为.
- 对于DL模型的训练数据的手动注释是耗时和劳动密集的.
- 需要自动注释方法来简化DL模型开发用于生物研究.
研究的目的:
- 引入LFAGPA (从算法生成的伪注释中学习),这是一个用于训练DL检测模型的新框架.
- 为了解决在DL培训中使用杂,算法生成的注释方面的挑战.
- 为了评估LFAGPA的效率和有效性,与手册注释相比.
主要方法:
- 算法生成的伪注释是使用最先进的前景提取算法创建的.
- 这些伪注释被用来训练深层神经网络来检测.
- 该框架结合了处理杂注释的策略,并结合了多个注释来源,包括有限的人类标签.
主要成果:
- LFAGPA仅使用算法生成的注释,而没有手动标签成本,在检测方面获得了77%的F1分数.
- 在与LFAGPA一起只使用10%的手册注释进行训练时,DL模型的性能与使用100%的手册注释 (81%F1得分) 相似.
- 该研究证明了自动注释对于在生态视频分析中有效的DL模型培训的可行性.
结论:
- 对于训练基于DL的生物检测模型而言,LFAGPA为手动注释提供了成本效益高效的替代方案.
- 该框架大大减少了对计算机视觉中的繁的手动数据标签的依赖,用于生态研究.
- 自动化伪注释为利用人工智能推进大规模生物行为分析提供了一个有希望的方向.
更多相关视频
08:13SwarmSight: Real-time Tracking of Insect Antenna Movements and Proboscis Extension Reflex Using a Common Preparation and Conventional Hardware
Published on: December 25, 2017
08:25Combining Eye-tracking Data with an Analysis of Video Content from Free-viewing a Video of a Walk in an Urban Park Environment
Published on: May 7, 2019
相关概念视频
Introduction to the Sign Test
Types of Errors: Detection and Minimization
Absolute error in a measurement is the numerical difference from the true or central value. Relative error is the ratio between absolute error and the true or central value, expressed as a percentage.
Errors can be classified by source, magnitude, and sign. There are three types of errors: systematic, random, and gross.
Systematic or...
Detection of Gross Error: The Q Test
Trial and Error and Algorithm
Mathematical Induction
Synthetic Disvision of Polynomials
