走向实用,最佳实践的视频注释,以支持人类活动的识别
Hoan Tran1, Veronika Potter1, Umberto Mazzucchelli1
1Northeastern University, Boston, MA 02115, USA.
概括
对于可穿戴传感器数据的新"银标准"注释方法,与黄金标准相比,节省了33%的注释时间. 这种修订后的注释方法保持了对活动识别模型培训和评估的高准确性.
科学领域:
- 生物医学工程 生物医学工程
- 人与计算机的交互
- 可穿戴技术可穿戴技术
背景情况:
- 准确的基本事实注释对于培训和评估基于可穿戴传感器的活动识别模型至关重要.
- 传统的传统传统的传统
- 黄金标准的黄金标准.
- 注释涉及两个独立的注释者和第三个专家,这是耗时的.
- 对复杂,24/7和细粒度活动数据的需求不断增加,挑战了现有的注释方法.
研究的目的:
- 调查一个更有效的方法.
- 银标准的白银标准.
- 对于可穿戴传感器数据的注释方法.
- 将银标准方法的效率和准确性与金标准方法和单注释器方法进行比较.
主要方法:
- 这是一个很棒的节目,这是一个很棒的节目.
- 银标准的白银标准.
- 这种方法涉及第二个注释者修改第一个注释者的工作,而不是独立的双重注释.
- 标注质量和时间效率与黄金标准 (两个独立的标注者 + 专家解决方案) 和单一标注者方法进行了比较.
- 使用科恩的卡帕 (κ) 评估了评价者之间的可靠性.
主要成果:
- 与黄金标准相比,银标准方法减少了33%的总注释时间.
- 在16.4小时的视频中,银标准标签与金标准的一致性 (κ=0.77) 比单注释器标签 (κ=0.68) 高.
- 银标准标签 (κ=0.79) 的平均评分间可靠性高于单注释器标签 (κ=0.68) 在92小时的镜头中.
结论:
- 银标准注释方法提供了一个实用和高效的替代方案,用于生成高质量的实地真相数据以进行活动识别.
- 这种方法平衡了注释效率与几乎相当于黄金标准的质量,使其适合大规模和复杂的数据集.
- 银标准方法提高了单个注释器的可靠性,对于开发可穿戴传感器活动识别模型的研究人员来说,这是一个可行的选择.
相关概念视频
00:48Optimal Foraging
How animals obtain and eat their food is called foraging behavior. Foraging can include searching for plants and hunting for prey and depends on the species and environment.
01:24Biodiversity and Human Values
Human civilization relies on biodiversity in many ways. Sudden changes in species biodiversity result in environmental changes that can modify weather patterns and therefore human civilizations.
02:30Naturalistic Observations
If you want to understand how behavior occurs, one of the best ways to gain information is to simply observe the behavior in its natural context. However, people might change their behavior in unexpected ways if they know they are being observed. How do researchers obtain accurate information when people tend to hide their natural behavior? As an example, imagine that your professor asks everyone in your class to raise their hand if they always wash their hands after using the restroom. Chances...